New YorkTimesが記事の見出しをテストする方法

ニューヨークタイムズは笑い事ではありません。彼ら彼らの広告主述べているように、ニューヨークタイムズは裕福な若い思想的指導者のためのナンバーワンのニュースリソースです。







ただし、この出版物が注目を集めることはめったにありません。たとえば、FoxNewsとは異なります。そしてそれには正当な理由があります!フォックスニュースはピエロのいる不条理演劇であり、彼らは彼らが得るすべての批判に完全に値する。



しかし、私はニューヨークタイムズに興味があります。彼らは特定の観点から彼らの周りの世界を表しており、彼らのビジョン(少なくとも私のサークルでは)は、賛成または反対することはできますが、デフォルトで受け入れられるものとして認識されます。



このビジョンを詳しく見てみたいと思いました。したがって、今後数週間にわたって、ニューヨークタイムズに一連の記事を公開し、Webスクレイピングを使用してサイトのホームページと公式APIから 収集したデータを分析し ます最初の記事では、A / Bテストのみに焦点を当てます。ニューヨークタイムズが記事の見出しをテストする方法と、時間の経過とともに変化する方法です。



A / Bテストとニューヨークタイムズ



ほら、2021年だ。ニューヨークタイムズがヘッドラインをテストしていないことがわかったら、私はむしろショックを受けるだろう。はい、彼ら自身プレーンテキストでそれについて 話します



「さらに、Timesは、ホームページのコンテンツの見出しのデジタルバージョンのいわゆるA / Bテストを実施しています。約30分間、一方の見出しが読者の半分に表示され、もう一方の見出しがもう一方の読者に表示されます。ハーフ。テストの終わりに、タイムズは最も多くの読者を引き付ける見出しを残します。」


しかし、私はまだ質問がありました:



  • A / Bテストを通過する記事はいくつありますか?
  • それぞれについていくつのタイトルが繰り返されていますか?
  • これには意味がありますか?
  • 見出しはどのように異なりますか?


方法論



私は次のことを行うスクリプトを書きました:



  1. New York TimesWebサイトのホームページをスクレイピングします。
  2. データセットからすべてのヘッダーをプルします。
  3. それらを公式のTimesAPIで提供される記事のメタデータにリンクします
  4. すべてをテーブルにプッシュします


スクリプトは5分ごとに実行されます。私は2月13日に観測を開始したので、以下は3週間にわたって収集されたデータに基づく結論です。



結果



その声明に完全に従って、ニューヨークタイムズは記事の見出しのA / Bテストを実施します。資料の29%のどこかに、 いくつかのタイトルがあります。 1つの記事に記載されている見出しの最大数は現在 8つです。







多くの場合、変更はマイナーな修正に要約されます。ニューヨークタイムズのWebサイトで、句読点やスペルの誤りが公開後に修正されることがよくあります。また、コピーライターは、大文字と小文字のどちらで言い訳を書く決めることができないように見えることもあり ますか?







その他の場合、New York Timesは、新しい情報が利用可能になると見出しを変更します。これは、一連のタイトルで構成されている全体的な魅力なストーリーです。







  1. SpaceXは、テストモードで火星に別のプロトタイプロケットを打ち上げます(10%)
  2. SpaceXは、火星に飛ぶためのプロトタイプロケットのテストを一時停止しました(1%)
  3. SpaceXは火星にプロトタイプロケットを発射する別の試みをします(13%)
  4. SpaceXのプロトタイプロケットは火星に行き、着陸して爆発しました(14%)
  5. 今回のスペースXのプロトタイプロケットは、爆発前に火星に着陸することができました(24%)
  6. 今回のSpaceXのプロトタイプロケットは、爆発前に火星に着陸することができました(10%)
  7. SpaceXのプロトタイプロケットは火星に着陸した後に爆発しました(27%)


しかし、ほとんどの場合、見出しの変更は明らかに、より多くのクリックを収集するために行われたA / Bテストの結果です。たとえば、これは バイデンと彼の経営方針に関する記事です-そのタイトルは根本的に変更されました。







  1. 穏やかなスピーチと大規模なプログラム(7%)
  2. バイデンはトランプに反対しており、それは機能します(93%)


これらの代替品が追求できる唯一の目標は、エンゲージメントを高めることです。そしてそれはうまくいきます!この記事は、見出しが変更されてからわずか数時間後に熱くなりました(これは、リベラル派がトランプについて何かを読むのが好きだという私の仮説を裏付けています)。



ただし、すべてのA / Bテストが成功するわけではありません。 これは明らかに失敗したA / Bテストの例です。赤い背景に小さな青い点が表示されるようにするには、目を痛める必要があるかもしれません。







  1. アラブ首長国連邦を訪れたばかりのイスラエル人の数を見たことがありますか?(100%)
  2. ジョサファットびくびく!アラブ首長国連邦を訪れたばかりのイスラエル人の数を見たことがありますか?(0%)


この失敗が、ジャンパーのヨシャファトについて考えた奇妙な編集者を弱めなかったことを願っています。ニューヨークタイムズにひどく欠けているのは、バッグスバニーの漫画への言及 です。



しかし、一般的に、変化にはパターンがあります。時間の経過とともに、見出しはより劇的に聞こえる傾向があります。、テイク 、例えばクオモの記事、彼の性生活を取り巻くスキャンダル:







  1. 嫌がらせの申し立てを調査する計画で攻撃を受けているクオモ(6%)
  2. 攻撃に包囲されたクオモは、嫌がらせの申し立てを調査する計画を変更しました(25%)
  3. 嫌がらせの申し立てに包囲されて、クオモは謝罪します(69%)


最初の交代後、クオモは攻撃されているだけでなく、文字通り包囲されていることが判明し、2回目以降、彼は計画の単純な改訂から謝罪に突然移行します。さらに、戦術は機能しました。グラフでは、タイトルが調整されると、記事の視聴率がどんどん高くなることがわかります。 保守党会議でのトランプの演説



に関する記事 では、すべてがさらに焼夷弾であることが判明しています。







  1. トランプは保守党に訴え、共和党を率いる計画を立てている(3%)
  2. トランプは保守的な会議で共和党を率いる計画を明らかにする(7%)
  3. トランプは保守的な会議でのスピーチで共和党のリーダーを宣言します(2%)
  4. トランプは保守的な会議で第3期をほのめかし、共和党員を団結させることを約束します(4%)
  5. トランプは共和党員を団結させることを約束し、弾劾を支持した人々を非難する(6%)
  6. トランプは保守的な会議で共和党の死傷者を明らかにし、党全体に警告を発した(79%)


それはすべて、トランプが保守党に話しかけ、共和党の指導者であると宣言することから始まりますが、最後の見出しは犠牲者のリストと警告ショットに行き着きます。そして-誰が疑っていただろうか-このすべての哀愁のために、記事は離陸し、「最も読まれた」数に分類されます。



さて、最後の例は、 メーガン・マークルがオプラに行ったインタビューに基づくセンセーショナルな記事です。







  1. , – , (3%)
  2. , – , (1%)
  3. , (80%)
  4. « »: , (16%)


私はこの2時間のインタビューを見るのに怠惰ではありませんでした。最初の2つの見出しは、その内容を何倍もよく反映していると言えます。はい、メーガンは自殺念慮があることを認めていますが、これは他の多くのことを言ったインタビューの5分間の幕間です。たとえば、人種差別がメーガンの精神状態に与える影響について言及している見出しはありません。このトピックには、自殺念慮よりもはるかに多くの時間が与えられています。



効果はありますか?



私が上に住んでいた記事は、A / Bテストのおかげでさらに多くの注目を集めました。しかし、他の材料はどうですか?



いくつかの計算を行ったところ、テスト手順を経た記事の場合、「ホット」になる可能性が80%増加することがわかりました。また、当然のことながら、テストされたヘッドラインの総数は、エンゲージメントの増加と相関 しています。







免責事項:見出しの数とエンゲージメントの間には相関関係がありますが、これが原因であり、結果であるかを判断することは困難です。私の意見では、見出しのバリエーションが大きく異なるほど、人々がソーシャルメディアを読んだり、気に入ったり、共有したりする可能性が高くなると想定するのは論理的です。一方、ニューヨークタイムズは、すでに公共の関心を集めている記事を磨くためにより多くの時間を費やしている可能性があります。しかし、私的な観察の枠組みの中で、私が見た記事の多くは、それらが主導権を握る前でさえ、一連の見出しを通過したと言わなければなりません。



それで私は何を学びましたか?



New York Timesは、読者のエンゲージメントを高めるためにA / Bヘッドラインテストを実施してい



ます。



全体として、テストは広く適用されていませんが



、実際、テストがこのように少数の見出しをカバーしていることに少し驚いています。ほとんどの記事では、テストはまったく適用されません。テストが適用される場合、原則として2つの見出しのみが使用されます。



New York Timesの編集者は、従業員に6つの見出しが付いたすべての記事を提出するように要求し、自動システムによって最初の1時間でこれら6つすべてが実行されると漠然と思っていました。しかし、これは明らかにそうではありませんが、データは、より積極的なA / Bテストがより多くの関与をもたらしたことを示唆しています。



考えられる理由の1つは、ニューヨークタイムズの利益の62%が サブスクリプションによるもので、27%が広告によるものにすぎないことです(この数字は毎年減少しています)。つまり、ビューはサブスクリプションほど重要ではありません。ホームページにクリックベイトが1回続くと、潜在的なサブスクライバーを怖がらせる可能性があります。



それでも、結果は感情を打つ見出しです。



もちろん、ニューヨークタイムズはBuzzFeedのレベルに屈することはありませんが、それでも、物事に対する彼らの見方も中立とは言えないことに留意する必要があります。上記の例が示すように、A / Bテストの後、見出しはイベントに実際よりもはるかに劇的な色を与えます。このリソースを絶えず読んでいる人は、世界が実際よりも恐ろしく、予測不可能であるという印象を受けるかもしれません。



さらに



次の記事では、ニューヨークタイムズのウェブサイトのホームページを調べます。



  • 記事はどれくらいそこにぶら下がっていますか
  • どの記事がそこで遅れ、どれがすぐに去るのか
  • どのタイプのコンテンツがホームページに最も頻繁に表示され、どのタイプのコンテンツが最も可能性が低いか
  • ホームページで費やした時間は、全体的なエンゲージメントとどのように関連しているか
  • そして他の興味深いこと。




データ



無料のEC2インスタンスがまだ生きている場合はヘッダーデータを自分でリアルタイムで追跡できます 2つのことに注意してください。データは2021年2月13日から表示され、キャッシュは30分ごとに更新されるため、わずかに遅れて到着します。



All Articles