YouTubeのあらゆるアドバイスは、クリックを獲得するのはサムネイルだと説いています。私たちはタイトルとサムネイルの両方を評価するツールを開発し、両者を分離して実験を実施した結果、タイトルの方が信号の大部分を担っていることがわかりました。2本の動画のタイトルを交換したところ、スコアが優れた動画を選び出す能力が弱まるだけでなく、逆転してしまいました。
主なポイント
- 各動画に隣接する動画のタイトルを割り当てた結果、平均で11.3ポイント（100点満点中）スコアが変動し、最大で60ポイントの変動が見られました。
- 異なるタイトルを付与してもスコアが変わらなかったサムネイルはわずか3.9%であり、タイトルはモデルにおける丸め誤差ではありません。
- タイトル交換後、スコアがよりパフォーマンスの高い動画を正しく選んだのは42.7%のケースで、これは偶然より低い値であり、順位が逆転したことを意味します。
- サムネイルのみで評価した場合の正解率は59.5%、タイトルのみで評価した場合は35.2%でした。観測された42.7%はタイトル側に近い値です。
- これはサムネイルが無価値であることを意味しません。実験ではタイトルのみを操作したため、タイトルの寄与を測定しており、画像の寄与については直接的な結論を導いていません。
YouTubeではタイトルとサムネイル、どちらが重要ですか？
本実験の結果から、タイトルの方がチャンネル平均を上回った動画と下回った動画を分ける信号の大部分を担っていることがわかりました。これは、主にサムネイル分析を基に開発されたツールが予想していた結果ではなく、まったく別の目的で設計されたコントロールから導き出されたものです。
ただし、この主張には制約があります。これは実際のパフォーマンスと相関するスコアがどう動くかを測定したものであり、視聴者の行動を直接測定したものではありません。また、同一チャンネル内でのパッケージングを比較しており、視聴者、テーマ、デザイン予算はすでに一定です。
それでも、傾向は明確であり、効果の大きさも微細ではありません。
タイトルの寄与を分離した方法
実験は321組の動画で実施されました。各組は同一チャンネルの動画で、中央値で6日間隔で公開され、一方はチャンネルのベースラインを明確に上回り、もう一方は明確に下回っていました。通常通り評価した場合、モデルは59.5%の正解率で正しく順位付けを行いました（コインフリップの50%と比較）。
次に、すべてのサムネイルを2回目評価しました。ただし、もう一方の動画のタイトルを付与して評価しました。画像のバイトデータは両評価で完全に同一でした。パイプラインの他の部分は一切変更していません。したがって、1回目と2回目の評価間のスコア変動はすべてタイトルによるものです。
1つの実験から得られる2つの問い
1つ目の問いは、タイトルがスコアを動かすかどうかです。サムネイルとタイトルの両方を評価すると主張するツールが、タイトルを変更しても出力がほとんど変わらない場合、それは実際には片方だけを評価していることになります。
2つ目の問いはより鋭いものです：タイトルを交換した状態で全体の順位付けテストを再実行すると、どちらの要素が差別化に寄与していたかが明らかになります。3つの可能な結果を事前に記録し、それぞれの意味を定義しました。
| スコアが駆動される要素 | 交換後の予測正解率 | 解釈 |
|---|---|---|
| サムネイルのみ | 59.5% — 変化なし | タイトルを交換しても重要な変化はない |
| 両方の要素が同等 | 約50% — 偶然 | 2つの寄与が相殺される |
| タイトルのみ | 35.2% — 完全に逆転 | タイトルを逆にすると順位も逆転する |
| 観測された結果 | 42.7% | タイトルが主導的だが、完全に排他的ではない |
タイトルを交換した結果
スコアは大きく変動しました。0〜100スケールでの平均絶対変動は11.3ポイント、中央値は8、90パーセンタイルは26、最大変動は60ポイントでした。異なるタイトルを付与してもスコアが変わらなかったサムネイルはわずか3.9%でした。
参考までに、平均11.3ポイントの変動は、モデルが通常1組の動画間で置く差よりも大きいです。タイトルを変更するだけで、チャンネルのヒット動画とミス動画の間の通常の距離よりも大きなスコア変動を引き起こすことができます。
次に順位付けテストの結果です。タイトル交換後、スコアは321組中137組（42.7%）でよりパフォーマンスの高い動画を正しく選びました。95%信頼区間は37.2%〜48.3%、p値は0.0101（50%に対する検定）でした。これは明らかに偶然より低い値です。
なぜ逆転が測定誤差ではないか
タイトルを交換すると、タイトルと画像の整合性も崩れます。整合性はモデルが評価する12項目の1つです。これは本質的な混同要因であり、隠すのではなく明確に述べるべきです。しかし、この結果を説明することはできません。
すべてのペアの両方の側に無差別にペナルティを加えると、ノイズが生じます。ノイズは正解率を50%に近づけます — 信号を消すことはあっても、逆転させることはありません。コインフリップの50%と、本テストのタイ処理が示す47.4%の下限を下回る42.7%に到達するには、元々ある方向を指していたものが逆向きに変わった必要があります。これは差別化する特徴を交換した場合に起こることであり、不整合によるノイズだけでは生じません。
この結果に疑問を抱く可能性があった3つのケース
以下の3つの結果が現れていた場合、この解釈に疑問が生じていたでしょうが、いずれも起こりませんでした：
- 新しいタイトルでスコアがほとんど動かない — これはモデルがタイトルを無視しているか、重みを非常に低く設定していることを意味します。
- 交換後の正解率が59.5%またはそれよりわずかに低い — これはサムネイルが順位付けを単独で担っていることを示します。
- 交換後の正解率が正確に50% — これは両方の要素が同等に寄与し、相殺していることを意味します。
タイトルの書き方に対する影響
実用的な解釈は、タイトルの修正が最も安価で高いレバレッジを持つ編集であるということです。サムネイルの再設計には1時間またはデザイナーが必要ですが、タイトルの書き換えは2分ででき、公開後でも可能です。そして、本実験の結果から、タイトルの変更はパッケージング信号を少なくともサムネイルと同等に動かします。
また、タイトルの目的の捉え方も変わります。同じ研究の次元分解では、パフォーマンスを上回る動画と下回る動画を最も分ける要因は「約束の明確さ」、つまりパッケージングが視聴者に何を見せるかをどれだけ明確に伝えるかでした。これは主にタイトルの性質です。サムネイルアドバイスが執着する「感情の強さ」は、2つのグループを最も分ける要因ではありませんでした。
特定の組み合わせが12項目すべてでどのようにスコアされるかを確認したい場合は、この実験で使用された同じパイプラインで自分のサムネイルとタイトルを評価し、1つの画像に対して2つのタイトルオプションを比較できます。
サムネイルが依然として重要な場面
本実験ではタイトルを操作し画像を固定したため、タイトルの寄与は直接測定され、サムネイルの寄与は間接的にしか測定されていません。逆の実験 — サムネイルを交換しタイトルを固定 — はまだ実施されておらず、実施されるまで、正直な立場はタイトルの半分を正確に測定し、もう半分は差し引きで推定していることです。
また、サムネイルを軽視しない構造的な理由もあります。同じ研究では、すべてのアップロードに固定された1つのサムネイルテンプレートを使用するチャンネルでは、スコアの正解率が61.0%から48.7%に急落しました。サムネイルが変化しなくなると、モデルの差別化能力も失われる — これは画像が何らかの役割を果たしている、無意味ではない証拠です。
テストしなかったこと
本実験は、スコアが画像よりもタイトルに強く反応すること、そしてスコアが実際のパフォーマンスを追跡することを示しています。しかし、視聴者がクリックする決定がタイトルよりもサムネイルによって駆動されているかどうかは示していません。これらは隣接する主張であり、ここでは最初の主張のみが証明されています。
すべてのペアは、安定したベースラインを計算できるだけのアップロード履歴を持つ確立された英語チャンネルから得られました。他の言語のタイトルや、ベースラインを持たない新規チャンネルについては、本サンプルでは言及できません。また、提案されたタイトルを適用することで実際の動画のパフォーマンスが向上するかどうかは、ここでは示していません — それは別の実験であり、まだ実施されていません。
よくある質問
YouTubeではタイトルの方がサムネイルより重要ですか？
本実験では、タイトルが同一チャンネル内でパフォーマンスを上回る動画と下回る動画を区別する信号の大部分を担っていました。ペアの動画間でタイトルを交換すると、順位が弱まるだけでなく逆転しました。これは、実際の役割を果たしていた特徴を逆にした場合に起こることです。これはスコアの挙動を測定したものであり、視聴者の心理を直接測定したものではありません。
タイトルを変更するとサムネイルスコアはどのくらい変わりますか？
0〜100スケールで平均11.3ポイント、中央値8、最大観測変動60ポイントです。異なるタイトルを付与してもスコアが変わらなかった画像は3.9%のみです。画像自体は両評価でバイト単位で同一でしたので、その変動のすべてがタイトルによるものです。
動画公開後にタイトルを変更するのは意味がありますか？
これは最も安価なパッケージング編集であり、本証拠からすると些細なものではありません。タイトルは数分で書き換え可能で、デザインを再設計する必要がなく、サムネイルと同等以上にパッケージングスコアを動かします。最初のタイトルが最良だと仮定せず、2〜3つのオプションを比較してください。
なぜタイトルを交換するとスコアがランダムより悪くなったのですか？
タイトルには、どちらの動画がよりパフォーマンスを発揮したかに関する情報が含まれていました。各動画に隣接する動画のタイトルを割り当てたことで、その情報が逆転したため、順位も逆転しました。ランダムなノイズであれば正解率は50%に近づきますが、50%を下回るには、実際の信号が誤った方向を指している必要があります。
これはサムネイルが重要でないということですか？
いいえ。実験ではタイトルのみを変更したため、タイトルの寄与は直接測定され、画像の寄与は間接的にしか測定されていません。別途、すべてのサムネイルが固定テンプレートを使用するチャンネルでは、スコアの正解率が偶然レベルまで落ちた — これは画像が変化しなくなると、モデルが実際の何かを失う証拠です。
「約束の明確さ」でタイトルが高スコアを獲得するには？
「約束の明確さ」は、パッケージングが視聴者に何を見せるかをどれだけ明確に伝えるかを測定します。具体的な内容を明記し、画像と一致するタイトルは、曖昧な興味を引き出すタイトルよりも高スコアを獲得します。本研究全体では、この要因がパフォーマンスを上回る動画と下回る動画を最も分ける要因でした。