AIによるブランド露出の保証は不可能:代わりにブランドが計測すべき指標とは
OpenAI
Perplexity AI
この記事では、言語モデルの確率的な性質により、ChatGPTのようなAIチャットボットの回答にブランドが含まれることを保証できない理由を説明しています。ブランド露出を測定する信頼できる指標として「モデル内シェア」を紹介し、ブランドは空疎な約束ではなく測定可能な指標を提供する業者を選ぶべきだと助言しています。
著者はAIブランドの可視性に取り組む立場から、ChatGPTの回答の上位にブランドを表示させることを約束する3つの商業オファーを受けたと述べています。しかし、そのような保証は物理的に不可能だと説明します。なぜなら、AIモデルはテキストを確率的に、単語ごとに生成しており、温度パラメータを0に設定し、シード値を固定したとしても、サーバー計算やバッチ処理のわずかな違いにより出力が異なるからです。さらに、現代のモデルは複数の小さなモデルのアンサンブルであり、これがさらに予測不能性を高めています。また、AIの回答はモデルのトレーニングデータとライブのウェブ検索の両方に依存しており、これらはそれぞれ独立して変化するため、ブランド側で制御することはできません。代わりに著者は、モデルが直接的なヒントなしにブランドに言及するコントロールされたプロンプトの割合を示す「モデルシェア」を測定することを提案しています。具体的には、コンテンツ最適化の前後で15〜20の実際のプロンプトをサンプリングして測定します。また、2024年に発表されたアガルワルらによる研究を引用し、適切な最適化により引用頻度が30〜115%増加したことを示しています。さらに、具体的なポジションを約束したり、異なるプラットフォームで統一された成長率を主張するような業者には注意が必要であり、ポジション保証ではなく、再現可能な測定を求めるようアドバイスしています。
出典: Habr — хаб NLP —
原文
