AI Visibilityセンチメント
センチメントは、実際のユーザープロンプト全体でAIモデルがどのようにプロダクトを説明しているかを示します。AI Visibilityの一部として、AIが生成したレスポンスのトーンを測定します。プロダクトがAIの回答に表示されるかどうかだけでなく、どのように認識されているかを追跡することもできます。
センチメントの仕組み
Amplitudeはレスポンスレベルでセンチメントを計算し、それをすべてのプロンプトにわたって集計します。Amplitudeは、AIが生成した各レスポンスを次の4つのカテゴリのいずれかに分類します。
- ポジティブ:この反応はプロダクトを好意的に捉えています。
- ネガティブ:この回答はプロダクトを否定的に捉えています。
- 混合:レスポンスにはポジティブとネガティブの両方のフレーミングが含まれています。
- 中立または失敗:レスポンスに認識可能なセンチメントが含まれていないか、センチメント分析に失敗しました。
計算では有効なセンチメントを持つレスポンスのみを使用します。 Amplitudeは中立的および失敗したレスポンスを除外し、時系列および競合間で比率の一貫性と比較可能性を保ちます。「混合」の回答はポジティブとネガティブの両方の合計にカウントされるため、結果には部分的にネガティブな回答が反映されます。
Amplitudeはセンチメント分類とは独立してテーマを抽出するため、テーマは複数のセンチメントカテゴリにまたがって表示される可能性があります。
Amplitudeがセンチメントスコアを算出する方法
Amplitudeは、有効なレスポンスのみに基づいてセンチメントの割合を算出します。これにより、合計値は一貫性があり比較可能な状態に保たれます。
例:
| カテゴリー | カウント | パーセンテージ |
|---|---|---|
| 総回答数 | 100 | — |
| ポジティブ | 40 | 40 / 80 = 50% |
| ネガティブ | 10 | 10 / 80 = 12.5% |
| ニュートラル | 30 | 除外済み |
| 失敗 | 20 | 除外済み |
有効なレスポンス:80(合計から中立と失敗を差し引いたもの)。
全体的なセンチメントスコアは、肯定的な回答の割合です。 Amplitudeはこのスコアを使用して、プロダクトと競合他社にまたがる認識度を比較します。
UIには、トップレベルのメトリックとしてポジティブとネガティブのみが表示されます。混合したセンチメントは独立したカテゴリとしては表示されません。
センチメントを詳しく見る
- AI Visibilityを開きます。
- センチメントを選択します。
- 全体的なセンチメントスコアと傾向を確認します。
- 各センチメントに関連付けられた上位のテーマを分析します。
- 具体的な例については、個々の回答を詳しく確認します。
センチメントに基づいて行動する
センチメントインサイトを使用して、AIモデルによるプロダクトの説明を改善します:
- ポジティブなテーマを強化する:すでに効果を上げているテーマを中心に専用のコンテンツやメッセージを作成します。
- ネガティブなテーマに対処する:繰り返し発生する懸念事項について、ターゲットを絞ったページや説明を公開します。Amplitudeが提案する具体的なアクションについては、AI Visibilityに関する推奨事項を参照してください。
- 位置づけの調整:プロダクトマーケティングと、プロダクトに対するAIの解釈が一致するように調整します。
- 時系列で追跡:コンテンツやメッセージングを変更した際のセンチメントの変化をモニターします。
制限事項
センチメントは、ユーザーからの直接的なフィードバックではなく、AIモデルがプロダクトをどのように説明しているかを反映します。次の点にご留意ください。
- Amplitudeは、割合の歪みを避けるために、中立レスポンスと失敗したレスポンスを計算から除外します。
- 混合レスポンスはポジティブなセンチメントとネガティブなセンチメントの両方に寄与するため、全体的な結果に影響を与えます。
- テーマは、コンテキストに応じて複数のセンチメントカテゴリにまたがって現れる場合があります。
- Amplitudeは自動的にネガティブなプロンプトを生成しません(「最悪のツール」や「回避すべき代替手段」など)。バイアスを導入することなくネガティブなフレーミングを分析したい場合は、プロンプトセットに手動で追加してください。
AI Visibilityデータを送信する方法については、AI VisibilityデータをAmplitudeに送信するを参照してください。
これは役に立ちましたか?