AI監査レポートの例:方法・結果・限界
AI監査レポートの例を、文脈、質問、回答、解釈上の限界とともに紹介します。過去のデータ、説明用の例、記録された計算を区別してご確認ください。
保存済みレポート:比較する前にデータを確認
2026年5月15日に実施した自社監査を再確認しました。AIでの可視性レポートから結論を出す前に必要な確認事項を示します。
運営者が自社ブランドAI Labs Auditを分析した過去の記録です。手法の実例であり、顧客の成果やモデルの性能比較ではありません。
| 質問ID数/言語別バージョン数 | 35 / 70 (EN, FR) |
|---|---|
| 構成数/基本モデル数 | 9 / 5 |
| 空でなくエラーのないテキスト数/記録数 | 609 / 630 |
| 空またはエラーの記録数/記録数 | 21 / 630 |
| ブランド名を含む質問数/言語別質問数 | 46 / 70 |
単純に比較できない理由
- 20 / 70 — 件の質問には、繰り返し使われるフランス語の宣伝文が含まれています。英語の質問にも見られます。保存された文章は修正していません。
- 4 / 35 — 個の質問IDで、フランス語版と英語版のブランド名の有無が異なります。これらを意味の等しい質問として扱うことはできません。
- 保存された文章は、提供元に送られたリクエスト全体の不変な検証済みコピーではありません。提供元の応答IDと実際のウェブ検索の実行は未確認です。
この記録は集計単位、分母、質問の文脈を確認するためのものです。モデルの優位性、ウェブモードの効果、時間を通じた安定性を示すものではありません。
質問にブランド名が含まれる、原文どおりの抜粋
フランス語の元の質問(ブランド名を提示)C’est quoi AI Labs Audit exactement?
AI Labs Audit est une plateforme européenne complète d'audit et d'optimisation de la visibilité de l'IA.
出典の詳細
保存されたフランス語回答の最初の一文です。質問にブランド名が含まれるため、自発的な推奨を測定した事例ではありません。:onlineの記録はありますが、実際のウェブ検索実行と提供元の回答IDは未確認です。この過去のモデル出力は現在のサービス内容を示しません。
過去のモデル出力であり、検証済みの製品仕様ではありません。このページの言語にかかわらず、質問は元のフランス語のまま表示します。
保存された構成ごとの記録を見る
ID順であり、性能順位ではありません。:onlineという接尾辞は保存された設定を表し、実際のウェブ検索を証明するものではありません。応答の全文は公開していません。
| 構成ID | 記録数 | 利用可能なテキスト数 | エラー数 |
|---|---|---|---|
anthropic/claude-haiku-4.5 | 70 | 70 | 0 |
anthropic/claude-haiku-4.5:online | 70 | 49 | 21 |
google/gemini-2.0-flash-001 | 70 | 70 | 0 |
google/gemini-2.0-flash-001:online | 70 | 70 | 0 |
openai/gpt-5-mini | 70 | 70 | 0 |
openai/gpt-5-mini:online | 70 | 70 | 0 |
perplexity/sonar | 70 | 70 | 0 |
x-ai/grok-4.1-fast | 70 | 70 | 0 |
x-ai/grok-4.1-fast:online | 70 | 70 | 0 |
オフラインで確認を再実行
データには保存済みの質問、ID、日時、構成、使用した指標が含まれます。Pythonスクリプトはアカウント、APIキー、モデル呼び出しなしで実行できます。
JSONデータをダウンロード · Pythonスクリプトをダウンロード
python3 recompute-archived-audit-20260515.py.txt archived-audit-20260515.json --check
集計と質問の確認は再実行できます。応答から得た指標は当社による抽出結果です。応答全文がないため、その抽出を独立して再実行することはできません。ファイルのハッシュ値は提供元へのリクエストを認証するものではありません。
学習用の架空の例
この数値例は完全に架空のものです。分母の選び方を説明するための例であり、顧客の成果でもAGSスコアでもありません。上記の実際の保存記録とは区別しています。
| 記録数 | 利用可能なテキスト数 | 文字列としての言及数 |
|---|---|---|
| 10 | 8 | 3 |
3 / 8 = 37.5 % · 3 / 10 = 30 %
利用可能なテキスト8件のうち3件なら37.5%、想定記録10件のうち同じ3件なら30%です。分母を明示する必要があります。ブランド名の出現は、推奨や出典の引用を示すものではありません。
方法
AIの回答が実際にどのようにAGSスコアになるかを示す、匿名化された例。
読む限界と変動性
AIの可視性の測定は、厳密な科学ではありません。私たちは自らの限界と、方法がそれをどう考慮しているかを文書化しています。
読むシナリオと専門知識は、お客様のもの
顧客に役立つ質問を定め、文脈とバージョンを確認したうえで、応答とその限界を解釈してください。当社のインフラは測定記録の作成を支援します。