付録 E AI 出力レビューシート
AI 出力レビューシートは、AI の文章を添削するためだけのものではありません。AI が出した内容を、意思決定に使ってよい状態まで人が確認するためのチェックリストです。
関連する章は、第4章 仮説は調査を減らすためにある、第7章 意思決定に必要な情報を見極める、第8章 デスクリサーチを設計する、第22章 提案を相手の意思決定に合わせる、第27章 プレイブックを更新する、付録 C 調査計画テンプレート、付録 D インタビューガイドテンプレートです。
この付録の使い方
- 5 分レビューで、すぐ使ってよいか、追加確認が必要かを分ける。
- 意思決定への影響と共有範囲から、低・中・高のレビュー段階を決める。
- 重要な主張を分解し、原資料、推論、情報管理、共有可否を確認する。
- 採用、修正、保留、破棄を記録し、次回のプロンプトやプレイブックへ反映する。
AI 出力をすべて同じ重さで確認すると運用されません。外部公開、クライアント提出、契約、財務、個人への不利益、重要な投資判断に関わるほど確認を重くします。
軽いレビューだけで足りる場面もあります。自分用の下書きや表現案まで詳細レビューにかける必要はありません。
5 分レビュー
1. この出力を何に使うか説明できるか
2. 重要な数値・固有名詞・日付・出典を確認したか
3. 事実と推論が混ざっていないか
4. 入力・出力に機密や個人情報が残っていないか
5. この出力だけで判断していないか
一つでも不安があれば、軽いレビューか詳細レビューに進みます。急いでいるときほど、確認しない理由ではなく、確認する箇所を減らす判断にします。
5 分レビュー後の扱いは、次の三つに分けます。
- 使う: 自分用の下書きで、重要な事実や機密が含まれない。
- 追加確認: 社内共有、提案素材、判断材料に使う。
- 破棄: 出典不明、前提誤り、情報管理上の問題がある。
レビュー段階
| 段階 | 用途 | 最低確認 |
|---|---|---|
| 低 | 自分用の下書き、発想出し、表現案 | 5 分レビュー、機密確認 |
| 中 | 社内共有、調査メモ、提案素材 | 軽いレビュー、重要主張の原資料確認、推論確認 |
| 高 | クライアント提出、外部公開、重要判断 | 詳細レビュー、承認者記録、専門確認、再現記録 |
社内利用でも、個人評価、採用、契約、財務、法務、安全、外部への影響に関わる場合は高リスクとして扱います。
専門確認の例は、契約・個人情報なら法務や情報管理、決算・投資なら財務、顧客接触や安全なら現場責任者や専門家です。
軽いレビュー
出力名・版・日時:
利用した AI(ツール・モデル):
プロンプト:
参照資料:
入力した情報区分:
利用目的:
意思決定への影響:
1. 使い道
下書き・探索・要約・分析補助・提案素材・判断材料のどれか:
この出力だけで決めていないか:
2. 事実
重要な数値・固有名詞・日付を原資料で確認したか:
出典の存在を確認したか:
出典の定義・単位・期間を確認したか:
3. 推論
事実と推論が分かれているか:
反対証拠や別解があるか:
根拠より強い結論になっていないか:
4. 情報管理
入力してはいけない情報を入れていないか:
共有してはいけない内容が出力に残っていないか:
5. 次の扱い
そのまま使う・修正して使う・追加確認する・破棄する:
確認者:
承認者(必要な場合):
AI の出力は、速い下書き、論点の広げ方、抜け漏れ点検には役立ちます。一方で、存在しない出典、古い情報、定義の混同、もっともらしい飛躍が混ざることがあります。重要な判断に使う部分ほど、原資料と照合します。
確認者は、事実、推論、情報管理を点検する人です。承認者は、その出力を提出物や意思決定に使う責任を持つ人です。
詳細レビュー
1. 利用目的とリスク
| 項目 | 記入 |
|---|---|
| 利用目的 | |
| 意思決定 | |
| 影響範囲 | |
| 誤った場合の損失 | |
| 人が最終判断する箇所 | |
| AI が生成した箇所 | |
| 人が確認・修正した箇所 | |
| 使ってはいけない用途 |
下書き、探索、要約、分類、比較、提案素材、判断材料では、必要な確認の重さが変わります。外部公開、契約、採用、評価、法務、財務、安全、個人への不利益に関わる場合は、通常より重く確認します。
外部公開は、不特定多数に読まれる前提で確認します。クライアント提出は、相手の意思決定や責任範囲に影響する前提で確認します。社内利用は軽く扱えますが、後から外部資料へ転用される可能性がある場合は、最初から出典と未確認事項を残します。
2. 再現記録
ツール名:
モデル名:
実行日時:
プロンプト:
添付・参照資料:
設定:
出力版:
人による修正履歴:
AI の出力は、同じ指示でも毎回同じになるとは限りません。複数回出して一致したとしても、それだけで正しい証拠にはなりません。再現記録は、後で確認できるようにするためのものです。
3. 入力情報の確認
入力した情報の種類:
個人情報:
機密情報:
著作物:
契約上の制限:
AI 環境・保存・学習利用:
入力前に削除・匿名化した情報:
入力してよい情報かどうかは、技術的に入力できるかとは別です。社内規程、契約、相手への説明、利用する AI 環境の保存・学習利用・権限を確認します。
4. 出力の分解
| 主張 ID | 出力の主張 | 種類 | 根拠 | 確認方法 | 確認結果 | 扱い |
|---|---|---|---|---|---|---|
| C1 | 事実・推論・提案・表現 | 採用・修正・保留・破棄 |
AI の出力を一つの文章として見ず、主張に分解します。数値、日付、固有名詞、制度、競合情報、引用、合意事項は、優先して確認します。
5. 出典確認
出典は実在するか:
一次情報に戻れるか:
出典の日付は判断に使える新しさか:
定義・単位・対象・期間は合っているか:
引用は原文の意味を変えていないか:
二次資料や転載の連鎖になっていないか:
AI が示した出典名や URL は、存在するだけでは不十分です。その出典が本当に該当主張を支えているか、定義や範囲が合っているかを確認します。
6. 推論確認
事実から結論までのつながり:
欠けている前提:
反対証拠:
別の説明:
過度な一般化:
相関と因果の混同:
比較対象の不一致:
結論が変わる条件:
AI は、文章の流れを整えるのが得意です。そのため、根拠が弱くても結論が強く見えることがあります。読みやすさと正しさを分けて確認します。
重要な判断では、AI の出力を隠しても人が同じ結論に至れるかを確認します。探索や発想出しではここまで求めません。AI の文章がなければ説明できない重要結論は、まだ判断材料として弱い状態です。
7. バイアスと抜け漏れ
| 観点 | 確認 |
|---|---|
| 反対意見 | |
| 少数派・例外 | |
| 顧客以外の関係者 | |
| 実行上の制約 | |
| 法務・情報管理・安全 | |
| 費用・時間・運用負荷 | |
| 既存資産・現場の抵抗 |
AI は、与えた問いの方向へ素直に進みます。問いが偏っていれば、出力も偏ります。反対意見、例外、制約、実行負荷を別に聞き直します。
8. 数値・計算の確認
使ったデータ:
計算式:
中間値:
欠測・除外:
単位・期間:
集計対象:
再計算者:
AI が出した計算結果は、最終値だけを見ません。計算式、中間値、除外条件、単位、期間を確認します。必要であれば、表計算やコードで再計算します。
9. 表現と共有
外部公開してよい内容か:
相手や組織が特定されないか:
断定しすぎていないか:
未確認事項を隠していないか:
著作権や引用範囲に問題がないか:
クライアントの合意事項として誤読されないか:
AI が整えた文章は、合意済みのように見えることがあります。提案書や議事録に入れる場合は、事実、推論、提案、未決事項を分けます。
使わない方がよい場面
- 原資料へ戻れない主張が、重要な結論を支えている
- 入力できない機密・個人情報が必要になる
- 確認にかかる時間が、人が直接調べる時間を上回る
- 専門家確認なしでは責任を持てない
- AI の出力を使うことで、誰が判断したのかが曖昧になる
- 相手の合意や発言を AI が補ってしまっている
AI を使わない判断も、AI 活用の一部です。速く作れることと、速く正しく判断できることは別です。
破棄条件
- 出典が存在しない、または主張を支えていない
- 重要な前提が誤っている
- 機密や個人情報を削れない
- 修正しても誤解を招く
- 誰も確認責任を持てない
- 過去の合意や事実と矛盾している
破棄した出力も、記録する価値があります。なぜ使えなかったかを残すと、次のプロンプトや確認手順が改善されます。
用途別チェック
| 用途 | 重点確認 |
|---|---|
| 仮説出し | 反証可能か、選択肢を狭めすぎていないか |
| デスクリサーチ | 出典の実在、一次情報、日付、定義 |
| インタビュー要約 | 原文、話者、文脈、少数意見 |
| 数値分析 | 定義、単位、計算式、欠測、母集団 |
| 競合比較 | 比較条件、価格・機能の最新性、対象市場 |
| 提案書 | 未確認事項、責任範囲、相手の意思決定 |
| プレイブック更新 | 今回だけの事情と再利用できる知見の分離 |
用途によって、レビューの重点は変わります。すべてを同じ重さで確認するのではなく、意思決定を誤らせる箇所を優先します。
AI に出力を自己点検させる
以下の AI 出力について、内容を正当化せず、リスクを点検してください。
1. 事実、推論、提案、表現に分解する
2. 原資料で確認が必要な主張を列挙する
3. 定義、単位、期間、対象が曖昧な箇所を指摘する
4. 根拠より強く言い切っている箇所を指摘する
5. 反対証拠、別解、例外を挙げる
6. 個人情報、機密、著作権、契約上のリスクを指摘する
7. 外部共有前に削るべき内容を指摘する
8. この出力を意思決定に使う前に、人が確認すべき順番を提案する
9. 根拠がない、または判断できない箇所は「不明」と明記する
AI に自己点検させても、それだけで確認が終わるわけではありません。自己点検は、確認すべき箇所を見つける補助として使います。
レビュー結果の記録
採用した内容:
修正した内容:
破棄した内容:
追加で確認した出典:
反対証拠:
残る不確実性:
意思決定への影響:
次回プロンプトで変えること:
保存するテンプレートと使う条件:
プレイブックへ残す学び:
AI 出力の品質は、使った後に改善できます。うまくいったプロンプトだけでなく、確認に時間がかかった出力、誤りが混ざった出力、使わなかった出力も記録します。