LINEスタンプ販売中!
←前のレッスンAIへ渡す材料を整理するAI実務基礎コース

コース責任者:ツギノ先生

AIの回答を仕事で使う前に、根拠と数字を確認する方法

このレッスンの担当:ツギノ先生

AIの文章をそのまま使うのが不安な人へ。全部を疑うのではなく、間違うと影響が大きい箇所から確認します。

AI | 実務

この端末に保存
YouTubeで見る

AIの回答を読んで違和感がなくても、数字や固有名詞、出典が正しいとは限りません。

確認を後回しにすると、資料全体を作り直すこともあります。

何を確かめる必要があるかを先に分け、元の情報へ戻れる形で検証しましょう。

今回は、社内向けの市場調査メモを作る架空の場面を扱います。

数値、引用、解釈を区別し、根拠が見つからない情報を保留する手順を学びます。

すべてを一度に調べ直すのではなく、用途と影響に合わせて確認の順番を決めます。

この記事で学ぶこと

  • 主張を種類ごとに分けます。
  • 出典の該当箇所と数値の条件を照合します。
  • 未確認情報を保留し、利用範囲を明記します。

1. 回答を確かめられる主張へ分ける

数値・解釈・予測を分ける。数値:申込率。解釈:広告の効果。予測:来月の増加

長い回答をまとめて正しいか尋ねる前に、含まれている主張を一つずつ取り出します。

「市場は急成長し、利用者は前年より増え、来年も伸びるでしょう」という文章には、現状の評価、過去の数値、将来の予測が混ざっています。

それぞれ必要な根拠が違うため、同じ方法では確認できません。

確認表には、回答にある主張、種類、参照先、確認結果を置きます。

種類は、数値、名称・日付、引用、解釈、予測などに分けられます。

市場規模の数値は調査資料と照合し、「急成長」という表現は比較期間や基準を確認してください。

予測は過去の事実として扱わず、誰がどの条件で予測したかを残します。

確認する順番は、判断への影響で決めます。

予算を左右する市場規模や、対外的に掲載する実績は優先度が高くなります。

説明の補助となる一般的な言い換えと、契約や投資の判断に使う数字を同列に扱わないでください。

用途を明確にすると、必要な確認の深さも決めやすくなります。

2. 出典のリンク先と記述を照合する

リンクではなく、該当箇所を見る。本文を開く。記述を探す。条件を照合

出典が付いている回答でも、そのリンク先に主張を裏付ける記述があるとは限りません。

まずページを開き、発行元、資料名、公開日、対象範囲を確認します。

検索結果の短い紹介文だけで判断せず、本文や表の該当箇所までたどってください。

リンクが開けない場合は、確認できなかったと記録します。

できるだけ、情報を最初に公表した組織の資料や、調査方法が示された原資料に当たります。

ただし、公式資料であっても今回の目的に合うとは限りません。

製品の提供会社が示す事例は、その条件での事例です。

利用者全体の成果を保証する資料として読み替えないことが重要です。

架空の回答に「導入企業の八割が生産性を改善」とある場合、割合だけを写さず、調査対象、回答数、質問文、実施時期を確認します。

数値が資料に存在していても、特定の利用者だけを対象にした調査なら、その範囲を添える必要があります。

確認できた内容と、そこから自分が推測した内容を分けてください。

3. 数字は単位・母数・計算を確認する

同じ数字でも、意味が違う。単位。母数。対象期間

数字の確認では、桁が合っているかだけでなく、何を数えた値かを確認します。

利用者数と有料契約数、月間売上と年間売上は別の指標です。

表の見出し、単位、対象期間まで読むことで、同じ数字を違う意味で使ってしまうことを防ぎやすくなります。

割合には母数が必要です。

例えば申込率が十パーセントと書かれていても、閲覧者全体のうちなのか、説明会参加者のうちなのかで意味が変わります。

比較する数字が同じ条件で集計されているかを確かめてください。

通貨や税込・税抜、人数の重複など、資料によって扱いが変わる点にも注意します。

計算は、元の数値から別の方法で再確認します。

架空の例で、閲覧二百件から申込十件なら、申込率は五パーセントです。

AIが示した計算説明をもう一度読むだけでなく、表計算や電卓で確かめます。

集計表なら合計件数や欠損値も確認してください。

数字の根拠と計算過程を分けて残すと、後から間違いの場所を追いやすくなります。

丸めた割合の合計にも注意してください。

例えば三分類の割合を小数点以下で丸めると、合計が百パーセントからずれる場合があります。

表示だけを百に合わせて数値を書き換えず、元の件数で再計算し、丸め方を注記します。

元資料の誤りと表示上の差を分けることで、不要な修正を避けられます。

4. 事実と解釈を混同しない

増えた事実と、増えた原因。申込数が増えた。広告だけが原因

確認できた事実から、どこまで言えるかも検討します。

申込数が前月より増えたことが事実でも、新しい広告だけが原因とは限りません。

季節、掲載場所、価格、対象者など、同時に変わった条件があるかもしれません。

数字の増減を見つけた段階と、原因を特定した段階を分けてください。

市場調査メモでは、事実欄に「資料では対象者の回答がこう集計されている」と記載します。

解釈欄には「今回の商品に関心がある可能性がある」と書き、次に確かめることを添えます。

可能性を示す言葉を付けるだけでは十分ではありません。

どの範囲の事実から、どんな推測へ進んだかが追えることが必要です。

反対の材料も確認します。

ある調査が増加を示し、別の調査が横ばいなら、都合のよい方だけを採用しないでください。

対象者や期間、指標の違いを比べ、同じものを測っているかを確かめます。

違いを説明できない場合は、結論を急がず、資料間で結果が異なることをそのまま記載する方法もあります。

5. 未確認の情報を残し、利用可否を決める

分からないものは、保留する。確認できた。条件付きで使う。確認できず保留。誤りあり・修正

確認の結果は、正しいか間違いかの二択だけではありません。

根拠を確認できた、条件付きで使える、確認できない、誤りがある、という状態を分けると運用しやすくなります。

特に、調べても根拠が見つからない情報を、誤りと断定する必要はありません。

今回の成果物では採用しない、と判断できます。

確認表には、参照した資料、該当箇所、確認日、使う際の条件を残します。

例えば「国内の特定業種を対象とした調査としてのみ使用」と書けば、後の編集で対象範囲が消えるのを防ぎやすくなります。

時間がたった場合や条件が変わった場合は、前回の確認結果をそのまま再利用せず、更新の必要を検討してください。

公開する前には、未確認の主張が本文へ戻っていないかを再点検します。

重要な判断に関わる内容なら、適切な専門家や担当部署による確認も必要です。

検証はAIを疑うためだけの作業ではありません。

読者へ何をどの確かさで伝えられるかを明確にし、自分が責任を持てる範囲を決めるための工程です。

確認表は、文章を直した後も残します。

公開後に根拠を尋ねられたとき、資料のどの箇所を使ったかまで戻れるためです。

資料が更新されることもあるので、確認日と対象期間を併記してください。

更新前後で結論が変わる場合は、古い確認結果をそのまま流用せず、使う主張を改めて点検します。

実践課題

三つの主張を根拠と照合する

AIが作った短い調査メモから、数字、固有名詞、解釈を一つずつ選んでください。

元資料へ戻り、確認結果を表にまとめます。

実在する資料を使う場合は、公開されている情報だけで練習できます。

  1. 主張を一文ずつ抜き出し、種類を記載します。
  2. 出典を開き、対象範囲と該当箇所を確認します。
  3. 数値は単位と母数を確かめ、必要な計算をやり直します。
  4. 確認結果と、成果物で使うかどうかを記録します。

記入例:『申込率十パーセント』という主張に対し、元表は閲覧二百件・申込十件でした。

再計算は五パーセントなので修正します。

広告が原因という解釈は、比較条件が不十分なため保留とします。

自己確認

  • リンク先に該当する記述がありましたか。
  • 数字の単位と母数を説明できますか。
  • 未確認の内容が確定した事実として残っていませんか。

まとめ

AIの回答を検証するときは、主張を分け、出典の本文、数値の条件、解釈の範囲を順に確かめます。

出典付きでも確認済みとは限りません。

根拠が見つからない情報は保留し、用途に応じて採用を判断してください。

確認日と条件を残せば、後の更新や編集でも情報の確かさを引き継げます。

  • 主張を種類ごとに分けます。
  • 出典の該当箇所と数値の条件を照合します。
  • 未確認情報を保留し、利用範囲を明記します。

参考資料

NIST:生成AIリスク管理プロファイル
生成AIが誤った内容をもっともらしく示すリスクの参考資料です。教材内の確認表と数値例は学習用に作成しています。

次に知りたいことは?

仕事で困っていることを、次の教材づくりに生かします。

困りごとを送る

自分の仕事で、AIの使いどころを決めたい方へ

繰り返している業務と、任せるか迷う作業を持って、個別相談の内容をご覧ください。

個別相談の内容を見る
次のレッスンAIとの対話で初稿を改善する→
カワイ校長

今日は何学ぶ?

1分でわかる、大学の使い方

「はじめに」でいつでも見られます