回答を見て「前より良い」と感じても、何が改善したかを説明できなければ、次の指示へ活かしにくくなります。
Geminiの回答を改善する際は、同じ材料と評価基準で比べます。
このレッスンでは、架空の社内報告の要約を題材に、合格条件、致命的な誤り、比較方法を設計します。
回答を作り直す回数より、原因に合う修正を選ぶことを目指します。
この記事で学ぶこと
- 合格条件を用途から決める
- 変える条件を一つに絞る
- 品質と確認負担を合わせて見る
用途から評価軸を決める
評価軸は、成果物を誰が何に使うかから選びます。
上司が進捗を判断する要約なら、事実の一致、重要項目の抜け、次の行動の明確さが候補です。
広告文なら別の軸が必要になります。
すべての仕事へ同じ「正確・分かりやすい・短い」を当てはめず、具体的な判定へ変えます。
架空の例で、元資料に「納品は完了、顧客確認は来週」とあれば、その区別が要約へ残ることを合格条件にします。
「案件完了」とまとめると状況を過大に伝えます。
読みやすさより、担当者が誤った判断をしないことを優先します。
必要な条件が何かを、元資料から選びます。
評価項目は最初に3つ程度へ絞ります。
多すぎると採点そのものに時間がかかり、判断の重要度も分かりにくくなります。
各項目に、合格と不合格の具体例を付けます。
「具体性が高い」ではなく、「次の担当と期限が資料にある場合、両方を残している」と定義します。
用途によって優先順位も変わります。
内部の下書きなら多少の文体修正は許容できますが、数値の取り違えは重大です。
配布用の文書なら、読みやすさや体裁も必要になります。
出力の段階を決めてから評価し、下書きを完成品のように比較しないようにします。
致命的な誤りを先に決める
点数の合計だけでは、重大な誤りがほかの長所で隠れることがあります。
期限の捏造、金額の誤り、未確定事項の断定などは、合計点に関係なく不採用とする条件を置きます。
これを先に決めると、文章が上手だから採用する判断を避けられます。
架空の報告で、担当者が未定なのに個人名を補った場合は不採用です。
短く読みやすくても、実務で誤った指示につながります。
一方、同じ内容の軽微な言い換えは修正で対応できます。
誤りの影響で分けることが、評価を現実の仕事へ結び付けます。
致命的な誤りは、単に「間違いがないこと」と書かず、対象を具体化します。
今回の仕事で特に重要な日時、数字、責任者、決定状態を選びます。
すべての文章表現を重大扱いすると、実用的な比較ができなくなります。
採用前に必ず直す条件と、改善候補を分けます。
確認する人の理解を揃えるため、誤りの見本を用意します。
2人で同じ回答を見て評価が分かれるなら、基準の表現を見直します。
AIの出力だけでなく、評価側の曖昧さも改善対象です。
評価表を作ったことだけで客観性が確保されたとは考えないでください。
同じ条件で回答を比べる
比較では、入力資料、対象期間、求める形式を揃えます。
片方だけ詳しい資料を渡したら、指示の改善が効いたのか分かりません。
まず変える条件を1つ選び、それ以外は同じにします。
例えば「要点をまとめる」から「決定事項と未確認事項を分ける」への変更を比較します。
同じ指示でも回答が毎回完全に同じになるとは限りません。
1回の良い結果だけで安定した改善と判断しないようにします。
代表的な入力で複数回試す必要がある場合もあります。
ただし、低リスクの小さな下書きに過剰な試験を行う必要はありません。
利用する影響に合わせて確認量を選びます。
架空の比較では、A案とB案から名前を外し、同じ評価表で確認する方法も使えます。
新しく作った指示だから良いはず、という期待を減らすためです。
採点の理由は、該当する文や抜けた項目を示します。
「こちらが自然」という感想だけでは次の改善へつながりません。
比較記録には、使用した指示、資料、確認日を残します。
機能やモデルが変わると、以前と同じ結果にならない場合があります。
必要な範囲で条件を記録すれば、後で性能の変化なのか入力の違いなのかを調べやすくなります。
失敗の原因に合わせて直す
結果が悪いとき、すぐ「もっと正確に」と追記するのではなく、失敗の種類を分けます。
材料が不足していたのか、指示が曖昧だったのか、出力形式が使いにくいのかで対応が違います。
原因を絞ってから修正すると、説明を長くするだけの改善を避けられます。
元資料に期限がないなら、指示を強めても正しい期限は生まれません。
必要な入力を追加するか、未記載とする条件を置きます。
資料に期限があるのに抜けるなら、重要項目として抽出する手順を加えます。
同じ「期限がない」という結果でも原因が違うため、対処を分けます。
文章が長すぎる場合も、文字数だけを指定すると必要な条件が消えることがあります。
残す情報の優先順位を決め、背景説明から短くするよう指示します。
形式が合わないなら、見出しと項目を固定します。
成果物の使い道から、何を変えるべきかを判断します。
一度に複数の条件を変えると、何が効いたか分からなくなります。
大きな問題から1つずつ直し、同じ見本で比較します。
改善が見られない場合は、作業全体を任せる範囲が広すぎる可能性も考えます。
抽出だけにするなど、役割を縮小する選択肢もあります。
採用と見直しの条件を残す
採用する指示には、合格した理由と弱い条件を残します。
「B案を採用」だけでなく、「決定と未確認を分け、重要な期限を保持したため」と記します。
弱点がある場合は、どの入力で追加確認が必要かを明示します。
運用する人が注意を向ける場所を選べます。
実務で使い始めた後も、代表的な失敗を記録します。
すべての会話を保存する必要はありません。
修正が多かった入力、誤りの種類、対処を短くまとめます。
繰り返す問題が見つかったら、入力様式や指示、検証方法を見直します。
品質だけでなく、確認と修正の時間も測ります。
点数が少し高くても、確認に倍の時間がかかるなら用途によっては採用しない判断もあります。
ただし、必須の正確性を時間短縮のために捨てないようにします。
最低条件を満たした案の中で、負担を比較します。
見直しのきっかけは、業務条件の変更、資料形式の変更、同じ誤りの増加などです。
定期的な確認も役立ちますが、変化がないのに作り直し続ける必要はありません。
評価は改善のための道具であり、点数を付け続けることが仕事にならないようにします。
改善を終える条件も決めます。
必要な事実が保持され、重大な誤りがなく、確認時間が許容範囲なら、その用途では採用できます。
少し違う表現を求めて再生成を続ける必要はありません。
採用した案へ確定した修正を反映し、次の実務で残った問題を集める方が、現場の負担に合う改善につながります。
実践課題
実践課題：二つの回答を比較する
つくるものは、要約2案の比較表です。
用意するのは、決定事項と未確認事項を含む架空の短い記録です。
A案は一般的な要約、B案は両者を分ける指示で作ります。
入力は同じにし、採用理由を文章の具体箇所で示してください。
- 用途に合う評価軸を3つ決める
- 期限や担当の捏造を不採用条件にする
- 同じ入力で2案を作り、理由付きで比較する
- 原因に応じた修正を1つ選ぶ
架空の完成例：「B案は決定事項と未確認を分け、顧客確認前の案件を完了と断定していません。A案は案件完了と記載したため不採用です。B案を採用し、次回は期限がない入力で未記載と扱うかを確認します。」
自己確認
- 比較条件が揃っている
- 重大な誤りを合計点で隠していない
- 採用理由と次の修正が具体的である
まとめ
回答の改善は、用途に合う基準と同じ入力で比較します。
致命的な誤りを先に定め、原因に応じて材料や指示を直します。
次は1つの仕事で2案を比べ、採用理由を感想ではなく出力の具体箇所から説明してください。
- 合格条件を用途から決める
- 変える条件を一つに絞る
- 品質と確認負担を合わせて見る
