【Copilot】Copilotで事実確認用プロンプトを書く方法とハルシネーション低減のコツ

Copilotが生成する情報には、事実と異なる「ハルシネーション」が含まれることがあります。

特に、機密情報や専門性の高い内容を扱う場合、そのリスクは無視できません。

この記事では、Copilotに事実確認を依頼する効果的なプロンプトの書き方と、ハルシネーションを低減させるための具体的な方法を解説します。

読了後には、Copilotからの回答の信頼性を高め、業務での活用範囲を広げることができます。

Copilotがハルシネーションを起こす仕組み

Copilotは、学習データに基づいて最も確率の高い単語の並びを予測し、文章を生成します。

しかし、学習データに偏りがあったり、最新情報が不足していたりすると、事実に基づかない情報(ハルシネーション)を生成してしまうことがあります。

特に、複雑な推論が必要な場合や、曖昧な情報しか得られない場合に、その傾向が強まります。

そのため、Copilotの回答は常に鵜呑みにせず、事実確認を行うことが重要です。

事実確認を促すプロンプトの書き方

Copilotに事実確認を効果的に依頼するには、明確で具体的な指示が必要です。

単に質問するだけでなく、回答の根拠や参照元を明示するように促すプロンプトが有効です。

以下に、具体的なプロンプトの例と、その意図を解説します。

事実確認プロンプトの具体例と解説

1. 回答の根拠と出典を明示させる

Copilotが回答を生成する際に、その情報がどこに基づいているのかを尋ねます。

1. 回答の根拠と出典を提示してください
   「〇〇について説明してください。その際、回答の根拠となった情報源と出典を必ず示してください。」
2. 参照URLを添えて回答してください
   「△△の市場動向について教えてください。参考にしたWebサイトのURLを添えてください。」

これにより、Copilotは提示された根拠に基づいて回答を生成しようとします。

出典が不明確な場合や、不自然な情報源が示された場合は、ハルシネーションの可能性が高いと判断できます。

2. 否定的な質問で検証を促す

Copilotの回答に疑念がある場合、その情報が間違っている可能性を指摘し、再検証を促します。

1. 〇〇は事実と異なりますが、正しい情報を教えてください
   「〇〇という情報がありますが、これは誤りではないでしょうか。正しい事実関係を説明してください。」
2. △△という情報は確認できませんでしたが、関連情報を提供してください
   「△△に関する情報が見つかりません。関連する最新の公式発表があれば教えてください。」

このように、否定的な前提を提示することで、Copilotはより慎重に情報を検索・生成する傾向があります。

3. 複数の情報源からの回答を比較させる

複数の情報源を参照させ、その内容を比較させることで、情報の信頼性を高めます。

1. 複数の公式発表から比較してください
   「A社とB社の最新の決算発表内容を比較し、共通点と相違点をまとめてください。」
2. 異なる視点の情報を提示してください
   「〇〇の技術について、肯定的な意見と否定的な意見の両方を、それぞれの情報源とともに提示してください。」

これにより、Copilotは多様な情報にアクセスし、より多角的でバランスの取れた回答を生成する可能性が高まります。

4. 具体的な条件や制約を与える

回答に含めるべき情報や、除外すべき情報を具体的に指定します。

1. 特定の期間の情報に限定してください
   「2023年以降の〇〇に関するニュースを、公式発表のみを基に要約してください。」
2. 専門用語の使用を避けてください
   「△△の技術について、専門知識がない人にもわかるように、平易な言葉で説明してください。」

これにより、Copilotは意図しない情報や誤解を招く表現を避け、より目的に沿った回答を生成しやすくなります。

ハルシネーションを低減させるためのCopilot設定

Copilotの応答精度は、設定によってある程度調整可能です。

特に、Copilot for Microsoft 365を利用している場合、管理者は設定で応答の精度を管理できます。

個人利用のCopilot Proでも、応答スタイルを変更することで、より事実に基づいた回答を得やすくなる場合があります。

Copilot for Microsoft 365での設定(管理者向け)

Microsoft 365管理センターでは、Copilotの応答に関する設定を調整できます。

ただし、応答精度に直接影響する設定項目は限定的です。主に、Copilotへのアクセス権限や、利用できるデータソースの管理が中心となります。

一般ユーザーは、Copilotの応答を評価する機能を通じて、精度の向上に貢献できます。

応答の評価とフィードバック

Copilotの回答画面には、 thumbs up / thumbs down の評価ボタンがあります。

1. 回答の評価を行う
   Copilotの回答が正確か不正確かを評価ボタンで選択します。
2. フィードバックを提供する
   「Thumbs down」を選択した場合は、具体的な理由や修正案をコメントとして入力します。

このフィードバックは、MicrosoftがCopilotのモデル改善に利用します。継続的なフィードバックが、将来的なハルシネーション低減に繋がります。

Copilot Proでの応答スタイルの調整

Copilot Proでは、Web版Copilotや一部のMicrosoft 365アプリで、応答スタイルを変更できる場合があります。

「バランス型」「創造的」「正確」などのオプションがある場合、より事実に基づいた回答を求める場合は「正確」を選択すると良いでしょう。

応答スタイルの変更方法(Web版Copilotの場合)

1. Copilotのチャット画面を開く
   CopilotのWebインターフェースにアクセスします。
2. 応答スタイルの選択肢を探す
   プロンプト入力欄の近くや、設定メニューに「応答スタイル」などの項目がないか確認します。
3. 「正確」を選択する
   利用可能なスタイルの中から、事実性を重視した「正確」などのオプションを選択します。

ただし、この機能は利用環境やバージョンによって異なる場合があります。

Copilotのハルシネーションに関するよくある誤解

Copilotは常に正しい情報を生成する

CopilotはAIであり、学習データに基づいて回答を生成します。

そのため、学習データに誤りがあったり、最新情報が反映されていなかったりすると、ハルシネーションが発生します。

Copilotの回答は、あくまで参考情報として捉え、重要な判断には必ずご自身で事実確認を行う必要があります。

ハルシネーションは完全に防げる

現在のAI技術では、ハルシネーションを完全にゼロにすることは困難です。

プロンプトの工夫や設定の調整でリスクを低減することは可能ですが、100%の精度を保証するものではありません。

常に批判的な視点を持ち、回答の検証を怠らないことが重要です。

Webアプリとデスクトップアプリで挙動が異なる

Copilotの機能や挙動は、利用するプラットフォーム(Webアプリ、デスクトップアプリ、モバイルアプリ)によって若干異なる場合があります。

特に、参照できるデータソースや、応答生成のアルゴリズムに違いが生じることがあります。

Web版Copilotは、最新の情報にアクセスしやすい傾向がありますが、デスクトップアプリ連携機能が充実している場合もあります。

利用する場面に応じて、最適なプラットフォームを選択し、その特性を理解しておくことが推奨されます。

Copilot ProとMicrosoft 365 Copilotの比較

Copilot ProとMicrosoft 365 Copilotは、提供される機能や利用対象が異なります。

どちらもCopilotの強力なAI機能を活用できますが、ビジネスシーンでの利用においては、Microsoft 365 Copilotの方が連携機能が豊富です。

項目	Copilot Pro	Microsoft 365 Copilot
利用対象	個人ユーザー、一般法人(契約による)	Microsoft 365 E3/E5/Business Premiumなどの法人契約ユーザー
連携機能	Word, Excel, PowerPoint, Outlook, Teams	Word, Excel, PowerPoint, Outlook, Teams(より高度な連携)
データ参照範囲	Web上の公開情報、ユーザーがアップロードしたファイル	Web上の公開情報、Microsoft 365内のデータ(SharePoint, OneDrive, Teamsチャット履歴など)
応答スタイル	変更可能な場合あり	組織の設定に依存、応答精度の調整は限定的
料金体系	月額サブスクリプション	Microsoft 365ライセンスへのアドオン(ユーザー単位)

Microsoft 365 Copilotは、組織内のデータにアクセスできるため、よりパーソナライズされ、文脈に沿った回答を生成できます。

一方、Copilot Proは、個人での利用や、組織のデータに依存しない一般的なタスクに適しています。

まとめ

Copilotの回答の信頼性を高めるためには、事実確認を促すプロンプトの活用と、ハルシネーション低減のための設定が重要です。

回答の根拠を尋ねたり、複数の情報源を比較させることで、Copilotの精度は向上します。

Copilot ProやMicrosoft 365 Copilotの応答スタイル調整も、ハルシネーションのリスクを軽減する一助となります。

今後は、Copilotのフィードバック機能を通じて、継続的に精度の向上に貢献していくことが推奨されます。