【Copilot】Windows Copilotでスクリーンショットを分析させる手順と活用例

Windows Copilotは、画面上の情報を直接参照し、分析する能力を持っています。

この機能を使えば、スクリーンショットをCopilotに指示して、その内容を把握させることが可能です。

本記事では、Windows Copilotでスクリーンショットを分析させる具体的な手順と、その活用例を解説します。

Windows Copilotがスクリーンショットを理解する仕組み

Windows Copilotは、画面上の情報を直接読み取る「画面認識機能」を持っています。この機能により、Copilotは現在表示されているウィンドウや、ユーザーが提示した画像の内容を理解できます。スクリーンショットをCopilotに渡すと、画像データとして認識し、その中のテキスト、表、グラフなどの要素を抽出・分析します。これにより、画面に表示されている情報を元にした質問に回答したり、指示されたタスクを実行したりすることが可能になります。

スクリーンショットをCopilotに分析させる手順

1. Copilotを起動する
   タスクバーのCopilotアイコンをクリックするか、Windowsキー + C キーを押してCopilotを起動します。
2. スクリーンショットをCopilotに渡す
   以下のいずれかの方法でスクリーンショットをCopilotウィンドウに渡します。
   • スクリーンショット画像をCopilotウィンドウにドラッグ&ドロップします。
   • スクリーンショットをクリップボードにコピーし、Copilotウィンドウ内でCtrl + V キーを押して貼り付けます。
3. 分析を依頼するプロンプトを入力する
   Copilotウィンドウの下部にあるテキスト入力欄に、スクリーンショットの内容に関する指示を入力します。
   例:「この画面に表示されている製品名と価格をリストアップしてください。」
   例:「このグラフから読み取れる傾向を教えてください。」
   例:「このエラーメッセージの意味を説明してください。」
4. Copilotの回答を確認する
   プロンプトを入力後、Enterキーを押すとCopilotが分析結果を返します。

スクリーンショット分析の活用例

Webページの情報を要約する

Webページをスクリーンショットし、Copilotに「この記事の要点を3つにまとめて」と指示することで、長文記事の概要を素早く把握できます。情報収集の時間を短縮するのに役立ちます。

複雑な表やグラフからデータを抽出する

ExcelやPower BIなどで作成された表やグラフのスクリーンショットをCopilotに渡し、「この表の平均値を計算して」「このグラフから最も高い数値を教えて」といった指示で、データ分析を効率化できます。

エラーメッセージや設定画面の理解を助ける

発生したエラーメッセージや、複雑な設定画面のスクリーンショットをCopilotに提示し、「このエラーは何を意味しますか?」「この設定項目は何を設定するものですか?」と質問することで、問題解決や設定内容の理解が深まります。

マニュアルや手順書の要約

ソフトウェアのマニュアルや操作手順をスクリーンショットでCopilotに読み込ませ、「この手順の最初の3ステップを教えて」のように指示することで、必要な情報を素早く引き出せます。

Copilotでスクリーンショットを分析する際の注意点

機密情報や個人情報を含む場合の注意

スクリーンショットに機密情報や個人情報が含まれている場合、Copilotに渡す前にマスキングや削除が必要です。Copilotが分析した情報はMicrosoftのサービスを通じて処理されるため、情報漏洩のリスクがないか確認してください。

画像認識の精度限界

画像が不鮮明であったり、文字が小さすぎる場合、Copilotが正確に内容を認識できないことがあります。その場合は、より鮮明なスクリーンショットを撮り直すか、テキストを手入力で補う必要があります。

Copilotの回答は必ず確認する

Copilotは高度なAIですが、時として誤った情報や不完全な回答を生成する可能性があります。特に重要な判断を下す前には、Copilotの回答を必ず自分で確認し、事実に基づいているか検証してください。

Web CopilotとデスクトップCopilotのスクリーンショット分析比較

どちらのCopilotもスクリーンショットの分析が可能ですが、デスクトップCopilotの方がWindows OSとの連携が深いため、より広範な画面情報を扱える可能性があります。Web CopilotはEdgeブラウザ内での操作に特化しています。

まとめ

Windows Copilotにスクリーンショットを分析させることで、画面上の情報を効率的に理解し、活用できます。Copilotを起動し、スクリーンショットを渡して具体的な指示を与えるだけで、Webページの要約やデータ抽出などが可能です。機密情報の取り扱いに注意し、回答の正確性を確認しながら、日常業務での情報収集や問題解決に活用してください。次のステップとして、CopilotにWebページURLを直接渡して内容を要約させる機能も試してみると良いでしょう。