マイクロソフトは現在、人工知能戦略を全面的に推進しており、Copilotの統合をWindows 11のコアコンポーネントとして位置づけ、ユーザーがPCとどのようにインタラクトするかを根本的に変えることを目的とした一連の生成AI機能をリリースしています。新機能には音声制御、画面内容の分析、および限定的なローカルオートメーションエージェントが含まれており、CopilotをユーザーとPCとの「主要なインターフェース」とすることを目指しています。

「Hey, Copilot」：音声制御が主流に

ユーザーは今や、「Hey, Copilot」と発言することで、Windows PC上のCopilotを起動できます。この機能はオプションで、有効化するとマイクアイコンと音声信号が表示されます。マイクロソフトによると、音声でCopilotと対話するユーザーはテキストで対話するユーザーの2倍多く、これは音声インタラクションがより高いユーザーの定着率を持っていることを示しています。会話は自動的または「さようなら」というコマンドで終了できます。

使い勝手を向上させるため、CopilotはWindowsタスクバーに追加され、音声とビジュアルツール用の新しいボタンが含まれます。ユーザーは音声コマンドでWindows設定にアクセスできます。また、マイクロソフトはテキストのみのオプションも提供する予定で、ユーザーが話し不要で対話したい場合に対応します。

QQ20251017-092228.png

Copilot Vision：リアルタイム画面分析と文脈に基づくサポート

「Copilot Vision」機能は、すべてのコピロット対応デバイスで全球的にリリースされました。この機能は、写真編集、ゲーム、Office作業中に画面の内容を< strong>分析し、文脈に応じたサポートを提供します。マイクロソフトは、Copilot VisionがWord、Excel、PowerPoint内の全体文書を処理・分析でき、強力な生産性支援を提供できると述べています。

「Copilot Actions」：制限付きの自律的なローカルエージェント

マイクロソフトは、「Copilot Actions」というテスト機能をリリースしました。この機能により、Copilotはローカルコンピュータ上で簡単なタスク（例：PDFの検索や写真の整理）を処理できます。この機能は最初に、Copilot Labsでプレビュー版としてInsider Programユーザー向けにリリースされます。ユーザーはいつでもCopilotの動作を観察し、必要に応じて介入できます。

マイクロソフトは、これらのエージェントベースの機能は現在、限られており、エラーが起こる可能性があると認めています。複雑なソフトウェアを信頼して制御することはまだできません。代理型AIシステムが安全リスクをもたらす可能性があるという研究結果に基づき、マイクロソフトは、ユーザーのテストが信頼性を高める鍵であると述べています。

中国のスタートアップ企業Manusと提携：システムレベルのローカルファイルアクセス

さらに、マイクロソフトは中国のスタートアップ企業Manusと統合を行いました。報道によると、ManusエージェントはAnthropicモデルを使用し、Windowsエクスプローラーに組み込まれ、ユーザーが右クリックするだけでローカルファイルからウェブサイトを作成できるようにしています。Manusは、Anthropicが設計した「モデルコンテキストプロトコル」を使用して、システム全体でローカルコンテンツへのアクセスを実現しています。

インターネットサービスとゲームアプリケーションの拡張

  • Copilot Connectorsは、OneDrive、Outlook、Gmail、Google Driveなどの関連サービスからデータを抽出する機能です。ユーザーは「私の歯科予約の詳細を見つけて」といったヒントを使って予約、連絡先、ドキュメントを検索し、結果を直接Word、Excel、PowerPointにインポートできます。

  • ゲーム分野では、「Gaming Copilot」が華碩のWindowsモバイル機器ROG Xbox Allyでリリースされました。ユーザーはボタンを押すだけで、『マインクラフト』などのゲーム内でナビゲートしたり、ゲームメカニズムを説明したりするお手伝いができます。

ほとんどの新機能は、すべてのコピロット対応のWindows 11デバイスで動作可能ですが、マイクロソフトはコピロット+パソコンを使用することを推奨しており、処理速度の向上やローカルAIタスクの実行を目的としています。特定の「Click to Do」Zoom統合機能は、コピロット+パソコンを使用し、Windows Insiderプログラムに参加することが明確に求められています。