GitHubは10月1日（現地時間）、GitHub Copilot CLIおよびmacOS／Windows向けGitHub Copilotアプリで、デスクトップアプリケーションを操作する「computer use」のパブリックプレビュー提供を開始した。
Copilotは、アプリの内容や視覚的コンテキストの読み取り、コントロールのクリック、テキストの入力・編集、キー入力、スクロール、ドラッグ、アプリ間のワークフロー操作をユーザーに代わって実行する。API、CLI、MCP連携を持たないレガシーソフトウェアやGUIのみのソフトウェアのワークフローも自動化できる。
Copilotはアプリを操作する前に承認を求め、常に許可したアプリは確認・リセットできる。macOSではアクセシビリティと画面収録の権限設定を案内する。組織の管理設定で機能を無効化することも可能だ。
Copilot CLIでは「/computer on」で有効化、「/computer show」で状態確認、「/computer off」で無効化できる。Copilotアプリでは設定の「Computer Use」から有効化する。
- 関連リンク
この記事は参考になりましたか？
- この記事の著者
-
CodeZine編集部（コードジンヘンシュウブ）
CodeZineは、株式会社翔泳社が運営する開発者のための情報メディアです。日々の開発に取り組むエンジニアやテクノロジーを学びたい方に向けて、プログラミングやAI活用、開発ツール、エンジニアの学びとキャリアに関する記事をお届けしています。
※プロフィールは、執筆時点、または直近の記事の寄稿時点での内容です
この記事は参考になりましたか？
この記事をシェア
