コンピューター操作（Computer use）

コンピューター操作（Computer use）は、AI モデルが画面の画像（スクリーンショット）を見て、クリックやキー入力などの操作を指示し、人と同じ画面を通じてソフトウェアを使う機能です。OpenAI、Anthropic、Google が、同じ呼び名で提供しています。

2026年10月時点で、しくみは3社で共通しています。アプリケーションが画面の画像をモデルに渡し、モデルがクリック、入力、スクロールなどの操作を返します。アプリケーションがその操作を実行し、新しい画面の画像を渡します。これを、作業が終わるまで繰り返します。

3社の文書は、画面の中の文章に紛れた指示にモデルが従ってしまうおそれに触れています。Anthropic と Google は、これをプロンプトインジェクションと呼んでいます。対策として、隔離した環境（仮想マシンやコンテナなど）で動かすこと、購入や送信など影響の大きい操作は人が確認することなどを勧めています。

読み

こんぴゅーたーそうさ

英語

Computer use

業界

製造業、教育機関

業務

AI 活用

出典の確認日

2026年10月7日

「気になる」に追加用語集の一覧へ

関係する用語

• AI エージェント：AI エージェントは、与えられた目標を達成するために、周りの状況を捉え、自律的に行動する AI システムです。LLM を使うもの…
• ツール利用（関数呼び出し）：ツール利用（関数呼び出し）は、LLM が、外部の関数や API を使うための呼び出しの内容を、決まった形のデータで出力する機能で…
• プロンプトインジェクション：プロンプトインジェクションは、生成 AI に細工をした入力を与えて、意図しない出力や動作をさせる攻撃です。OWASP は、LLM…
• ヒューマン・イン・ザ・ループ（人による確認）：ヒューマン・イン・ザ・ループ（Human-in-the-loop。HITL）は、AI に判断や操作を任せきりにせず、途中に人の確…

このサイトの関連するページ

• AI エージェントは、何とつながりますか。ツールの利用、MCP、A2A

出典

• Anthropic: Computer use tool（別のタブで開きます）
• OpenAI: Computer use（API ドキュメント）（別のタブで開きます）
• Google AI for Developers: Computer Use（Gemini API）（別のタブで開きます）