11月14日、How-To Geekが「This is Claude's most useful feature, and 99 percent of you are using it wrong, if at all」と題した記事を公開した。Claudeには、AIがPC画面を直接「見て・操作する」という、チャットとも音声アシスタントとも異なる異質な機能が存在する。その名は「Computer Use」。登場当初の評判の悪さゆえに多くのユーザーに素通りされてきたが、記事はこれを「Claudeで最も実用的な機能」と断言し、具体的な活用法3選とともに再評価を促している。
「Computer Use」とは何か
Computer Useとは、ClaudeがユーザーのPC画面を直接見ながらマウスやキーボードを操作し、実際のデスクトップアプリを動かせる機能だ。APIを持たないアプリや、設定が複雑なツールでも操作できる点が特徴である。
登場当初はバグが多く信頼性に欠けていたが、現在は精度・速度ともに実用水準に達しているとされる(元記事では特定のモデル名は明示されていない)。
MCPサーバー(Model Context Protocol:Claudeが外部アプリをプログラム的に制御する仕組み)と比べたときのComputer Useの強みは「プロセスが見える」点だ。MCPサーバーでは結果だけが返ってくるが、Computer UseではClaudeがアプリを操作する様子をリアルタイムで確認できる。
活用例1:Blenderを「実演家庭教師」として使う
記事の著者が最も力を入れて紹介しているのがこの使い方だ。
著者はずっとBlenderを学びたいと思っていたが、仕事後に何時間もチュートリアル動画を見る気力がなかった。市販のチュートリアルは汎用的すぎて、自分が作りたいものと結びつかないという問題もあった。
そこでComputer Useを使い、Blenderを起動したままClaudeに「キャラクターモデルを作ってほしい」と指示した。 Claudeが実際に操作する手順を見ながら、自分がやりたい作業に直結した形で学べる、というわけだ。
ポイントは「Claudeに全部やらせる」のではなく、実演を見てから自分でやるという使い方にある。月$20のClaudeプロプランで、個人の家庭教師を雇うのと同等の体験が得られると著者は述べている。
さらに、AnthropicのLearnスキルと組み合わせることで精度が上がるとも触れられている。
活用例2:アノテーション付きマニュアルの自動生成
Computer UseをつかってClaudeに特定のアプリを操作させながら、スクリーンショット付きの手順書を自動で生成させる使い方だ。
記事ではWindowsのメモ帳(Notepad)を例に、「このアプリの使い方ガイドをアノテーション付きで作れ」と指示するデモが紹介されている。ClaudeはNotepadを実際に操作し、各ステップのスクリーンショットを撮影・注釈付けして、番号付きの手順書を出力した。
新入社員向けのオンボーディング資料や、社内ツールのマニュアル作成など、テクニカルライティングの工数を大幅に削減できる使い方だ。従来であれば担当者が手動でスクリーンショットを撮り、テキストを書き、レイアウトを整えるという一連の作業が必要だったが、Computer Useはそのフローをほぼ丸ごと自動化する。元記事はこの用途を「地味だが即戦力になる」活用法として位置付けている。
活用例3:APIのないアプリの自動化
三つ目は、APIが存在しないアプリや、API連携の設定が面倒なアプリの操作を自動化する用途だ。
MCPサーバーを使うにはアプリ側がAPI対応している必要があるが、Computer Useはその制約がない。画面上に表示されているものであれば原則操作できる。著者はこれを「APIサポートが貧弱、またはまったくないアプリを操作する際の主要な手段」と位置付けている。
たとえば業務で使っている社内システムや旧来型のデスクトップアプリなど、外部連携を想定して設計されていないソフトウェアであっても、画面描画さえ行われていればClaudeが操作の起点になれる。MCPサーバーの整備が進むにつれてこの用途は一部代替されていく可能性もあるが、現時点では「繋げたいがAPIがない」という場面でのブリッジとして実用的な選択肢になる。
まとめ
Computer Useは登場時の評判が低かったこともあり、現在も多くのユーザーに素通りされている機能だ。しかし現時点では「ソフトウェアの学習補助」「ドキュメント自動生成」「API非対応アプリの自動化」という三つの実用的な用途で機能する。
Vibeコーディング(コードの細部を把握せずにAIと対話しながらソフトウェアを作るスタイル)やMCPサーバーが注目を集める中、Computer Useは地味だが確実に使える手段として再評価される段階に来ている。
詳細はThis is Claude's most useful feature, and 99 percent of you are using it wrong, if at allを参照していただきたい。