この記事の内容を、御社の業務で仕組みにする相談（30分・無料）→
この記事の著者
後藤 佑輔
IGS代表大和証券、
おはようございます。代表の後藤です。
「AIにパソコンを操作させる」と聞いて、どう感じますか？
2026年3月、Claude Codeに「コンピュータ使用（computer use）」という機能が追加されました。
AIがパソコンの画面を見て、マウスを動かして、キーボードを打つ。人間がパソコンの前でやっていることを、AIが代わりにやってくれる。
正直、初めて知ったときは「ついにここまで来たか」と思いました。
2026年3月に追加された新機能
まず、この機能が何なのかを整理します。
Claude Codeの「コンピュータ使用」は、AIが画面のスクリーンショットを撮って中身を理解し、マウスクリックやキーボード入力で操作するという仕組みです。
今までのClaude Codeは、ターミナル（小難しそうな黒い画面）でコマンドを打ったり、ファイルを編集したりするのが中心でした。つまり、「テキストベースの操作」が得意だったわけです。
今回の新機能は、まったく別のアプローチです。
- 画面に表示されたボタンを見つけてクリックする
- フォームに文字を入力する
- メニューを開いて項目を選ぶ
- 画面の内容を見て、次に何をすべきか判断する
2026年3月23日にデスクトップアプリ版が発表され、その翌週に、macOSのClaude Codeの中で/mcpと打ち、一覧に出てくるcomputer-useを有効にすると使えるようになります（手順は「使い方と料金」で書きます）。
ただし、ブラウザの中の操作は、この機能では「見るだけ」です。ブラウザ用の機能は、次の表のとおりです。
具体的に何ができるのか
で、これが実際にどう使えるのか。具体例をいくつか紹介します。
先に、やりたいことごとに使う機能を整理します。
やりたいこと | 使う機能 |
|---|---|
Gmail・freee・Webフォームなど、ブラウザの中の操作 | Claude in Chrome（Chromeの拡張機能） |
Excelなど、パソコンに入れて使うソフトの操作 | コンピュータ使用 |
APIがあるサービス（freeeなど）とのつなぎ込み | MCP連携 |
ブラウザ操作（Claude in Chrome）
- Webフォームに情報を自動入力する
- 競合サイトを巡回して価格や商品情報を集める
- 管理画面にログインして設定を変更する
たとえば「この10件の顧客情報を問い合わせフォームに入力して」と指示すると、AIがブラウザを開いて、1件ずつフォームに入力してくれる。こういうことが可能になります。
使うには、Chromeウェブストアで拡張機能「Claude」を入れます。ターミナル版では「claude --chrome」で起動します。
会計ソフトの操作
freeeやマネーフォワードの画面操作も、Claude in Chromeを使えばできます。
うちの会社ではfreeeをMCP連携で使っていますが、MCP連携ってAPIに対応している機能しか使えないんです。ところが画面操作なら、APIがなくても、画面に表示されている操作ができます。
API対応していない会計ソフトでも、画面操作ベースで自動化できる。これは地味にすごいことだと思います。
Excel・スプレッドシート
定型レポートの作成も得意分野です。
- 毎月決まったフォーマットのExcelを開いて数字を入力する
- グラフを更新する
- 複数のシートからデータを集めて一覧表を作る
「先月の売上データをこのExcelテンプレートに入れて」みたいな指示ができるわけです。
そのほかにも
- メールの下書き：Claude in ChromeでGmailを開いて未返信メールの返信を下書き
- 社内システム：APIがない古い業務システムの操作を自動化
- テスト作業：「この画面でこのボタンを押したらこうなるか」を自動で確認
特にAPIがない古いシステムの操作を自動化できるのが、コンピュータ使用の真価だと思います。これまではAPI連携できないシステムは自動化のしようがなかった。画面操作なら、人間が使えるシステムはAIにも使わせられるわけです。
AIコンサルティング
この記事の仕組みを、
中小企業でどう活きるか
「すごいのはわかったけど、うちの会社で使えるの？」という声が聞こえてきそうです。わかります。
結論から言うと、中小企業ほど恩恵が大きいと思っています。
「毎月やってる手作業」がそのまま自動化できる
中小企業の運営では、手作業が多くなるかと思います。
- 毎月の売上データをコピペして報告書を作る
- 請求書の金額を会計ソフトに手入力する
- 取引先の情報を社内システムに転記する
- スプレッドシートのデータをまとめて月次レポートにする
これ、全部自動化できる可能性があります。
大企業ならシステム部門が専用の連携を作れる。でも中小企業にそんなリソースはない。結果として「人間が手でやる」になっている業務がたくさんあるはずです。
APIがなくても自動化できるのが革命的
これが一番大きなポイントかなと。
今まで業務を自動化しようと思ったら、基本的にはAPI（システム同士をつなぐ仕組み）が必要でした。でも、中小企業が使っているシステムの中には、APIが用意されていないものも多い。
コンピュータ使用なら、画面さえあれば操作できる。
たとえば、古い勤怠管理ソフトや、独自開発の在庫管理ソフトなど、パソコンに入れて使うソフトです。ブラウザで使うシステムは、Claude in Chromeの担当です。
これは中小企業のIT環境にとって、かなり大きな変化だと思います。
使い方と料金
コンピュータ使用を使うには、Claude Proの月20ドル（約3,200円）またはMaxの月100ドル〜のプランが必要です。
いちばん手軽なのは、Claude Desktopアプリ（MacとWindows）から使う方法です。
- Claude Desktopアプリを最新にして、開き直す（claude.com/download）
- 「Settings」→「This computer」→「System」を開く
- 「Computer use」の「Enable computer use」をオンにする
- Macの場合：設定ページに出る表示を押し、Macの設定で「Accessibility」と「Screen Recording」の2つを許可する（Windowsは不要）
- AIに「〇〇の画面を操作して」と頼む
ターミナルのClaude Codeから使う場合です。
使い方の流れはこんな感じです。
- macOSでClaude Codeを起動する（ターミナルでやり取りする、いつもの対話モード）
- 画面に
/mcpと打って、MCPサーバーの一覧を開く - 一覧にある
computer-useを選んでEnableを選ぶ（設定はプロジェクトごとに残るので、使いたいプロジェクトで1回だけでよい） - 最初に操作させるときにmacOSの許可を2つ求められるので、
Accessibility（クリックや入力の許可）とScreen Recording（画面を見る許可）の両方を付与してTry againを選ぶ - AIに「〇〇の画面を操作して」と頼む
Screen Recordingを許可したあとは、Claude Codeを一度終了して起動し直す必要が出ることもあります。
ただ、使える環境には条件があります。
- macOSのみ。WindowsとLinuxのClaude Codeでは出てこない
※Windowsで使うならClaude Desktopアプリのコンピュータ使用のほう - ProまたはMaxのプランが必要。TeamとEnterpriseでは使えない
- 対話セッション専用。
-pを付けた非対話モードでは使えない - macOS上の研究プレビュー（お試しでの提供）という位置づけ
ポイントは、AIが勝手に最後まで突っ走るわけではないということ。
そのセッションでAIがあるアプリを初めて使うとき、画面に「このアプリを操作していいか」の確認が出ます（ターミナル版ではターミナルに出ます）。Allow for this sessionを選ぶとそのセッションの間だけ許可され、動いている最中でもEsc（ターミナルならCtrl+C）でいつでも止められます。
注意点（できないこと・リスク）
ここまで良い話ばかりしてきましたが、正直に書くと、まだ万能ではないです。
完全自律はまだ難しい場面がある
複雑な判断が連続する操作は、まだ精度が安定しません。たとえば「状況に応じて操作を変える」みたいな柔軟な対応は苦手です。
決まった手順を繰り返す定型作業が得意で、臨機応変な対応は人間のサポートが必要だと思ったほうがいいです。
セキュリティ面の考慮
AIにパソコンを操作させるわけですから、セキュリティは気になりますよね。
- パスワードが表示される画面の操作は避ける
- 重要な操作（送金、契約など）は人間が最終確認する
- 操作ログを残しておく
このあたりは自分で気をつける必要があります。「AIが全部やってくれるから安心」とはならないので、ここは注意してください。
画面が複雑だと精度が下がる場合がある
AIは画面のスクリーンショットを見て操作するので、画面が複雑だったり、表示が細かすぎたりすると、正しい場所をクリックできないことがあります。
シンプルなUIのほうが精度が高い。ごちゃごちゃしたダッシュボードだと、ちょっと苦労する場面があるかもしれません。
よくある質問
Q. Claude Codeのコンピュータ使用（computer use）とは何ですか？
A. AIがパソコンの画面を見て、人間の代わりにマウスとキーボードを操作してくれる機能です。2026年3月に発表されました。
Q. コンピュータ使用の使い方は？
A. Claude Desktopアプリ（MacとWindows）では、「Settings」→「This computer」→「System」を開き、「Enable computer use」をオンにして、AIに「〇〇の画面を操作して」と頼みます。ターミナルのClaude Codeでは、macOSで「/mcp」と打ち、一覧にある「computer-use」を有効にします。Macでは初回に「Accessibility」と「Screen Recording」の2つの許可が要ります。
Q. コンピュータ使用はWindowsでも使えますか？
A. はい、Claude Desktopアプリなら、MacでもWindowsでも使えます。ターミナルのClaude Code版はMacだけです。
Q. 料金はいくらかかりますか？
A. Claude Proの月20ドル（約3,200円）かMaxの月100ドル〜のプランが必要です。TeamとEnterpriseでは使えません。
Q. 勝手に操作されて危なくないですか？
A. 勝手には動きません。アプリを初めて操作するときに確認が出て、Escキーでいつでも止められます。パスワードが出る画面や送金などの操作は、人が確認してください。
