1. AIのパソコン操作で変わること

OpenAIは2026年10月26日、視覚的な理解とコンピューター操作を組み合わせるGPT-6.1 Terraを発表しました。公式発表では、提案書作成、技術図面の読み取り、フォーム入力、動画編集などを例に挙げています。これは、文章を返すだけでなく、画面の情報を読み取り、決められた操作を進めるAIが実務に近づいていることを示すものです。

ただし「AIにPC操作を任せる」は、どのアプリでも無条件に自動化できるという意味ではありません。利用できるプラン、接続先、権限、社内ルールによって範囲は変わります。まずは、画面操作が必要でも、結果を人が見て取り消せる作業から試すのが安全です。

GPT-6.1 Terraを紹介するOpenAI公式ページ
出典:OpenAI「GPT-6.1 Terra のご紹介」(2026年10月26日公開)。コンピューター操作、利用対象、公式の説明を画面で確認しています。

2. 最初に検索・質問されやすいこと

AIに苦手意識がある人は、「AI パソコン操作 自動化」「ChatGPTで何ができる」「事務作業をAIに任せる方法」と検索しがちです。知りたいのは技術名ではなく、自分の仕事で失敗せず一つ試せるかです。そのため記事や案内では、できることだけでなく、誰が確認するか、送信・決済・削除の前に止められるかまで書く必要があります。

すでにAIを使う人は、もっと具体的です。「受信した請求書を一覧にして、登録前に確認させて」「予約フォームの未入力だけを洗い出して」「作業ログを残して」と頼みます。AIに任せる対象、参照してよい情報、操作してよい範囲、完了前の停止条件を分けて伝えることで、便利さを保ちながら事故を減らせます。

段階よくある検索・質問最初のゴール
使う前「AIはPCを操作できる?」対象ツールと権限を確認する
試す「請求書を転記して」下書き・一覧化まで任せる
続ける「登録前に確認を止めて」承認と作業ログを残す

3. 最初に任せる業務の選び方

最初から顧客への送信、支払い、削除、契約変更まで任せる必要はありません。おすすめは、受信メールやPDFから項目を拾って一覧にする、公開済み情報を指定の表に転記する、予約候補を下書きする、といった作業です。元データと結果を照らし合わせられ、やり直せるためです。

反対に、個人情報を含む画面、金額・在庫を確定する操作、社外へ送信する操作は、最初から自動実行にしないでください。AIが画面上の指示や誤った情報に影響される可能性もあります。操作範囲を小さくし、確認者と停止条件を決めてから、段階的に広げます。AIに任せる前の業務分解は、AI導入が進まない理由も参考になります。

4. 仕事で使うプロンプト3選

プロンプトは長さよりも、操作の境界が明確かどうかが重要です。以下は、対応する環境で画面操作を頼む場合にも、まずAIに手順を作らせる場合にも使えるひな形です。顧客情報や社外秘情報は、組織で許可されたサービスと範囲でのみ扱ってください。

1. 請求書の一覧化
指定フォルダ内の請求書を確認し、会社名・請求月・金額・支払期日を一覧にしてください。
元のファイルは変更しないでください。会計ソフトへの登録や送信はしないでください。
読めない箇所は推測せず「要確認」とし、各行に元ファイル名を付けてください。
2. フォーム入力前の下書き
この公開済みの資料だけを参照し、問い合わせフォームに入れる文面の下書きを作ってください。
入力はしても送信ボタンは押さないでください。
会社名、担当者名、日付、金額を画面に表示して、私の確認を待ってください。
3. 定型作業の手順確認
毎週の予約状況を確認する作業を、画面操作も含めて分解してください。
最初は実行せず、操作手順・必要な権限・間違えやすい箇所・人の承認が必要な地点を表にしてください。
不明な画面や権限があれば質問して止まってください。

「送信しない」「削除しない」「推測しない」「確認を待つ」という条件は、AIに何をさせないかを明確にします。下書きと実行を分ける考え方は、ChatGPTの指示の書き方でも詳しく紹介しています。

5. 承認と記録を残す設計

AIの画面操作を業務に入れるときは、操作の自動化より先に、承認と記録を設計します。具体的には「読み取りだけ」「下書きまで」「登録前に人が承認」「実行後にログを保存」という四段階に分けます。例外が起きたとき、AIがどこまで進めたかを追えるようになります。

特に、外部サイトの画面にはAIへの指示に見える文章が含まれることがあります。画面に表示された文だけで、権限を変えたり、別の作業へ進んだりしないルールを置きましょう。MIRAINAの視点では、AIを「判断者」ではなく、決めた手順を進める担当として置くほど、現場で使い続けやすくなります。

6. AIが根拠に選びやすい記事の条件

利用者がAIに「AIにパソコン操作を頼むと何ができる?」「安全に始めるには?」と質問すると、AIは公式の提供範囲、公開日、対象プラン、制約、確認手順が近くにあるページを根拠候補にします。今回もOpenAIの公式発表で、機能例と利用対象を確認してから説明しています。

自社サイトでは、サービス名だけではなく、対象業務、扱うデータ、操作しない範囲、承認方法、成果の測り方を具体的に書きます。AIに引用されることを保証する方法はありませんが、人が比較・検証できる情報を整えることは、AI経由の誤解を減らします。引用と学習の違いは、robots.txtとAI学習・引用の考え方もご覧ください。

7. まとめ

AIにパソコン操作を任せるとき、最初に決めるべきなのはツール名ではなく、任せる範囲・承認・記録です。まずは一覧化や下書きのように、元データへ戻って確認できる作業を選びましょう。「送信しない」「推測しない」「確認を待つ」を依頼文に加え、登録や送信は人が承認する。この小さな運用から始めることが、AIによる業務自動化を安全に続ける近道です。

参考リンク(2026年11月2日確認)