LLMがGUI操作を学習・実行。面倒なPC作業を自動化し、手作業を減らしてくれます。
#GUI自動化#LLM#PC操作
※この説明はAIが公式READMEから自動生成したものです。内容は必ず公式ページでもご確認ください。
ミロンドが自分で確かめたこと
- 2026年8月22日お試しページを実際に開いて、動いていることを確認しました。
- 2026年8月25日ミロンドが毎日数えている記録では、この17日間で お気に入りが1件増えました（今も使われ続けています）。
ミロンドは掲載しているすべての行き先を定期的に開いて、今も使えるかを確かめています。 利用ルールは名前だけで判断せず、原文を読んで確認しています。
「自動化」29本の中での位置
- 黒い画面（ターミナル）を使わずに済むこの分野で9本
- APIキーの用意がいらないこの分野で13本
- スマホだけで使えるこの分野で6本
- 作ったものを仕事に使ってよいと確認できているこの分野で15本
- 入れた内容は公開元に送られますそうでないものが2本 →
上の条件をすべて満たすものは、29本中1本です。
この数字は、ミロンドが掲載している道具を1本ずつ同じ基準で調べた結果から数えています。
これは何？ブラウザで使えるサービス
できること
Webサイトの情報を集めたり、Excelにデータを入力するようなPC操作をAIに学習させ、実行させることが可能です。GUI操作を自動化したい業務で活用できます。
誰に効く？
PC作業の自動化をしたい
用意するもの
特になし（Webブラウザがあれば利用可能）
時間のめやす
3分
使えるようになるまでの手順をひらく
- 下の「GitHubで見る」ボタンで公式ページを開く
- ページ内の公式サイトリンク（Website / Cloud など）へ進む
- アカウント登録（メールアドレスなど）をする
- そのままブラウザ上で使えます
迷ったらこれ：いつも使っているAIチャット（ChatGPT・Claude・Geminiなど）にこのツールのGitHubリンクを貼って 「これを使いたい。私のPCでの始め方を一歩ずつ教えて」と頼むのが一番の近道です。
注意点
AIの学習には時間がかかる場合があります。正確性は保証されません。 ここに書いたは、このお試しページ自体のものです。作ったものを仕事に使えるかどうかは、中で使われているAIモデルの条件で決まります。使われているモデルは商用利用も認められています（mit / mit / mit）。ただし著作権表示など条件が付く場合があるので、配布物に含めるなら本文を確認してください。
ひとことメモ
公開元のサーバー上で動くお試しページです。アップロードした画像や文章はその環境に送られるので、社外に出せないものは入れないでください。混み合っていると順番待ちになることがあります。
やりたいことから探す
OmniParser-v2についてよくある質問
- OmniParser-v2を使うのに、インストールや専門知識は必要ですか？
- ブラウザで開くだけで使えます。インストールは不要です。
- OmniParser-v2はスマホでも使えますか？
- スマホでも使えます。
- OmniParser-v2は仕事（商用）で使えますか？
- ライセンスは MIT で、商用利用も認められています。ただし著作権表示を残すなどの条件が付くので、配布物に含める場合はライセンス本文を確認してください。
似ている道具との違い
同じ用途の道具と、使う前に効いてくる条件を並べました。
| 道具 | 黒い画面 | APIキー | 外部送信 | スマホ | 仕事に使える | 最終更新 |
|---|---|---|---|---|---|---|
| OmniParser-v2（このページ） | いらない | いらない | あり | 使える | 可 | 2026年5月 |
| screenpipe | いらない | 要る | なし | むずかしい | 条件あり | 2026年8月 |
| typebot.io | いらない | いらない | あり | むずかしい | 条件あり | 2026年8月 |
| Pinokio | いらない | いらない | あり | むずかしい | 可 | 2026年7月 |
「外部送信あり」は、入力した内容がどこかのサーバーに送られることを指します。 社外に出せない資料を扱うときは「なし」を選んでください。
自動化のほかのツール
OmniParser-v2が合わなかったときの、同じ用途の候補です。
screenpipe
パソコンの画面と音をずっと記録して、あとから探せるようにする道具
はじめやすい・黒い画面（ターミナル）いらない
typebot.io
会話形式の入力フォームを、画面上で組み立てる
はじめやすい・黒い画面（ターミナル）いらない
Pinokio
AIアプリをワンクリックで入れられるストア
準備がいる・黒い画面（ターミナル）いらない
n8n-ai-automations
自動化ツールn8n用の、AIを組み込んだ設定例の集まり
準備がいる・黒い画面（ターミナル）いらない
flow-like
手元の端末で動かせる、目に見える形の自動化ツール
準備がいる・黒い画面（ターミナル）いらない
deepsite
サイトを即生成
準備がいる・黒い画面（ターミナル）いらない