#12 · ⚡24h jump · 🔥 (Rising) · 🔥4 days running+3,352★ · 9 months old

AI エージェント向けデスクトップ操作 CLI ツール

Rust Difficulty: Advanced Agent add-onsAutomation & data 🆓No extra cost

The three-line summary, the reason it surged and the spin-off ideas are generated automatically by AI. They can be wrong. Always check the original on GitHub before acting on them. Terms of Use

① What is it? (in three lines)

AI エージェントが Mac / Windows / Linux のアプリケーションを操作できるRust製ツール。スクリーンショットやピクセル判定ではなく、OS のアクセシビリティ API を通じてUI 構造を JSON で読み取り、エージェントが要素をクリック・入力して自動化を実現する。npm / Homebrew でインストール可能。

Read the original GitHub description

Computer use CLI for AI agents

② Total stars over time (last 7 days, one point per day)

Total stars
★25,960
Last 24h
+1,019★
24h growth
+4.1%
Last push
1d ago
10 Nov 12 Nov 15 Nov (detected)
+4,115★ over these 5 days(19,627 → 23,742)
Detector: ⚡ 24-hour jump
Gain in 24h: +1,019★
24h growth: +4.1%
Detected from the change against the same hour the previous day
The repository's history
20 Feb 2026 Repository created
15 Nov Surge detected
1d ago Last push
GitHub topics: #accessibility#accessibility-api#ai-agents#automation#cli#desktop-automation#macos#mcp#rust#computer-use

③ Why did it surge?

きっかけは未確認。7日間で約5000★増加の急速な伸び。

急増のきっかけは確認できていない。Hacker News の言及は見つかっておらず、Reddit や X の情報も取得していないため分からない。公開から約9か月経った時点で、2026-11-07 に 18840★ だったリポが 2026-11-14 に 23742★ へと7日間で約4900★増加し、検知日の24時間だけでも+1019★ を記録している。Vercel Labs が公式に手がけたリポで、複数OS 対応・アクセシビリティ API 活用・MCP サーバー対応など READMEに掲げられた機能が、開発者コミュニティの関心を集めた可能性は考えられるが、外部の言及が取れていないため確実ではない。

Evidence: 7日で+4902★(2026-11-07→2026-11-14)検知日24時間で+1019★Hacker News での言及は見つからず

④ Three spin-off ideas for a side-project developer (AI suggestions, tap to open)

👤 Who it suits
  • AI エージェント開発者・複数の SaaS を自動操作したい個人開発者
  • 業務自動化ツール・RPA 類似ツールをビジネス化したい副業エンジニア
  • クロス プラットフォーム対応の自動化が必要なスタートアップ創業者
Idea 1

受付業務を担当する中小企業の事務職員

The problem

顧客から届いたメールアドレスを毎日 CRM ・会計ソフト・メーリングリストの3つのアプリに手入力する作業に週3時間かかっている

The approach

agent-desktop の snapshot コマンドで各アプリの UI 要素を JSON 取得し、AI エージェントが複数アプリの input 欄に自動で情報を入力・保存する自動化スクリプトを作成。Windows / Mac どちらでも動作。

💰 How it could earn

顧客企業向けにカスタマイズ版を導入・運用する受託開発モデル。月額 3~5 万円で自動化スクリプトの保守と業務フローの改善支援を提供。

Idea 2

ネットショップ運営者(ECサイト小規模経営者)

The problem

商品在庫を複数の販売チャネル(自社サイト・Amazon・ラクマ)に同期させるため毎日それぞれの管理画面を開いて手作業で更新している

The approach

agent-desktop で各販売チャネルの在庫管理ページを定期的にスナップショット取得し、AI エージェントが統一データベースから最新在庫を読み込んで各サイトの UI 上で自動更新。accessible tree 読取により API がない古いサービスにも対応。

💰 How it could earn

在庫同期の自動化を月額 1,500~3,000 円のサブスク SaaS として提供。初期導入に 10,000 円の設定料を追加。

Idea 3

テスト自動化を手がけるQA / 品質保証の契約エンジニア

The problem

クライアントのレガシーデスクトップアプリケーション(API 未提供・画像認識テストが不安定)の UI テストを毎回手で実行しており、月 20 時間以上を消費している

The approach

agent-desktop で アプリの accessibility tree を利用した自動テストシナリオを構築。click / type アクション と snapshot による状態確認ループで、スクリーンショット比較に頼らない堅牢なテスト自動化を実装。Windows / macOS / Linux で再現可能。

💰 How it could earn

テスト自動化フレームワーク構築の受託開発(30~50 万円)と、その後の保守・拡張を時給制または月額料金で継続受注。

⑤ Related repositories

Same language: Rust · Shared topics: accessibilityaccessibility-apiai-agentsautomationcli
morluto/rea ★472,781

AIを使ってアプリの動作やプログラムを分析して仕組みを解き明かす

TypeScript climcpagent-skills ⚡ Explained here GitHub ↗
affaan-m/ECC ★308,369

Claude CodeなどのAI開発ツールの性能を向上させるエージェント最適化システム

JavaScript ai-agentsanthropicclaude ⚡ Explained here GitHub ↗

Claude CodeなどのAI開発ツールをより賢く効率的に動かすための最適化システムです

JavaScript ai-agentsanthropicclaude ⚡ Explained here GitHub ↗
n8n-io/n8n ★211,654

様々なアプリと連携してAI搭載の業務自動化フローを視覚的に作成できるプラットフォーム

TypeScript automationipaasn8n

ウェブサイトの情報をAIが扱いやすいデータに変換して収集できるサービス

TypeScript aicrawlermarkdown ⚡ Explained here GitHub ↗

🔗 Related hubs and surges from the same day

🔔 Get the next one

Get surging AI repositories summarised in Japanese, with spin-off ideas without opening the site (once each morning). No email address required.

What is RSS: New items arrive automatically wherever you already read (a reader such as Feedly, Slack, n8n). Copy the URL above and paste it in — no sign-up, no cost.

Detected at 15 Nov 2026, 08:59:41 · observation window 2026-11-14-0 (UTC) · summarised 7d ago