← プロジェクト一覧に戻る
Cua
エージェントにコンピュータを与える4通りの手段。背面操作のドライバ、各OSのサンドボックス、評価環境、macOS仮想化
MIT
Cuaとは
コンピュータ操作はいつも同じ壁に当たります。エージェントにはマシンが必要で、それは自分が今使っているマシンであってはいけません。Cuaはその答えを4つ用意しています。導入前に知っておく価値があります。おそらく必要なのは4つ全部ではなく、そのうちの1つだからです。ドライバは、カーソルや前面表示を奪わないまま、エージェントに背面でネイティブアプリを操作させます。サンドボックスは、Linux、macOS、Windows、Androidを1つのAPIの背後に置き、手元のQEMU上でも開発元のクラウド上でも動かせます。Cua-BenchはOSWorldなどの評価を実行し、学習用に操作の記録を書き出します。LumeはAppleの仮想化基盤を使い、Apple Silicon上にmacOSの仮想マシンを作ります。
Cuaで何ができますか?
- 画面を渡さずにエージェントを働かせる — ドライバはネイティブアプリに背面からクリックとキー入力を送るため、カーソルも前面のウィンドウも手元に残ります。
- 4つのOSを1つのAPIで扱う — 下がLinuxでもmacOSでもWindowsでもAndroidでも、画面の取得、クリック、入力、シェルの実行は同じ呼び出しで行えます。
- 手元でもクラウドでも同じコードで動かす — 同じサンドボックスのコードが、手元のQEMU上の仮想マシンにも開発元のクラウドにも向けられます。試作から移行するときに書き直しが要りません。
- 既存のコーディングエージェントから使う — ドライバはコマンドとMCPサーバーの形で提供されるため、Claude CodeやCursor、Codexから独自の連携なしにデスクトップを操作できます。
- 公開されたベンチマークで採点する — OSWorld、ScreenSpot、Windows Arenaを自分のエージェントに対して並列に実行し、操作の記録を学習や検証のために書き出せます。
- Apple Silicon上にmacOSの仮想マシンを作る — LumeはAppleの仮想化基盤でmacOSとLinuxの仮想マシンを作成・管理します。macOSのサンドボックスが成立するのはこれがあるためです。
Cuaを選ぶ前に
- 1つの名前の下に4つのプロジェクトがあります。ドライバ、サンドボックス、評価環境、仮想化のどれが必要かを見極めるところから始まり、導入手順も資料も別々です。
- 背面での入力が十分に使えるのはmacOSとWindowsです。Linuxでは、X11か特定のWayland環境かによって、生の背面入力に制約があるとプロジェクトが明記しています。
スター推移
8月27日〜10月30日 · +9.4k
21.9k31.4k
よくある質問
Cuaは商用利用できますか?
CuaはMITライセンスで公開されています。OSI承認のオープンソースライセンスで、商用利用が認められています。
Cuaはどの形で使えますか?
Cuaはローカル実行・セルフホスト・マネージドクラウドの形で利用できます。