01 / UNDERSTAND
仕組みと使いどころ
Lite.OSWorldは、コンピューター操作エージェント向けベンチマークOSWorldをCUA-Lite上で扱う環境です。約6GBのUbuntu仮想マシンの代わりにDockerコンテナを使い、入れ子の仮想化を必要とせず、CIやコンテナ内でも起動・並列実行できます。OSWorld由来の評価課題369件と同じ評価器に加え、強化学習用に生成された学習課題2,429件を収録します。評価器はファイルやアプリの状態などを確認し、終了時に0.0から1.0の報酬を返します。ただし、評価課題には認証、外部サイトの変化、実行不能などを理由に除外指定された41件があり、標準的な採点対象は328件です。
02 / IN PRACTICE
Lite.OSWorldの活用例
たとえば、こんな場面で
デスクトップ操作エージェントに文書編集や表計算などの課題を実行させ、操作後のシステム状態を評価する用途が考えられます。また、生成された学習課題を使い、同じ環境インターフェース上で強化学習用の試行を収集できます。
03 / GOOD TO KNOW
使うときのポイント
利用前にDocker環境、専用イメージ、依存関係、固定された課題データと資産を準備します。評価時は除外理由のある課題をフィルターし、報酬がエピソード終了時に計算される点を確認してください。
参考資料
cua-lite/lite/gym/envs/lite/osworld/README.md at main · cua-lite/cua-lite (新しいタブで開きます)cua-lite/docs/envs.md at main · cua-lite/cua-lite (新しいタブで開きます)CUA-Lite: An Open Platform for Computer Use Agents (新しいタブで開きます)用語の説明や活用例に関連する参考資料です。
READ & LEARN
記事一覧を見る 用語を知ったら、活用を知る。
AI LABで、AIの動向や業務に取り入れるヒントを読む。
