AI LAB / KEYWORD DICTIONARY

ロボット学習データ

UMI Video(UMI動画)とは?

UMIによる人の操作実演の収集で記録され、ロボットの操作方策を学習するデータセットの生成に使われる動画。

仕組みと使いどころ

「UMI動画」は、Universal Manipulation Interface(UMI)を使った実演収集で記録される動画を指す一般的な説明表現であり、資料で定義された正式名称ではない。UMIは、手持ち型グリッパーを用いて実環境で人の操作実演を収集し、その実演からロボットに展開できる操作方策を学習する枠組みである。公開リポジトリでは、実演セッションの記録をSLAMパイプラインで処理し、学習用データセットを生成する手順が示されている。学習された方策には、推論時の遅延を合わせる設計と相対軌跡による行動表現が用いられ、複数のロボット基盤への展開が想定されている。したがって、この語は動画単独の規格や製品機能ではなく、UMIの実演データ収集・処理工程に含まれる動画という文脈で理解する必要がある。

UMI Videoの活用例

たとえば、こんな場面で

手持ち型グリッパーでカップを操作する実演を動画として記録し、処理後のデータをロボット操作方策の訓練に利用する。

使うときのポイント

UMIの収集手順に従い、SLAMの成功率、利用可能な実演数、収集した環境や物体の多様性を確認する。

参考資料

Universal Manipulation Interface: In-The-Wild Robot Teaching Without In-The-Wild Robots (新しいタブで開きます)GitHub - real-stanford/universal_manipulation_interface: Universal Manipulation Interface: In-The-Wild Robot Teaching Without In-The-Wild Robots (新しいタブで開きます)

用語の説明や活用例に関連する参考資料です。

READ & LEARN

用語を知ったら、活用を知る。

AI LABで、AIの動向や業務に取り入れるヒントを読む。

記事一覧を見る