マニピュレーションと家庭内タスク
多様な実環境で、人による実演とロボットのインタラクションを収集します。
カバレッジプログラム
モデルに足りないデータを、カバレッジセルごとに収集します。
カバレッジプログラムは、ブリーフをカバレッジセルと収集構成に落とし込みます。成功に加えて失敗とリカバリーも記録し、すべての納品にカバレッジレポートが付きます。
すべてのカバレッジプログラムは、Avala の 175 ワークフローのカタログからセルを選びます。
カバレッジプログラム
実行準備完了- RGB動画
- 深度
- IMU
- ロボット状態
- 01
ブリーフ
承認済み - 02
収集構成
同期済み - 03
カバレッジレポート
QC合格
ギャップレポート
フリートで起きた失敗が次のブリーフを形作ります。
第一人称視点データ収集
ロボット遠隔操作
カスタムセンサーリグ
フィールド運用
カバレッジプログラムの進め方
ブリーフからレポートまで、5 つの要素。
各要素は収集開始前に決めるか、終了後に確認します。そのため、どの納品も埋めるはずだったギャップまでたどれます。
- 01
ブリーフ
収集ブリーフがギャップを明示します。タスク、環境、物体、シーケンス数、受け入れ基準です。収集を始める前に、お客様のチームが承認します。
- 02
カバレッジセル
ブリーフはカタログからセルを選びます。各セルは、ある環境でのタスクと目標数の組み合わせで、進捗はセルごとに測ります。
- 03
失敗とリカバリーのレーン
ミス、リカバリー、介入にはラベルを付け、独立したレーンとして納品します。モデルが立て直す方法を示すデータです。
- 04
収集構成
各キャンペーンで収集モード、リグ、センサー、キャリブレーションを固定し、すべてのシーケンスに記録します。
- 05
カバレッジレポート
すべての納品に、収集した内容をセルごとにブリーフと照らし合わせたレポートが付きます。
納品ごとのカバレッジレポート
どの納品も、何をカバーしているかを示します。
カバレッジレポートは、各納品をそのブリーフと照らし合わせます。どのセルが完了し、どこでデータが薄く、どこに偏っているかを示します。
- カバレッジセルごとの時間とシーケンス数をブリーフと比較
- 家庭ごと、収集者ごとの受け入れ済み時間の比率
- 納品内および納品間の重複チェック結果
- 各シーケンスの受け入れ結果と根拠となる同意記録
データセットリリースエクスポート可能
- データセット
- manipulation-kitchen
- リリース
- v12
- モダリティ
- RGB・深度・IMU・ロボット状態
- 品質ゲート
- QC合格
収集プログラム
モデルが学ぶべき動作に合わせて収集する。
人による実演、ロボットとのインタラクション、モバイル自律システム、産業作業に特化したプログラムを運用します。
倉庫自動化
ピックアンドプレース、仕分け、パレタイジング、在庫管理ワークフローを網羅するデータを構築します。
モバイル自律システム
ナビゲーション、天候、地形、人とのインタラクションにまたがるエッジケースを収集します。
産業用ロボティクス
学習チームに必要なコンテキストとともに、工具使用、組立、検査、接触を伴うタスクを記録します。
一つのギャップから始める
最初のカバレッジプログラムを設計しましょう。
ロールアウトやタスクリストをお持ちください。カバレッジセルに対応づけ、最初のブリーフを一緒に作成します。