What sensor data can Avala label for robotics?
Avala publishes workflows for cameras, video, LiDAR, point clouds, depth maps, and sequences, and it imports MCAP, ROS 1, and ROS 2 recordings with synchronized camera, LiDAR, and telemetry streams.
Sensor data labeling
Avala labels camera, LiDAR, point-cloud, and sequence data for robotics, then keeps that work inside the fleet learning loop: ingest, review, a versioned dataset, and the training handoff.
Physical AI のための Fleet Learning Infrastructure
| Capability | Status | What Avala publishes |
|---|---|---|
| Cameras and video | Supported | Images and video are labeled with 2D boxes and masks, alongside the sequence they belong to. |
| LiDAR and point clouds | Supported | Point-cloud scenes take 3D cuboids and point-cloud labels, with camera and sequence context kept where the workflow supports them. |
| Depth maps | Supported | Depth maps are a published annotation type on the same workflow as video, point clouds, text, and audio. |
| MCAP, ROS 1, and ROS 2 | Supported | MCAPの再生は対応するメッセージスキーマに従います。SDKのROS bagインポーターはカメラデータと対応する数値・テキストトピックを変換し、点群などのスキップされたトピックを報告します。対応メッセージ型 |
| Timestamp and calibration context | Preserved | Timestamp and calibration context stay attached while teams inspect the same event across sensor streams. |
| 2D boxes, masks, polylines, and classifications | Supported | These are published ground-truth outputs for camera and sequence data. |
| 3D cuboids | Supported | Cuboids capture position, dimensions, and heading in point-cloud scenes. |
| Tracking across a sequence | Supported | Tracked objects are a published output, so an object keeps its identity across the sequence. |
| Trajectory context | Supported | Camera, point-cloud, and trajectory data stay aligned as work moves through labeling and review. |
| LeRobot datasets | Supported | LeRobotデータをMCAP記録としてインポートします。LeRobot v3の往復変換では数値列とテキスト列が保持されます。カメラフレームは再エンコードされるため、ピクセルは完全には一致しません。 Avalaの1シーケンスがLeRobotの1エピソードになります。状態とアクションには数値のソースフィールドが必要です。任意の結果ラベルは付随ファイルに書き込まれ、シーケンスのエクスポート時刻は設定されたフレームレートに従います。 LeRobot変換ガイド |
LeRobot v3への2つのエクスポート経路でフィールドの対応を確認できます。必要な入力は異なり、カメラデータだけではロボットのアクションは得られません。変換ツールを選ぶ前に各経路を開いて確認してください。
標準の出力にはカメラ、タイムスタンプ、タスクのテキストが含まれます。状態とアクションには数値の入力フィールドの設定が必要で、欠損値はエラーになります。結果は任意の別ファイルのメタデータです。シーケンスのタイムスタンプは設定したフレームレートを使用します。
observation.images.*
--state-key → observation.state
--action-key → action
frame_index / fps → timestamp
--include-outcomes → meta/avala_sequence_outcomes.jsonl関節状態から実測位置を、別のコマンドトピックからアクションを取得します。フレームは最初のカメラに従い、他のトピックは各フレーム時刻以前の値を使用します。出力レポートには時刻のずれ、除外した先頭フレーム、動画の符号化方式が記録されます。
foxglove.CompressedImage / CompressedVideo → observation.images.*
/joint_states → observation.state
/joint_commands → action
frame_index / fps → timestamp
meta/avala_export_report.jsonこのチェックリストで、Avalaや他の提供者とのベンチマークの範囲を決めてください。作業前に証拠と受入基準を合意します。チェックはこのページでの確認を記録するだけで、提供者の認証や依頼の送信は行いません。
英語の未記入の計画テンプレートです。プログラムに合意する前に要件を定義し、証拠を記録してください。結果や取引条件は含まれていません。
The pages below are the detailed sources for the capabilities in the table.
Avala publishes workflows for cameras, video, LiDAR, point clouds, depth maps, and sequences, and it imports MCAP, ROS 1, and ROS 2 recordings with synchronized camera, LiDAR, and telemetry streams.
Avalaのフリート学習ワークフローでは、ラベリングがデータ取り込み、可視化、品質レビュー、バージョン管理されたデータセットの提供につながります。
Labeling runs with human review and traceable quality-control states. The annotation pages describe the review path for camera, LiDAR, and telemetry.
Book a demo, or read the ground-truth outputs and the MCAP annotation page. LeRobot import and export are documented with the SDKs.