为什么选择 Avala 用于 Physical AI
传统标注平台为 2D 图像而建。Physical AI 团队需要处理 3D 场景、点云、多传感器录制和空间重建。Avala 原生处理所有这些。Gaussian Splat 查看器
将 3D Gaussian Splat 场景重建加载到 WebGPU 渲染的查看器中,支持场景层次、属性检查器和实时统计。直接在重建的 3D 环境中导航和标注。
点云可视化
GPU 加速点云渲染,支持 6 种可视化模式。使用中性、强度、彩虹、标签、全景和图像投影视图检查空间结构、密度和传感器覆盖。
多传感器 MCAP 回放
回放具身 AI 系统录制的传感器数据——摄像头、深度传感器、LiDAR、IMU——在同步多面板查看器中。
3D 标注工具
直接在点云和 Gaussian Splat 场景上标注 3D 长方体、分类标签和对象属性,无需切换工具。
数据类型
| 应用 | Avala 数据类型 | 典型标注 |
|---|---|---|
| 场景重建 | Splat (Gaussian Splat) | 3D 长方体、分类 |
| 空间映射 | 点云 | 3D 长方体、分割 |
| 具身智能体录制 | MCAP | 带跟踪的多传感器标注 |
| 导航训练 | 点云、MCAP | 3D 长方体、折线 |
| 物体识别 | 图像、点云 | 边界框、3D 长方体 |
| 数字孪生生成 | Splat、点云 | 分类、对象属性 |
使用场景
具身 AI 的场景理解
具身 AI 智能体需要理解其环境的 3D 结构:对象在哪里、哪些表面可通行以及空间如何组织。Avala 的点云和 Gaussian Splat 查看器让您可视化捕获的环境,然后标注训练场景理解模型的对象、区域和空间关系。 工作流: 使用 LiDAR 或深度摄像头捕获环境 -> 上传点云或 Gaussian Splat 重建 -> 在 3D 查看器中可视化和检查 -> 使用 3D 长方体和分类标签标注对象 -> 导出用于模型训练。3D 物体识别
使用标注的点云和场景重建训练模型在 3D 空间中识别对象。3D 长方体工具让标注员围绕对象放置精确的边界体,具有完整的位置、尺寸和朝向控制。分类属性为每个对象添加类别、材料和状态元数据。仿真到现实的迁移
构建仿真环境的团队需要标注的真实世界数据来验证和校准仿真。Avala 处理管道的真实世界部分:数字孪生数据标注
数字孪生应用需要将物理世界映射到虚拟表示的标注数据。Avala 的 Gaussian Splat 查看器在这里特别有用——它渲染逼真的 3D 场景重建,标注员可以像在真实环境中一样导航和标注。 查看器提供:- 场景层次面板 — 浏览和选择场景树中的对象
- 属性检查器 — 查看和编辑对象属性
- 实时统计 — 监控渲染性能
- 撤销/重做 — 标注修正的完整编辑历史
导航和路径规划
对于需要导航物理空间的机器人和自主系统,在点云数据中标注可通行区域、障碍物和航路点。使用折线定义路径和边界,使用 3D 长方体标记带有大小和方向的障碍物。使用的 Avala 功能
| 功能 | 用途 | 了解更多 |
|---|---|---|
| Gaussian Splat 查看器 | 可视化和标注 3D 场景重建 | 可视化概览 |
| 点云可视化 | 使用 6 种渲染模式检查空间数据 | 可视化概览 |
| MCAP / ROS 集成 | 从具身 AI 系统摄取多传感器录制 | MCAP 和 ROS |
| 3D 长方体标注 | 在 3D 空间中标注对象,精确控制位置和尺寸 | 3D 长方体工具 |
| 分类 | 场景级和对象级类别标签 | 分类工具 |
| Python SDK | 编程式数据集管理和导出 | Python SDK |
| TypeScript SDK | 与 Node.js 管道集成 | TypeScript SDK |
| 云存储 | 连接 S3 或 GCS 用于大型 3D 数据集 | 云存储 |
示例管道
开始使用
下一步
可视化概览
Avala 可视化能力的完整概览,包括 Gaussian Splat 和点云查看器。
3D 长方体工具
如何在 3D 中标注对象,精确控制位置、尺寸和朝向。
数据类型
Splat、点云、MCAP 和其他数据类型的支持格式和上传要求。
Python SDK
编程访问以管理数据集、创建项目和导出标注。