Перейти к основному содержанию

Программы покрытия

Собирайте данные, которых не хватает вашей модели, ячейка покрытия за ячейкой.

Программа покрытия превращает задание в ячейки покрытия и конфигурации сбора. Она записывает сбои и восстановления наряду с успехами, а каждая поставка сопровождается отчётом о покрытии.

Каждая программа покрытия берёт ячейки из каталога Avala из 218 рабочих процессов.

Выберите конфигурацию записи
Пример задания на сбор данных: пополнение полки
  1. Задача: переложить одну упаковку из ящика на верхнюю полку. Повторить на нижней полке как отдельный вариант задания.
  2. Съёмка: запросить вид упаковки и полки от первого лица. Для команд робота и положений суставов потребовались бы отдельные записи.
  3. Проверка: отметить завершение, когда рука отпускает упаковку на полке. Если рука закрывает этот момент, отправить эпизод на проверку.
Скачать бриф по охвату задач (Markdown)

Выберите конфигурацию записи

Вариант для обсужденияЧто проверить на типичной записи
Эгоцентрическая съёмка

Какая камера показывает руки и предметы? Сопоставьте временные метки кадров с разметкой задачи. Отметьте позы рук, оценённые по видео.

Поля действий рук
Телеуправление роботами

Какие каналы записывают команды и измеренные состояния суставов? Проверьте их синхронизацию и порядок суставов в экспортированной траектории.

Сопоставление состояний и действий в LeRobot
Индивидуальные сенсорные комплексы

Какой датчик измеряет контакт на захвате с измерительными приборами? Укажите оси, единицы и калибровку. Отдельно отметьте в экспортируемых данных контакты, определённые косвенно.

Пользовательские схемы MCAP
Полевые операции

Какие потоки мобильного робота или автомобиля нужно синхронизировать? Согласуйте системы координат, источники времени и допустимое расхождение. Проверьте согласование после переустановки датчика.

Поддерживаемые сообщения датчиков

Какие условия съёмки должен охватывать сбор данных?

Выполните одну и ту же задачу в разных местах, чтобы увидеть, что меняется. Укажите в задании на сбор данных нужные предметы, ракурс камеры и условия съёмки.

  • Дома

    Для съёмки складывания белья подберите одежду разных размеров и из разных тканей, меняйте поверхность для складывания.

  • В магазине

    Для выкладки товаров укажите высоту полки, вид упаковки и расположение товаров.

  • В цехе

    Для сборки укажите ориентацию деталей, инструмент и ракурс камеры, с которого будет виден каждый этап.

Как работает программа покрытия

Пять частей, от задания до отчёта.

Каждая часть задаётся до начала сбора или проверяется после его окончания, поэтому любую поставку можно проследить до пробела, который она должна была закрыть.

  1. Задание

    Задание на сбор описывает пробел: задачи, условия, объекты, число последовательностей и критерии приёмки. Ваша команда утверждает его до начала сбора.

  2. Ячейки покрытия

    Выберите значимые для задачи сочетания среды, механизма, материала, действия, типа сбоя и исполнителя. Задайте цель охвата для каждого сочетания.

  3. Поток сбоев и восстановлений

    Ошибки, восстановления и вмешательства размечаются и поставляются отдельным потоком. Они показывают вашей модели, как вернуться к задаче.

  4. Конфигурации сбора

    Каждая кампания фиксирует режим сбора, установку, датчики и калибровку и записывает их в каждую последовательность.

  5. Отчёт о покрытии

    Каждая поставка сопровождается отчётом, который сопоставляет собранное с заданием по каждой ячейке.

Отчёт о покрытии для каждой поставки

Каждая поставка показывает, что она покрывает.

Отчёт о покрытии сопоставляет каждую поставку с её заданием. Он показывает, какие ячейки заполнены, где данных мало и где они сосредоточены.

  • Часы и последовательности по каждой ячейке покрытия в сравнении с заданием
  • Доля принятых часов от каждого дома и каждого сборщика
  • Результаты проверки на дубликаты внутри поставок и между ними
  • Результаты приёмки и запись о согласии для каждой последовательности
Пример манифеста релиза датасета для программы манипуляции
Релиз датасетаГотово к экспорту
Датасет
manipulation-kitchen
Релиз
v12
Модальности
RGB · Глубина · IMU · Состояние робота
Контроль качества
QC пройден

Программы

Собирайте данные под поведение, которому должна научиться ваша модель.

Запускайте целевые программы для демонстраций человеком, взаимодействия с роботами, мобильной автономности и промышленных задач.

Манипуляция и бытовые задачи

Собирайте разнообразные демонстрации человеком и взаимодействия с роботами в естественных средах.

Автоматизация склада

Обеспечьте покрытие операций захвата и размещения, сортировки, паллетирования и инвентаризации.

Мобильная автономность

Собирайте редкие и сложные случаи навигации в разных погодных условиях, на разном рельефе и при взаимодействии с людьми.

Промышленная робототехника

Записывайте использование инструментов, сборку, инспекцию и задачи с интенсивным физическим контактом, сохраняя контекст, необходимый командам обучения.

Как оценить программу сбора и разметки данных?

Используйте этот список для согласования сравнительного теста с Avala или другим поставщиком. До начала работ согласуйте доказательства и критерии приемки. Отметка фиксирует только вашу проверку на этой странице, не сертифицирует поставщика и не отправляет заявку.

Пустые шаблоны планирования на английском языке. Определите требования и зафиксируйте доказательства до согласования программы. Файлы не содержат результатов или коммерческих условий.

Партнёры по данным

Уже снимаете? Поставляйте по нашим брифам.

Парки роботов, центры телеуправления, съёмочные студии и создатели установок получают оплату за принятый час, сохраняют права на оговорённых условиях и никогда не объединяются с данными другого клиента.

Стать партнёром по данным

Начните с одного пробела

Определите рамки вашей первой программы покрытия.

Приносите свои прогоны или список задач. Мы сопоставим их с ячейками покрытия и вместе с вами составим первое задание.

Забронировать рабочую сессию