AvalaAvala

Покрытие

Узнайте, что покрывают ваши данные, до обучения на них.

Покрытие: стандарт, которому соответствует каждая кампания сбора данных Avala. Реальные сцены, много домов и сборщиков, проверки на дубликаты, отслеживаемое согласие и отчёт о покрытии с каждой поставкой. Сбор планируется по каталогу из 218 рабочих процессов в 28 семействах.

рабочих процессов
218
семейств
28

Техническая сводка

Коротко о каждой программе покрытия.

Что каждая программа собирает, записывает и поставляет, по одной строке на пункт.

Режимы сбора
Эгоцентрическая съёмка, телеуправление, индивидуальные комплексы и полевые операции
Основа плана
Рабочих процессов: 218, семейств: 28
Разнообразие
Шесть осей, каждая отслеживается отдельно
Концентрация
Ограничения на каждый дом и каждого сборщика, указанные в задании
Проверки на дубликаты
Точные совпадения файлов и отпечатки видео, внутри поставки и между поставками
В каждой последовательности
Кампания, псевдонимные ID дома и сборщика, установка, калибровка и согласие
Сбои и восстановления
Намеренные и естественные, с метками результата, типа сбоя и отрезка восстановления
С каждой поставкой
Отчёт о покрытии относительно задания
Экспорт
Релизы датасетов в формате LeRobot, из Python SDK или командной строки

Стандарт

Пять правил, которым соответствует каждая поставка.

  1. Сцены как есть

    Комнаты остаются такими, какими их оставили люди. Почта, телефон или забытая кружка остаётся в кадре. Никто не устраивает беспорядок специально и не освобождает стол, чтобы переставить одну миску.

  2. Ограничения концентрации

    Каждая программа ограничивает долю принятых часов от одного дома и от одного сборщика. Отчёт о покрытии показывает, где находится каждая поставка относительно обоих ограничений.

  3. Проверки на дубликаты

    Проверки точных совпадений файлов и отпечатки видео находят дубликаты и почти дубликаты последовательностей внутри поставки и в сравнении с прежними поставками.

  4. Происхождение

    Каждая последовательность содержит свою кампанию сбора данных, псевдонимные ID дома и сборщика, ID установки и калибровки, а также запись о согласии, на которой она основана.

  5. Отчёт о покрытии с каждой поставкой

    Каждая поставка сопровождается отчётом: часы и последовательности по каждому дому и сборщику, комнаты, бытовая техника, задачи и действия, а также любые пробелы относительно задания.

Разнообразие

Покрытие измеряется по шести отдельным осям.

Новые метки для той же комнаты и того же движения дают мало. Каждая ось отслеживается отдельно, поэтому пробел на одной не скрыть за объёмом на другой.

Места и планировки
Разные дома, размеры комнат, высота хранения, планировки и рабочие поверхности.
Техника и механизмы
Фактический тип техники, механизм доступа и органы управления, записанные для каждой последовательности.
Объекты и загрузки
Форма, размер, материал, вес и содержимое, от смешанной загрузки белья до полного пакета продуктов.
Естественные начальные состояния
Настоящие домашние дела после настоящего использования: разная посуда, жилая комната, корзина белья, ждущая стирки.
Люди и ракурсы
Разные сборщики, манера тянуться и рабочая высота учитываются отдельно от места.
Действия и результаты
Полные изменения состояния в естественном темпе: открыть, опустошить, рассортировать, поставить, закрыть и вернуть в исходное состояние.

Режимы сбора данных

Больше, чем демонстрация по сценарию.

Демонстрации по сценарию показывают модели, как выглядит успех. В любую программу покрытия можно добавить два режима сбора, которые показывают, что происходит вокруг успеха, с теми же метками результата для каждой последовательности, что и во всей поставке.

Сбой и восстановление
Операторы намеренно допускают реалистичные сбои: уроненный предмет, промах при захвате, перехват, отменённый шаг. Затем они восстанавливаются и доводят задачу до конца. Такие последовательности не отбрасываются, а размечаются: у каждой есть результат, тип сбоя, начало и конец восстановления, а также метки действий для левой и правой руки.
Свободные длительные сессии
Сборщики работают без сценария в длинных сессиях из нескольких задач в реальных домах и на рабочих местах, в том порядке, которого требует работа. После записи визуально-языковая модель делит каждую сессию на части и размечает её: задачи, подзадачи со временем начала и конца, целевой кадр, на котором видна завершённая задача, и цепочку рассуждений для каждого шага.

Каталог рабочих процессов

План на основе 218 рабочих процессов.

Открытый каталог содержит 218 рабочих процессов в 28 семействах: от стирки и мытья посуды до гаражей, магазинов и уборки гостиничных номеров. Авторские инструкции и доступная детализация задач помогают точно указать в задании, что собирать.

План и доказательства

Каталог задаёт план. Отчёт о покрытии даёт доказательства.

Задание на сбор выбирает из каталога ячейки под пробел вашей модели. Затем отчёт о покрытии показывает, что было поставлено по этому заданию, ячейка за ячейкой, и отмечает любой дом, сборщика, технику или действие, представленные чрезмерно.

Начало

Сопоставьте пробелы вашей модели с каталогом.

Принесите ваши прогоны или список задач. Мы сопоставим их с ячейками покрытия и вместе подготовим первое задание.