Couverture
Sachez ce que couvrent vos données avant de vous entraîner dessus.
La couverture, c’est le standard que respecte chaque campagne de capture Avala : scènes réelles, nombreux logements et collecteurs, contrôles de chevauchement, consentement tracé et un rapport de couverture avec chaque livraison. La collecte est planifiée à partir d’un catalogue de 218 workflows répartis en 28 familles.
- flux de travail
- 218
- familles
- 28
Fiche technique
Chaque programme de couverture, en un coup d’œil.
Ce que chaque programme capture, enregistre et livre, une ligne par élément.
- Modes de capture
- Capture égocentrique, téléopération, systèmes personnalisés et opérations sur le terrain
- Planifié à partir de
- 218 workflows répartis en 28 familles
- Diversité
- Six axes, chacun suivi séparément
- Limites de concentration
- Plafonds par logement et par collecteur, fixés dans le cahier des charges
- Contrôles de chevauchement
- Fichier identique et empreinte vidéo, au sein d’une livraison et entre livraisons
- Chaque séquence enregistre
- Campagne, IDs pseudonymes de logement et de collecteur, dispositif de capture, étalonnage et consentement
- Échecs et rattrapages
- Provoqués et naturels, étiquetés avec le résultat, le type d’échec et la durée du rattrapage
- Chaque livraison
- Un rapport de couverture au regard du cahier des charges
- Exportation
- Versions du jeu de données au format LeRobot, depuis le Python SDK ou la ligne de commande
Le standard
Cinq règles que respecte chaque livraison.
Des scènes telles quelles
Les pièces restent telles que leurs occupants les ont laissées. Le courrier, un téléphone ou une tasse oubliée restent visibles. Personne ne met en scène un désordre, et personne ne débarrasse une table pour déplacer un seul bol.
Limites de concentration
Chaque programme plafonne la part des heures acceptées provenant d’un même logement et d’un même collecteur. Le rapport de couverture indique où se situe chaque livraison par rapport aux deux plafonds.
Contrôles de chevauchement
Des contrôles de fichiers identiques et des empreintes vidéo détectent les séquences en double ou quasi identiques, au sein d’une livraison et par rapport aux livraisons précédentes.
Provenance des données
Chaque séquence porte sa campagne de capture, des IDs pseudonymes de logement et de collecteur, les IDs du dispositif de capture et d’étalonnage, et le registre de consentement correspondant.
Un rapport de couverture avec chaque livraison
Chaque livraison s’accompagne d’un rapport : heures et séquences par logement et collecteur, pièces, appareils électroménagers, tâches et actions, et tout écart par rapport au cahier des charges.
Diversité
La couverture se mesure sur six axes distincts.
Plus d’étiquettes pour la même pièce et le même mouvement apportent peu. Chaque axe est suivi séparément, afin qu’un manque sur l’un ne se cache pas derrière le volume d’un autre.
- Lieux et agencements
- Différents logements, tailles de pièce, hauteurs de rangement, plans et surfaces de travail.
- Appareils et mécanismes
- Le type réel d’appareil, le mécanisme d’accès et les commandes, enregistrés pour chaque séquence.
- Objets et charges
- Forme, taille, matériau, poids et contenu, d’une charge de linge mélangé à un sac de courses plein.
- États de départ naturels
- De vraies tâches après un vrai usage : vaisselle variée, une pièce habitée, un panier de linge en attente de lavage.
- Personnes et points de vue
- Différents collecteurs, gestes d’atteinte et hauteurs de travail, suivis indépendamment du lieu.
- Actions et résultats
- Des changements d’état complets à un rythme naturel : ouvrir, vider, trier, placer, fermer et remettre en place.
Modes de collecte
Au-delà de la démonstration scénarisée.
Les démonstrations scénarisées montrent à un modèle à quoi ressemble la réussite. Tout programme de couverture peut ajouter deux modes de collecte qui lui montrent ce qui se passe autour de la réussite, avec les mêmes étiquettes de résultat par séquence que le reste de la livraison.
- Échec et rattrapage
- Les opérateurs incluent volontairement des échecs réalistes : un objet qui tombe, une prise manquée, une reprise, une étape annulée. Ils rattrapent ensuite l’erreur et terminent la tâche. Ces séquences sont étiquetées, pas écartées : chacune porte son résultat, le type d’échec ainsi que le début et la fin du rattrapage, avec des étiquettes d’action pour la main gauche et la main droite.
- Sessions libres de longue durée
- Les collecteurs travaillent sans scénario pendant de longues sessions de plusieurs tâches, dans de vrais logements et lieux de travail, dans l’ordre que le travail impose. Après la capture, un modèle vision-langage segmente et étiquette chaque session : les tâches, leurs sous-tâches avec heure de début et de fin, l’image cible qui montre chaque tâche terminée et une chaîne de raisonnement pour chaque étape.
Catalogue de workflows
Planifiez à partir de 218 flux de travail.
Le catalogue public recense 218 flux de travail répartis en 28 familles, de la lessive et de la vaisselle jusqu’aux garages, aux commerces et à l’entretien des chambres d’hôtel. Les instructions rédigées et les décompositions disponibles permettent de préciser ce qu’il faut collecter dans un cahier des charges.
- Laundry and garment care11
- Beds, bedding and household linens6
- Wardrobes, shoes and accessories7
- Ingredient preparation6
- Meal preparation and serving6
- Baking and dough handling6
- Dishwashing and kitchen reset6
- Groceries, pantry and food storage7
- Tables, drinks and dining areas6
- Surfaces, furniture and windows10
- Floors, rugs and entryways7
- Bathrooms and washroom reset8
- Waste, recycling and reusable packaging7
- Home organization and everyday objects11
- Packing, unpacking and household moves8
- Plants, balconies and outdoor chores6
- Retail shelves and stock handling6
- Workplace, supplies and light fulfillment6
- Yard work and garden grounds13
- Garage work and workshop organization8
- Vehicle and bicycle care12
- Outdoor gear and seasonal setup8
- Arrangement and target-state placement17
- Appliance operation and controls7
- Household upkeep and small repairs10
- Hotel housekeeping and hospitality6
- Pet care4
- Interaction with a second person3
Plan et preuves
Le catalogue est le plan. Le rapport de couverture est la preuve.
Un cahier des charges de collecte sélectionne dans le catalogue les cellules correspondant à l’écart de votre modèle. Le rapport de couverture montre ensuite ce qui a été livré par rapport à ce cahier des charges, cellule par cellule, et signale tout logement, collecteur, appareil ou action surreprésenté.
Commencer
Associez les écarts de votre modèle au catalogue.
Apportez vos exécutions ou votre liste de tâches. Nous les associons à des cellules de couverture et rédigeons ensemble le premier cahier des charges.