En début d'année, nous avons annoncée Notre dernière lunette de recherche, Aria Gen 2, marque la poursuite de la mission du Projet Aria qui consiste à permettre aux chercheurs du monde entier de faire progresser l'état de l'art en matière de perception des machines, d'IA contextuelle et de robotique grâce à l'accès à du matériel de recherche de pointe et à des ensembles de données, des modèles et des outils en open source. Aujourd'hui, nous sommes ravis d'en apprendre davantage sur la technologie de l'Aria Gen 2, notamment sur le facteur de forme, les capacités audio, l'autonomie de la batterie, les caméras et les capteurs mis à jour, le calcul sur l'appareil, etc.
Qu'est-ce qu'Aria Gen 2 ?
Aria Gen 2 est un dispositif portable qui combine les dernières avancées en matière de vision par ordinateur, d'apprentissage automatique et de technologie des capteurs. Le facteur de forme compact et la conception légère d'Aria Gen 2 en font un choix idéal pour les chercheurs qui ont besoin de collecter des données ou de construire des prototypes dans une variété de contextes. Les lunettes présentent un certain nombre d'améliorations par rapport aux lunettes Aria Gen 1son prédécesseur dans le domaine de la recherche, annoncé en 2020.
Aria Gen 2 : Avancées et caractéristiques
Le passage d'Aria Gen 1 à Gen 2 marque un saut significatif dans la technologie des wearables, offrant des fonctions et des capacités améliorées qui répondent à un plus large éventail d'applications et de besoins des utilisateurs. Ci-dessous, nous explorons les principales différences et améliorations introduites dans l'Aria Gen 2.
1. La résistance à l'usure
Aria Gen 2 se caractérise par une portabilité supérieure, un confort et une tenue améliorés, tout en s'adaptant à une plus large gamme de morphologies faciales et à une suite de capteurs riche pour la recherche. Les lunettes restent légères (elles pèsent entre 74 et 76 g, selon la taille) et sont désormais dotées de branches repliables qui facilitent le rangement et le transport pour un usage quotidien. Pour garantir à chaque porteur un ajustement physique et fonctionnel optimal, nous avons introduit huit variantes de taille de l'appareil, en tenant compte d'un certain nombre de facteurs humains, notamment la largeur de la tête et la variation de l'arête du nez.
Huit variantes de taille de nos appareils Aria Gen 2.
2. Améliorations de la caméra de vision par ordinateur (CV)
Gamme dynamique élevée (HDR) : Le capteur de la caméra à obturateur global de l'Aria Gen 2 offre une plage dynamique élevée de 120 dB, contre 70 dB pour la Gen 1, ce qui permet d'effectuer des tâches de vision par ordinateur de qualité supérieure dans diverses conditions d'éclairage.
0:00 / 0:00
La vidéo montre que la caméra CV est capable de capturer des scènes très dynamiques, le filament d'une lampe LED étant résolu en même temps que le reste des détails de la scène.
Large champ de vision (FOV) : Aria Gen 2 est équipé de quatre caméras de vision artificielle (CV), doublant ainsi le nombre de caméras CV de Gen 1, afin d'offrir un champ de vision plus large et de permettre un suivi avancé de la main et de l'objet en 3D.
Chevauchement stéréo : Le chevauchement stéréo de la génération 2 est passé de 35° à 80°, facilitant les modèles de fondation basés sur la stéréo qui améliorent la perception de la profondeur et la conscience de l'espace.
0:00 / 0:00
L'exemple présenté ici montre comment l'augmentation du chevauchement stéréo permet à des méthodes telles que FoundationStereo de NVIDIA de générer des cartes de profondeur basées sur des images stéréo rectifiées. Les cartes de profondeur peuvent être fusionnées pour générer des reconstructions géométriques de la scène en utilisant uniquement les données du couple stéréo d'Aria Gen 2.
3. Nouvelles intégrations de capteurs
Capteur de lumière ambiante (ALS) : L'Aria Gen 2 comprend un ALS calibré, qui permet d'améliorer les algorithmes de contrôle de l'exposition et de débloquer de nouvelles capacités à des fréquences d'images faibles. Le mode ultraviolet de l'ALS peut être utilisé pour distinguer l'éclairage intérieur de l'éclairage extérieur, comme l'illustre la vidéo.
0:00 / 0:00
Microphone de contact : Aria Gen 2 comprend un microphone de contact intégré dans le pavé nasal de l'appareil, ce qui améliore la capture audio dans les environnements bruyants.
0:00 / 0:00
La vidéo présente un porteur dans une soufflerie pour simuler un scénario venteux où le microphone de contact est capable de capter le chuchotement du porteur alors que les microphones acoustiques n'y parviennent pas.
Fréquence cardiaque : Aria Gen 2 comprend un capteur de photopléthysmographie (PPG) intégré dans la plaquette nasale de l'appareil, qui permet d'estimer la fréquence cardiaque de la personne qui porte l'appareil.
4. Alignement temporel des appareils
Aria Gen 2 dispose d'une solution matérielle embarquée qui utilise la technologie radio Sub-GHz pour diffuser des informations temporelles, permettant un alignement temporel précis avec d'autres appareils Aria Gen 2 ou des appareils compatibles qui prennent en charge la radio Sub-GHz. Cette technologie permet d'obtenir un alignement temporel avec une précision inférieure à la milliseconde, ce qui représente une amélioration significative par rapport à la technologie de la radio Sub-GHz. l'alignement de la génération 1 à l'aide d'un logiciel.
0:00 / 0:00
La vidéo montre comment Aria Gen 2 utilise l'alignement temporel des appareils pour des tâches telles que l'écriture à partir de captures distribuées à partir de deux appareils Aria Gen 2.
5. Signaux de perception machine (MP) en temps réel sur l'appareil
L'Aria Gen 2 est doté d'algorithmes avancés de perception de la machine sur l'appareil, qui s'exécutent sur le coprocesseur personnalisé à faible consommation d'énergie de Meta. Ces capacités de pointe permettent à l'appareil de générer des données précises et exactes, en suivant la façon dont nous interagissons avec notre environnement.
Odométrie Inertielle Visuelle (OIV)
L'une des principales caractéristiques d'Aria Gen 2 est sa capacité à suivre les lunettes dans six degrés de liberté (6DOF) au sein d'un cadre de référence spatial en utilisant l'odométrie inertielle visuelle (VIO). Cela permet une navigation et une cartographie transparentes de l'environnement, ouvrant de nouvelles possibilités pour la recherche en IA contextuelle et en robotique.
Suivi des yeux
Aria Gen 2 est également doté d'un système avancé de suivi des yeux par caméra qui suit le regard du porteur avec une précision inégalée. Ce système fournit une multitude d'informations, notamment : le regard par œil, le point de vergence, la détection des clignements, l'estimation du centre de la pupille, le diamètre de la pupille, le centre de la cornée, etc.
Ces signaux avancés permettent de mieux comprendre l'attention et les intentions visuelles du porteur, ce qui ouvre de nouvelles possibilités d'interaction entre l'homme et l'ordinateur.
Suivi des mains
Aria Gen 2 est également doté d'une solution de suivi de la main qui suit la main du porteur dans l'espace 3D. Cette solution produit des poses articulées des articulations de la main dans le cadre de référence de l'appareil, ce qui facilite l'annotation précise des mains pour les ensembles de données et permet des applications telles que la manipulation de la main d'un robot dextre qui nécessite une grande précision.
0:00 / 0:00
Démonstration des capteurs et des capacités de perception de la machine d'Aria Gen 2, ainsi que des algorithmes hors appareil qui en découlent.
L'avenir d'Aria est là : Restez informé
Les lunettes Aria Gen 2 ouvrent la voie à de futures innovations qui définiront la prochaine plateforme informatique. Les candidatures pour travailler avec Aria Gen 2 seront ouvertes dans le courant de l'année, et les chercheurs qui souhaitent rester informés peuvent s'inscrire sur le site web de l'Aria Gen 2 (en anglais). Liste d'intérêt Aria Gen 2. Entre-temps, les demandes pour le kit de recherche Aria avec les lunettes Aria Gen 1 sont toujours acceptées sur une base continue.postuler pour commencer immédiatement.
Rejoignez-nous sur CVPR 2025 à Nashville, Tennessee, en juin, où l'équipe présentera les lunettes Aria Gen 2 lors de démonstrations interactives. Visitez le stand Meta pour découvrir les dernières avancées et en savoir plus sur les caractéristiques innovantes d'Aria Gen 2.
FR 
EN 
BG 
CS 
ET 
EL 
HR 
HU 
LT 
LV 
NL 
PL 
PT 
RO 
SL 
SK