Depuis son lancement en 2020, Projet Aria a permis à des chercheurs du monde entier de faire progresser l'état de l'art en matière de perception des machines et d'IA, grâce à l'accès à du matériel de recherche de pointe et à des logiciels libres. ensembles de donnéesNous avons mis au point de nouveaux produits, modèles et outils. Aujourd'hui, nous sommes heureux d'annoncer la prochaine étape de ce voyage : l'introduction des lunettes Aria Gen 2. Cette nouvelle génération de matériel ouvrira de nouvelles possibilités dans un large éventail de domaines de recherche, notamment la perception des machines, l'IA égocentrique et contextuelle, et la robotique.
0:00 / 0:00
Pour les chercheurs qui cherchent à savoir comment les systèmes d'IA peuvent mieux comprendre le monde d'un point de vue humainLes lunettes Aria Gen 2 ajoutent un nouvel ensemble de capacités à la plateforme Aria. Elles comprennent un certain nombre d'avancées que l'on ne trouve sur aucun autre dispositif disponible aujourd'hui, et l'accès à ces technologies révolutionnaires permettra aux chercheurs de repousser les limites du possible.
Par rapport à Aria Gen 1, la proposition de valeur unique d'Aria Gen 2 comprend les éléments suivants :
- Ensemble de capteurs à la pointe de la technologie : La suite de capteurs améliorée comprend une caméra RVB, des caméras SLAM 6DOF, des caméras de suivi des yeux, des microphones spatiaux, des IMU, un baromètre, un magnétomètre et un GNSS. Par rapport à son prédécesseur, Aria Gen 1, la nouvelle génération introduit deux capteurs innovants intégrés dans la plaquette nasale : un capteur PPG pour mesurer la fréquence cardiaque et un microphone de contact pour distinguer la voix du porteur de celle des passants.
- Perception de la machine sur l'appareil et à très faible consommation d'énergie : Le SLAM, le suivi des yeux, le suivi des mains et la reconnaissance vocale sont tous traités sur l'appareil à l'aide du silicium personnalisé de Meta.
- Facilité d'utilisation tout au long de la journée : Les lunettes Aria Gen 2 peuvent être utilisées pendant six à huit heures en continu, pèsent environ 75 grammes et sont dotées de branches pliables pour faciliter leur transport.
- Interaction par le biais de l'audio : Les utilisateurs bénéficient d'un retour d'information audio grâce à des haut-parleurs ouverts à réduction de force, les meilleurs de leur catégorie, ce qui permet le prototypage de systèmes dans la boucle de l'utilisateur.
Notre un voyage d'une dizaine d'années pour créer la prochaine plateforme informatique a conduit au développement de ces technologies critiques. Chez Meta, les équipes de Reality Labs Research et du laboratoire FAIR AI les utiliseront pour faire progresser notre vision de la recherche à long terme.. En les mettant à la disposition des laboratoires de recherche universitaires et commerciaux dans le cadre du projet Aria, nous ferons progresser la recherche ouverte et la compréhension par le public d'un ensemble clé de technologies qui, selon nous, contribueront à façonner l'avenir de l'informatique et de l'intelligence artificielle.
La recherche ouverte rendue possible par le projet Aria depuis 2020 a déjà donné lieu à des travaux importants, notamment la création d'outils à code source ouvert largement utilisés dans le monde universitaire et dans l'industrie. Le projet Ensemble de données Ego-Exo4DLa vision artificielle, collectée à l'aide de la première génération de lunettes Aria, est devenue un outil fondamental pour la vision par ordinateur moderne et le domaine en pleine expansion de la robotique. Des chercheurs de Georgia Tech ont récemment montré comment le kit de recherche Aria peut être utilisé dans le domaine de la vision par ordinateur. aider les robots humanoïdes à apprendre à aider les gens à la maison, tandis que les équipes de BMW l'a utilisé pour étudier comment intégrer des systèmes de réalité augmentée et virtuelle dans les véhicules intelligents.
Aria permet également le développement de nouvelles technologies pour l'accessibilité. Les lunettes Aria de première génération ont été utilisées par L'Université Carnegie Mellon dans son projet NavCogqui visait à mettre au point des technologies pour aider les personnes aveugles et malvoyantes à naviguer à l'intérieur des bâtiments. S'appuyant sur cette base, les lunettes Aria Gen 2 sont maintenant utilisées par EnvisagerEnvision est une société qui se consacre à la création de solutions pour les personnes aveugles ou malvoyantes. Envision étudie la possibilité d'intégrer ses Allié L'assistant AI et l'audio spatial utilisent les dernières lunettes Aria Gen 2 pour améliorer la navigation en intérieur et les expériences d'accessibilité.
0:00 / 0:00
Envision a utilisé les capacités SLAM de l'Aria Gen 2, ainsi que des fonctions audio spatiales via des haut-parleurs intégrés, pour aider les personnes aveugles et malvoyantes à naviguer de manière transparente dans les environnements intérieurs. Cette utilisation innovante des technologies, qui en est encore à la phase exploratoire et de recherche, illustre la manière dont les chercheurs peuvent exploiter les lunettes Aria Gen 2 pour prototyper des expériences d'IA basées sur des observations égocentriques. Les capteurs avancés et les capacités de perception de la machine sur l'appareil, y compris le SLAM, le suivi des yeux, le suivi des mains et les interactions audio, les rendent également idéales pour la collecte de données dans le cadre de la recherche et des applications robotiques.
Au cours des prochains mois, nous donnerons plus de détails sur le calendrier de mise à disposition des appareils aux partenaires. Les chercheurs intéressés par l'accès à l'Aria Gen 2 peuvent s'inscrire pour recevoir les mises à jour. Nous sommes impatients de voir comment les chercheurs exploiteront Aria Gen 2 pour ouvrir la voie à de futures innovations qui façonneront la prochaine plateforme informatique.
