Maak kennis met Aria Gen 2: ontsluit nieuw onderzoek op het gebied van machinale waarneming, contextuele AI, robotica en meer

Sinds de lancering in 2020, Project Aria heeft onderzoekers over de hele wereld in staat gesteld om de laatste stand van de techniek op het gebied van machinewaarneming en AI te verbeteren door toegang tot geavanceerde onderzoekshardware en open-source datasetsmodellen en gereedschappen. Vandaag kondigen we met trots de volgende stap in deze reis aan: de introductie van de Aria Gen 2-bril. Deze volgende generatie hardware zal nieuwe mogelijkheden ontsluiten voor een breed scala aan onderzoeksgebieden, waaronder machinewaarneming, egocentrische en contextuele AI en robotica.

0:00 / 0:00

Voor onderzoekers die willen onderzoeken hoe AI-systemen beter kunnen de wereld begrijpen vanuit een menselijk perspectiefDe Aria Gen 2-bril voegt een nieuwe reeks mogelijkheden toe aan het Aria-platform. De bril bevat een aantal verbeteringen die op geen enkel ander apparaat te vinden zijn en toegang tot deze baanbrekende technologieën stelt onderzoekers in staat om de grenzen van het mogelijke te verleggen.

Vergeleken met Aria Gen 1 biedt Aria Gen 2 onder andere de volgende unieke voordelen:

• Geavanceerde sensorsuite: De verbeterde sensorsuite bevat een RGB-camera, 6DOF SLAM-camera's, eyetracking-camera's, ruimtelijke microfoons, IMU's, barometer, magnetometer en GNSS. Vergeleken met zijn voorganger, Aria Gen 1, introduceert de nieuwe generatie twee innovatieve sensoren in de neuskussentjes: een PPG-sensor voor het meten van de hartslag en een contactmicrofoon om de stem van de drager te onderscheiden van die van omstanders.
• Ultra laag stroomverbruik en on-device machine perceptie: SLAM, eye tracking, hand tracking en spraakherkenning worden allemaal on-device verwerkt met behulp van Meta's aangepaste silicium.
• De hele dag bruikbaar: De Aria Gen 2 bril kan zes tot acht uur ononderbroken gebruikt worden, weegt ongeveer 75 gram en heeft opvouwbare armen voor eenvoudige draagbaarheid.
• Interactie via audio: Gebruikers krijgen audiofeedback via de beste open-ear force-canceling speakers, waardoor user-in-the-loop systeemprototypes mogelijk zijn.

Onze decennialange reis om het volgende computerplatform te creëren, heeft geleid tot de ontwikkeling van deze cruciale technologieën. Bij Meta zullen de teams van Reality Labs Research en het FAIR AI-lab ze gebruiken om onze langetermijnvisie op onderzoek vooruit te helpen.. Door ze via Project Aria beschikbaar te stellen aan academische en commerciële onderzoekslaboratoria, bevorderen we open onderzoek en algemeen begrip van een belangrijke set technologieën waarvan we denken dat ze de toekomst van computer- en AI-technologie zullen helpen vormgeven.

Het open onderzoek dat sinds 2020 mogelijk is gemaakt door Project Aria heeft al geleid tot belangrijk werk, waaronder de creatie van open-source tools die op grote schaal worden gebruikt in de academische wereld en het bedrijfsleven. De Ego-Exo4D datasetverzameld met de eerste generatie Aria-brillen, is een fundamenteel hulpmiddel geworden voor moderne computervisie en het groeiende gebied van de robotica. Onderzoekers van Georgia Tech hebben onlangs laten zien hoe de Aria Research Kit humanoïde robots leren mensen thuis te helpenterwijl teams bij BMW gebruikt om te onderzoeken hoe augmented en virtual reality systemen kunnen worden geïntegreerd in slimme voertuigen.

En Aria maakt ook de ontwikkeling van nieuwe technologieën voor toegankelijkheid mogelijk. De eerste generatie Aria-brillen werd gebruikt door Carnegie Mellon Universiteit in hun NavCog-projectdie tot doel had technologieën te ontwikkelen om blinden en slechtzienden te helpen bij navigatie binnenshuis. Voortbouwend op deze basis wordt de Aria Gen 2-bril nu gebruikt door Envision, een bedrijf dat zich toelegt op het creëren van oplossingen voor blinden en slechtzienden. Envision onderzoekt de integratie van zijn Bondgenoot AI-assistent en ruimtelijke audio met behulp van de nieuwste Aria Gen 2-bril om indoornavigatie en toegankelijkheidservaringen te verbeteren.

0:00 / 0:00

Envision gebruikte de on-device SLAM-mogelijkheden van Aria Gen 2, samen met ruimtelijke audiofuncties via ingebouwde luidsprekers, om blinden en slechtzienden te helpen naadloos door binnenomgevingen te navigeren. Dit innovatieve gebruik van de technologieën, dat zich nog in de verkennings- en onderzoeksfase bevindt, laat zien hoe onderzoekers Aria Gen 2-brillen kunnen gebruiken voor prototypes van AI-ervaringen op basis van egocentrische waarnemingen. De geavanceerde sensoren en on-device machineperceptiemogelijkheden, waaronder SLAM, eye tracking, hand tracking en audio-interacties, maken de bril ook ideaal voor gegevensverzameling voor onderzoeks- en robottoepassingen.

In de komende maanden zullen we meer details geven over het tijdstip waarop het apparaat beschikbaar komt voor partners. Onderzoekers die toegang willen krijgen tot Aria Gen 2 kunnen aanmelden om updates te ontvangen. We zijn benieuwd hoe onderzoekers Aria Gen 2 zullen gebruiken om de weg te bereiden voor toekomstige innovaties die het volgende computerplatform vorm zullen geven.