Eerder dit jaar hebben we aangekondigd Onze nieuwste onderzoeksbril, Aria Gen 2, markeert de voortzetting van Project Aria's missie om onderzoekers over de hele wereld in staat te stellen om de state of the art in machine perceptie, contextuele AI en robotica te verbeteren door middel van toegang tot geavanceerde onderzoekshardware en open source datasets, modellen en tooling. Vandaag zijn we verheugd om meer te delen over de technologie in Aria Gen 2. Dit omvat een diepgaand overzicht van de vormfactor, audiomogelijkheden, levensduur van de batterij, verbeterde camera's en sensoren, on-device compute en meer.

Wat is Aria Gen 2?

Aria Gen 2 is een draagbaar apparaat dat de nieuwste ontwikkelingen op het gebied van computer vision, machine learning en sensortechnologie combineert. De compacte vormfactor en het lichtgewicht ontwerp van Aria Gen 2 maken het een ideale keuze voor onderzoekers die gegevens moeten verzamelen of prototypes moeten bouwen in verschillende omgevingen. De bril bevat een aantal verbeteringen ten opzichte van Aria Gen 1zijn voorganger, aangekondigd in 2020.

Aria Gen 2: verbeteringen en functies

De overgang van Aria Gen 1 naar Gen 2 betekent een grote sprong voorwaarts in draagbare technologie en biedt verbeterde functies en mogelijkheden voor een breder scala aan toepassingen en gebruikersbehoeften. Hieronder verkennen we de belangrijkste verschillen en verbeteringen die in Aria Gen 2 zijn geïntroduceerd.

1. Draagbaarheid

Aria Gen 2 biedt superieure draagbaarheid, gekenmerkt door verbeterd comfort en pasvorm, terwijl het geschikt is voor een breder scala aan gezichtsmorfologieën en een uitgebreide sensor suite voor onderzoek. De bril heeft een lichtgewicht ontwerp (met een gewicht van 74 - 76 gram, afhankelijk van de maat) en heeft nu inklapbare pootjes voor eenvoudiger opbergen en vervoeren voor dagelijks gebruik. Om ervoor te zorgen dat elke drager een optimale fysieke en functionele pasvorm heeft, hebben we acht maatvariaties van het apparaat geïntroduceerd, rekening houdend met een aantal menselijke factoren, waaronder de breedte van het hoofd en variatie in de neusbrug.

Acht maatvariaties van onze Aria Gen 2-apparaten.

2. Computer Vision (CV) Camera-uitbreidingen

Hoog dynamisch bereik (HDR): De global shutter camerasensor van Aria Gen 2 biedt een hoog dynamisch bereik van 120 dB, vergeleken met het bereik van 70 dB in Gen 1. Dit maakt superieure computervisietaken mogelijk in diverse lichtomstandigheden.

0:00 / 0:00

De video illustreert dat de CV-camera in staat is om zeer dynamische scènes vast te leggen, waarbij de gloeidraad van een LED-lamp samen met de rest van de details van de scène wordt opgelost.

Breed gezichtsveld (FOV): Aria Gen 2 is uitgerust met vier computer vision (CV) camera's, een verdubbeling van het aantal CV-camera's in Gen 1, om een breder gezichtsveld te bieden en geavanceerde 3D hand- en objecttracking mogelijk te maken.

Stereo overlap: De stereo-overlap in Gen 2 is vergroot van 35° in Gen 1 naar 80°, waardoor op stereo gebaseerde basismodellen mogelijk zijn die diepteperceptie en ruimtelijk bewustzijn verbeteren.

0:00 / 0:00

Het voorbeeld hier laat zien hoe de grotere stereo-overlap methoden zoals NVIDIA's FoundationStereo in staat stelt om dieptekaarten te genereren op basis van gecorrigeerde stereobeelden. De dieptekaarten kunnen worden samengevoegd om geometrische reconstructies van de scène te genereren met alleen de stereopaargegevens van Aria Gen 2.

3. Nieuwe sensorintegraties

Omgevingslichtsensor (ALS): Aria Gen 2 bevat een gekalibreerde ALS, die betere algoritmes voor belichtingsregeling mogelijk maakt en nieuwe mogelijkheden ontsluit bij lage beeldsnelheden. De ultraviolette modus van de ALS kan worden gebruikt om onderscheid te maken tussen binnen- en buitenverlichting, zoals de video laat zien.

0:00 / 0:00

Contactmicrofoon: Aria Gen 2 heeft een contactmicrofoon die in de neuskussentjes van het apparaat is ingebouwd, voor een betere geluidsopname in lawaaiige omgevingen.

0:00 / 0:00

De video toont een drager in een windtunnel om een winderig scenario te simuleren waarbij de contactmicrofoon het gefluister van de drager kan oppikken wanneer de akoestische microfoons dat niet kunnen.

Hartslag: Aria Gen 2 bevat een fotoplethysmografiesensor (PPG) in de neuskussentje van het apparaat, waarmee de hartslag van de persoon die het apparaat draagt kan worden geschat.

4. Apparaat tijd uitlijnen

Aria Gen 2 heeft een ingebouwde hardwareoplossing die gebruikmaakt van Sub-GHz radiotechnologie om tijdinformatie uit te zenden, waardoor een nauwkeurige tijdaliniëring mogelijk is met andere Aria Gen 2-apparaten of compatibele apparaten die Sub-GHz radio ondersteunen. Deze technologie bereikt tijdaliniëring met een nauwkeurigheid van submilliseconden, wat een aanzienlijke verbetering is ten opzichte van de softwarematige uitlijning van Gen 1.

0:00 / 0:00

De video laat zien hoe Aria Gen 2 gebruik maakt van apparaattijdaliniëring voor taken zoals het schrijven van gedistribueerde captures van twee Aria Gen 2-apparaten.

5. Realtime machineperceptiesignalen (MP) op het apparaat

Aria Gen 2 beschikt over geavanceerde on-device machine perceptie algoritmes die draaien op Meta's energiezuinige custom coprocessor. Dankzij deze geavanceerde mogelijkheden kan het apparaat nauwkeurige gegevens genereren en bijhouden hoe we omgaan met onze omgeving.

Visuele traagheidsnavigatie (VIO)

Een van de belangrijkste kenmerken van Aria Gen 2 is de mogelijkheid om de bril in zes vrijheidsgraden (6DOF) te volgen binnen een ruimtelijk referentiekader met behulp van Visual Inertial Odometry (VIO). Dit maakt naadloze navigatie en het in kaart brengen van de omgeving mogelijk, wat nieuwe mogelijkheden biedt voor onderzoek naar contextuele AI en robotica.

Oogbesturing

Aria Gen 2 beschikt ook over een geavanceerd cameragebaseerd oogvolgsysteem dat de blik van de drager met ongeëvenaarde nauwkeurigheid volgt. Dit systeem levert een schat aan informatie, waaronder: blik per oog, vergence point, knipperdetectie, schatting van het centrum van de pupil, diameter van de pupil, midden van het hoornvlies, etc.

Deze geavanceerde signalen maken een dieper begrip van de visuele aandacht en intenties van de drager mogelijk, waardoor nieuwe mogelijkheden voor interactie tussen mens en computer worden ontsloten.

Handopsporing

Aria Gen 2 beschikt ook over een handtracking-oplossing die de hand van de drager in 3D-ruimte volgt. Dit produceert gearticuleerde handgewrichtsposities in het referentiekader van het apparaat, waardoor nauwkeurige handannotaties voor datasets mogelijk worden en toepassingen zoals manipulatie van behendige robothand mogelijk worden die een hoge precisie vereisen.

0:00 / 0:00

Demonstratie van de sensoren en machinewaarnemingscapaciteiten van Aria Gen 2 en de daarop gebaseerde algoritmen buiten het apparaat.

De toekomst van Aria is hier: Blijf op de hoogte

De Aria Gen 2-bril maakt de weg vrij voor toekomstige innovaties die het volgende computerplatform zullen definiëren. Aanvragen om met Aria Gen 2 te werken worden later dit jaar geopend en onderzoekers die op de hoogte willen blijven kunnen zich aansluiten bij de Interesselijst Aria Gen 2. Ondertussen worden aanvragen voor de Aria Research Kit met Aria Gen 1-bril nog steeds op doorlopende basis geaccepteerd.nu solliciteren om meteen aan de slag te gaan.

Kom naar CVPR 2025 in Nashville, Tennessee, in juni, waar het team de Aria Gen 2-brillen zal laten zien door middel van interactieve demo's. Bezoek de Meta stand om de nieuwste ontwikkelingen te ervaren en meer te weten te komen over de innovatieve functies van Aria Gen 2.