Na początku tego roku ogłoszony Nasze najnowsze okulary badawcze, Aria Gen 2, stanowią kontynuację misji Projektu Aria, polegającej na umożliwieniu naukowcom z całego świata rozwoju stanu wiedzy w zakresie percepcji maszynowej, kontekstowej sztucznej inteligencji i robotyki poprzez dostęp do najnowocześniejszego sprzętu badawczego oraz zbiorów danych, modeli i narzędzi typu open source. Dziś z przyjemnością udostępniamy więcej informacji na temat technologii wewnątrz Aria Gen 2. Obejmuje to dogłębny przegląd współczynnika kształtu, możliwości audio, żywotności baterii, ulepszonych kamer i czujników, obliczeń na urządzeniu i nie tylko.

Czym jest Aria Gen 2?

Aria Gen 2 to urządzenie do noszenia, które łączy w sobie najnowsze osiągnięcia w dziedzinie wizji komputerowej, uczenia maszynowego i technologii czujników. Kompaktowa obudowa i lekka konstrukcja Aria Gen 2 sprawiają, że jest to idealny wybór dla naukowców, którzy muszą zbierać dane lub budować prototypy w różnych warunkach. Okulary zawierają szereg ulepszeń w porównaniu do Aria Gen 1jego poprzednik badawczy, ogłoszony w 2020 roku.

Aria Gen 2: ulepszenia i funkcje

Przejście z Aria Gen 1 do Gen 2 oznacza znaczący skok w technologii urządzeń do noszenia, oferując ulepszone funkcje i możliwości, które zaspokajają szerszy zakres zastosowań i potrzeb użytkowników. Poniżej przedstawiamy kluczowe różnice i ulepszenia wprowadzone w Aria Gen 2.

1. Możliwość noszenia

Aria Gen 2 oferuje doskonałą wygodę noszenia, charakteryzującą się zwiększonym komfortem i dopasowaniem, przy jednoczesnym dostosowaniu do szerszego zakresu morfologii twarzy i bogatego zestawu czujników do badań. Okulary zachowują lekką konstrukcję (ważą od 74 do 76 g, w zależności od rozmiaru) i są teraz wyposażone w składane ramiona ułatwiające przechowywanie i transport w codziennym użytkowaniu. Aby zapewnić każdemu użytkownikowi optymalne dopasowanie fizyczne i funkcjonalne, wprowadziliśmy osiem wariantów rozmiaru urządzenia - uwzględniając szereg czynników ludzkich, w tym szerokość głowy i zmienność grzbietu nosa.

Osiem wariantów rozmiarów naszych urządzeń Aria Gen 2.

2. Ulepszenia kamer wizyjnych (CV)

Wysoki zakres dynamiki (HDR): Czujnik globalnej migawki kamery Aria Gen 2 oferuje wysoki zakres dynamiki wynoszący 120 dB, w porównaniu do zakresu 70 dB w Gen 1. Pozwala to na wykonywanie doskonałych zadań widzenia komputerowego w różnych warunkach oświetleniowych.

0:00 / 0:00

Film pokazuje, że kamera CV jest w stanie uchwycić bardzo dynamiczne sceny, w których żarnik światła LED jest rejestrowany wraz z pozostałymi szczegółami sceny.

Szerokie pole widzenia (FOV): Aria Gen 2 jest wyposażona w cztery kamery widzenia komputerowego (CV), podwajając liczbę kamer CV w Gen 1, aby zapewnić szersze pole widzenia i umożliwić zaawansowane śledzenie dłoni i obiektów 3D.

Nakładanie się stereo: Nakładanie się stereofonii w Gen 2 zostało zwiększone do 80° z 35° w Gen 1, ułatwiając modele fundamentalne oparte na stereofonii, które poprawiają percepcję głębi i świadomość przestrzenną.

0:00 / 0:00

Przedstawiony przykład ilustruje, w jaki sposób zwiększone nakładanie się stereoskopów umożliwia metodom takim jak NVIDIA FoundationStereo generowanie map głębi w oparciu o wyprostowane obrazy stereo. Mapy głębi można połączyć w celu wygenerowania geometrycznych rekonstrukcji sceny wyłącznie przy użyciu danych pary stereo Aria Gen 2.

3. Nowe integracje czujników

Czujnik światła otoczenia (ALS): Aria Gen 2 zawiera skalibrowany ALS, umożliwiający lepsze algorytmy kontroli ekspozycji i odblokowujący nowe możliwości przy niskiej liczbie klatek na sekundę. Tryb ultrafioletowy ALS może być używany do rozróżniania oświetlenia wewnętrznego i zewnętrznego, jak pokazano na filmie.

0:00 / 0:00

Mikrofon kontaktowy: Aria Gen 2 zawiera mikrofon kontaktowy wbudowany w nosek urządzenia, co poprawia przechwytywanie dźwięku w hałaśliwym otoczeniu.

0:00 / 0:00

Film pokazuje użytkownika w tunelu aerodynamicznym, aby zasymulować wietrzny scenariusz, w którym mikrofon kontaktowy jest w stanie wychwycić szept użytkownika, gdy mikrofony akustyczne nie są w stanie.

Tętno: Aria Gen 2 zawiera czujnik fotopletyzmograficzny (PPG) wbudowany w nakładkę na nos urządzenia, który umożliwia oszacowanie tętna osoby noszącej urządzenie.

4. Wyrównanie czasu urządzenia

Aria Gen 2 ma wbudowane rozwiązanie sprzętowe, które wykorzystuje technologię radiową Sub-GHz do nadawania informacji o czasie, umożliwiając precyzyjne wyrównanie czasu z innymi urządzeniami Aria Gen 2 lub kompatybilnymi urządzeniami obsługującymi radio Sub-GHz. Technologia ta zapewnia wyrównanie czasu z dokładnością poniżej milisekundy, co oznacza znaczną poprawę w stosunku do technologii radiowej Sub-GHz. programowe wyrównanie Gen 1.

0:00 / 0:00

Film pokazuje, jak Aria Gen 2 wykorzystuje wyrównanie czasu urządzenia do zadań takich jak zapisywanie z rozproszonych przechwyceń z dwóch urządzeń Aria Gen 2.

5. Sygnały percepcji maszynowej (MP) w czasie rzeczywistym na urządzeniu

Aria Gen 2 posiada zaawansowane algorytmy percepcji maszynowej, które działają na energooszczędnym koprocesorze Meta. Te najnowocześniejsze funkcje umożliwiają urządzeniu generowanie precyzyjnych i dokładnych danych, śledząc sposób interakcji z otoczeniem.

Wizualna odometria inercyjna (VIO)

Jedną z kluczowych cech Aria Gen 2 jest możliwość śledzenia okularów w sześciu stopniach swobody (6DOF) w przestrzennym układzie odniesienia przy użyciu wizualnej odometrii inercyjnej (VIO). Pozwala to na płynną nawigację i mapowanie środowiska, otwierając nowe możliwości dla badań nad kontekstową sztuczną inteligencją i robotyką.

Eye Tracking

Aria Gen 2 posiada również zaawansowany system śledzenia oczu oparty na kamerze, który śledzi spojrzenie użytkownika z niezrównaną dokładnością. System ten zapewnia wiele informacji, w tym: spojrzenie na oko, punkt wergencji, wykrywanie mrugnięć, szacowanie środka źrenicy, średnicę źrenicy, środek rogówki itp.

Te zaawansowane sygnały umożliwiają głębsze zrozumienie uwagi i intencji użytkownika, otwierając nowe możliwości interakcji człowiek-komputer.

Śledzenie dłoni

Aria Gen 2 posiada również rozwiązanie do śledzenia dłoni, które śledzi dłoń użytkownika w przestrzeni 3D. Tworzy to przegubowe pozy stawów dłoni w układzie odniesienia urządzenia, ułatwiając dokładne adnotacje dłoni dla zestawów danych i umożliwiając aplikacje, takie jak zręczna manipulacja rękami robota, które wymagają wysokiej precyzji.

0:00 / 0:00

Demonstracja czujników i możliwości percepcji maszynowej Aria Gen 2, a także opartych na nich algorytmów poza urządzeniem.

Przyszłość Arii jest tutaj: Bądź na bieżąco

Okulary Aria Gen 2 utorują drogę przyszłym innowacjom, które zdefiniują kolejną platformę obliczeniową. Aplikacje do pracy z Aria Gen 2 zostaną otwarte jeszcze w tym roku, a naukowcy, którzy chcą być na bieżąco, mogą dołączyć do platformy Lista zainteresowań Aria Gen 2. W międzyczasie wnioski o zestaw Aria Research Kit z okularami Aria Gen 1 są nadal przyjmowane na bieżąco.aplikuj teraz aby rozpocząć natychmiast.

Dołącz do nas na CVPR 2025 w Nashville, Tennessee, gdzie zespół zaprezentuje okulary Aria Gen 2 poprzez interaktywne pokazy. Odwiedź stoisko Meta, aby poznać najnowsze osiągnięcia i dowiedzieć się więcej o innowacyjnych funkcjach Aria Gen 2.