TL;DR:
- Dzisiaj o godz. PołączenieMark Zuckerberg zaprezentował Oriona - naszą pierwszą parę prawdziwych okularów AR, wcześniej o nazwie kodowej Projekt Nazare.
- Z wiodącym w branży polem widzenia, soczewki z węglika krzemuSkomplikowane falowody, projektory uLED i wiele innych, Orion jest naszym najbardziej zaawansowanym i dopracowanym prototypem produktu.
- Obecnie kontynuujemy optymalizację produktów i obniżanie kosztów, dążąc do stworzenia skalowalnego urządzenia konsumenckiego, które zrewolucjonizuje sposób interakcji ludzi ze światem.
"Budujemy okulary AR".
Pięć prostych słów, wypowiedziane pięć lat temu. Wraz z nimi zatknęliśmy flagę na naszej wizji przyszłości, w której nie musimy już dokonywać fałszywego wyboru między światem informacji na wyciągnięcie ręki a światem fizycznym wokół nas.
A teraz, pięć lat później, kolejne pięć słów, które mogą ponownie zmienić grę:
Stworzyliśmy okulary AR.
https://youtube.com/watch?v=2CJsnyS8u3c%3Fsi%3DTr77gOKEq3PnA7-k%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com
W Meta nasza misja jest prosta: dać ludziom możliwość budowania społeczności i zbliżania świata do siebie. W Reality Labs tworzymy narzędzia, które pomagają ludziom czuć się połączonymi w dowolnym miejscu i czasie. Dlatego pracujemy nad stworzeniem kolejnej platformy komputerowej, która stawia ludzi w centrum uwagi, aby mogli być bardziej obecni, połączeni i wzmocnieni w świecie.
Okulary Ray-Ban Meta zademonstrowały moc zapewniania ludziom bezdotykowego dostępu do kluczowych części ich cyfrowego życia z ich fizycznego życia. Możemy rozmawiać z inteligentnym asystentem AI, łączyć się ze znajomymi i uwieczniać ważne chwile - a wszystko to bez konieczności wyciągania telefonu. Te stylowe okulary idealnie wpasowują się w nasze codzienne życie, a ludzie absolutnie je uwielbiają.
Jednak podczas gdy Ray-Ban Meta otworzył zupełnie nową kategorię okularów bez wyświetlacza doładowanych sztuczną inteligencją, branża XR od dawna marzyła o prawdziwych okularach AR - produkcie, który łączy zalety dużego wyświetlacza holograficznego i spersonalizowanej pomocy AI w wygodnej, stylowej formie do noszenia przez cały dzień.
A dziś przybliżyliśmy to marzenie do rzeczywistości, ujawniając Orionktóry naszym zdaniem jest najbardziej zaawansowaną parą okularów AR, jaką kiedykolwiek wyprodukowano. W rzeczywistości może to być najbardziej wymagające urządzenie elektroniki użytkowej wyprodukowane od czasu smartfona. Orion jest wynikiem przełomowych wynalazków w praktycznie każdej dziedzinie nowoczesnej informatyki - opierając się na praca, którą wykonywaliśmy w Reality Labs przez ostatnią dekadę. Jest on wyposażony w całkowicie nowe technologie, w tym najbardziej zaawansowany wyświetlacz AR, jaki kiedykolwiek powstał. niestandardowy silikon która umożliwia uruchamianie potężnych doświadczeń AR na parze okularów przy użyciu ułamka mocy i wagi zestawu słuchawkowego MR.
System wprowadzania danych Orion płynnie łączy głos, wzrok i śledzenie ruchów dłoni z Opaska EMG która umożliwia przesuwanie, klikanie i przewijanie, a jednocześnie trzyma rękę wygodnie przy boku, pozwalając ci pozostać obecnym w świecie i z ludźmi wokół ciebie podczas interakcji z bogatymi treściami cyfrowymi.
Począwszy od dziś na Connect i przez cały rok, otwieramy dostęp do prototypu naszego produktu Orion dla pracowników Meta i wybranych odbiorców zewnętrznych, aby nasz zespół programistów mógł uczyć się, iterować i budować w kierunku naszej konsumenckiej linii okularów AR, którą planujemy rozpocząć w najbliższej przyszłości.
Dlaczego okulary AR?
Istnieją trzy główne powody, dla których okulary AR są kluczem do odblokowania kolejnego wielkiego skoku w dziedzinie komputerów zorientowanych na człowieka.
- Umożliwiają one cyfrowe doświadczenia, które nie są ograniczone limitami ekranu smartfona. Dzięki dużym wyświetlaczom holograficznym możesz wykorzystać świat fizyczny jako płótno, umieszczając treści i doświadczenia 2D i 3D w dowolnym miejscu.
- Płynnie integrują kontekstową sztuczną inteligencję, która może wyczuwać i rozumieć otaczający Cię świat, aby przewidywać i proaktywnie zaspokajać Twoje potrzeby.
- Są lekkie i świetnie nadają się zarówno do użytku w pomieszczeniach, jak i na zewnątrz - i pozwalają ludziom zobaczyć swoje prawdziwe twarze, prawdziwe oczy i prawdziwe wyrazy twarzy.
To gwiazda północna, do której dąży nasza branża: produkt łączący wygodę i natychmiastowość urządzeń do noszenia z dużym wyświetlaczem, dużą przepustowością i kontekstową sztuczną inteligencją w formie, którą ludzie czują się komfortowo nosząc w swoim codziennym życiu.
Kompaktowa obudowa, złożone wyzwania
Przez lata staliśmy przed fałszywym wyborem - albo zestawy słuchawkowe do rzeczywistości wirtualnej i mieszanej, które zapewniają głębokie, wciągające wrażenia w nieporęcznej obudowie, albo okulary, które są idealne do całodziennego użytku, ale nie oferują bogatych aplikacji wizualnych i doświadczeń ze względu na brak dużego wyświetlacza i odpowiedniej mocy obliczeniowej.
Ale chcemy tego wszystkiego, bez kompromisów. Przez lata ciężko pracowaliśmy, aby wykorzystać niesamowite wrażenia przestrzenne zapewniane przez zestawy VR i MR oraz zminiaturyzować technologię niezbędną do dostarczenia tych doświadczeń w parze lekkich, stylowych okularów. Dopracowanie formy, dostarczanie holograficznych wyświetlaczy, opracowywanie atrakcyjnych doświadczeń AR i tworzenie nowych paradygmatów interakcji człowiek-komputer (HCI) - i zrobienie tego wszystkiego w jednym spójnym produkcie - jest jednym z najtrudniejszych wyzwań, przed jakimi kiedykolwiek stanęła nasza branża. Było to tak trudne, że myśleliśmy, że mamy mniej niż 10 procent szans na pomyślne wykonanie tego zadania.
Aż do teraz.
Przełomowy wyświetlacz w niezrównanej obudowie
Przy około 70 stopniach, Orion ma największe pole widzenia w najmniejszej jak dotąd obudowie okularów AR. To pole widzenia odblokowuje naprawdę wciągające przypadki użycia Oriona, od wielozadaniowych okien i rozrywki na dużym ekranie po naturalnej wielkości hologramy ludzi - wszystkie treści cyfrowe, które mogą płynnie łączyć się z widokiem świata fizycznego.
Dla Oriona pole widzenia było naszym świętym Graalem. Mierzyliśmy się z prawami fizyki i musieliśmy zginać wiązki światła w sposób, w jaki nie są one naturalnie zginane - i musieliśmy to zrobić w kopercie mocy mierzonej w miliwatach.
Zamiast szkła, Soczewki wykonaliśmy z węglika krzemu-nową aplikacją dla okularów AR. Węglik krzemu jest niezwykle lekki, nie powoduje artefaktów optycznych ani światła rozproszonego i ma wysoki współczynnik załamania światła - wszystkie te właściwości optyczne są kluczowe dla dużego pola widzenia. Same falowody mają naprawdę skomplikowane i złożone struktury 3D w nanoskali, aby dyfrakcjonować lub rozpraszać światło w sposób niezbędny do osiągnięcia tego pola widzenia. A projektory to diody uLED - nowy rodzaj technologii wyświetlania, która jest bardzo mała i niezwykle energooszczędna.
Orion to bez wątpienia para okularów, zarówno pod względem wyglądu, jak i dotyku - w komplecie z przezroczystymi soczewkami. W przeciwieństwie do zestawów słuchawkowych MR lub innych dzisiejszych okularów AR, nadal możesz widzieć prawdziwe oczy i mimikę innych osób, dzięki czemu możesz być obecny i dzielić się doświadczeniami z ludźmi wokół ciebie. Dziesiątki innowacji były wymagane, aby projekt przemysłowy został zredukowany do współczesnego kształtu okularów, które można wygodnie nosić na co dzień. Orion to wyczyn miniaturyzacji - komponenty są upakowane do ułamka milimetra. Udało nam się osadzić siedem maleńkich kamer i czujników w obręczach oprawek.
Musieliśmy utrzymać precyzję optyczną na poziomie jednej dziesiątej grubości ludzkiego włosa. System może wykrywać niewielkie ruchy - takie jak rozszerzanie się lub kurczenie ramek w różnych temperaturach pokojowych - a następnie cyfrowo korygować niezbędne wyrównanie optyczne, a wszystko to w ciągu milisekund. Ramy wykonaliśmy z magnezu - tego samego materiału, którego używa się w samochodach wyścigowych F1 i statkach kosmicznych - ponieważ jest lekki, a jednocześnie sztywny, dzięki czemu utrzymuje elementy optyczne w jednej linii i skutecznie odprowadza ciepło.
Ogrzewanie i chłodzenie
Po złamaniu wyświetlacza (bez zamierzonej gry słów) i przezwyciężeniu problemów z fizyką, musieliśmy poradzić sobie z wyzwaniem naprawdę potężnych obliczeń przy naprawdę niskim zużyciu energii i potrzebie rozpraszania ciepła. W przeciwieństwie do dzisiejszych zestawów słuchawkowych MR, nie można umieścić wentylatora w parze okularów. Musieliśmy więc wykazać się kreatywnością. Wiele materiałów użytych do chłodzenia Oriona jest podobnych do tych używanych przez NASA do chłodzenia satelitów w przestrzeni kosmicznej.
Zbudowaliśmy wysoce wyspecjalizowany krzem na zamówienie który jest niezwykle energooszczędny i zoptymalizowany pod kątem naszych algorytmów sztucznej inteligencji, percepcji maszynowej i grafiki. Zbudowaliśmy wiele niestandardowych chipów i dziesiątki wysoce niestandardowych krzemowych bloków IP wewnątrz tych chipów. Dzięki temu możemy wykorzystać algorytmy niezbędne do śledzenia dłoni i oczu, a także technologię jednoczesnej lokalizacji i mapowania (SLAM), która normalnie wymaga setek miliwatów mocy - a tym samym generuje odpowiednią ilość ciepła - i zmniejszyć ją do zaledwie kilkudziesięciu miliwatów.
I tak, niestandardowy krzem nadal odgrywa kluczową rolę w rozwoju produktów w Reality Labs, pomimo tego, co można przeczytać gdzie indziej. 😎
EMG bez wysiłku
Każda nowa platforma komputerowa niesie ze sobą zmiana paradygmatu w sposobie interakcji z naszymi urządzeniami. Wynalezienie myszy pomogło utorować drogę dla graficznych interfejsów użytkownika (GUI), które dominują w naszym dzisiejszym świecie, a smartfony zaczęły zyskiwać na popularności dopiero po pojawieniu się ekranu dotykowego. Ta sama zasada dotyczy urządzeń ubieralnych.
Rozmawialiśmy o naszej współpracy z elektromiografia lub EMGPrzez lata kierowaliśmy się przekonaniem, że wprowadzanie danych do okularów AR musi być szybkie, wygodne, niezawodne, subtelne i społecznie akceptowalne. A teraz ta praca jest gotowa na najlepszy czas.
System wprowadzania danych i interakcji Orion płynnie łączy głos, spojrzenie i śledzenie dłoni z opaską EMG, która umożliwia łatwe przesuwanie, klikanie i przewijanie.
To działa - i sprawia wrażenie magii. Wyobraź sobie robienie zdjęć podczas porannego joggingu za pomocą prostego dotknięcia opuszkami palców lub nawigowanie po menu za pomocą ledwo zauważalnych ruchów dłoni. Nasza opaska łączy w sobie wysokowydajny materiał tekstylny z wbudowanymi czujnikami EMG do wykrywania sygnałów elektrycznych generowanych nawet przez najmniejsze ruchy mięśni. Procesor ML w urządzeniu interpretuje następnie te sygnały EMG w celu wygenerowania zdarzeń wejściowych, które są przesyłane bezprzewodowo do okularów. System dostosowuje się do użytkownika, dzięki czemu z czasem staje się coraz lepszy w rozpoznawaniu najbardziej subtelnych gestów. A dziś dzielimy się więcej o naszym wsparciu dla zewnętrznych badań koncentrujących się na rozszerzenie potencjału równości i dostępności opasek EMG.
Poznaj bezprzewodowe urządzenie Compute Puck
Prawdziwe okulary AR muszą być bezprzewodowe i małe.Więc zbudowaliśmy Bezprzewodowy krążek obliczeniowy dla Orion. Odciąża to częściowo okulary, zapewniając dłuższą żywotność baterii i lepszy współczynnik kształtu wraz z niskim opóźnieniem.
Okulary obsługują wszystkie algorytmy śledzenia dłoni, oczu, SLAM i wyspecjalizowane algorytmy graficzne blokujące świat AR, podczas gdy logika aplikacji działa na krążku, aby okulary były tak lekkie i kompaktowe, jak to tylko możliwe.
Krążek ma dwa procesory, w tym jeden zaprojektowany na zamówienie w Meta, i zapewnia moc obliczeniową niezbędną do renderowania grafiki o niskim opóźnieniu, sztucznej inteligencji i dodatkowej percepcji maszynowej.
A ponieważ jest mały i elegancki, możesz wygodnie wrzucić krążek do torby lub kieszeni i zająć się swoimi sprawami - bez żadnych zobowiązań.
Doświadczenia AR
Oczywiście, jak w przypadku każdego sprzętu, jest on tylko tak dobry, jak to, co można na nim zrobić. robić z nim. I choć to wciąż wczesne dni, doświadczenia oferowane przez Orion są ekscytującym spojrzeniem na to, co nadejdzie.
https://youtube.com/watch?v=HkdSv3QPhNw%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com
Mamy naszego inteligentnego asystenta, Meta AIdziałający na Orionie. Rozumie, na co patrzysz w świecie fizycznym i może pomóc Ci w tworzeniu przydatnych wizualizacji. Orion wykorzystuje ten sam model Llama, który zasila doświadczenia AI działające obecnie na inteligentnych okularach Ray-Ban Meta, a także niestandardowe modele badawcze, aby zademonstrować potencjalne przypadki użycia dla przyszłego rozwoju urządzeń do noszenia.
Możesz prowadzić rozmowy wideo bez użycia rąk, aby spotkać się z przyjaciółmi i rodziną w czasie rzeczywistym, a także pozostać w kontakcie z WhatsApp i Messenger, aby przeglądać i wysyłać wiadomości. Nie musisz wyciągać telefonu, odblokowywać go, szukać odpowiedniej aplikacji i informować znajomego, że spóźnisz się na kolację - wszystko to możesz zrobić przez okulary.
https://youtube.com/watch?v=el7lUVvu8Bo%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com
Możesz grać we wspólne gry AR z rodziną po drugiej stronie kraju lub z przyjacielem po drugiej stronie kanapy. A duży wyświetlacz Oriona pozwala na wielozadaniowość z wieloma oknami, aby załatwić sprawy bez konieczności noszenia ze sobą laptopa.
Doświadczenia dostępne dziś na Orion pomogą nakreślić mapę drogową dla naszej konsumenckiej linii okularów AR w przyszłości. Nasze zespoły będą kontynuować iterację i tworzyć nowe wciągające doświadczenia społecznościowe, wraz z naszymi partnerami programistycznymi, i nie możemy się doczekać, aby podzielić się tym, co będzie dalej.
Celowy prototyp produktu
Chociaż Orion nie trafi do rąk konsumentów, nie popełnij błędu: To jest nie prototyp badawczy. Jest to najbardziej dopracowany prototyp produktu, jaki kiedykolwiek opracowaliśmy - i jest naprawdę reprezentatywny dla czegoś, co może wysłać do konsumentów. Zamiast spieszyć się z wprowadzeniem go na półki sklepowe, postanowiliśmy najpierw skupić się na rozwoju wewnętrznym, co oznacza, że możemy szybko budować i nadal przesuwać granice technologii i doświadczeń.
A to oznacza, że szybciej uzyskamy jeszcze lepszy produkt konsumencki.
Co będzie dalej
Dwie główne przeszkody przez długi czas stały na drodze do okularów AR klasy konsumenckiej: przełom technologiczny niezbędny do dostarczenia dużego wyświetlacza w kompaktowej obudowie okularów oraz konieczność użytecznych i atrakcyjnych doświadczeń AR, które można uruchomić na tych okularach. Orion jest ogromnym kamieniem milowym, dostarczając po raz pierwszy prawdziwe doświadczenia AR działające na dość stylowym sprzęcie.
Teraz, gdy udostępniliśmy Oriona światu, skupiamy się na kilku rzeczach:
- Dostrajanie jakości wyświetlania AR w celu uzyskania jeszcze ostrzejszego obrazu
- Optymalizacja wszędzie tam, gdzie to możliwe, aby jeszcze bardziej zmniejszyć obudowę
- Budowanie na dużą skalę, aby uczynić je bardziej przystępnymi cenowo
W ciągu najbliższych kilku lat możesz spodziewać się nowych urządzeń, które będą bazować na naszych wysiłkach badawczo-rozwojowych. Szereg innowacji Oriona zostało rozszerzonych na nasze obecne produkty konsumenckie, a także na naszą przyszłą mapę drogową produktów. Zoptymalizowaliśmy niektóre z naszych algorytmów percepcji przestrzennej, które działają na obu urządzeniach. Meta Quest 3S i Orion. Podczas gdy wzrok i subtelny system wprowadzania danych za pomocą gestów został pierwotnie zaprojektowany dla Oriona, planujemy wykorzystać go w przyszłych produktach. Badamy również możliwość wykorzystania opasek EMG w przyszłych produktach konsumenckich.
Orion to nie tylko okno w przyszłość - to spojrzenie na bardzo realne możliwości, które są w zasięgu ręki już dziś. Stworzyliśmy go w pogoni za tym, co robimy najlepiej: pomaganiem ludziom w nawiązywaniu kontaktów. Od okularów Ray-Ban Meta po Orion, widzieliśmy dobro, które może płynąć z umożliwienia ludziom pozostania bardziej obecnym i wzmocnionym w świecie fizycznym, nawet podczas korzystania z całego dodatkowego bogactwa, jakie ma do zaoferowania świat cyfrowy.
Wierzymy, że nie powinieneś musieć wybierać między tymi dwoma rozwiązaniami. A dzięki następnej platformie obliczeniowej nie będziesz musiał.
Więcej informacji na temat Orion można znaleźć w tych wpisach na blogu:
PL 
EN 
BG 
CS 
ET 
EL 
HR 
HU 
LT 
LV 
FR 
NL 
PT 
RO 
SL 
SK