Közzétéve az oldalon - Hozzászólás most!

Orion: Megérkezett az igazi AR szemüveg

TL;DR:

  • Ma a Csatlakozás, Mark Zuckerberg bemutatta az Oriont - az első valódi AR-szemüveget, amely korábban a következő kódnevet viselte. Nazare projekt.
  • Az iparágban vezető látómezővel, szilícium-karbid lencsék, bonyolult hullámvezetők, uLED projektorok és még sok más, az Orion az eddigi legfejlettebb és legcsiszoltabb termékprototípusunk.
  • Most folytatjuk a termékoptimalizálást és a költségek csökkentését, miközben egy olyan skálázható fogyasztói eszköz felé haladunk, amely forradalmasítani fogja az emberek interakcióját a világgal.

"AR-szemüveget készítünk."

Öt egyszerű szó, öt évvel ezelőtt. Velük kitűztük a zászlót egy olyan jövőképünkre, amelyben többé nem kell hamis választást hoznunk az ujjhegyünkön elérhető információk világa és a körülöttünk lévő fizikai világ között.

És most, öt évvel később, újabb öt szó, amely ismét megváltoztatja a játékot:

Építettünk AR-szemüveget.

https://youtube.com/watch?v=2CJsnyS8u3c%3Fsi%3DTr77gOKEq3PnA7-k%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

A Meta küldetése egyszerű: adjuk meg az embereknek az erőt, hogy közösséget építsenek és közelebb hozzák egymáshoz a világot. A Reality Labsnél pedig olyan eszközöket fejlesztünk, amelyek segítségével az emberek bármikor és bárhol kapcsolatban érezhetik magukat. Ezért dolgozunk azon, hogy megalkossuk a következő számítástechnikai platformot, amely az embereket helyezi a középpontba, hogy jobban jelen lehessenek, kapcsolódhassanak és erőteljesebben élhessenek a világban.

Ray-Ban Meta szemüveg bebizonyították, hogy az emberek a digitális életük kulcsfontosságú részeihez a fizikai életükből kéz nélkül hozzáférhetnek. Beszélhetünk egy intelligens mesterséges intelligencia asszisztenssel, kapcsolatba léphetünk barátainkkal, és megörökíthetjük a fontos pillanatokat - mindezt anélkül, hogy valaha is elő kellene vennünk a telefont. Ezek a stílusos szemüvegek zökkenőmentesen illeszkednek a mindennapi életünkbe, és az emberek teljesen megszerették őket.

Míg a Ray-Ban Meta egy teljesen új kategóriát nyitott a kijelző nélküli, mesterséges intelligenciával felturbózott szemüvegek számára, az XR iparág már régóta álmodik egy valódi AR szemüvegről - egy olyan termékről, amely a nagy holografikus kijelző és a személyre szabott AI segítség előnyeit egy kényelmes, stílusos, egész nap viselhető formában egyesíti.

És ma közelebb hoztuk ezt az álmot a valósághoz, amikor bemutattuk a Orion, amely szerintünk a valaha készült legfejlettebb AR-szemüveg. Valójában ez lehet a legnagyobb kihívást jelentő szórakoztatóelektronikai eszköz az okostelefonok óta. Az Orion a modern számítástechnika gyakorlatilag minden területén áttörést jelentő találmányok eredménye, amelyek a következő alapokra épülnek a Reality Labs-ben az elmúlt évtizedben végzett munkánkat.. Teljesen új technológiákkal van tele, beleértve a valaha összeállított legfejlettebb AR kijelzőt és a egyedi szilícium amely lehetővé teszi a nagy teljesítményű AR-élmények futtatását egy szemüvegen, az MR-headsetek teljesítményének és súlyának töredékét használva.

Az Orion beviteli rendszere zökkenőmentesen ötvözi a hangot, a tekintetet és a kézkövetést egy EMG csuklópánt amely lehetővé teszi, hogy úgy lapozhasson, kattintgasson és görgessen, hogy közben a karja kényelmesen az oldala mellett pihen, így a gazdag digitális tartalmakkal való interakció közben is jelen maradhat a világban és a körülötte lévő emberekkel.

A mai Connect-en kezdődően és az év folyamán a Meta munkatársai és kiválasztott külső közönség számára hozzáférést biztosítunk az Orion termék prototípusához, hogy a fejlesztőcsapatunk tanulhasson, iterálhasson és építhessen a fogyasztói AR-szemüveg termékcsalád felé, amelyet a közeljövőben tervezünk szállítani.

Miért AR szemüveg?

Három fő oka van annak, hogy az AR-szemüvegek kulcsfontosságúak az emberközpontú számítástechnika következő nagy ugrásának felszabadításában.

  1. Olyan digitális élményeket tesznek lehetővé, amelyeket nem korlátoznak az okostelefonok képernyőjének korlátai. A nagyméretű holografikus kijelzőkkel a fizikai világot használhatja vászonként, és bárhol elhelyezhet 2D-s és 3D-s tartalmakat és élményeket.
  2. Zökkenőmentesen integrálják a kontextuális mesterséges intelligenciát, amely képes érzékelni és megérteni az Önt körülvevő világot annak érdekében, hogy előre jelezze és proaktívan kezelje az Ön igényeit.
  3. Könnyűek és kiválóan használhatók beltéri és kültéri használatra egyaránt - és lehetővé teszik, hogy az emberek lássák egymás valódi arcát, valódi szemét és valódi arckifejezéseit.

Ez az a csillag, amely felé iparágunk építkezik: egy olyan termék, amely a viselhető eszközök kényelmét és közvetlenségét nagy kijelzővel, nagy sávszélességű bemenettel és kontextusfüggő mesterséges intelligenciával kombinálja olyan formában, amelyet az emberek kényelmesen viselnek a mindennapi életükben.

Kompakt formafaktor, összetett kihívások

Évek óta hamis választás előtt állunk: vagy olyan virtuális és vegyes valóság headsetek, amelyek mély, magával ragadó élményeket tesznek lehetővé terjedelmes formában, vagy olyan szemüvegek, amelyek ideálisak az egész napos használatra, de nem kínálnak gazdag vizuális alkalmazásokat és élményeket, mivel nincs nagy kijelző és megfelelő számítási teljesítmény.

De mi mindent akarunk, kompromisszumok nélkül. Évek óta keményen dolgozunk azon, hogy a VR- és MR-headsetek által nyújtott hihetetlen térbeli élményeket egy könnyű, stílusos szemüvegbe miniatürizáljuk, és az ezekhez az élményekhez szükséges technológiát miniatürizáljuk. A formafaktor tökéletesítése, a holografikus kijelzők biztosítása, a lenyűgöző AR-élmények fejlesztése és az új ember-számítógép interakciós (HCI) paradigmák megalkotása - és mindez egyetlen egységes termékben - az egyik legnehezebb kihívás, amellyel iparágunk valaha is szembenézett. Olyannyira nagy kihívás, hogy úgy gondoltuk, kevesebb mint 10 százalék esélyünk van arra, hogy sikeresen véghezvisszük.

Mostanáig.

Úttörő kijelző egy páratlan formátumban

A körülbelül 70 fokos Orion a legnagyobb látómezővel rendelkezik az eddigi legkisebb AR-szemüveg formavilágában. Ez a látómező igazán magával ragadó felhasználási lehetőségeket nyit meg az Orion számára, a multitasking ablakoktól és a nagyképernyős szórakoztatástól kezdve az emberek életnagyságú hologramjaiig - minden olyan digitális tartalom, amely zökkenőmentesen illeszkedik a fizikai világról alkotott képhez.

Az Orion esetében a látómező volt a szent grál. A fizika törvényeivel ütköztünk, és a fénysugarakat olyan módon kellett elhajlítanunk, ahogyan azok a természetben nem hajlanak - és mindezt milliwattban mért teljesítményen belül kellett megtennünk.

Üveg helyett, a lencséket szilícium-karbidból készítettük.-az AR-szemüvegek újszerű alkalmazása. Szilícium-karbid hihetetlenül könnyű, nem okoz optikai műalkotásokat vagy kóbor fényt, és magas törésmutatóval rendelkezik - mindezek az optikai tulajdonságok kulcsfontosságúak a nagy látómezőhöz. Maguk a hullámvezetők valóban bonyolult és összetett, nanoméretű 3D-s struktúrákkal rendelkeznek, amelyek a fényt a látómező eléréséhez szükséges módon diffraktálják vagy szórják. A kivetítők pedig uLED-ek - egy újfajta kijelzőtechnológia, amely szuperkicsi és rendkívül energiatakarékos.

Az Orion összetéveszthetetlenül egy szemüveg, mind megjelenésében, mind tapintásában - átlátszó lencsékkel. Az MR-headsetekkel vagy más mai AR-szemüvegekkel ellentétben továbbra is láthatjuk egymás valódi szemét és arckifejezését, így jelen lehetünk, és megoszthatjuk az élményt a körülöttünk lévő emberekkel. Több tucatnyi újításra volt szükség ahhoz, hogy az ipari formatervet olyan korszerű szemüvegformát kapjunk, amelyet kényelmesen viselhetsz minden nap. Az Orion a miniatürizálás bravúrja - az alkatrészek a milliméter töredékére vannak összezsúfolva. És sikerült hét apró kamerát és érzékelőt beágyaznunk a keret peremébe.

Az optikai pontosságot az emberi hajszál vastagságának tizedénél kellett fenntartanunk. A rendszer pedig képes érzékelni az apró mozgásokat - például a különböző szobahőmérsékletű keretek tágulását vagy összehúzódását -, majd digitálisan korrigálni a szükséges optikai igazítást, mindezt ezredmásodperceken belül. A kereteket magnéziumból készítettük - ugyanabból az anyagból, amelyet az F1-es versenyautókban és űrhajókban használnak -, mert könnyű, mégis merev, így az optikai elemeket az igazításban tartja, és hatékonyan vezeti el a hőt.

Fűtés és hűtés

Miután feltörtük a kijelzőt (nem szándékos szóvicc) és leküzdöttük a fizikai problémákat, meg kellett oldanunk a kihívást, hogy a nagyon erős számítási teljesítményt a nagyon alacsony energiafogyasztás és a hőelvezetés szükségessége mellett is meg tudjuk oldani. A mai MR-headsetekkel ellentétben egy szemüvegbe nem lehet ventilátort dugni. Ezért kreatívnak kellett lennünk. Az Orion hűtéséhez használt anyagok nagy része hasonló azokhoz, amelyeket a NASA a világűrben lévő műholdak hűtésére használ.

Mi építettük magasan specializált egyedi szilícium amely rendkívül energiatakarékos és optimalizált a mesterséges intelligencia, a gépi észlelés és a grafikus algoritmusok számára. Több egyedi chipet és ezeken belül több tucatnyi rendkívül egyedi szilícium IP-blokkot építettünk. Ez lehetővé teszi számunkra, hogy a kéz- és szemkövetéshez, valamint a szimultán lokalizációs és térképezési (SLAM) technológiához szükséges algoritmusokat, amelyek általában több száz milliwattos teljesítményt igényelnek - és ennek megfelelően nagy mennyiségű hőt termelnek -, mindössze néhány tucat milliwattra zsugorítsuk.

És igen, az egyedi szilícium továbbra is kritikus szerepet játszik a Reality Labs termékfejlesztésében, annak ellenére, amit máshol olvashattál. 😎

Könnyed EMG

Minden új számítástechnikai platform magával hozza paradigmaváltás az eszközeinkkel való interakcióban. Az egér feltalálása segített előkészíteni az utat a grafikus felhasználói felületek (GUI) számára, amelyek ma a világunkat uralják, az okostelefonok pedig csak az érintőképernyő megjelenésével kezdtek igazán teret nyerni. Ugyanez a szabály érvényes a viselhető eszközökre is.

Beszéltünk a munkánkról a elektromiográfia vagy EMG, évek óta azon meggyőződésünk alapján, hogy az AR-szemüvegek bevitelének gyorsnak, kényelmesnek, megbízhatónak, finomnak és társadalmilag elfogadhatónak kell lennie. És most ez a munka készen áll a főműsoridőre.

Az Orion beviteli és interakciós rendszere zökkenőmentesen ötvözi a hangot, a tekintetet és a kézkövetést egy EMG csuklópánttal, amellyel könnyedén lapozhat, kattinthat és görgethet.

Működik - és olyan érzés, mintha varázslatos lenne. Képzelje el, hogy a reggeli kocogás közben az ujjbegyei egyszerű érintésével készít fényképet, vagy alig észrevehető kézmozdulatokkal navigál a menükben. Csuklópántunk nagy teljesítményű textíliát kombinál beágyazott EMG-érzékelőkkel, amelyek a legapróbb izommozgások által generált elektromos jeleket is érzékelik. A készüléken lévő ML processzor ezután értelmezi ezeket az EMG jeleket, hogy bemeneti eseményeket hozzon létre, amelyeket vezeték nélkül továbbít a szemüveghez. A rendszer alkalmazkodik Önhöz, így idővel egyre jobban és jobban felismeri a legfinomabb gesztusokat is. Ma pedig a következőkre összpontosító külső kutatások támogatásáról osztunk meg többet. az EMG-karszalagok méltányossági és hozzáférhetőségi potenciáljának kiterjesztése.

Ismerje meg a Wireless Compute Puckot

Az igazi AR-szemüvegeknek vezeték nélkülieknek kell lenniük, és kicsiknek is kell lenniük.Ezért építettünk egy vezeték nélküli számítási rendszer az Orion számára. Ez leveszi a terhelést a szemüvegről, hosszabb akkumulátor-élettartamot és jobb formájú, alacsony késleltetéssel kiegészített faktorokat tesz lehetővé.

A szemüveg futtatja az összes kézkövető, szemkövető, SLAM és speciális AR-világzáró grafikai algoritmust, míg az alkalmazás logikája a korongon fut, hogy a szemüveg a lehető legkönnyebb és legkompaktabb legyen.

A korong két processzorral rendelkezik, köztük egy itt a Meta-nál egyedileg tervezett processzorral, és ez biztosítja az alacsony késleltetésű grafikus rendereléshez, a mesterséges intelligenciához és néhány további gépi érzékeléshez szükséges számítási teljesítményt.

És mivel kicsi és karcsú, kényelmesen bedobhatja a korongot a táskájába vagy a zsebébe, és mehet a dolgára - kötöttségek nélkül.

AR élmények

Természetesen, mint minden hardver, ez is csak annyira jó, mint amennyire a dolgok, amelyeket do vele. És bár még korai, az Orion által nyújtott élmények izgalmas betekintést nyújtanak abba, ami még jönni fog.

https://youtube.com/watch?v=HkdSv3QPhNw%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Megvan az okos asszisztensünk, Meta AI, amely az Orionon fut. Megérti, hogy mit nézel a fizikai világban, és hasznos vizualizációkkal tud segíteni. Az Orion ugyanazt a Llama modellt használja, amely ma a Ray-Ban Meta okosszemüvegen futó AI-élményeket hajtja, valamint egyedi kutatási modelleket, hogy bemutassa a jövőbeli viselhető eszközök fejlesztésének lehetséges felhasználási eseteit.

Akár útközben is kezdeményezhet kihangosító nélküli videohívást, hogy valós időben beszélhessen barátaival és családtagjaival, és a WhatsApp és a Messenger alkalmazásban is kapcsolatban maradhat az üzenetek megtekintéséhez és elküldéséhez. Nem kell elővennie a telefonját, feloldania, megkeresnie a megfelelő alkalmazást, és tudatni a barátjával, hogy késik a vacsoráról - mindezt a szemüvegén keresztül is megteheti.

https://youtube.com/watch?v=el7lUVvu8Bo%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Megosztott AR-játékokat játszhatsz az ország másik felén élő családtagjaiddal vagy a kanapé másik felén ülő barátoddal. Az Orion nagyméretű kijelzője pedig lehetővé teszi, hogy több ablakkal több feladatot is elvégezzen, anélkül, hogy laptopot kellene cipelnie magával.

Az Orionon ma elérhető tapasztalatok segítenek majd a jövőbeni fogyasztói AR-szemüvegcsaládunk útitervét megrajzolni. Csapataink a fejlesztő partnereinkkel együtt folytatják a fejlesztést és új, magával ragadó közösségi élmények létrehozását, és már alig várjuk, hogy megosszuk velük, mi következik.

Egy céltudatos termék prototípusa

Bár az Orion nem kerül a fogyasztók kezébe, ne tévedjünk: Ez egy nem kutatási prototípus. Ez a legcsiszoltabb termékprototípus, amit valaha is kifejlesztettünk - és ez valóban reprezentatív valamire, ami lehetne a fogyasztóknak történő szállítás. Ahelyett, hogy siettettük volna a polcokra kerülést, úgy döntöttünk, hogy először a belső fejlesztésre összpontosítunk, ami azt jelenti, hogy gyorsan építkezhetünk, és továbbra is kitolhatjuk a technológia és az élmények határait.

Ez pedig azt jelenti, hogy gyorsabban jutunk el egy még jobb fogyasztói termékhez.

Mi következik ezután

Két nagy akadály állt régóta a mainstream fogyasztói AR-szemüvegek útjában: a technológiai áttörések, amelyek ahhoz szükségesek, hogy nagy kijelzőt tudjanak létrehozni egy kompakt szemüvegformátumban, valamint a hasznos és lenyűgöző AR-élmények szükségessége, amelyek a szemüvegeken futtathatók. Az Orion egy hatalmas mérföldkő, amely most először nyújt valódi AR-élményeket ésszerűen stílusos hardveren.

Most, hogy megosztottuk az Oriont a világgal, néhány dologra összpontosítunk:

  • Az AR-kijelző minőségének hangolása a még élesebb megjelenítés érdekében
  • Optimalizálás, ahol csak tudunk, hogy a formafaktor még kisebb legyen
  • Méretarányos építés a megfizethetőbbé tétel érdekében

A következő néhány évben várhatóan olyan új eszközökkel találkozhat tőlünk, amelyek a K+F erőfeszítéseinkre épülnek. Az Orion számos innovációját pedig kiterjesztettük a jelenlegi fogyasztói termékeinkre, valamint a jövőbeli terméktervünkre. Optimalizáltuk néhány térérzékelési algoritmusunkat, amelyek mind az alábbi rendszereken futnak Meta Quest 3S és az Orion. Bár a tekintetet és a finom gesztusos beviteli rendszert eredetileg az Orionhoz terveztük, tervezzük, hogy a jövőbeni termékekben is használni fogjuk. És vizsgáljuk az EMG csuklópántok használatát a jövőbeli fogyasztói termékekben is.

Az Orion nem csupán egy ablak a jövőbe - hanem egy pillantás a ma elérhető, nagyon is valós lehetőségekre. Azzal a céllal építettük, amihez a legjobban értünk: segíteni az embereknek kapcsolatot teremteni. A Ray-Ban Meta szemüvegtől az Orionig láttuk, hogy milyen jót tesz az, ha az emberek a fizikai világban is jobban jelen vannak, és nagyobb hatalommal rendelkeznek, miközben a digitális világ minden további gazdagságát is kihasználják.

Úgy gondoljuk, hogy nem kellene választania a kettő között. A következő számítástechnikai platformmal pedig nem is kell.


Az Orionnal kapcsolatos további információkért tekintse meg ezeket a blogbejegyzéseket:

Vélemény, hozzászólás?

Az e-mail címet nem tesszük közzé. A kötelező mezőket * karakterrel jelöltük