Szerző: Kristián Ivančo

0:00 / 0:00

Még 2019-ben a Orion csapat fontos bemutatót készített a Meta alapítója és vezérigazgatója, Mark Zuckerberg számára, bemutatva a lehetséges hullámvezetőket a kiterjesztett valóság szemüveg-a döntő pillanat, amikor a papíron lévő elméleti számítások életre keltek. És ez a bemutató mindent megváltoztatott.

"Az üveg alapú hullámvezetőkkel és több lemezzel ellátott szemüveg viselése olyan érzés volt, mintha egy diszkóban lennénk" - emlékszik vissza Pasqual Rivera optikus. "Mindenhol szivárványok voltak, és ez annyira elvonta a figyelmedet, hogy még csak nem is az AR-tartalmat nézted. Aztán felvetted a szemüveget a szilícium-karbid hullámvezetők, és olyan volt, mintha a szimfónián hallgatnánk egy csendes, klasszikus darabot. Tényleg odafigyelhettünk arra, hogy teljes mértékben átéljük azt, amit építünk. Ez teljesen megváltoztatta a játékot."

Bármennyire is egyértelműnek tűnik ma a szilícium-karbid mint szubsztrát választása, amikor először indultunk el a az AR szemüveghez vezető út egy évtizeddel ezelőtt, minden volt, csak nem az.

"A szilícium-karbid általában erősen nitrogénnel dúsított" - mondja Rivera. "Zöld színű, és ha elég vastag lesz, akkor feketének tűnik. Kizárt, hogy optikai lencsét lehetne belőle készíteni. Ez egy elektronikus anyag. Nem véletlenül ilyen a színe, mégpedig az elektronikus tulajdonságai miatt."

"A szilícium-karbid már régóta ismert anyag" - ért egyet Giuseppe Calafiore, az AR Waveguides műszaki vezetője. "Fő alkalmazási területe a nagy teljesítményű elektronika. Vegyük az elektromos járműveket: Minden elektromos járműnek szüksége van egy chipre - de ennek a chipnek nagyon nagy teljesítményre is képesnek kell lennie, mozgatnia kell a kerekeket, és meg kell hajtania ezt a dolgot. Kiderült, hogy a hagyományos szilícium hordozóval, amelyből a számítógépekben és az elektronikában használt chipek készülnek, ez nem lehetséges. Olyan platformra van szükséged, amely lehetővé teszi a nagy áramerősséget és a nagy teljesítményt, és ez az anyag a szilícium-karbid."

Amíg a megújuló energiaforrásokkal kapcsolatos viták nemrégiben fel nem pezsdültek, az ilyen nagy teljesítményű chipkészletek piaca meg sem közelítette a fogyasztói elektronikai chipek piacának méretét. A szilícium-karbid mindig is drága volt, és nem volt nagy ösztönzés a költségek csökkentésére, mivel az autóba szánt chipek méretéhez képest a hordozó ára elviselhető volt.

"De kiderült, hogy a szilícium-karbid is rendelkezik néhány olyan tulajdonsággal, amelyre a hullámvezetőkhöz és az optikához van szükségünk" - mondja Calafiore. "A törésmutató a legfontosabb tulajdonság, ami minket érdekel. A szilícium-karbidnak pedig magas a törésmutatója, ami azt jelenti, hogy képes nagy mennyiségű optikai adatot becsatornázni és kiadni. Ezt optikai sávszélességnek is nevezhetjük - hasonlóan az internet sávszélességéhez, amelyet elég nagynak kell lennie ahhoz, hogy nagy mennyiségű adatot tudjunk átküldeni a csatornán. Ugyanez vonatkozik az optikai eszközökre is."

Minél magasabb egy anyag törésmutatója, annál nagyobb a étendue, így több optikai adatot küldhet azon a csatornán keresztül.

"A mi esetünkben a csatorna a hullámvezetőnk, és a nagyobb étendue nagyobb látómezőt jelent" - magyarázza Calafiore. "Minél nagyobb egy anyag törésmutatója, annál nagyobb látómezőt tud támogatni a kijelző."

A megfelelő törésmutatóhoz vezető út

Amikor Calafiore 2016-ban először csatlakozott az akkori Oculus Researchhez, a csapat rendelkezésére álló legmagasabb törésmutatójú üveg 1,8 volt, ami több lemez egymásra helyezését tette szükségessé a kívánt látómező eléréséhez. A nemkívánatos optikai artefaktumoktól eltekintve az összeszerelési sor egyre bonyolultabbá vált, mivel az első két hullámvezetőt tökéletesen kellett összehangolni, majd ezt a halmazt egy harmadik hullámvezetővel kellett tökéletesen összehangolni.

"Nemcsak drága volt, hanem azonnal nyilvánvalóvá vált, hogy egy szemüvegben nem lehet lencsénként három darab üveg" - emlékszik vissza Calafiore. "Túl nehezek voltak, a vastagságuk pedig megfizethetetlenül nagy és csúnya volt - senki sem vette volna meg. Így hát visszatértünk a kiindulóponthoz: megpróbáltuk növelni a szubsztrát törésmutatóját, hogy csökkentsük a szükséges lemezek számát."

Az első anyag, amelyet a csapat megvizsgált, a következő volt lítium-niobát, amelynek törésmutatója nagyjából 2,3, ami valamivel magasabb, mint az 1,8-as üvegé.

"Rájöttünk, hogy csak két tányért kell egymásra raknunk, és talán még egy tányérral is beérjük, hogy még mindig lefedjük a látómezőt" - mondja Calafiore. "Szinte ezzel párhuzamosan elkezdtünk más anyagokat is megvizsgálni - így jöttünk rá a beszállítóinkkal együtt 2019-ben, hogy a szilícium-karbid a legtisztább formájában valójában nagyon is átlátszó. Történetesen ez rendelkezik a legmagasabb törésmutatóval is, amely optikai alkalmazásban ismert, ami 2,7."

Ez 17,4% növekedést jelent a lítium-niobáthoz képest, és 50% növekedést az üveghez képest, azok számára, akik otthon tartják a pontszámot.

"Néhány módosítással ugyanazon a berendezésen, amelyet az iparban már használtak, sikerült átlátszó szilíciumkarbidot előállítani" - mondja Calafiore. "Csak az eljárást kellett megváltoztatni, sokkal óvatosabbnak lenni, és az elektronikus tulajdonságok optimalizálása helyett az optikai tulajdonságokra optimalizálni: az átlátszóságra, a törésmutató egyenletességére stb.".

A kompromisszum lehetséges költségei

Akkoriban a Reality Labs csapata volt az első, amely egyáltalán megpróbált átlátszatlan szilíciumkarbid ostyákról áttérni az átlátszó ostyákra. És mivel a szilícium-karbid az egyik legkeményebb ismert anyag, a vágásához vagy csiszolásához alapvetően gyémánt szerszámokra van szükség. Ennek eredményeként az egyszeri mérnöki költségek nagyon magasak voltak, így az így kapott hordozó meglehetősen drága volt.

Bár léteznek költséghatékonyabb alternatívák, mint minden technológia esetében, mindegyiknek vannak kompromisszumai. És ahogy a látómező növekszik az Orion iparágvezető, körülbelül 70 fokos látómezeje felé, olyan új problémák merülnek fel, mint a szellemképek és a szivárványok.

"A széles látómezejű AR-kijelzők optimális megoldásának megtalálása a teljesítmény és a költségek közötti kompromisszumokkal jár" - magyarázza Barry Silverstein, a kutatási részleg tudományos igazgatója. "A költségeket gyakran le lehet szorítani, de ha a teljesítmény nem elég, a költségek végül nem számítanak."

A szellemképek olyanok, mint a kijelzőre vetített elsődleges kép vizuális visszhangjai. A szivárványok színes fénycsíkok, amelyek akkor jönnek létre, amikor a környezeti fény visszaverődik a hullámvezetőn. "Tegyük fel, hogy éjszaka vezetsz, és körülötted mozgó autófények vannak" - mondja Silverstein. "Szivárványok is lesznek, amelyek mozognak. Vagy ha a tengerparton röplabdázol, és süt a nap, akkor egy veled együtt mozgó szivárványcsíkot fogsz látni, és lemaradsz a lövésedről. A szilíciumkarbid egyik csodálatos tulajdonsága pedig az, hogy megszabadul ezektől a szivárványoktól."

"A szilíciumkarbid másik előnye, amellyel a többi anyag egyike sem rendelkezik, a hővezető képesség" - teszi hozzá Calafiore. "A műanyag szörnyű szigetelő. Az üveg, a lítium-niobát, ugyanez a helyzet. A szilícium-karbid átlátszó, úgy néz ki, mint az üveg, és képzeljük csak el: vezeti a hőt."

Így 2020 júliusában a csapat úgy döntött, hogy a szilíciumkarbid az optimális választás, három fő okból: Jobb optikai tulajdonságokkal rendelkezett, és könnyebb volt, mint a kétlemezes üveg.

A ferde metszés titka

Az anyagot szem előtt tartva a következő feladat a hullámvezetők gyártása volt - és különösen a ferde marás nevű, nem hagyományos rácsozási technika.

"A rács az a nanoszerkezet, amely be- és kikapcsolja a lencséből érkező fényt" - magyarázza Calafiore. "És ahhoz, hogy a szilíciumkarbid működjön, a rácsot ferdén kell marni. Ahelyett, hogy függőlegesen állna, a rács vonalainak átlósan kell ferdén állniuk"."

"Mi voltunk az elsők, akik közvetlenül az eszközökön végeztünk ferde maratást" - mondja Nihar Mohanty kutatási vezető. "Az egész iparág a nanoimprintre támaszkodott, ami nem működik az ilyen magas törésmutatójú szubsztrátumok esetében. Ezért nem gondolt senki más a világon arra, hogy szilícium-karbidot is készítsen."

Mivel azonban a ferde maratás még kiforratlan technológia, a legtöbb félvezetőchip-beszállító és -gyár nem rendelkezik a szükséges eszközökkel.

"2019-ben az akkori menedzseremmel, Matt Colburnnel létrehoztuk a saját üzemünket, mivel a világon nem volt semmi, ahol maratott szilícium-karbid hullámvezetőket tudtunk volna gyártani, és ahol a technológiát a laboratóriumi méreteken túl is kipróbálhattuk volna" - magyarázza Mohanty. "Hatalmas beruházás volt, és ott hoztuk létre az egész csővezetéket. A szerszámokat partnereink készítették számunkra, az eljárást pedig házon belül, a Metában fejlesztettük ki, bár a rendszereink kutatási minőségűek, mert nem voltak gyártási minőségű rendszerek. Egy gyártó partnerrel együttműködve fejlesztettük ki a gyártói minőségű ferde maratási szerszámokat és folyamatokat. És most, hogy megmutattuk, mi minden lehetséges a szilíciumkarbiddal, azt szeretnénk, ha az iparágban mások is elkezdenék a saját szerszámaik gyártását."

Minél több vállalat fektet be optikai minőségű szilícium-karbidba és fejleszt berendezéseket, annál erősebb lesz a fogyasztói AR-szemüvegek kategóriája.

Nem üldözzük tovább a szivárványt

Míg a a technológiai elkerülhetetlenség mítosz, úgy tűnik, hogy a csillagok a szilíciumkarbid javára állnak. És bár a csapat továbbra is vizsgálja az alternatívákat, az az érzésünk, hogy a megfelelő emberek a megfelelő időben és a megfelelő piaci körülmények között jöttek össze, hogy AR-szemüveget készítsenek ebből az anyagból.

"Az Orion bebizonyította, hogy a szilícium-karbid életképes lehetőség az AR-szemüvegek számára" - mondja Silverstein - "és most már három különböző kontinensen látjuk az érdeklődést az ellátási láncban, ahol erősen keresik ezt a lehetőséget. A szilícium-karbid lesz a befutó. Szerintem ez csak idő kérdése."

És ez idő alatt sok minden történhet - akárcsak az első tiszta szilícium-karbid kristályok növesztése óta, amikor is fordult a kocka.

"A szilíciumkarbid-gyártók mindegyike masszívan felpörgette a kínálatot a várható EV-boomra reagálva" - jegyzi meg Calafiore. "Jelenleg olyan túlkínálat van, amely nem létezett, amikor az Oriont építettük. Így most, hogy a kínálat magas, a kereslet pedig alacsony, a hordozó ára elkezdett csökkenni."

"A beszállítók nagyon izgatottak az optikai minőségű szilíciumkarbid gyártásának új lehetősége miatt - hiszen minden egyes hullámvezető lencse nagy mennyiségű anyagot jelent egy elektronikus chiphez képest, és minden meglévő képességük alkalmazható erre az új területre" - teszi hozzá Silverstein. "A gyár kitöltése alapvető fontosságú, a gyár méretnövelése pedig az álom. Az ostya mérete is számít: Minél nagyobb az ostya, annál alacsonyabb a költség - de a folyamat bonyolultsága is növekszik. Ennek ellenére láttuk, hogy a beszállítók a négy hüvelykes ostyákról áttértek a nyolc hüvelykes ostyákra, és néhányan már dolgoznak a 12 hüvelykes ostyák előfutárain, amelyek exponenciálisan több AR-szemüveget eredményeznének"."

Ezek a fejlesztések hozzájárulnak a költségek további csökkenéséhez. Még korai, de a jövő egyre inkább a figyelem középpontjába kerül.

"Minden új technológiai forradalom kezdetén egy csomó dolgot kipróbálunk" - mondja Calafiore. "Nézzük meg a televíziót: Katódsugárcsövekkel kezdtük, aztán jöttek a LED-es plazmatévék, most pedig a microLED-ek. Számos különböző technológián és architektúrán mentünk keresztül. Az útkeresés során sok út nem vezet sehova, de van néhány, amelyhez mindig visszatérünk, mint a legígéretesebbekhez. Nem vagyunk az út végén, és egyedül nem tudjuk megcsinálni, de a szilíciumkarbid egy olyan csodaanyag, amely megéri a befektetést."

"A világ felébredt" - teszi hozzá Silverstein. "Sikeresen megmutattuk, hogy a szilícium-karbid képes az elektronikában és a fotonikában rugalmasan használni. Ez egy olyan anyag, amely a jövőben a kvantumszámítástechnikában is alkalmazható lehet. És látjuk a jeleit annak, hogy jelentősen csökkenthető a költsége. Sok munka vár még ránk, de a potenciális előnyök óriásiak."

---

Tudjon meg többet a szilícium-karbidról a Fotonika spektrum.

Az Orionnal kapcsolatos további információkért tekintse meg ezeket a blogbejegyzéseket:

• Zéróról az egyre: Hogyan forradalmasítják egyedi szilícium és chipjeink az AR-t?
• Orion Compute Puck: Az eszköz története, amely lehetővé tette az AR-szemüvegeinket

TL;DR:

• Ma a Csatlakozás, Mark Zuckerberg bemutatta az Oriont - az első valódi AR-szemüveget, amely korábban a következő kódnevet viselte. Nazare projekt.
• Az iparágban vezető látómezővel, szilícium-karbid lencsék, bonyolult hullámvezetők, uLED projektorok és még sok más, az Orion az eddigi legfejlettebb és legcsiszoltabb termékprototípusunk.
• Most folytatjuk a termékoptimalizálást és a költségek csökkentését, miközben egy olyan skálázható fogyasztói eszköz felé haladunk, amely forradalmasítani fogja az emberek interakcióját a világgal.

---

"AR-szemüveget készítünk."

Öt egyszerű szó, öt évvel ezelőtt. Velük kitűztük a zászlót egy olyan jövőképünkre, amelyben többé nem kell hamis választást hoznunk az ujjhegyünkön elérhető információk világa és a körülöttünk lévő fizikai világ között.

És most, öt évvel később, újabb öt szó, amely ismét megváltoztatja a játékot:

Építettünk AR-szemüveget.

https://youtube.com/watch?v=2CJsnyS8u3c%3Fsi%3DTr77gOKEq3PnA7-k%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

A Meta küldetése egyszerű: adjuk meg az embereknek az erőt, hogy közösséget építsenek és közelebb hozzák egymáshoz a világot. A Reality Labsnél pedig olyan eszközöket fejlesztünk, amelyek segítségével az emberek bármikor és bárhol kapcsolatban érezhetik magukat. Ezért dolgozunk azon, hogy megalkossuk a következő számítástechnikai platformot, amely az embereket helyezi a középpontba, hogy jobban jelen lehessenek, kapcsolódhassanak és erőteljesebben élhessenek a világban.

Ray-Ban Meta szemüveg bebizonyították, hogy az emberek a digitális életük kulcsfontosságú részeihez a fizikai életükből kéz nélkül hozzáférhetnek. Beszélhetünk egy intelligens mesterséges intelligencia asszisztenssel, kapcsolatba léphetünk barátainkkal, és megörökíthetjük a fontos pillanatokat - mindezt anélkül, hogy valaha is elő kellene vennünk a telefont. Ezek a stílusos szemüvegek zökkenőmentesen illeszkednek a mindennapi életünkbe, és az emberek teljesen megszerették őket.

Míg a Ray-Ban Meta egy teljesen új kategóriát nyitott a kijelző nélküli, mesterséges intelligenciával felturbózott szemüvegek számára, az XR iparág már régóta álmodik egy valódi AR szemüvegről - egy olyan termékről, amely a nagy holografikus kijelző és a személyre szabott AI segítség előnyeit egy kényelmes, stílusos, egész nap viselhető formában egyesíti.

És ma közelebb hoztuk ezt az álmot a valósághoz, amikor bemutattuk a Orion, amely szerintünk a valaha készült legfejlettebb AR-szemüveg. Valójában ez lehet a legnagyobb kihívást jelentő szórakoztatóelektronikai eszköz az okostelefonok óta. Az Orion a modern számítástechnika gyakorlatilag minden területén áttörést jelentő találmányok eredménye, amelyek a következő alapokra épülnek a Reality Labs-ben az elmúlt évtizedben végzett munkánkat.. Teljesen új technológiákkal van tele, beleértve a valaha összeállított legfejlettebb AR kijelzőt és a egyedi szilícium amely lehetővé teszi a nagy teljesítményű AR-élmények futtatását egy szemüvegen, az MR-headsetek teljesítményének és súlyának töredékét használva.

Az Orion beviteli rendszere zökkenőmentesen ötvözi a hangot, a tekintetet és a kézkövetést egy EMG csuklópánt amely lehetővé teszi, hogy úgy lapozhasson, kattintgasson és görgessen, hogy közben a karja kényelmesen az oldala mellett pihen, így a gazdag digitális tartalmakkal való interakció közben is jelen maradhat a világban és a körülötte lévő emberekkel.

A mai Connect-en kezdődően és az év folyamán a Meta munkatársai és kiválasztott külső közönség számára hozzáférést biztosítunk az Orion termék prototípusához, hogy a fejlesztőcsapatunk tanulhasson, iterálhasson és építhessen a fogyasztói AR-szemüveg termékcsalád felé, amelyet a közeljövőben tervezünk szállítani.

Miért AR szemüveg?

Három fő oka van annak, hogy az AR-szemüvegek kulcsfontosságúak az emberközpontú számítástechnika következő nagy ugrásának felszabadításában.

1. Olyan digitális élményeket tesznek lehetővé, amelyeket nem korlátoznak az okostelefonok képernyőjének korlátai. A nagyméretű holografikus kijelzőkkel a fizikai világot használhatja vászonként, és bárhol elhelyezhet 2D-s és 3D-s tartalmakat és élményeket.
2. Zökkenőmentesen integrálják a kontextuális mesterséges intelligenciát, amely képes érzékelni és megérteni az Önt körülvevő világot annak érdekében, hogy előre jelezze és proaktívan kezelje az Ön igényeit.
3. Könnyűek és kiválóan használhatók beltéri és kültéri használatra egyaránt - és lehetővé teszik, hogy az emberek lássák egymás valódi arcát, valódi szemét és valódi arckifejezéseit.

Ez az a csillag, amely felé iparágunk építkezik: egy olyan termék, amely a viselhető eszközök kényelmét és közvetlenségét nagy kijelzővel, nagy sávszélességű bemenettel és kontextusfüggő mesterséges intelligenciával kombinálja olyan formában, amelyet az emberek kényelmesen viselnek a mindennapi életükben.

Kompakt formafaktor, összetett kihívások

Évek óta hamis választás előtt állunk: vagy olyan virtuális és vegyes valóság headsetek, amelyek mély, magával ragadó élményeket tesznek lehetővé terjedelmes formában, vagy olyan szemüvegek, amelyek ideálisak az egész napos használatra, de nem kínálnak gazdag vizuális alkalmazásokat és élményeket, mivel nincs nagy kijelző és megfelelő számítási teljesítmény.

De mi mindent akarunk, kompromisszumok nélkül. Évek óta keményen dolgozunk azon, hogy a VR- és MR-headsetek által nyújtott hihetetlen térbeli élményeket egy könnyű, stílusos szemüvegbe miniatürizáljuk, és az ezekhez az élményekhez szükséges technológiát miniatürizáljuk. A formafaktor tökéletesítése, a holografikus kijelzők biztosítása, a lenyűgöző AR-élmények fejlesztése és az új ember-számítógép interakciós (HCI) paradigmák megalkotása - és mindez egyetlen egységes termékben - az egyik legnehezebb kihívás, amellyel iparágunk valaha is szembenézett. Olyannyira nagy kihívás, hogy úgy gondoltuk, kevesebb mint 10 százalék esélyünk van arra, hogy sikeresen véghezvisszük.

Mostanáig.

Úttörő kijelző egy páratlan formátumban

A körülbelül 70 fokos Orion a legnagyobb látómezővel rendelkezik az eddigi legkisebb AR-szemüveg formavilágában. Ez a látómező igazán magával ragadó felhasználási lehetőségeket nyit meg az Orion számára, a multitasking ablakoktól és a nagyképernyős szórakoztatástól kezdve az emberek életnagyságú hologramjaiig - minden olyan digitális tartalom, amely zökkenőmentesen illeszkedik a fizikai világról alkotott képhez.

Az Orion esetében a látómező volt a szent grál. A fizika törvényeivel ütköztünk, és a fénysugarakat olyan módon kellett elhajlítanunk, ahogyan azok a természetben nem hajlanak - és mindezt milliwattban mért teljesítményen belül kellett megtennünk.

Üveg helyett, a lencséket szilícium-karbidból készítettük.-az AR-szemüvegek újszerű alkalmazása. Szilícium-karbid hihetetlenül könnyű, nem okoz optikai műalkotásokat vagy kóbor fényt, és magas törésmutatóval rendelkezik - mindezek az optikai tulajdonságok kulcsfontosságúak a nagy látómezőhöz. Maguk a hullámvezetők valóban bonyolult és összetett, nanoméretű 3D-s struktúrákkal rendelkeznek, amelyek a fényt a látómező eléréséhez szükséges módon diffraktálják vagy szórják. A kivetítők pedig uLED-ek - egy újfajta kijelzőtechnológia, amely szuperkicsi és rendkívül energiatakarékos.

Az Orion összetéveszthetetlenül egy szemüveg, mind megjelenésében, mind tapintásában - átlátszó lencsékkel. Az MR-headsetekkel vagy más mai AR-szemüvegekkel ellentétben továbbra is láthatjuk egymás valódi szemét és arckifejezését, így jelen lehetünk, és megoszthatjuk az élményt a körülöttünk lévő emberekkel. Több tucatnyi újításra volt szükség ahhoz, hogy az ipari formatervet olyan korszerű szemüvegformát kapjunk, amelyet kényelmesen viselhetsz minden nap. Az Orion a miniatürizálás bravúrja - az alkatrészek a milliméter töredékére vannak összezsúfolva. És sikerült hét apró kamerát és érzékelőt beágyaznunk a keret peremébe.

Az optikai pontosságot az emberi hajszál vastagságának tizedénél kellett fenntartanunk. A rendszer pedig képes érzékelni az apró mozgásokat - például a különböző szobahőmérsékletű keretek tágulását vagy összehúzódását -, majd digitálisan korrigálni a szükséges optikai igazítást, mindezt ezredmásodperceken belül. A kereteket magnéziumból készítettük - ugyanabból az anyagból, amelyet az F1-es versenyautókban és űrhajókban használnak -, mert könnyű, mégis merev, így az optikai elemeket az igazításban tartja, és hatékonyan vezeti el a hőt.

Fűtés és hűtés

Miután feltörtük a kijelzőt (nem szándékos szóvicc) és leküzdöttük a fizikai problémákat, meg kellett oldanunk a kihívást, hogy a nagyon erős számítási teljesítményt a nagyon alacsony energiafogyasztás és a hőelvezetés szükségessége mellett is meg tudjuk oldani. A mai MR-headsetekkel ellentétben egy szemüvegbe nem lehet ventilátort dugni. Ezért kreatívnak kellett lennünk. Az Orion hűtéséhez használt anyagok nagy része hasonló azokhoz, amelyeket a NASA a világűrben lévő műholdak hűtésére használ.

Mi építettük magasan specializált egyedi szilícium amely rendkívül energiatakarékos és optimalizált a mesterséges intelligencia, a gépi észlelés és a grafikus algoritmusok számára. Több egyedi chipet és ezeken belül több tucatnyi rendkívül egyedi szilícium IP-blokkot építettünk. Ez lehetővé teszi számunkra, hogy a kéz- és szemkövetéshez, valamint a szimultán lokalizációs és térképezési (SLAM) technológiához szükséges algoritmusokat, amelyek általában több száz milliwattos teljesítményt igényelnek - és ennek megfelelően nagy mennyiségű hőt termelnek -, mindössze néhány tucat milliwattra zsugorítsuk.

És igen, az egyedi szilícium továbbra is kritikus szerepet játszik a Reality Labs termékfejlesztésében, annak ellenére, amit máshol olvashattál. 😎

Könnyed EMG

Minden új számítástechnikai platform magával hozza paradigmaváltás az eszközeinkkel való interakcióban. Az egér feltalálása segített előkészíteni az utat a grafikus felhasználói felületek (GUI) számára, amelyek ma a világunkat uralják, az okostelefonok pedig csak az érintőképernyő megjelenésével kezdtek igazán teret nyerni. Ugyanez a szabály érvényes a viselhető eszközökre is.

Beszéltünk a munkánkról a elektromiográfia vagy EMG, évek óta azon meggyőződésünk alapján, hogy az AR-szemüvegek bevitelének gyorsnak, kényelmesnek, megbízhatónak, finomnak és társadalmilag elfogadhatónak kell lennie. És most ez a munka készen áll a főműsoridőre.

Az Orion beviteli és interakciós rendszere zökkenőmentesen ötvözi a hangot, a tekintetet és a kézkövetést egy EMG csuklópánttal, amellyel könnyedén lapozhat, kattinthat és görgethet.

Működik - és olyan érzés, mintha varázslatos lenne. Képzelje el, hogy a reggeli kocogás közben az ujjbegyei egyszerű érintésével készít fényképet, vagy alig észrevehető kézmozdulatokkal navigál a menükben. Csuklópántunk nagy teljesítményű textíliát kombinál beágyazott EMG-érzékelőkkel, amelyek a legapróbb izommozgások által generált elektromos jeleket is érzékelik. A készüléken lévő ML processzor ezután értelmezi ezeket az EMG jeleket, hogy bemeneti eseményeket hozzon létre, amelyeket vezeték nélkül továbbít a szemüveghez. A rendszer alkalmazkodik Önhöz, így idővel egyre jobban és jobban felismeri a legfinomabb gesztusokat is. Ma pedig a következőkre összpontosító külső kutatások támogatásáról osztunk meg többet. az EMG-karszalagok méltányossági és hozzáférhetőségi potenciáljának kiterjesztése.

Ismerje meg a Wireless Compute Puckot

Az igazi AR-szemüvegeknek vezeték nélkülieknek kell lenniük, és kicsiknek is kell lenniük.Ezért építettünk egy vezeték nélküli számítási rendszer az Orion számára. Ez leveszi a terhelést a szemüvegről, hosszabb akkumulátor-élettartamot és jobb formájú, alacsony késleltetéssel kiegészített faktorokat tesz lehetővé.

A szemüveg futtatja az összes kézkövető, szemkövető, SLAM és speciális AR-világzáró grafikai algoritmust, míg az alkalmazás logikája a korongon fut, hogy a szemüveg a lehető legkönnyebb és legkompaktabb legyen.

A korong két processzorral rendelkezik, köztük egy itt a Meta-nál egyedileg tervezett processzorral, és ez biztosítja az alacsony késleltetésű grafikus rendereléshez, a mesterséges intelligenciához és néhány további gépi érzékeléshez szükséges számítási teljesítményt.

És mivel kicsi és karcsú, kényelmesen bedobhatja a korongot a táskájába vagy a zsebébe, és mehet a dolgára - kötöttségek nélkül.

AR élmények

Természetesen, mint minden hardver, ez is csak annyira jó, mint amennyire a dolgok, amelyeket do vele. És bár még korai, az Orion által nyújtott élmények izgalmas betekintést nyújtanak abba, ami még jönni fog.

https://youtube.com/watch?v=HkdSv3QPhNw%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Megvan az okos asszisztensünk, Meta AI, amely az Orionon fut. Megérti, hogy mit nézel a fizikai világban, és hasznos vizualizációkkal tud segíteni. Az Orion ugyanazt a Llama modellt használja, amely ma a Ray-Ban Meta okosszemüvegen futó AI-élményeket hajtja, valamint egyedi kutatási modelleket, hogy bemutassa a jövőbeli viselhető eszközök fejlesztésének lehetséges felhasználási eseteit.

Akár útközben is kezdeményezhet kihangosító nélküli videohívást, hogy valós időben beszélhessen barátaival és családtagjaival, és a WhatsApp és a Messenger alkalmazásban is kapcsolatban maradhat az üzenetek megtekintéséhez és elküldéséhez. Nem kell elővennie a telefonját, feloldania, megkeresnie a megfelelő alkalmazást, és tudatni a barátjával, hogy késik a vacsoráról - mindezt a szemüvegén keresztül is megteheti.

https://youtube.com/watch?v=el7lUVvu8Bo%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Megosztott AR-játékokat játszhatsz az ország másik felén élő családtagjaiddal vagy a kanapé másik felén ülő barátoddal. Az Orion nagyméretű kijelzője pedig lehetővé teszi, hogy több ablakkal több feladatot is elvégezzen, anélkül, hogy laptopot kellene cipelnie magával.

Az Orionon ma elérhető tapasztalatok segítenek majd a jövőbeni fogyasztói AR-szemüvegcsaládunk útitervét megrajzolni. Csapataink a fejlesztő partnereinkkel együtt folytatják a fejlesztést és új, magával ragadó közösségi élmények létrehozását, és már alig várjuk, hogy megosszuk velük, mi következik.

Egy céltudatos termék prototípusa

Bár az Orion nem kerül a fogyasztók kezébe, ne tévedjünk: Ez egy nem kutatási prototípus. Ez a legcsiszoltabb termékprototípus, amit valaha is kifejlesztettünk - és ez valóban reprezentatív valamire, ami lehetne a fogyasztóknak történő szállítás. Ahelyett, hogy siettettük volna a polcokra kerülést, úgy döntöttünk, hogy először a belső fejlesztésre összpontosítunk, ami azt jelenti, hogy gyorsan építkezhetünk, és továbbra is kitolhatjuk a technológia és az élmények határait.

Ez pedig azt jelenti, hogy gyorsabban jutunk el egy még jobb fogyasztói termékhez.

Mi következik ezután

Két nagy akadály állt régóta a mainstream fogyasztói AR-szemüvegek útjában: a technológiai áttörések, amelyek ahhoz szükségesek, hogy nagy kijelzőt tudjanak létrehozni egy kompakt szemüvegformátumban, valamint a hasznos és lenyűgöző AR-élmények szükségessége, amelyek a szemüvegeken futtathatók. Az Orion egy hatalmas mérföldkő, amely most először nyújt valódi AR-élményeket ésszerűen stílusos hardveren.

Most, hogy megosztottuk az Oriont a világgal, néhány dologra összpontosítunk:

• Az AR-kijelző minőségének hangolása a még élesebb megjelenítés érdekében
• Optimalizálás, ahol csak tudunk, hogy a formafaktor még kisebb legyen
• Méretarányos építés a megfizethetőbbé tétel érdekében

A következő néhány évben várhatóan olyan új eszközökkel találkozhat tőlünk, amelyek a K+F erőfeszítéseinkre épülnek. Az Orion számos innovációját pedig kiterjesztettük a jelenlegi fogyasztói termékeinkre, valamint a jövőbeli terméktervünkre. Optimalizáltuk néhány térérzékelési algoritmusunkat, amelyek mind az alábbi rendszereken futnak Meta Quest 3S és az Orion. Bár a tekintetet és a finom gesztusos beviteli rendszert eredetileg az Orionhoz terveztük, tervezzük, hogy a jövőbeni termékekben is használni fogjuk. És vizsgáljuk az EMG csuklópántok használatát a jövőbeli fogyasztói termékekben is.

Az Orion nem csupán egy ablak a jövőbe - hanem egy pillantás a ma elérhető, nagyon is valós lehetőségekre. Azzal a céllal építettük, amihez a legjobban értünk: segíteni az embereknek kapcsolatot teremteni. A Ray-Ban Meta szemüvegtől az Orionig láttuk, hogy milyen jót tesz az, ha az emberek a fizikai világban is jobban jelen vannak, és nagyobb hatalommal rendelkeznek, miközben a digitális világ minden további gazdagságát is kihasználják.

Úgy gondoljuk, hogy nem kellene választania a kettő között. A következő számítástechnikai platformmal pedig nem is kell.

---

Az Orionnal kapcsolatos további információkért tekintse meg ezeket a blogbejegyzéseket:

• Orion Compute Puck: Az eszköz története, amely lehetővé tette az AR-szemüvegeinket
• Zéróról az egyre: Hogyan forradalmasítják egyedi szilícium és chipjeink az AR-t?
• Kristálytiszta: Szilícium-karbid hullámvezetőink és az Orion nagy FoV-je felé vezető út

Tavaly a Connect-en bemutattuk a Orion-az első igazi AR-szemüvegünk. A csúcspontja a a Reality Labs-ben végzett munkánk az elmúlt évtizedbenAz Orion a nagyméretű holografikus kijelző és a személyre szabott mesterséges intelligencia segítség előnyeit ötvözi egy kényelmes, egész nap viselhető formában. Az iparágban vezető látómezeje, szilícium-karbid hullámvezetői, uLED projektorai és egyéb tulajdonságai miatt kapott némi figyelmet. Ma azonban az Orion egy meg nem énekelt hősére fordítjuk figyelmünket: a compute puckra.

Úgy tervezték, hogy könnyen becsússzon a zsebébe vagy a táskájába, így szinte bárhová magával viheti, amikor a napját tölti, a korong az Orion feldolgozási teljesítményét az alkalmazási logika futtatására fordítja, és lehetővé teszi a szemüveg meggyőzőbb, kisebb formájú kialakítását. A zökkenőmentes élmény érdekében vezeték nélkül csatlakozik a szemüveghez és az EMG csuklópánthoz.

Beállítani és elfelejteni, igaz?

De a korong háttértörténete - még prototípusként is - olyan drámai ívű, amelyet a megjelenése alapján nem is sejtenénk.

"Amikor valami ilyesmit építünk, a fizika határait kezdjük el feszegetni" - magyarázza Rahul Prasad termékmenedzsment igazgató. "Az elmúlt 50 évben a Moore-törvény mindent kisebbé, gyorsabbá és energiatakarékosabbá tett. A probléma az, hogy most már kezdünk eljutni a határokhoz, hogy mennyi hőt lehet elvezetni, mennyi akkumulátort lehet összenyomni, és mennyi antennateljesítményt lehet egy adott méretű objektumba beletenni.""

Bár a visszatekintés 20/20 lehet, a korongban rejlő potenciál nem volt azonnal nyilvánvaló. Ha elsőként építesz meg valamit, minden lehetőséget fel kell tárnod, és minden követ meg kell forgatnod. Hogyan építhetsz meg valamit, amiről egyesek azt gondolhatják, hogy inkább egy nemkívánatos kiegészítő, mint a csomag kritikus része?

"Tudtuk, hogy a korong egy extra eszköz, amit az emberektől kérünk, hogy hordjanak magukkal" - jegyzi meg Jared Van Cleave, a terméktervezésért felelős mérnöki vezető - "ezért azt vizsgáltuk, hogyan lehetne a hibát funkcióvá alakítani."

Végül ez az etika kifizetődött, mivel a korong sok számítási lehetőséget (és még több Meta által tervezett egyedi szilíciumot az AI és a gépi érzékelés számára) présel kis méretbe. Ez nagyban hozzájárult ahhoz, hogy az Orion a sci-fi birodalmából a valóságba lépjen.

"Ha nem lenne meg a korong, akkor nem tudnánk olyan élményeket szerezni, mint amilyeneket az Orion kínál a maga formavilágában - periódus" - mondja Prasad. "A jó AR-élmény igazán nagy teljesítményt igényel: magas képkocka sebességet, rendkívül alacsony késleltetést, finomra szabott vezeték nélküli és energiagazdálkodást stb. A korongot és a szemüveget úgy kell megtervezni, hogy nagyon szorosan együttműködjenek, nemcsak az alkalmazás, hanem az operációs rendszer, a firmware és a hardver szintjén is. És még ha egy okostelefont együtt terveznénk is az AR-szemüveggel való együttműködésre, az igényes teljesítménykövetelmények lemerítenék a telefon akkumulátorát, és elszívnák a számítási kapacitást a telefonos felhasználási esetektől. Ezzel szemben a korong saját, nagy kapacitású akkumulátorral, nagy teljesítményű SoC-vel és egy egyedi, Meta által tervezett, az Orionhoz optimalizált AI társprocesszorral rendelkezik."

Természetesen a korongot nem egyik napról a másikra tervezték. Évekig tartó iteratív munkára volt szükség.

"Nem tudtuk, hogy az emberek hogyan akarnak majd interakcióba lépni az Orionnal a bemenet szempontjából - nem volt semmi, amit a piacról le tudtunk volna venni" - mondja Matt Resman termékmenedzser. "Ha megnézzük a korai szemüveg prototípusainkat, azok hatalmas, három-négy kilós headsetek voltak. És amikor egy terméket próbálsz megalkotni, nagyon nehéz megérteni a felhasználói élményt, ha nem a megfelelő formátényezőt használod. A koronggal nagyon gyorsan tudtunk prototípusokat készíteni, hogy megértsük, hogyan használnák az emberek."

A korai időkben Omega kódnevű korongot az akkori Oculus Research eredetileg egy Ω-alakú szalagként képzelte el, amely a felhasználó nyakára kerül, és a szemüveghez van kötve....

... amíg a Reality Labs vezeték nélküli csapatának néhány újítása lehetővé nem tette számukra, hogy elvágják a kábelt. Ez lehetővé tette a kézben tartható vagy zsebben hordozható / táskába helyezhető formát, ami rengeteg lehetőséget nyitott meg.

"Akkoriban a kiterjesztett valósággal történő telefonálás még mindig az elsődleges felhasználási terület volt" - magyarázza Van Cleave. "A korong volt az a hely, ahol a holografikus videókat lehorgonyozták. Letetted az asztalra úgy, hogy az érzékelőpad feléd nézett, leképezett téged, majd a korong felületéről kivetítette, hogy kivel beszélsz a híváshoz"."

"Az Orion az emberek összekapcsolásáról és összehozásáról szól" - mondja Resman. "A korong egyik kezdeti koncepciója az volt, hogy segítsen megteremteni a jelenlét érzését más emberekkel, és lehetővé tegye a kommunikációnak ezt a gazdagabb formáját."

"Ez semmihez sem hasonlítható, amit valaha is láttál - az eszköz igazán szórakoztató és egyedi interakciókat hozhat létre" - teszi hozzá Emron Henry ipari tervező. "A felhasználói élmény kicsit olyan, mintha egy dzsinnt szabadítanánk ki a palackból, ahol a hologramok zökkenőmentesen bukkannak elő és oldódnak vissza az eszközbe."

Ahogy mostanra már valószínűleg láthatod, a korongban több lehetőség rejlik, mint amit végül funkcióként bekapcsoltak. Az AR-híváshoz használt érzékelők és kamerák mellett a korong haptikus és 6DOF érzékelőkkel is rendelkezik, amelyek lehetővé teszik, hogy követett vezérlőként használjuk virtuális tárgyak kiválasztására és manipulálására, valamint AR-játékok lejátszására. A csapat a kapacitív és erőérintéses bevitelt is vizsgálta, így a korong játékvezérlőként is szolgálhatna, ha portré- és tájoló módban tartanák.

"Arról beszélgettünk, hogy szükség van erre a plusz dologra" - mondja Van Cleave. "Hogyan tehetnénk hasznosabbá? Egy egész munkafolyamattal foglalkoztunk. És egy ponton az volt a hipotézis, hogy az AR-játékok lesznek a fő felhasználási területek."

Már korán tudtuk, hogy fel kell fedeznünk a korong azon lehetőségeit, amelyekkel a telefonok nem tudnak olyasmit tenni, amit a korongok nem tudnak. Végül a szem tekintet, az EMG és a kéz követése mellett döntöttünk az AR-játékokhoz, például a Stargazerhez és a Ponghoz, de az Orion korai időszakában különböző demókat és játékokat prototipizáltunk, amelyek a korongot kontrollerként használták.

0:00 / 0:00

0:00 / 0:00

0:00 / 0:00

A korong 6DOF kontrollerként való felhasználásának felfedezése olyan AR játékokhoz, mint a Pong.

"Mivel ez nem egy telefon, ez nagy tervezési szabadságot adott nekünk" - teszi hozzá Prasad. "Lehet vastagabb, kerekebbé tehetem, hogy kényelmesen illeszkedjen a kezedbe, mint egy kontroller. Elég hihetetlen, hogy a korong valójában kisebb, mint egy átlagos telefon, de erősebb, mint egy telefon, mert van benne egy Meta által tervezett társprocesszor a mesterséges intelligenciához és a gépi érzékeléshez."

A csapat annak a kérdésnek járt utána, hogy miben különbözhet egy minőségi AR-játék egy MR- vagy konzoljátéktól. Ez azt jelentette, hogy az AR játékvezérlő különböző lehetőségeit vizsgálták meg, beleértve a joystickokat, a fizikai gombok elrendezését, az indítógombokat és egyebeket.

"Végül nem építettünk meg semmit ezekből a dolgokból" - jegyzi meg Van Cleave. "Prototípusokat készítettünk, de soha nem építettük meg teljesen. Egyszerűnek akartuk tartani. Meg akartuk csinálni ezeket a puha interfészeket, de nem akartunk fizikai, mechanikus gombokat készíteni."

És bár az érzékelők és a haptika nem voltak bekapcsolva a kész termék prototípusában, a fejlesztés során szerves funkciót töltöttek be, lehetővé téve a csapatok számára, hogy a hibák bejelentését a készülék tetejének néhányszori megérintésével indítsák el.

Ahogy a mesterséges intelligencia mint kulcsfontosságú felhasználási mód kezdett a középpontba kerülni, a számítástechnika egyre inkább a figyelem középpontjába került. Végül a korong ad otthont az Orion vezeték nélküli csatlakoztathatóságának, számítási teljesítményének és akkumulátorkapacitásának - ami önmagában is hatalmas technikai teljesítmény -, és mindez segít csökkenteni a szemüveg súlyát és formáját, miközben a felületének köszönhetően sokkal több hőt vezet el.

A korong fejlődése során egy dolog nem változott: a korong több, mint ami a gyakorlatlan szemnek látszik. A szokatlan ötletek felkarolása lehetővé tette csapataink számára, hogy felfedezzék, feszegessék a határokat és építsék a jövőt.

"Olyan kategóriát határozunk meg, amely még nem igazán létezik" - jegyzi meg Henry. "Ahogy az a kutatás-fejlesztésnél elvárható, az út során voltak kezdetek és megállások. Hogyan fognak a felhasználók a hologramokkal interakcióba lépni? Inkább AR távirányítót használnának, vagy elegendő a kézkövetés, a tekintet és az EMG a bevitelhez? Mit éreznek intuitívnak, kevéssé súrlódónak, ismerősnek és hasznosnak?"

"Ahelyett, hogy a korongot csak egy kőnek tekintettük volna, azt kérdeztük magunktól, mi mást tudnánk még nyújtani, hogy még jobban megkülönböztessük a telefonoktól, és megindokoljuk, miért érdemes magunkkal hordani" - ismeri el Resman. "Vajon a nyers számítási teljesítménye és a praktikus kialakítása - amely segített feloldani egy olyan szemüvegformát, amelyet reálisan egész nap viselhetsz - végül is elég értéket nyújt?". A mi feladatunk, hogy segítsünk megválaszolni ezeket a kérdéseket."

"Korán váltottunk, és arra összpontosítottunk, hogy mit tudunk tenni, amit egy telefon nem tud" - teszi hozzá Van Cleave. "A telefonoknak rendelkezniük kell a képernyővel, és a felhasználók által elvárt bizonyos fizikai gombelrendezéssel. Nekünk nincsenek ilyen korlátaink. A mi számítógépeink olyanok lehetnek, amilyenek csak akarjuk."

---

Az Orionnal kapcsolatos további információkért tekintse meg ezeket a blogbejegyzéseket:

• Kristálytiszta: Szilícium-karbid hullámvezetőink és az Orion nagy FoV-je felé vezető út
• Zéróról az egyre: Hogyan forradalmasítják egyedi szilícium és chipjeink az AR-t?

TL;DR:

• Ma a Csatlakozás, Mark Zuckerberg bemutatta az Oriont - az első valódi AR-szemüveget, amely korábban a következő kódnevet viselte. Nazare projekt.
• Az iparágban vezető látómezővel, szilícium-karbid lencsék, bonyolult hullámvezetők, uLED projektorok és még sok más, az Orion az eddigi legfejlettebb és legcsiszoltabb termékprototípusunk.
• Most folytatjuk a termékoptimalizálást és a költségek csökkentését, miközben egy olyan skálázható fogyasztói eszköz felé haladunk, amely forradalmasítani fogja az emberek interakcióját a világgal.

---

"AR-szemüveget készítünk."

Öt egyszerű szó, öt évvel ezelőtt. Velük kitűztük a zászlót egy olyan jövőképünkre, amelyben többé nem kell hamis választást hoznunk az ujjhegyünkön elérhető információk világa és a körülöttünk lévő fizikai világ között.

És most, öt évvel később, újabb öt szó, amely ismét megváltoztatja a játékot:

Építettünk AR-szemüveget.

https://youtube.com/watch?v=2CJsnyS8u3c%3Fsi%3DTr77gOKEq3PnA7-k%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

A Meta küldetése egyszerű: adjuk meg az embereknek az erőt, hogy közösséget építsenek és közelebb hozzák egymáshoz a világot. A Reality Labsnél pedig olyan eszközöket fejlesztünk, amelyek segítségével az emberek bármikor és bárhol kapcsolatban érezhetik magukat. Ezért dolgozunk azon, hogy megalkossuk a következő számítástechnikai platformot, amely az embereket helyezi a középpontba, hogy jobban jelen lehessenek, kapcsolódhassanak és erőteljesebben élhessenek a világban.

Ray-Ban Meta szemüveg bebizonyították, hogy az emberek a digitális életük kulcsfontosságú részeihez a fizikai életükből kéz nélkül hozzáférhetnek. Beszélhetünk egy intelligens mesterséges intelligencia asszisztenssel, kapcsolatba léphetünk barátainkkal, és megörökíthetjük a fontos pillanatokat - mindezt anélkül, hogy valaha is elő kellene vennünk a telefont. Ezek a stílusos szemüvegek zökkenőmentesen illeszkednek a mindennapi életünkbe, és az emberek teljesen megszerették őket.

Míg a Ray-Ban Meta egy teljesen új kategóriát nyitott a kijelző nélküli, mesterséges intelligenciával felturbózott szemüvegek számára, az XR iparág már régóta álmodik egy valódi AR szemüvegről - egy olyan termékről, amely a nagy holografikus kijelző és a személyre szabott AI segítség előnyeit egy kényelmes, stílusos, egész nap viselhető formában egyesíti.

És ma közelebb hoztuk ezt az álmot a valósághoz, amikor bemutattuk a Orion, amely szerintünk a valaha készült legfejlettebb AR-szemüveg. Valójában ez lehet a legnagyobb kihívást jelentő szórakoztatóelektronikai eszköz az okostelefonok óta. Az Orion a modern számítástechnika gyakorlatilag minden területén áttörést jelentő találmányok eredménye, amelyek a következő alapokra épülnek a Reality Labs-ben az elmúlt évtizedben végzett munkánkat.. Teljesen új technológiákkal van tele, beleértve a valaha összeállított legfejlettebb AR kijelzőt és a egyedi szilícium amely lehetővé teszi a nagy teljesítményű AR-élmények futtatását egy szemüvegen, az MR-headsetek teljesítményének és súlyának töredékét használva.

Az Orion beviteli rendszere zökkenőmentesen ötvözi a hangot, a tekintetet és a kézkövetést egy EMG csuklópánt amely lehetővé teszi, hogy úgy lapozhasson, kattintgasson és görgessen, hogy közben a karja kényelmesen az oldala mellett pihen, így a gazdag digitális tartalmakkal való interakció közben is jelen maradhat a világban és a körülötte lévő emberekkel.

A mai Connect-en kezdődően és az év folyamán a Meta munkatársai és kiválasztott külső közönség számára hozzáférést biztosítunk az Orion termék prototípusához, hogy a fejlesztőcsapatunk tanulhasson, iterálhasson és építhessen a fogyasztói AR-szemüveg termékcsalád felé, amelyet a közeljövőben tervezünk szállítani.

Miért AR szemüveg?

Három fő oka van annak, hogy az AR-szemüvegek kulcsfontosságúak az emberközpontú számítástechnika következő nagy ugrásának felszabadításában.

1. Olyan digitális élményeket tesznek lehetővé, amelyeket nem korlátoznak az okostelefonok képernyőjének korlátai. A nagyméretű holografikus kijelzőkkel a fizikai világot használhatja vászonként, és bárhol elhelyezhet 2D-s és 3D-s tartalmakat és élményeket.
2. Zökkenőmentesen integrálják a kontextuális mesterséges intelligenciát, amely képes érzékelni és megérteni az Önt körülvevő világot annak érdekében, hogy előre jelezze és proaktívan kezelje az Ön igényeit.
3. Könnyűek és kiválóan használhatók beltéri és kültéri használatra egyaránt - és lehetővé teszik, hogy az emberek lássák egymás valódi arcát, valódi szemét és valódi arckifejezéseit.

Ez az a csillag, amely felé iparágunk építkezik: egy olyan termék, amely a viselhető eszközök kényelmét és közvetlenségét nagy kijelzővel, nagy sávszélességű bemenettel és kontextusfüggő mesterséges intelligenciával kombinálja olyan formában, amelyet az emberek kényelmesen viselnek a mindennapi életükben.

Kompakt formafaktor, összetett kihívások

Évek óta hamis választás előtt állunk: vagy olyan virtuális és vegyes valóság headsetek, amelyek mély, magával ragadó élményeket tesznek lehetővé terjedelmes formában, vagy olyan szemüvegek, amelyek ideálisak az egész napos használatra, de nem kínálnak gazdag vizuális alkalmazásokat és élményeket, mivel nincs nagy kijelző és megfelelő számítási teljesítmény.

De mi mindent akarunk, kompromisszumok nélkül. Évek óta keményen dolgozunk azon, hogy a VR- és MR-headsetek által nyújtott hihetetlen térbeli élményeket egy könnyű, stílusos szemüvegbe miniatürizáljuk, és az ezekhez az élményekhez szükséges technológiát miniatürizáljuk. A formafaktor tökéletesítése, a holografikus kijelzők biztosítása, a lenyűgöző AR-élmények fejlesztése és az új ember-számítógép interakciós (HCI) paradigmák megalkotása - és mindez egyetlen egységes termékben - az egyik legnehezebb kihívás, amellyel iparágunk valaha is szembenézett. Olyannyira nagy kihívás, hogy úgy gondoltuk, kevesebb mint 10 százalék esélyünk van arra, hogy sikeresen véghezvisszük.

Mostanáig.

Úttörő kijelző egy páratlan formátumban

A körülbelül 70 fokos Orion a legnagyobb látómezővel rendelkezik az eddigi legkisebb AR-szemüveg formavilágában. Ez a látómező igazán magával ragadó felhasználási lehetőségeket nyit meg az Orion számára, a multitasking ablakoktól és a nagyképernyős szórakoztatástól kezdve az emberek életnagyságú hologramjaiig - minden olyan digitális tartalom, amely zökkenőmentesen illeszkedik a fizikai világról alkotott képhez.

Az Orion esetében a látómező volt a szent grál. A fizika törvényeivel ütköztünk, és a fénysugarakat olyan módon kellett elhajlítanunk, ahogyan azok a természetben nem hajlanak - és mindezt milliwattban mért teljesítményen belül kellett megtennünk.

Üveg helyett, a lencséket szilícium-karbidból készítettük.-az AR-szemüvegek újszerű alkalmazása. Szilícium-karbid hihetetlenül könnyű, nem okoz optikai műalkotásokat vagy kóbor fényt, és magas törésmutatóval rendelkezik - mindezek az optikai tulajdonságok kulcsfontosságúak a nagy látómezőhöz. Maguk a hullámvezetők valóban bonyolult és összetett, nanoméretű 3D-s struktúrákkal rendelkeznek, amelyek a fényt a látómező eléréséhez szükséges módon diffraktálják vagy szórják. A kivetítők pedig uLED-ek - egy újfajta kijelzőtechnológia, amely szuperkicsi és rendkívül energiatakarékos.

Az Orion összetéveszthetetlenül egy szemüveg, mind megjelenésében, mind tapintásában - átlátszó lencsékkel. Az MR-headsetekkel vagy más mai AR-szemüvegekkel ellentétben továbbra is láthatjuk egymás valódi szemét és arckifejezését, így jelen lehetünk, és megoszthatjuk az élményt a körülöttünk lévő emberekkel. Több tucatnyi újításra volt szükség ahhoz, hogy az ipari formatervet olyan korszerű szemüvegformát kapjunk, amelyet kényelmesen viselhetsz minden nap. Az Orion a miniatürizálás bravúrja - az alkatrészek a milliméter töredékére vannak összezsúfolva. És sikerült hét apró kamerát és érzékelőt beágyaznunk a keret peremébe.

Az optikai pontosságot az emberi hajszál vastagságának tizedénél kellett fenntartanunk. A rendszer pedig képes érzékelni az apró mozgásokat - például a különböző szobahőmérsékletű keretek tágulását vagy összehúzódását -, majd digitálisan korrigálni a szükséges optikai igazítást, mindezt ezredmásodperceken belül. A kereteket magnéziumból készítettük - ugyanabból az anyagból, amelyet az F1-es versenyautókban és űrhajókban használnak -, mert könnyű, mégis merev, így az optikai elemeket az igazításban tartja, és hatékonyan vezeti el a hőt.

Fűtés és hűtés

Miután feltörtük a kijelzőt (nem szándékos szóvicc) és leküzdöttük a fizikai problémákat, meg kellett oldanunk a kihívást, hogy a nagyon erős számítási teljesítményt a nagyon alacsony energiafogyasztás és a hőelvezetés szükségessége mellett is meg tudjuk oldani. A mai MR-headsetekkel ellentétben egy szemüvegbe nem lehet ventilátort dugni. Ezért kreatívnak kellett lennünk. Az Orion hűtéséhez használt anyagok nagy része hasonló azokhoz, amelyeket a NASA a világűrben lévő műholdak hűtésére használ.

Mi építettük magasan specializált egyedi szilícium amely rendkívül energiatakarékos és optimalizált a mesterséges intelligencia, a gépi észlelés és a grafikus algoritmusok számára. Több egyedi chipet és ezeken belül több tucatnyi rendkívül egyedi szilícium IP-blokkot építettünk. Ez lehetővé teszi számunkra, hogy a kéz- és szemkövetéshez, valamint a szimultán lokalizációs és térképezési (SLAM) technológiához szükséges algoritmusokat, amelyek általában több száz milliwattos teljesítményt igényelnek - és ennek megfelelően nagy mennyiségű hőt termelnek -, mindössze néhány tucat milliwattra zsugorítsuk.

És igen, az egyedi szilícium továbbra is kritikus szerepet játszik a Reality Labs termékfejlesztésében, annak ellenére, amit máshol olvashattál. 😎

Könnyed EMG

Minden új számítástechnikai platform magával hozza paradigmaváltás az eszközeinkkel való interakcióban. Az egér feltalálása segített előkészíteni az utat a grafikus felhasználói felületek (GUI) számára, amelyek ma a világunkat uralják, az okostelefonok pedig csak az érintőképernyő megjelenésével kezdtek igazán teret nyerni. Ugyanez a szabály érvényes a viselhető eszközökre is.

Beszéltünk a munkánkról a elektromiográfia vagy EMG, évek óta azon meggyőződésünk alapján, hogy az AR-szemüvegek bevitelének gyorsnak, kényelmesnek, megbízhatónak, finomnak és társadalmilag elfogadhatónak kell lennie. És most ez a munka készen áll a főműsoridőre.

Az Orion beviteli és interakciós rendszere zökkenőmentesen ötvözi a hangot, a tekintetet és a kézkövetést egy EMG csuklópánttal, amellyel könnyedén lapozhat, kattinthat és görgethet.

Működik - és olyan érzés, mintha varázslatos lenne. Képzelje el, hogy a reggeli kocogás közben az ujjbegyei egyszerű érintésével készít fényképet, vagy alig észrevehető kézmozdulatokkal navigál a menükben. Csuklópántunk nagy teljesítményű textíliát kombinál beágyazott EMG-érzékelőkkel, amelyek a legapróbb izommozgások által generált elektromos jeleket is érzékelik. A készüléken lévő ML processzor ezután értelmezi ezeket az EMG jeleket, hogy bemeneti eseményeket hozzon létre, amelyeket vezeték nélkül továbbít a szemüveghez. A rendszer alkalmazkodik Önhöz, így idővel egyre jobban és jobban felismeri a legfinomabb gesztusokat is. Ma pedig a következőkre összpontosító külső kutatások támogatásáról osztunk meg többet. az EMG-karszalagok méltányossági és hozzáférhetőségi potenciáljának kiterjesztése.

Ismerje meg a Wireless Compute Puckot

Az igazi AR-szemüvegeknek vezeték nélkülieknek kell lenniük, és kicsiknek is kell lenniük.Ezért építettünk egy vezeték nélküli számítási rendszer az Orion számára. Ez leveszi a terhelést a szemüvegről, hosszabb akkumulátor-élettartamot és jobb formájú, alacsony késleltetéssel kiegészített faktorokat tesz lehetővé.

A szemüveg futtatja az összes kézkövető, szemkövető, SLAM és speciális AR-világzáró grafikai algoritmust, míg az alkalmazás logikája a korongon fut, hogy a szemüveg a lehető legkönnyebb és legkompaktabb legyen.

A korong két processzorral rendelkezik, köztük egy itt a Meta-nál egyedileg tervezett processzorral, és ez biztosítja az alacsony késleltetésű grafikus rendereléshez, a mesterséges intelligenciához és néhány további gépi érzékeléshez szükséges számítási teljesítményt.

És mivel kicsi és karcsú, kényelmesen bedobhatja a korongot a táskájába vagy a zsebébe, és mehet a dolgára - kötöttségek nélkül.

AR élmények

Természetesen, mint minden hardver, ez is csak annyira jó, mint amennyire a dolgok, amelyeket do vele. És bár még korai, az Orion által nyújtott élmények izgalmas betekintést nyújtanak abba, ami még jönni fog.

https://youtube.com/watch?v=HkdSv3QPhNw%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Megvan az okos asszisztensünk, Meta AI, amely az Orionon fut. Megérti, hogy mit nézel a fizikai világban, és hasznos vizualizációkkal tud segíteni. Az Orion ugyanazt a Llama modellt használja, amely ma a Ray-Ban Meta okosszemüvegen futó AI-élményeket hajtja, valamint egyedi kutatási modelleket, hogy bemutassa a jövőbeli viselhető eszközök fejlesztésének lehetséges felhasználási eseteit.

Akár útközben is kezdeményezhet kihangosító nélküli videohívást, hogy valós időben beszélhessen barátaival és családtagjaival, és a WhatsApp és a Messenger alkalmazásban is kapcsolatban maradhat az üzenetek megtekintéséhez és elküldéséhez. Nem kell elővennie a telefonját, feloldania, megkeresnie a megfelelő alkalmazást, és tudatni a barátjával, hogy késik a vacsoráról - mindezt a szemüvegén keresztül is megteheti.

https://youtube.com/watch?v=el7lUVvu8Bo%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Megosztott AR-játékokat játszhatsz az ország másik felén élő családtagjaiddal vagy a kanapé másik felén ülő barátoddal. Az Orion nagyméretű kijelzője pedig lehetővé teszi, hogy több ablakkal több feladatot is elvégezzen, anélkül, hogy laptopot kellene cipelnie magával.

Az Orionon ma elérhető tapasztalatok segítenek majd a jövőbeni fogyasztói AR-szemüvegcsaládunk útitervét megrajzolni. Csapataink a fejlesztő partnereinkkel együtt folytatják a fejlesztést és új, magával ragadó közösségi élmények létrehozását, és már alig várjuk, hogy megosszuk velük, mi következik.

Egy céltudatos termék prototípusa

Bár az Orion nem kerül a fogyasztók kezébe, ne tévedjünk: Ez egy nem kutatási prototípus. Ez a legcsiszoltabb termékprototípus, amit valaha is kifejlesztettünk - és ez valóban reprezentatív valamire, ami lehetne a fogyasztóknak történő szállítás. Ahelyett, hogy siettettük volna a polcokra kerülést, úgy döntöttünk, hogy először a belső fejlesztésre összpontosítunk, ami azt jelenti, hogy gyorsan építkezhetünk, és továbbra is kitolhatjuk a technológia és az élmények határait.

Ez pedig azt jelenti, hogy gyorsabban jutunk el egy még jobb fogyasztói termékhez.

Mi következik ezután

Két nagy akadály állt régóta a mainstream fogyasztói AR-szemüvegek útjában: a technológiai áttörések, amelyek ahhoz szükségesek, hogy nagy kijelzőt tudjanak létrehozni egy kompakt szemüvegformátumban, valamint a hasznos és lenyűgöző AR-élmények szükségessége, amelyek a szemüvegeken futtathatók. Az Orion egy hatalmas mérföldkő, amely most először nyújt valódi AR-élményeket ésszerűen stílusos hardveren.

Most, hogy megosztottuk az Oriont a világgal, néhány dologra összpontosítunk:

• Az AR-kijelző minőségének hangolása a még élesebb megjelenítés érdekében
• Optimalizálás, ahol csak tudunk, hogy a formafaktor még kisebb legyen
• Méretarányos építés a megfizethetőbbé tétel érdekében

A következő néhány évben várhatóan olyan új eszközökkel találkozhat tőlünk, amelyek a K+F erőfeszítéseinkre épülnek. Az Orion számos innovációját pedig kiterjesztettük a jelenlegi fogyasztói termékeinkre, valamint a jövőbeli terméktervünkre. Optimalizáltuk néhány térérzékelési algoritmusunkat, amelyek mind az alábbi rendszereken futnak Meta Quest 3S és az Orion. Bár a tekintetet és a finom gesztusos beviteli rendszert eredetileg az Orionhoz terveztük, tervezzük, hogy a jövőbeni termékekben is használni fogjuk. És vizsgáljuk az EMG csuklópántok használatát a jövőbeli fogyasztói termékekben is.

Az Orion nem csupán egy ablak a jövőbe - hanem egy pillantás a ma elérhető, nagyon is valós lehetőségekre. Azzal a céllal építettük, amihez a legjobban értünk: segíteni az embereknek kapcsolatot teremteni. A Ray-Ban Meta szemüvegtől az Orionig láttuk, hogy milyen jót tesz az, ha az emberek a fizikai világban is jobban jelen vannak, és nagyobb hatalommal rendelkeznek, miközben a digitális világ minden további gazdagságát is kihasználják.

Úgy gondoljuk, hogy nem kellene választania a kettő között. A következő számítástechnikai platformmal pedig nem is kell.

---

Az Orionnal kapcsolatos további információkért tekintse meg ezeket a blogbejegyzéseket:

• Orion Compute Puck: Az eszköz története, amely lehetővé tette az AR-szemüvegeinket
• Zéróról az egyre: Hogyan forradalmasítják egyedi szilícium és chipjeink az AR-t?
• Kristálytiszta: Szilícium-karbid hullámvezetőink és az Orion nagy FoV-je felé vezető út