Tavaly a Connect-en bemutattuk a Orion-az első igazi AR-szemüvegünk. A csúcspontja a a Reality Labs-ben végzett munkánk az elmúlt évtizedbenAz Orion a nagyméretű holografikus kijelző és a személyre szabott mesterséges intelligencia segítség előnyeit ötvözi egy kényelmes, egész nap viselhető formában. Az iparágban vezető látómezeje, szilícium-karbid hullámvezetői, uLED projektorai és egyéb tulajdonságai miatt kapott némi figyelmet. Ma azonban az Orion egy meg nem énekelt hősére fordítjuk figyelmünket: a compute puckra.
Úgy tervezték, hogy könnyen becsússzon a zsebébe vagy a táskájába, így szinte bárhová magával viheti, amikor a napját tölti, a korong az Orion feldolgozási teljesítményét az alkalmazási logika futtatására fordítja, és lehetővé teszi a szemüveg meggyőzőbb, kisebb formájú kialakítását. A zökkenőmentes élmény érdekében vezeték nélkül csatlakozik a szemüveghez és az EMG csuklópánthoz.
Beállítani és elfelejteni, igaz?
De a korong háttértörténete - még prototípusként is - olyan drámai ívű, amelyet a megjelenése alapján nem is sejtenénk.
"Amikor valami ilyesmit építünk, a fizika határait kezdjük el feszegetni" - magyarázza Rahul Prasad termékmenedzsment igazgató. "Az elmúlt 50 évben a Moore-törvény mindent kisebbé, gyorsabbá és energiatakarékosabbá tett. A probléma az, hogy most már kezdünk eljutni a határokhoz, hogy mennyi hőt lehet elvezetni, mennyi akkumulátort lehet összenyomni, és mennyi antennateljesítményt lehet egy adott méretű objektumba beletenni.""
Bár a visszatekintés 20/20 lehet, a korongban rejlő potenciál nem volt azonnal nyilvánvaló. Ha elsőként építesz meg valamit, minden lehetőséget fel kell tárnod, és minden követ meg kell forgatnod. Hogyan építhetsz meg valamit, amiről egyesek azt gondolhatják, hogy inkább egy nemkívánatos kiegészítő, mint a csomag kritikus része?
"Tudtuk, hogy a korong egy extra eszköz, amit az emberektől kérünk, hogy hordjanak magukkal" - jegyzi meg Jared Van Cleave, a terméktervezésért felelős mérnöki vezető - "ezért azt vizsgáltuk, hogyan lehetne a hibát funkcióvá alakítani."
Végül ez az etika kifizetődött, mivel a korong sok számítási lehetőséget (és még több Meta által tervezett egyedi szilíciumot az AI és a gépi érzékelés számára) présel kis méretbe. Ez nagyban hozzájárult ahhoz, hogy az Orion a sci-fi birodalmából a valóságba lépjen.
"Ha nem lenne meg a korong, akkor nem tudnánk olyan élményeket szerezni, mint amilyeneket az Orion kínál a maga formavilágában - periódus" - mondja Prasad. "A jó AR-élmény igazán nagy teljesítményt igényel: magas képkocka sebességet, rendkívül alacsony késleltetést, finomra szabott vezeték nélküli és energiagazdálkodást stb. A korongot és a szemüveget úgy kell megtervezni, hogy nagyon szorosan együttműködjenek, nemcsak az alkalmazás, hanem az operációs rendszer, a firmware és a hardver szintjén is. És még ha egy okostelefont együtt terveznénk is az AR-szemüveggel való együttműködésre, az igényes teljesítménykövetelmények lemerítenék a telefon akkumulátorát, és elszívnák a számítási kapacitást a telefonos felhasználási esetektől. Ezzel szemben a korong saját, nagy kapacitású akkumulátorral, nagy teljesítményű SoC-vel és egy egyedi, Meta által tervezett, az Orionhoz optimalizált AI társprocesszorral rendelkezik."
Természetesen a korongot nem egyik napról a másikra tervezték. Évekig tartó iteratív munkára volt szükség.
"Nem tudtuk, hogy az emberek hogyan akarnak majd interakcióba lépni az Orionnal a bemenet szempontjából - nem volt semmi, amit a piacról le tudtunk volna venni" - mondja Matt Resman termékmenedzser. "Ha megnézzük a korai szemüveg prototípusainkat, azok hatalmas, három-négy kilós headsetek voltak. És amikor egy terméket próbálsz megalkotni, nagyon nehéz megérteni a felhasználói élményt, ha nem a megfelelő formátényezőt használod. A koronggal nagyon gyorsan tudtunk prototípusokat készíteni, hogy megértsük, hogyan használnák az emberek."
A korai időkben Omega kódnevű korongot az akkori Oculus Research eredetileg egy Ω-alakú szalagként képzelte el, amely a felhasználó nyakára kerül, és a szemüveghez van kötve....
... amíg a Reality Labs vezeték nélküli csapatának néhány újítása lehetővé nem tette számukra, hogy elvágják a kábelt. Ez lehetővé tette a kézben tartható vagy zsebben hordozható / táskába helyezhető formát, ami rengeteg lehetőséget nyitott meg.
"Akkoriban a kiterjesztett valósággal történő telefonálás még mindig az elsődleges felhasználási terület volt" - magyarázza Van Cleave. "A korong volt az a hely, ahol a holografikus videókat lehorgonyozták. Letetted az asztalra úgy, hogy az érzékelőpad feléd nézett, leképezett téged, majd a korong felületéről kivetítette, hogy kivel beszélsz a híváshoz"."
"Az Orion az emberek összekapcsolásáról és összehozásáról szól" - mondja Resman. "A korong egyik kezdeti koncepciója az volt, hogy segítsen megteremteni a jelenlét érzését más emberekkel, és lehetővé tegye a kommunikációnak ezt a gazdagabb formáját."
"Ez semmihez sem hasonlítható, amit valaha is láttál - az eszköz igazán szórakoztató és egyedi interakciókat hozhat létre" - teszi hozzá Emron Henry ipari tervező. "A felhasználói élmény kicsit olyan, mintha egy dzsinnt szabadítanánk ki a palackból, ahol a hologramok zökkenőmentesen bukkannak elő és oldódnak vissza az eszközbe."
Ahogy mostanra már valószínűleg láthatod, a korongban több lehetőség rejlik, mint amit végül funkcióként bekapcsoltak. Az AR-híváshoz használt érzékelők és kamerák mellett a korong haptikus és 6DOF érzékelőkkel is rendelkezik, amelyek lehetővé teszik, hogy követett vezérlőként használjuk virtuális tárgyak kiválasztására és manipulálására, valamint AR-játékok lejátszására. A csapat a kapacitív és erőérintéses bevitelt is vizsgálta, így a korong játékvezérlőként is szolgálhatna, ha portré- és tájoló módban tartanák.
"Arról beszélgettünk, hogy szükség van erre a plusz dologra" - mondja Van Cleave. "Hogyan tehetnénk hasznosabbá? Egy egész munkafolyamattal foglalkoztunk. És egy ponton az volt a hipotézis, hogy az AR-játékok lesznek a fő felhasználási területek."
Már korán tudtuk, hogy fel kell fedeznünk a korong azon lehetőségeit, amelyekkel a telefonok nem tudnak olyasmit tenni, amit a korongok nem tudnak. Végül a szem tekintet, az EMG és a kéz követése mellett döntöttünk az AR-játékokhoz, például a Stargazerhez és a Ponghoz, de az Orion korai időszakában különböző demókat és játékokat prototipizáltunk, amelyek a korongot kontrollerként használták.
0:00 / 0:00
0:00 / 0:00
0:00 / 0:00
A korong 6DOF kontrollerként való felhasználásának felfedezése olyan AR játékokhoz, mint a Pong.
"Mivel ez nem egy telefon, ez nagy tervezési szabadságot adott nekünk" - teszi hozzá Prasad. "Lehet vastagabb, kerekebbé tehetem, hogy kényelmesen illeszkedjen a kezedbe, mint egy kontroller. Elég hihetetlen, hogy a korong valójában kisebb, mint egy átlagos telefon, de erősebb, mint egy telefon, mert van benne egy Meta által tervezett társprocesszor a mesterséges intelligenciához és a gépi érzékeléshez."
A csapat annak a kérdésnek járt utána, hogy miben különbözhet egy minőségi AR-játék egy MR- vagy konzoljátéktól. Ez azt jelentette, hogy az AR játékvezérlő különböző lehetőségeit vizsgálták meg, beleértve a joystickokat, a fizikai gombok elrendezését, az indítógombokat és egyebeket.
"Végül nem építettünk meg semmit ezekből a dolgokból" - jegyzi meg Van Cleave. "Prototípusokat készítettünk, de soha nem építettük meg teljesen. Egyszerűnek akartuk tartani. Meg akartuk csinálni ezeket a puha interfészeket, de nem akartunk fizikai, mechanikus gombokat készíteni."
És bár az érzékelők és a haptika nem voltak bekapcsolva a kész termék prototípusában, a fejlesztés során szerves funkciót töltöttek be, lehetővé téve a csapatok számára, hogy a hibák bejelentését a készülék tetejének néhányszori megérintésével indítsák el.
Ahogy a mesterséges intelligencia mint kulcsfontosságú felhasználási mód kezdett a középpontba kerülni, a számítástechnika egyre inkább a figyelem középpontjába került. Végül a korong ad otthont az Orion vezeték nélküli csatlakoztathatóságának, számítási teljesítményének és akkumulátorkapacitásának - ami önmagában is hatalmas technikai teljesítmény -, és mindez segít csökkenteni a szemüveg súlyát és formáját, miközben a felületének köszönhetően sokkal több hőt vezet el.
A korong fejlődése során egy dolog nem változott: a korong több, mint ami a gyakorlatlan szemnek látszik. A szokatlan ötletek felkarolása lehetővé tette csapataink számára, hogy felfedezzék, feszegessék a határokat és építsék a jövőt.
"Olyan kategóriát határozunk meg, amely még nem igazán létezik" - jegyzi meg Henry. "Ahogy az a kutatás-fejlesztésnél elvárható, az út során voltak kezdetek és megállások. Hogyan fognak a felhasználók a hologramokkal interakcióba lépni? Inkább AR távirányítót használnának, vagy elegendő a kézkövetés, a tekintet és az EMG a bevitelhez? Mit éreznek intuitívnak, kevéssé súrlódónak, ismerősnek és hasznosnak?"
"Ahelyett, hogy a korongot csak egy kőnek tekintettük volna, azt kérdeztük magunktól, mi mást tudnánk még nyújtani, hogy még jobban megkülönböztessük a telefonoktól, és megindokoljuk, miért érdemes magunkkal hordani" - ismeri el Resman. "Vajon a nyers számítási teljesítménye és a praktikus kialakítása - amely segített feloldani egy olyan szemüvegformát, amelyet reálisan egész nap viselhetsz - végül is elég értéket nyújt?". A mi feladatunk, hogy segítsünk megválaszolni ezeket a kérdéseket."
"Korán váltottunk, és arra összpontosítottunk, hogy mit tudunk tenni, amit egy telefon nem tud" - teszi hozzá Van Cleave. "A telefonoknak rendelkezniük kell a képernyővel, és a felhasználók által elvárt bizonyos fizikai gombelrendezéssel. Nekünk nincsenek ilyen korlátaink. A mi számítógépeink olyanok lehetnek, amilyenek csak akarjuk."
Az Orionnal kapcsolatos további információkért tekintse meg ezeket a blogbejegyzéseket:
HU 
EN 
BG 
CS 
ET 
EL 
HR 
LT 
LV 
FR 
NL 
PL 
PT 
RO 
SL 
SK