Anul trecut, la Connect, am dezvăluit Orion-prima noastră pereche adevărată de ochelari AR. Punctul culminant al activitatea noastră de la Reality Labs din ultimul deceniuOrion combină avantajele unui ecran holografic de mari dimensiuni și ale asistenței AI personalizate într-o formă confortabilă, care poate fi purtată toată ziua. A atras atenția pentru câmpul său vizual de top, ghidurile de undă din carbură de siliciu, proiectoarele uLED și multe altele. Dar astăzi, ne îndreptăm atenția către un erou necunoscut al Orion: pucul de calcul.

Conceput pentru a se strecura ușor în buzunar sau în geantă, astfel încât să îl puteți purta aproape oriunde în timpul zilei, pucul descarcă puterea de procesare a Orion pentru a rula logica aplicației și pentru a permite o formă mai convingătoare și mai mică pentru ochelari. Acesta se conectează fără fir la ochelari și la brățara EMG pentru o experiență fără întreruperi.
Setați-l și uitați-l, nu?
Dar povestea din spate a pucului - chiar și ca prototip - este implicată, cu un arc dramatic pe care nu l-ai ghici niciodată după aspectul său.
"Când construiești așa ceva, începi să intri în limitele fizicii", explică Rahul Prasad, director de gestionare a produselor. "În ultimii 50 de ani, Legea lui Moore a făcut ca totul să fie mai mic, mai rapid și cu o putere mai mică. Problema este că acum începi să te lovești de limite privind cantitatea de căldură pe care o poți disipa, cantitatea de baterie pe care o poți comprima și cantitatea de performanță a antenei pe care o poți introduce într-un obiect de o anumită dimensiune."
În timp ce retrospectiva poate fi 20/20, potențialul pucului nu a fost imediat evident. Când ești primul care construiește ceva, trebuie să explorezi toate posibilitățile, fără să lași nicio piatră neîntoarsă. Cum construiești ceva pe care unii l-ar putea considera mai degrabă un accesoriu nedorit decât o parte esențială a pachetului?
"Știam că pucul era un dispozitiv suplimentar pe care le ceream oamenilor să îl poarte cu ei", notează Jared Van Cleave, Product Design Engineering Manager, "așa că am analizat cum să transformăm bug-ul într-o caracteristică."
În cele din urmă, această etică a dat roade, deoarece pucul stoarce o mulțime de computere (și chiar mai mult siliciu personalizat proiectat de Meta pentru AI și percepția mașinilor) într-o dimensiune mică. Acest lucru a fost esențial pentru a ajuta Orion să treacă de la domeniul science fiction la realitate.
"Dacă nu ați avea pucul, nu ați putea avea experiențele pe care Orion le oferă în factorul său de formă - punct", spune Prasad. "O experiență AR bună necesită performanțe foarte ridicate: rate ridicate ale cadrelor, latență extrem de scăzută, gestionare fină a rețelelor wireless și a energiei etc. Puck-ul și ochelarii trebuie să fie coproiectați pentru a lucra împreună foarte strâns, nu doar la nivelul aplicației, ci și la nivelul sistemului de operare, firmware-ului și hardware-ului. Și chiar dacă s-ar coproiecta un smartphone pentru a funcționa cu ochelari AR, cerințele de performanță ridicate ar consuma bateria telefonului și ar absorbi capacitatea de calcul din cazurile de utilizare a telefonului. Pe de altă parte, pucul are propria sa baterie de mare capacitate, SoC de înaltă performanță și un co-procesor AI personalizat Meta-designed optimizat pentru Orion."
Desigur, pucul nu a fost proiectat peste noapte. A necesitat ani de muncă iterativă.
"Nu știam cum ar fi vrut oamenii să interacționeze cu Orion din punct de vedere al intrărilor - nu exista nimic din ceea ce puteam elabora pe piață", spune managerul de produs Matt Resman. "Dacă vă uitați la primele noastre prototipuri de ochelari, acestea erau niște căști masive care cântăreau trei sau patru kilograme. Iar atunci când încerci să construiești un produs, este foarte dificil să înțelegi experiența utilizatorului dacă nu ai factorul de formă potrivit. Cu pucul, am putut să realizăm prototipuri foarte rapid pentru a începe să înțelegem cum îl vor folosi oamenii."

Numit Omega în primele zile, pucul a fost inițial imaginat de ceea ce era atunci Oculus Research ca o bandă în formă de Ω care ar merge în jurul gâtului utilizatorului și ar fi conectată la ochelari...

... până când unele noi inovații ale echipei wireless Reality Labs, printre altele, le-au permis să taie cablul. Acest lucru a permis un factor de formă mai portabil sau de buzunar / în geantă, care a deschis o mulțime de posibilități.
"La acel moment, apelarea realității augmentate era încă un caz de utilizare primar", explică Van Cleave. "Pucul era locul în care erau ancorate videoclipurile holografice. Îl puneai pe masă, cu bancul de senzori îndreptat spre tine, îți făcea o imagine și apoi proiecta persoana cu care vorbeai de pe suprafața pucului pentru apel."

"Orion este despre conectarea oamenilor și despre a ne aduce împreună", spune Resman. "Unul dintre conceptele inițiale pentru puc a fost să ajute la crearea acestui sentiment de prezență cu alți oameni și să permită această formă mai bogată de comunicare."
"Nu seamănă cu nimic din ceea ce ați văzut vreodată - dispozitivul are potențialul de a crea interacțiuni cu adevărat amuzante și unice", adaugă designerul industrial Emron Henry. "Experiența utilizatorului seamănă puțin cu eliberarea unui duh dintr-o sticlă, în care hologramele ies fără probleme din dispozitiv și se dizolvă înapoi în el."
După cum probabil vă puteți da seama până acum, pucul are mai mult potențial decât ceea ce a devenit în cele din urmă o caracteristică. În plus față de senzorii și camerele care ar fi fost utilizate pentru apelurile AR, pucul are senzori haptici și senzori 6DOF care i-ar putea permite să fie utilizat ca un controler urmărit pentru a selecta și manipula obiecte virtuale și a juca jocuri AR. Echipa a explorat, de asemenea, intrările tactile capacitive și de forță, astfel încât pucul să poată servi ca un gamepad atunci când este ținut atât în modul portret, cât și în modul peisaj.
"Vorbeam despre nevoia de a purta acest lucru în plus", spune Van Cleave. "Cum îl putem face mai util? A existat un întreg curent de lucru în jurul acestui subiect. Iar la un moment dat, ipoteza era că jocurile AR vor fi acest caz de utilizare mortal."
La început, am știut că trebuie să explorăm posibilitățile pucului de a face lucruri pe care telefoanele nu le pot face. În cele din urmă, am ajuns să folosim privirea ochilor, EMG și urmărirea mâinii pentru jocurile AR, cum ar fi Stargazer și Pong, dar am creat diverse demo-uri și jocuri care foloseau pucul ca un controler în primele zile ale Orion.

0:00 / 0:00

0:00 / 0:00

0:00 / 0:00
Explorări redate ale pucului ca un controler 6DOF pentru jocuri AR precum Pong.
"Pentru că nu este un telefon, asta ne-a oferit multă libertate de design", adaugă Prasad. "Poate fi mai gros, îl pot face mai rotunjit, astfel încât să se potrivească confortabil în mână ca un controler. Este destul de incredibil că pucul este de fapt mai mic decât un telefon obișnuit, dar este mai puternic decât un telefon, deoarece are un co-procesor Meta-designed pentru inteligență artificială și percepția mașinilor."
Echipa a analizat modul în care un joc AR de calitate ar putea fi diferit de un joc MR sau de un joc pe consolă. Aceasta a însemnat explorarea diferitelor posibilități pentru un controler de joc AR, inclusiv joystick-uri, dispunerea fizică a butoanelor, butoane de declanșare și altele.
"Nu am ajuns să construim niciunul dintre acele lucruri", notează Van Cleave. "Am creat prototipuri, dar nu am făcut niciodată o construcție completă. Am vrut să păstrăm lucrurile simple. Am vrut să facem aceste interfețe moi, dar nu să facem butoane fizice, mecanice."
Și, deși senzorii și haptica nu au fost activate în prototipul produsului finit, acestea au servit o funcție integrală în timpul dezvoltării, permițând echipelor să depună erori prin simpla atingere a părții superioare a dispozitivului de câteva ori pentru a declanșa un raport de eroare.
Pe măsură ce inteligența artificială a început să ocupe locul central ca un caz de utilizare cheie, calculul a devenit din ce în ce mai important. În cele din urmă, pucul găzduiește conectivitatea wireless, puterea de calcul și capacitatea bateriei Orion - o realizare tehnică uriașă în sine - toate acestea contribuind la reducerea greutății și a factorului de formă al ochelarilor, disipând în același timp mult mai multă energie termică datorită suprafeței sale.
De-a lungul evoluției sale, un lucru a rămas același: pucul este mai mult decât se vede cu ochiul liber. Adoptarea ideilor neconvenționale a permis echipelor noastre să exploreze, să depășească limitele și să construiască viitorul.
"Definim o categorie care nu prea există încă", remarcă Henry. "Așa cum v-ați aștepta cu cercetarea și dezvoltarea, au existat începuturi și opriri de-a lungul drumului. Cum se vor aștepta utilizatorii să interacționeze cu hologramele? Ar prefera să utilizeze o telecomandă AR sau urmărirea mâinii, privirea ochilor și EMG sunt suficiente pentru a introduce date? Ce se simte intuitiv, fără fricțiune, familiar și util?"
"Mai degrabă decât să privim pucul ca pe o simplă piatră, ne-am întrebat ce altceva am putea oferi pentru a-l diferenția și mai mult de telefoane și pentru a justifica de ce ai vrea să îl porți cu tine", recunoaște Resman. "Puterea sa brută de calcul și designul său practic - care a contribuit la deblocarea unui factor de formă pentru ochelari pe care îl puteți purta în mod realist toată ziua - oferă în cele din urmă suficientă valoare? Sarcina noastră este să ajutăm să răspundem la aceste întrebări."
"La început, ne-am concentrat pe ceea ce putem face noi și nu poate face un telefon", adaugă Van Cleave. "Telefoanele trebuie să aibă ecran, trebuie să aibă o anumită dispunere fizică a butoanelor pe care utilizatorii o așteaptă. Iar noi nu avem aceste constrângeri. Pucul nostru de calcul poate fi orice vrem noi să fie."
Pentru mai multe informații despre Orion, consultați aceste articole de blog: