În 2017, cercetătorul șef Reality Labs Michael Abrash, susținută de fondatorul și directorul general al Meta, Mark Zuckerberg, a înființat o nouă echipă secretă în cadrul a ceea ce era pe atunci Oculus Research pentru a construi fundația următoarei platforme de calcul. Sarcina lor herculeană: Să creeze o soluție de siliciu personalizată care să poată susține cerințele unice ale viitoarelor ochelari de realitate augmentată-o performanță tehnică care a necesitat reimaginarea fiecărei componente pentru un dispozitiv de purtat toată ziua Ochelari AR factor de formă care pur și simplu nu exista încă.

Unghiul frontal al prototipului ochelarilor Orion AR.

Factor de formă compact, spațiu problematic considerabil

Trecând de la câțiva cercetători la sute de oameni pe partea de produse, echipa de siliciu personalizat a fost creată pe baza premisei că ochelarii AR nu se pot baza pe siliciul disponibil în smartphone-urile actuale. Și este o premisă confirmată de cele câteva cipuri personalizate din interiorul Orion, primul nostru prototip de ochelari AR adevărați.

"Construirea navei pe măsură ce aceasta părăsește portul - exact asta făceam", spune Jeremy Snodgrass, director de strategie pentru tehnologii avansate. "A trebuit să mărim o echipă care era modestă și să construim simultan aceste cipuri. A fost fascinant să văd cum conducerea aducea noi angajați la bord, dezvoltând în același timp o cultură care aprecia agilitatea. Nimic nu era problema altcuiva. Luai o vâslă și începeai să vâslești, chiar dacă nu era exact ceea ce ai fost angajat să faci. A fost o perioadă foarte, foarte interesantă."

"Aproape totul despre Orion a fost nou pentru lume în multe feluri", este de acord directorul tehnic al arhitecturii Display, Mike Yee. "Unele dintre idei au existat, dar nimeni nu și-a asumat proiectul de cercetare pentru a construi efectiv o pereche de ochelari AR care să poată fi purtați toată ziua."

Echipa a trebuit să ofere o experiență AR convingătoare cu un consum de energie cât mai redus posibil. Factorul de formă al ochelarilor nu poate disipa decât o cantitate limitată de căldură și nu poate găzdui decât o capacitate limitată a bateriei. Prin urmare, experiențele pe care ochelarii le pot oferi depind complet de siliciu. Cu alte cuvinte, dacă mențineți constante capacitățile termice și ale bateriei, singura modalitate de a oferi o anumită experiență este de a optimiza siliciul.

"Proiectarea unei noi arhitecturi pentru Orion a impus echipei nu numai să împingă agresiv tehnologiile existente, cum ar fi wireless-ul și afișajele, ci și să își asume riscuri în ceea ce privește noile tehnologii", spune Neeraj Choubey, director de gestionare a produselor. "De exemplu, echipa a dezvoltat un accelerator de învățare automată (ML) fără un caz de utilizare clar la momentul respectiv, determinată de convingerea puternică că ML va deveni din ce în ce mai importantă în produsele Meta. Pe Orion, fiecare accelerator ML este utilizat, iar în unele cazuri, acestea sunt suprasolicitate, servind funcții precum urmărirea ochilor și a mâinilor. În mod similar, echipa a dezvoltat protocoale de compresie personalizate pentru a reduce lățimea de bandă și consumul de energie pe măsură ce datele se deplasează de la calculează pucul la ecran. Dezvoltarea de siliciu personalizat pentru a atinge obiectivele factorului de formă ale Orion a necesitat atât o toleranță la ambiguitate ridicată, cât și o atenție meticuloasă la detalii pentru a oferi o arhitectură de sistem incredibil de complexă."

"Cea mai mare provocare pe care am avut-o a fost furnizarea de grafică redată cu lumea 3D blocată, împreună cu sunet spațializat care este redat astfel încât pare să emane dintr-un obiect virtual", notează Snodgrass. "A trebuit să încadrăm toate aceste componente electronice în capacitatea termică și spațiul fizic, iar apoi să le facem să funcționeze pe baterie, astfel încât să nu se încingă prea tare. Și a trebuit să facem toate acestea într-un factor de formă real al ochelarilor - nu un vizor mare, așa cum vedeți de obicei în categorie."

"Știam cum să oferim puterea de calcul necesară pentru a da viață viziunii noastre pentru Orion, dar ne-am confruntat cu o sarcină descurajantă: reducerea consumului de energie de 100 de ori", spune Robert Shearer, director de soluții SoC. "Acest lucru ne-a impus să depășim limitele proiectării siliciului, adoptând metodologii din diverse colțuri ale industriei - de la IoT la calculul de înaltă performanță - și inventând noi abordări pentru a acoperi diferențele. Partenerii noștri din industrie au crezut că suntem nebuni, și poate că nu s-au înșelat în totalitate. Dar exact de asta a fost nevoie: de dorința de a contesta înțelepciunea convențională și de a regândi totul. Construirea unui computer care îmbină perfect lumea virtuală și cea fizică necesită o înțelegere profundă a contextului, depășind cu mult ceea ce pot oferi platformele de calcul existente. În esență, am reinventat modul în care computerele interacționează cu oamenii, ceea ce a însemnat reimaginarea modului în care construim siliciu de la zero."

Componente exterioare Orion.

Magia microLED-urilor

Au existat momente în care lucrurile au întârziat sau a apărut o provocare tehnică aparent insurmontabilă, când a fost greu să menținem ritmul și moralul. Dar echipa a fost rezistentă, găsind căi de ocolire a obstacolelor - sau pur și simplu doborându-le.

Să luăm, de exemplu, ecranul lui Orion. Echipa de siliciu a fost responsabilă pentru siliciul din proiectorul ecranului care se află în colțurile ochelarilor.

"Pentru acele proiectoare, a existat o întrebare deschisă cu privire la posibilitatea de a obține microLED-urile într-o matrice cu o eficiență și o luminozitate suficient de ridicate pentru a implementa un afișaj cu câmp vizual larg", spune Snodgrass. "Existau mari îndoieli că am putea - că ar fi posibil în intervalul de timp pe care îl aveam în vedere - deoarece aceasta era o tehnologie foarte incipientă."

"Ne-am dat seama foarte devreme că trebuie să regândim multe dintre paradigmele de dezvoltare a produselor", adaugă Yee. "Cantitatea de lumină de care aveți nevoie pentru a realiza un afișaj utilizabil este mult mai puternică pentru ochelarii AR, deoarece, ca afișaj portabil, concurați cu soarele. Așadar, avem nevoie de niveluri de energie care să rivalizeze cu acesta - sau cel puțin acesta este obiectivul. Nu am ajuns încă acolo, dar acesta este un aspect important. Și asta înseamnă că aveți nevoie de surse de lumină pentru un ecran care sunt capabile de acest lucru și aveți nevoie de circuite care pot controla acest lucru. Și, în același timp, trebuie să îl faci mic".

Siliciu personalizat care conduce µLED-urile Orion.

În timp ce microLED-urile păreau cea mai potrivită sursă de lumină pentru proiectoare, siliciul a contribuit la deblocarea potențialului acestora.

"În cazul ecranelor, vorbim despre înălțimea pixelilor, care reprezintă distanța dintre punctele centrale ale pixelilor adiacenți", explică Yee. "Pentru televizoare, aceste distanțe sunt de sute de microni. În telefon, sunt multe, multe zeci de microni. Iar noi trebuia să reducem aceste distanțe la o singură cifră. Singurul producător de semiconductori cunoscut care putea ajunge acolo era siliciul."

Activitatea a fost complicată de faptul că suprafața din spate a ecranului trebuia să fie o bucată de siliciu și nimeni în lume nu proiectase siliciu pentru microLED-uri.

"La acea vreme, echipele de cercetare care existau reprofilaseră toate afișajele cu cristale lichide pe siliciu pentru a pune microLED-uri", spune Yee. "Nimeni nu proiectase până atunci un backplane pentru microLED-uri. Și ne-am confruntat cu o provocare destul de unică, deoarece este o componentă optică. Trebuie să fie plată. Nu o poți zgâria. Trebuie să aibă toate aceste caracteristici, deoarece atunci când vă uitați prin ghidurile de undă, prin proiectoare, vă uitați literalmente la suprafața superioară a bucății de siliciu."

Echipa de siliciu a dezvoltat o serie complexă de platforme de testare pentru aceste ecrane microLED care au implicat o coordonare strânsă cu furnizorii noștri globali. MicroLED-urile au o amprentă globală, provenind dintr-un anumit loc și fiind apoi transferate într-un alt loc unde au fost puse pe o plachetă. Plăcile au fost apoi expediate pentru a fi tăiate într-o anumită formă, urmate de o călătorie în SUA pentru a fi lipite împreună cu o altă placă, apoi expediate înapoi pe glob pentru ca modulul real să fie construit și testat. A fost un proces extrem de complicat, iar echipa Silicon a dezvoltat vehicule de testare pentru a testa fiecare etapă.

De asemenea, echipa a trebuit să găsească o modalitate de a furniza energie afișajelor microLED în volumul minuscul al colțurilor ochelarilor. Echipa noastră analogică a dezvoltat un cip personalizat de gestionare a energiei care se potrivește în acel volum.

"Livrarea de energie este crucială pentru astfel de dispozitive portabile cu factor de formă mic, unde dimensiunea bateriei este limitată și spațiul este limitat", notează Jihong Ren, director al Analog and Mixed Signal Systems. "Soluția noastră personalizată de circuite integrate de gestionare a alimentării utilizează tehnologii de ultimă oră pentru a optimiza eficiența energetică pentru sarcina noastră specifică de lucru la nivel de sistem, toate acestea încadrându-se în constrângerile de spațiu disponibile. Realizarea acestei soluții optime a necesitat o strânsă colaborare interdisciplinară cu echipele noastre mecanice, electrice, SoC, μLED și termice, asigurând o integrare perfectă a tuturor componentelor și maximizând performanța generală."

"Aceasta a fost o realizare uimitoare nu doar în domeniul ingineriei, ci și al managementului organizațional: reunirea unei echipe, lucrul pe diferite fusuri orare și cu toți acești furnizori diferiți", adaugă Snodgrass. "Într-un fel, gestionarea organizatorică a fost o provocare la fel de mare ca și îndeplinirea specificațiilor tehnice."

"Nu numai că designul este personalizat, dar și întregul proces de fabricație este personalizat", adaugă Yee. "Suntem norocoși să avem niște parteneri minunați în industrie care ne-au ajutat să facem acest lucru posibil. Ei văd potențialul pe termen lung al afișajelor AR ca întreg și, cu siguranță, viziunea Meta în acest sens. Așa că au fost dispuși să colaboreze cu noi pentru a realiza aceste personalizări și optimizări care să permită acest afișaj."

Ochelari Orion AR.

Iterarea întâlnește accelerarea

A existat o buclă de feedback strânsă între echipa de siliciu și mințile strălucite din Reality Labs Research și XR Tech care dezvoltau algoritmi. Cele din urmă echipe furnizau acești algoritmi, pe care primele îi transpuneau în hardware, eliminând costurile generale ale software-ului care rulează un procesor de uz general. Acest lucru însemna că algoritmii ar fi rulat la o putere mai mică, dar însemna, de asemenea, că echipa de siliciu era blocată. Odată ce algoritmii au fost întăriți, aceștia nu mai puteau face modificări.

"Să zicem că XR Tech dezvolta o anumită disciplină algoritmică", explică Ohad Meitav, director pentru arhitectură și algoritmi la Silicon Accelerators. "Ei dețin stiva algoritmică și performanța acesteia. Echipa mea, în colaborare cu ei, ar decide apoi cum să accelereze algoritmul, cum să întărească anumite părți ale algoritmului și cum să îl introducă efectiv în hardware într-un mod care să funcționeze foarte eficient. Apoi, XR Tech își va adapta pachetul software pentru a ține cont de hardware. Este un proces foarte iterativ."

O altă poveste de succes este colaborarea echipei de siliciu cu Reality Labs Research pentru a crea un nou algoritm de reproiectare.

"Aveam nevoie ca algoritmul de reproiectare să suporte o varietate de distorsiuni și corecții diferite", notează arhitectul Silicon Steve Clohset. "Algoritmul dezvoltat de RL-R pe care am ajuns să îl folosim nu este utilizat în calculul general. Și până în prezent, se dovedește a fi un instrument destul de puternic."

Odată ce algoritmii au fost întăriți și hardware-ul a fost optimizat, echipa de introducere a siliciului a testat cipurile personalizate.

"Chipset-ul de siliciu personalizat al Orion este plin de complexitate", spune directorul senior al sistemului și infrastructurii end-to-end, Liping Guo. "Crearea și validarea cipurilor independente și a interoperabilităților între acestea într-o perioadă scurtă de timp reprezintă o provocare incredibilă. Din fericire, operăm într-un mediu integrat pe verticală, în care Reality Labs deține întregul pachet - de la siliciu și firmware de nivel scăzut la sistemul de operare, software și experiențe de nivel superior. Am profitat din plin de acest lucru, lucrând îndeaproape cu partenerii noștri interfuncționali, și am transferat integrarea noastră între stive în etapa de validare a siliciului. Orion a fost proiectul nostru pilot pentru această metodologie - ne-am dezvoltat mușchii shift-left și am creat o bază solidă pentru ca Reality Labs să beneficieze de toate avantajele siliciului personalizat în viitor."

După instalare, a venit timpul să optimizăm pentru software.

"Există un proces iterativ în care se începe cu un pachet software complet neoptimizat, doar pentru ca totul să fie pornit și să funcționeze", spune Snodgrass. "Apoi, unul câte unul, treceți prin subsisteme și începeți să optimizați software-ul pentru acel hardware specific - inclusiv reducerea cantității de memorie pe care o utilizează software-ul. Hardware-ul ar putea fi proiectat frumos, dar nu veți obține eficiența energetică teoretică dacă nu investiți la fel de mult sau mai mult timp pentru ca software-ul să profite pe deplin de hardware. Aceasta este povestea lui Orion: hardware și software optimizate la maxim. Nu lăsați niciun picojoule sau miliwatt în urmă."

Și deși Orion poate fi un prototip, munca depusă pentru acesta are un potențial considerabil de a influența foaia de parcurs a Meta.

"Privim IP-urile de siliciu pe care le construim ca platforme, în sensul că acestea sunt IP-uri valoroase pe care le vom îmbunătăți de la o generație sau de la un produs la altul", adaugă Meitav. "Toți algoritmii de viziune computerizată și grafică nu sunt construiți doar pentru Orion. Ei vor continua să informeze produsele viitoare."

Activitatea noastră în domeniul siliciului implică crearea de soluții noi și, în același timp, colaborarea strânsă cu partenerii. De fapt, influența echipei de siliciu se extinde dincolo de Orion, atât la Ochelari Ray-Ban Meta și Căști Meta Quest în prezent - chiar dacă ambele utilizează cipuri de la terți. Echipa de siliciu împărtășește în mod regulat munca sa cu echipa de realitate mixtă, arătând ce este posibil în ceea ce privește eficiența energetică. Echipa MR împărtășește apoi aceste rezultate cu parteneri precum Qualcomm pentru a contribui la proiectarea viitoarelor cipuri. Și pentru că echipa de siliciu utilizează aceleași procesoare de semnal digital (DSP) de pe raft ca și ochelarii Ray-Ban Meta, au putut să împărtășească lecțiile învățate și cele mai bune practici la implementarea și scrierea codului pentru aceste DSP-uri pentru a ajuta la îmbunătățirea experiențelor audio disponibile pe ochelarii noștri AI.

Iar acest schimb de cunoștințe se face în ambele sensuri: Echipa MR a oferit echipei de silicon informații despre lucruri precum TimeWarp asincron și Aplicația SpaceWarp în producție.

"Ceea ce face o persoană în producție este mult mai interesant decât ceva ce am putea face cu un prototip", spune Clohset. "Am încercat să integrăm cât mai mult posibil ceea ce făceau ei cu urzelile."

Ambiguitate < Ambiție

Deoarece Orion a fost cu adevărat zero la unu, echipele implicate au trebuit să se confrunte cu o cantitate exagerată de ambiguitate.

"Cu Orion, nu pot supraestima cât de complicate au devenit lucrurile din cauza ambiguității", spune Clohset. "Când faci un computer, de exemplu, în general ai o idee bună despre cum va fi afișajul. Dar noi nu știam ce va fi ghidul de undă în cele din urmă, așa că a trebuit să eșantionăm diferite ghiduri de undă și să găsim un mecanism care să poată face față celui mai rău scenariu, deoarece nu știam unde vor ateriza lucrurile. O optimizare aici ar concola cu toate aceste alte alegeri și ai ajunge la această matrice cu toate aceste lucruri diferite pe care le aveai ca suport și încercai să le validezi pentru că nu știai unde va ateriza produsul în șase luni."

Este important să rețineți că Orion nu este doar o pereche de ochelari AR - este o constelație de trei părți de hardware. O mare parte din procesare are loc pe calculează pucul, ceea ce necesită o legătură puternică între acesta și ochelari. Adăugați brățară EMG de suprafață în buclă, iar arhitectura sistemului devine și mai complicată.

"Aceasta a fost o provocare enormă pentru echipele care trebuiau să o rezolve, iar toate acestea funcționează", spune Snodgrass. "A fost o colaborare uimitoare între echipa de siliciu, echipa wireless și echipele de software din întreaga organizație."

Discul de calcul al lui Orion.

"Cu Orion, am construit o întreagă echipă cu o mare diversitate de ingineri, iar aceștia au reușit să proiecteze o conductă nouă", adaugă Clohset. "Este o conductă care gestionează șase grade de libertate de mișcare a obiectelor în spațiul 3D. Aceasta utilizează propriul driver de afișare personalizat. A trebuit să facem corecții cu adevărat unice ale calității imaginii. Și cred că provocarea pentru noi a fost că, deoarece acesta a fost un proiect zero la unu, nu a existat nicio specificație existentă pe care să o ajustăm și să o îmbunătățim. Totul aici este complet nou, așa că am avut latitudinea de a face totul."

La fel ca puc are unele caracteristici latente ascunse sub suprafață, siliciul personalizat este, de asemenea, mai puternic decât greutatea sa. Deși Orion nu permite utilizatorului să facă fotografii cu camerele sale RGB, siliciul este capabil să le suporte, precum și avatari codec. Și la fel cum pucul a ajutat la deblocarea unui factor de formă pentru ochelari adevărați prin descărcarea unei mari părți a calculului, siliciul personalizat de la Orion s-a dovedit a fi o piesă necesară a puzzle-ului AR.

"Pentru a da viață unei experiențe zero la unu precum ochelarii AR, aveți nevoie de siliciu personalizat - stop complet", explică Snodgrass. "În timp, dacă există o piață, atunci furnizorii de siliciu vor dezvolta produse pentru a satisface cererea. Dar pentru zero-la-unu, nu poți lua ceva care există pe raft, care este destinat unui produs diferit și să-l potrivești într-o matriță nouă. Trebuie să investești în ceva personalizat. Iar pentru a da viață acestor experiențe zero-la-unu, aveți nevoie de o colaborare largă între partenerii software, designerii industriali, inginerii mecanici și nu numai."

"Prin eliberarea de modelele mentale tradiționale, am creat ceva cu adevărat remarcabil", adaugă Shearer. "Credem că această platformă de calcul reprezintă viitorul tehnologiei - unul care va revoluționa modul în care trăim, muncim și interacționăm unii cu alții. Suntem încântați să fim în fruntea acestei inovații, depășind limitele a ceea ce este posibil și contribuind la modelarea cursului istoriei."

Pentru mai multe informații despre Orion, consultați aceste articole de blog:

• Clar ca cristalul: Ghidurile noastre de undă din carbură de siliciu și calea către FoV-ul mare al Orion
• Orion's Compute Puck: Povestea din spatele dispozitivului care a contribuit la realizarea ochelarilor noștri AR

Când am început să oferim demonstrații ale Orion la începutul acestui an, mi-am amintit de o replică pe care o auziți des la Meta - de fapt, era chiar în prima noastră scrisoare către potențialii acționari în 2012: Codul câștigă argumentele. Probabil că am învățat la fel de multe despre acest spațiu de produse din câteva luni de demonstrații în viața reală decât din anii de muncă necesari pentru realizarea lor. Nimic nu poate înlocui construirea efectivă a unui produs, punerea lui în mâinile oamenilor și învățarea din modul în care aceștia reacționează la el.

Orion nu a fost singurul nostru exemplu în acest sens în acest an. Programul nostru hardware pentru realitate mixtă și Ochelari AI au atins ambele un nou nivel de calitate și accesibilitate. Stabilitatea acestor platforme le permite dezvoltatorilor noștri de software să avanseze mult mai rapid în toate domeniile, de la sistemele de operare la noile caracteristici ale inteligenței artificiale. Acesta este modul în care văd că metaversul începe să devină mai clar și de ce sunt atât de încrezător că anul viitor va fi cel mai important din istoria Reality Labs.

https://youtube.com/watch?v=xwMNZb6UE1o%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

2024 a fost anul în care ochelarii cu inteligență artificială au dat lovitura. Când am început să fabricăm ochelari inteligenți în 2021, ne-am gândit că aceștia ar putea fi un prim pas frumos către ochelarii AR pe care doream să îi construim în cele din urmă. În timp ce căștile de realitate mixtă sunt pe cale să devină o platformă de calcul de uz general, la fel ca PC-urile de astăzi, am văzut ochelarii ca fiind evoluția naturală a platformelor de calcul mobile de astăzi. Așa că am vrut să începem să învățăm din lumea reală cât mai curând posibil.

Cel mai important lucru pe care l-am învățat este că ochelarii sunt de departe cel mai bun factor de formă pentru un dispozitiv cu adevărat nativ al inteligenței artificiale. De fapt, acestea ar putea fi prima categorie de hardware care să fie complet definită de AI de la început. Pentru mulți oameni, ochelarii sunt locul în care un asistent AI are cel mai mare sens, mai ales atunci când este un sistem multimodal care poate înțelege cu adevărat lumea din jurul tău.

Ne aflăm chiar la începutul curbei în S pentru această categorie de produse și există oportunități nelimitate în viitor. Unul dintre lucrurile care mă entuziasmează cel mai mult pentru 2025 este evoluția asistenților AI în instrumente care nu răspund doar la un prompt atunci când ceri ajutor, ci pot deveni un ajutor proactiv în timp ce îți vezi de treabă. La Connect am arătat cum AI-ul live de pe ochelari poate deveni mai mult un participant în timp real atunci când îți faci treaba. Pe măsură ce această caracteristică începe să ruleze în acces timpuriu în această lună vom vedea primul pas către un nou tip de asistent AI personalizat.

Nu va fi ultimul. În prezent, ne aflăm în mijlocul unei presiuni la nivelul întregii industrii pentru a crea hardware cu AI nativ. Producătorii de telefoane și PC-uri se grăbesc să își reconstruiască produsele pentru a pune asistenții AI la baza lor. Dar cred că o oportunitate mult mai mare este aceea de a crea dispozitive care sunt AI-native încă de la început și sunt încrezător că ochelarii vor fi primii care vor ajunge acolo. Michael Abrash, cercetător-șef al Meta, a vorbit despre potențialul unui asistent AI personalizat și conștient de context pe ochelari de mulți ani, iar construirea tehnologiilor care fac acest lucru posibil a reprezentat un obiectiv major al echipelor noastre de cercetare.

Realitate mixtă a fost un alt loc în care a avea produsul potrivit în mâinile multor oameni a fost un accelerator major pentru progres. Am văzut Meta Quest 3 devin mai bune lună de lună, pe măsură ce continuăm să lucrăm la sistemul de bază passthrough, multitasking, interfețe utilizator spațiale și multe altele. Toate aceste câștiguri s-au extins la Quest 3S în momentul lansării. Acest lucru a însemnat că $299 Quest 3S a fost în multe privințe o cască mai bună în prima zi decât a fost $499 Quest 3 la lansarea sa în 2023. Și întreaga familie Quest 3 continuă să devină mai bună cu fiecare actualizare.

În 2025 vom asista la următoarea iterație a acesteia, pe măsură ce Quest 3S va aduce mult mai mulți oameni în realitatea mixtă pentru prima dată. În timp ce Quest 3 a fost un succes printre oamenii entuziasmați să dețină cel mai bun dispozitiv de pe piață, Quest 3S este așteptat să fie foarte dotat în 2024. Vânzările au fost puternice în weekendul Black Friday și ne așteptăm la o creștere a numărului de persoane care își activează noile căști în timpul vacanței de sărbători.

Acest lucru va continua o tendință care s-a conturat în ultimul an: creșterea numărului de noi utilizatori care caută o gamă mai largă de lucruri de făcut cu căștile lor. Dorim ca acești noi utilizatori să vadă magia MR și să rămână alături de noi pe termen lung, motiv pentru care finanțăm dezvoltatorii să creeze noile tipuri de aplicații și jocuri pe care le caută.

A existat un aflux semnificativ de tineri, în special, și aceștia au gravitat în jurul jocurilor multiplayer sociale și competitive, precum și al conținutului freemium. Și titluri precum BEHEMOTH de la Skydance, Batman: Arkham Shadow (care tocmai a câștigat premiul pentru cel mai bun joc AR/VR la The Game Awards!), și Metro Awakening a arătat încă o dată că unele dintre cele mai bune jocuri noi pe care le produce industria noastră sunt acum posibile doar pe căștile de astăzi.

Pe măsură ce numărul de persoane care utilizează RM crește, calitatea experienței sociale pe care o poate oferi crește în paralel. Acesta este esența a ceea ce Meta încearcă să realizeze cu Reality Labs și unde va fi deblocat cel mai mare potențial al metaversului: "șansa de a crea cea mai socială platformă din toate timpurile" este modul în care am descris-o atunci când am a început să lucreze la el. Am făcut doi pași înainte pe acest front în 2024: în primul rând cu un set larg de îmbunătățiri pentru Horizon Worlds, inclusiv extinderea sa la dispozitivele mobile, iar în al doilea rând cu sistemul Meta Avatars de ultimă generație, care permite oamenilor să se reprezinte în aplicațiile și căștile noastre. Pe măsură ce calitatea vizuală și experiența generală cu aceste sisteme se îmbunătățesc, tot mai mulți oameni au ocazia să vadă pentru prima dată un metavers social. Observăm tendințe similare în cazul noilor utilizatori Quest 3S, care petrec mai mult timp în Horizon Worlds, făcând din aceasta o aplicație imersivă de top 3 pentru Quest 3S, iar oamenii continuă să creeze noi Meta Avatars pe mobil și MR.

Introducerea realității mixte în mod curent a contribuit la iluminarea a ceea ce va urma. Una dintre primele tendințe pe care le-am descoperit după lansarea Quest 3 anul trecut a fost că oamenii folosesc realitatea mixtă pentru a viziona videoclipuri în timp ce fac mai multe lucruri în casă - spală vasele sau dau cu aspiratorul în camera de zi. Acesta a fost un prim semnal că oamenii adoră să aibă un ecran virtual mare pe care îl pot lua oriunde și îl pot plasa în lumea fizică din jurul lor. Am văzut cum această tendință a luat amploare, cu tot felul de experiențe de divertisment în creștere rapidă în întreaga familie Quest 3. Funcții noi precum YouTube Co-Watch arată cât de mult potențial există pentru un tip cu totul nou de experiență de divertisment social în metavers.

Acesta este motivul pentru care James Cameron, unul dintre cei mai inovatori povestitori din punct de vedere tehnologic din viața noastră, lucrează acum pentru a ajuta mai mulți cineaști și creatori producerea de conținut 3D excelent pentru Meta Quest. În timp ce filmele 3D au fost produse de zeci de ani, nu a existat niciodată o modalitate de a le viziona care să fie la fel de bună ca o cască MR, iar anul viitor mai mulți oameni vor deține o cască decât oricând înainte. "Ne aflăm într-un adevărat punct de inflexiune istoric,"Jim a spus când noi a lansat noul nostru parteneriat luna aceasta.

Acest lucru se întâmplă în paralel cu o schimbare mai amplă Mark Rabkin împărtășite la Connect în acest an: Viziunea noastră pentru Horizon OS este de a construi un nou tip de platformă de calcul de uz general, capabilă să ruleze orice tip de software, să sprijine orice tip de utilizator și să fie deschisă pentru orice tip de creator și dezvoltator. Recentele noastre versiuni pentru multitasking 2D/3D, poziționarea panourilor, urmărirea mai bună a mâinilor, integrarea Windows Remote Desktop și Open Store au început să creeze un impuls pe această nouă cale. Horizon OS este pe cale să devină prima platformă care acceptă întregul spectru de experiențe, de la VR imersiv la ecrane 2D, aplicații mobile și desktopuri virtuale - iar comunitatea dezvoltatorilor este esențială pentru acest succes.

Următorul mare pas către metavers va combina ochelarii cu inteligență artificială cu tipul de experiență de realitate augmentată adevărată pe care am dezvăluit-o anul acesta cu Orion. Nu se întâmplă des să ai o privire în viitor și să vezi o tehnologie complet nouă care îți arată încotro se îndreaptă lucrurile. Oamenii care au văzut Orion au înțeles imediat ce înseamnă pentru viitor, la fel ca oamenii care au văzut primele computere personale luând formă la Xerox PARC în anii 1970 ("în zece minute a fost evident pentru mine că toate computerele vor funcționa așa într-o zi", a spus Steve Jobs mai târziu despre demonstrația sa din 1979 a Xerox Alto).

Faptul că am putut să pun oamenii într-o mașină a timpului și să le arăt cum va arăta următoarea platformă de calcul a fost un punct culminant al anului 2024 și al carierei mele de până acum. Dar impactul real al Orion va fi în produsele pe care le vom livra în continuare și în modul în care ne va ajuta să înțelegem mai bine ce le place oamenilor la ochelarii AR și ce trebuie îmbunătățit. Am petrecut ani de zile lucrând la cercetarea utilizatorilor, exerciții de planificare a produselor și studii experimentale, încercând să înțelegem cum ar trebui să funcționeze ochelarii AR, iar această muncă ne-a permis să construim Orion. Dar ritmul progresului va fi mult mai rapid de acum înainte, acum că avem un produs real în jurul căruia să ne construim intuiția.

Aceasta a fost lecția de nenumărate ori în ultimul deceniu la Reality Labs. Cel mai important lucru pe care îl poți face atunci când încerci să inventezi viitorul este să transporți lucruri și să înveți din modul în care oamenii reali le folosesc. Acestea nu vor fi întotdeauna hituri imediate, dar întotdeauna te vor învăța ceva. Iar atunci când ajungi la lucruri care chiar dau lovitura, cum ar fi realitatea mixtă pe Quest 3 sau inteligența artificială pe ochelari, atunci pui piciorul pe accelerație. Aceasta este ceea ce va face din 2025 un an atât de special: Cu dispozitivele potrivite pe piață, cu oamenii care le experimentează pentru prima dată și cu dezvoltatorii care descoperă toate oportunitățile care se ivesc, este timpul să accelerăm.

Bine ați revenit pentru un nou episod din Boz către viitor, un podcast de la Reality Labs. În episodul de astăzi, gazda noastră, Meta CTO și Head of Reality Labs Andrew "Boz" Bosworth, este însoțit de vicepreședintele Meta de Wearables Alex Himel.

Echipa lui Himel lucrează la unele dintre cele mai dificile probleme tehnice din industrie, toate în scopul de a contribui la construirea următoarei platforme de calcul. La fel ca Bosworth, Himel este un lider cu vechime în Meta, ocupând numeroase funcții de conducere în cadrul afacerii în cei peste 15 ani petrecuți în companie.

Bosworth și Himel abordează o serie de subiecte, inclusiv dispozitivele portabile, realitatea augmentată și modul în care AI accelerează și îmbunătățește tipurile de experiențe încorporate în Ochelari Ray-Ban Meta și produsele viitoare.

Ei merg adânc pe Orion și primirea pozitivă pe care a primit-o de când Mark Zuckerberg a anunțat-o la Conectare. La fel cum Steve Jobs a recunoscut Alto ca fiind un punct de cotitură în informatică, Bosworth a afirmat că, deși putem să nu fim de acord cu privire la detalii, este greu să susținem că acesta este viitorul. Himel și Bosworth continuă să vorbească despre valoarea extraordinară a prototipării și construirii, spunând cât de mult au învățat despre Orion și paradigmele sale de intrare în cele trei săptămâni de utilizare a acestuia, comparativ cu anii petrecuți construindu-l.

Ei au vorbit, de asemenea, despre rolul crucial al inteligenței artificiale în dispozitivele purtabile și despre modul în care aceasta devine din ce în ce mai utilă în viața de zi cu zi - mai ales acum, când puteți întreba Meta AI despre lucrurile pe care le vedeți și le puteți folosi pentru a seta memento-uri vizuale.

Himel vorbește, de asemenea, despre experiența sa profundă într-un alt tip de stivă: sandvișurile. Cu șapte ani la activ, lucrând în faimosul Lange's Little Store din Chappaqua, NY, unde a crescut, Himel și Bosworth analizează ce face un sandviș grozav, unde merg cu adevărat roșiile și ce pâine este superioară.

Vă puteți conecta la Boz către viitor pe Podcasturi Apple, Spotify, și oriunde ascultați podcasturi.

Îl puteți urmări pe Himel pe Fire. Îl puteți urmări pe Bosworth pe Instagram, Twitter/X, și Fire @boztank.