2017. gadā Reality Labs galvenais zinātnieks Maikls Abrash, ko atbalstīja Meta dibinātājs un izpilddirektors Marks Zuckerbergs, izveidoja jaunu, slepenu komandu toreizējā Oculus Research, lai izveidotu nākamās skaitļošanas platformas pamatu. Viņu herkulesa uzdevums: Izveidot pielāgotu silīcija risinājumu, kas varētu atbalstīt unikālas nākotnes prasības. papildinātās realitātes brilles-tehnisks sasniegums, kura dēļ bija jāpārdomā katrs komponents, lai to varētu nēsāt visu dienu. AR brilles formas faktors, kas vienkārši vēl nepastāvēja.

Orion AR briļļu prototipa priekšējais leņķis.

Kompakts formas faktors, ievērojama problēmtelpa

Pielāgotā silīcija komanda, kas no dažiem pētniekiem izauga līdz simtiem cilvēku produktu jomā, tika izveidota, pamatojoties uz pieņēmumu, ka AR brilles nevar paļauties uz mūsdienu viedtālruņos pieejamo silīciju. Un šo pieņēmumu apstiprina vairākas pielāgotās mikroshēmas, kas ir iekšpusē. Orion, mūsu pirmais īstais AR briļļu produkta prototips.

"Veidojot kuģi, kad tas izbrauc no ostas - tieši to mēs arī darījām," saka progresīvo tehnoloģiju stratēģijas direktors Džeremijs Snodgrass. "Mums vajadzēja palielināt to, kas bija neliela komanda, vienlaikus veidojot šīs mikroshēmas. Bija aizraujoši vērot, kā vadība pieņēma darbā jaunus darbiniekus, vienlaikus veidojot kultūru, kurā tiek novērtēta veiklība. Nekas nebija kāda cita problēma. Tu paņem airu un sāc airēt, pat ja tas nebija tieši tas, kam tevi pieņēma darbā. Tas bija ļoti, ļoti aizraujošs laiks."

"Gandrīz viss Orion bija jaunums daudzējādā ziņā," piekrīt Display Architecture tehniskais direktors Maiks Jī (Mike Yee). "Dažas no idejām jau bija zināmas, bet neviens nebija uzņēmies pētniecības projektu, lai faktiski izveidotu visu dienu valkājamu AR briļļu pāri."

Komandai bija jānodrošina pārliecinoša AR pieredze ar pēc iespējas mazāku enerģijas patēriņu. Briļļu formas faktors var izkliedēt tikai tik daudz siltuma, un tajā var ievietot tikai tik lielu akumulatora ietilpību. Rezultātā pieredze, ko ir iespējams nodrošināt ar šīm brillēm, ir pilnībā atkarīga no silīcija. Citiem vārdiem sakot, ja siltuma un akumulatora jauda ir nemainīga, vienīgais veids, kā nodrošināt noteiktu pieredzi, ir optimizēt silīciju.

"Lai izstrādātu jaunu Orion arhitektūru, komandai nācās ne tikai intensīvi attīstīt esošās tehnoloģijas, piemēram, bezvadu tīklu un displejus, bet arī riskēt ar jaunām tehnoloģijām," saka produktu vadības direktors Neeraj Choubey. "Piemēram, komanda izstrādāja mašīnmācīšanās (ML) paātrinātāju bez skaidra tā brīža lietojuma gadījuma, jo bija stingri pārliecināta, ka ML kļūs arvien svarīgāks Meta produktos. Uzņēmumā Orion katrs ML paātrinātājs tiek izmantots, un dažos gadījumos tie ir pārlieku pieprasīti, jo kalpo tādām funkcijām kā acu un roku izsekošana. Tāpat komanda izstrādāja pielāgotus saspiešanas protokolus, lai samazinātu joslas platumu un enerģijas patēriņu, kad dati pārvietojas no aprēķināt ripu uz displeja. Pielāgota silīcija izstrāde, lai sasniegtu Orion formas faktora mērķus, prasīja gan toleranci pret lielu neskaidrību, gan rūpīgu uzmanību detaļām, lai nodrošinātu neticami sarežģītu sistēmas arhitektūru."

"Mūsu lielākais izaicinājums bija nodrošināt 3D grafiku, kas atveidota ar pasaules bloķēšanu, kā arī telpisku skaņu, kas atveidota tā, ka šķiet, ka tā nāk no virtuāla objekta," norāda Snodgrass. "Mums vajadzēja ietilpināt visu šo elektroniku termālajā ietilpībā un fiziskajā telpā un pēc tam darbināt to ar akumulatoru, lai tā pārāk neuzkarst. Un mums tas viss bija jāizdara, izmantojot īstu briļļu formu - nevis lielu vizieri, kādu parasti redzam šajā kategorijā."

"Mēs zinājām, kā nodrošināt nepieciešamo skaitļošanas jaudu, lai īstenotu mūsu redzējumu par Orion, taču mums bija sarežģīts uzdevums: samazināt enerģijas patēriņu 100 reizes," saka SoC risinājumu direktors Roberts Šīrers. "Tas prasīja, lai mēs paplašinātu silīcija konstrukcijas robežas, izmantojot metodoloģijas no dažādām nozares jomām - no lietu interneta līdz augstas veiktspējas skaitļošanai - un izgudrojot jaunas pieejas, lai novērstu atšķirības. Mūsu nozares partneri domāja, ka mēs esam traki, un, iespējams, viņi nebija pilnīgi nemaldīgi. Taču tieši tas bija vajadzīgs: vēlme apstrīdēt vispārpieņemto gudrību un visu pārdomāt no jauna. Lai izveidotu datoru, kas nevainojami apvieno virtuālo un fizisko pasauli, ir nepieciešama dziļa izpratne par kontekstu, kas krietni pārsniedz to, ko var piedāvāt esošās skaitļošanas platformas. Būtībā mēs esam no jauna izgudrojuši veidu, kā datori mijiedarbojas ar cilvēkiem, un tas nozīmēja no jauna izdomāt, kā mēs veidojam silīciju no pašiem pamatiem."

Orion ārējās sastāvdaļas.

MicroLED maģija

Bija brīži, kad darbi atpalika no grafika vai radās šķietami nepārvarams tehnisks izaicinājums, kad bija grūti saglabāt dinamiku un morāli. Taču komanda bija izturīga un atrada ceļus, kā apiet šķēršļus, vai vienkārši tos nojauca.

Piemēram, Orion displejs. Silīcija komanda bija atbildīga par silīciju displeja projektorā, kas atrodas briļļu stūros.

"Attiecībā uz šiem projektoriem bija atklāts jautājums, vai mēs spēsim iegūt microLED matricu ar pietiekami augstu efektivitāti un spilgtumu, lai varētu izmantot displeju ar plašu redzamības lauku," saka Snodgrass. "Bija milzīgas šaubas, vai mēs to spēsim - vai tas būs iespējams paredzētajā laikā, jo šī tehnoloģija bija ļoti jauna."

"Mēs ļoti agri sapratām, ka mums ir jāpārdomā daudzas produktu izstrādes paradigmas," piebilst Jī. "Gaismas daudzums, kas nepieciešams, lai izveidotu lietojamu displeju, AR brillēm ir daudz lielāks, jo kā valkājams displejs jūs konkurējat ar sauli. Tāpēc mums ir nepieciešams tāds enerģijas līmenis, kas konkurē ar to - vai vismaz tāds ir mērķis. Mēs vēl neesam to sasnieguši, bet tas ir liela daļa no tā. Tas nozīmē, ka displejam ir vajadzīgi gaismas avoti, kas spēj to nodrošināt, un shēmas, kas spēj to kontrolēt. Un tajā pašā laikā tas ir jāpadara mazs."

Pielāgots silīcijs, kas vada Orion µLED.

Lai gan microLED šķita vispiemērotākais gaismas avots projektoriem, silīcijs palīdzēja atraisīt to potenciālu.

"Displejos mēs runājam par pikseļu attālumiem, kas ir attālumi starp blakus esošo pikseļu centra punktiem," skaidro Jī. "Televizoriem šie attālumi ir simtiem mikronu. Tālrunī tie ir daudzi, daudzi desmiti mikronu. Un mums vajadzēja samazināt šo skaitli līdz viencipara skaitlim. Vienīgais zināmais pusvadītāju ražošanas veids, kas to varēja panākt, bija silīcijs."

Darbu sarežģīja tas, ka displeja aizmugurējai virsmai bija jābūt no silīcija, bet neviens pasaulē nebija izstrādājis silīciju mikroLED.

"Tajā laikā visas pētnieku komandas bija izmantojušas šķidro kristālu uz silīcija displejiem, lai uz tiem uzliktu mikroLED," saka Jī. "Neviens iepriekš nebija izstrādājis pamatplānu microLED. Un mēs saskārāmies ar diezgan unikālu izaicinājumu, jo tas ir optisks komponents. Tai jābūt plaknai. To nevar saskrāpēt. Tai jābūt ar visām šīm īpašībām, jo, skatoties caur viļņvadiem, caur projektoriem, jūs burtiski skatāties uz silīcija gabala augšējo virsmu."

Silīcija komanda izstrādāja sarežģītu virkni testēšanas platformu šiem microLED displejiem, kas ietvēra ciešu koordināciju ar mūsu globālajiem piegādātājiem. MikroLED displejiem ir globāla izcelsme - tie tika izgatavoti vienā vietā un pēc tam pārcelti uz citu vietu, kur tie tika uzklāti uz plāksnītes. Pēc tam plāksnītes tika nosūtītas, lai tās sagrieztu noteiktā formā, un tad tās tika nosūtītas uz ASV, lai salīmētu kopā ar citu plāksnīti, un tad nosūtītas atpakaļ pāri zemeslodei, lai izveidotu un testētu faktisko moduli. Tas bija ārkārtīgi sarežģīts process, un silīcija komanda izstrādāja testa transportlīdzekļus, lai pārbaudītu katru posmu.

Komandai bija arī jāatrod veids, kā piegādāt elektroenerģiju microLED displejiem, kas atrodas niecīgajos briļļu stūros. Mūsu analogu komanda izstrādāja pielāgotu enerģijas pārvaldības mikroshēmu, kas ietilpa šajā tilpumā.

"Enerģijas padeve ir ļoti svarīga šādām maza izmēra valkājamām ierīcēm, kur akumulatora izmērs ir ierobežots un vieta ir ļoti ierobežota," norāda Analogo un jaukto signālu sistēmu direktors Džihongs Rens (Jihong Ren). "Mūsu pielāgotais barošanas pārvaldības integrālās shēmas risinājums izmanto modernākās tehnoloģijas, lai optimizētu energoefektivitāti mūsu specifiskajai darba slodzei sistēmas līmenī, vienlaikus iekļaujoties pieejamās vietas ierobežojumos. Lai panāktu šo optimālo risinājumu, bija nepieciešama cieša starpdisciplināra sadarbība ar mūsu mehānikas, elektrotehnikas, SoC, μLED un siltuma komandām, nodrošinot visu komponentu nevainojamu integrāciju un maksimālu kopējo veiktspēju."

"Tas bija apbrīnojams ne tikai inženiertehnisks, bet arī organizatorisks sasniegums: apvienot komandu, strādāt dažādās laika joslās un ar visiem šiem dažādajiem piegādātājiem," piebilst Snodgrass. "Savā ziņā organizatoriskā pārvaldība bija tikpat liels izaicinājums kā tehnisko specifikāciju izpilde."

"Pielāgots ir ne tikai dizains, bet arī viss izgatavošanas process," piebilst Jī. "Mums ir paveicies, ka mums ir brīnišķīgi partneri šajā nozarē, kas palīdzēja to īstenot. Viņi saskata ilgtermiņa potenciālu AR displejos kopumā un, protams, Meta redzējumu par to. Tāpēc viņi ir gatavi sadarboties ar mums, lai veiktu pielāgojumus un optimizācijas, kas ļautu izmantot šo displeju."

Orion AR brilles.

Iterācija tiekas ar paātrinājumu

Starp silīcija komandu un izcilajiem prātiem Reality Labs Research un XR Tech, kas izstrādā algoritmus, bija cieša atgriezeniskā saite. Pēdējās komandas nodrošināja šos algoritmus, kurus pirmās komandas pārtulkoja aparatūrā, novēršot vispārējas nozīmes CPU darbināmas programmatūras pieskaitāmās izmaksas. Tas nozīmēja, ka algoritmi darbosies ar mazāku jaudu, bet tas arī nozīmēja, ka silīcija komanda būs piesaistīta. Tiklīdz algoritmi bija nostiprināti, viņi vairs nevarēja veikt izmaiņas.

"Teiksim, ka XR Tech izstrādāja noteiktu disciplīnu algoritmiski," skaidro Silicon Accelerators arhitektūras un algoritmu direktors Ohads Meitavs. "Viņiem pieder algoritmu kaudze un tās veiktspēja. Mana komanda, sadarbojoties ar viņiem, tad izlemtu, kā paātrināt algoritmu, kā padarīt algoritma daļas stingrākas un kā to faktiski ievietot aparatūrā tā, lai tas darbotos ļoti efektīvi. Tad XR Tech pielāgotu savu programmatūras pakotni, lai ņemtu vērā aparatūru. Tas ir ļoti iteratīvs process."

Vēl viens veiksmes stāsts ir silīcija komandas sadarbība ar Reality Labs Research, lai izstrādātu jaunu reprojekcijas algoritmu.

"Mums bija nepieciešams, lai reprojekcijas algoritms atbalstītu dažādus izkropļojumus un korekcijas," norāda silīcija arhitekts Stīvs Klohets. "RL-R izstrādātais algoritms, ko mēs galu galā izmantojām, netiek izmantots vispārējos skaitļošanas procesos. Un līdz pat šai dienai tas ir izrādījies diezgan spēcīgs rīks."

Kad algoritmi bija nostiprināti un aparatūra optimizēta, silīcija sagatavošanas komanda izmēģināja pielāgotās mikroshēmas.

"Orion pielāgotais silīcija mikroshēmu komplekts ir sarežģīts," saka "End-to-End" sistēmu un infrastruktūras vecākais direktors Lipings Guo. "Īsā laikā izveidot un apstiprināt atsevišķas mikroshēmas un to savstarpējo savietojamību ir neticami sarežģīti. Par laimi, mēs darbojamies vertikāli integrētā vidē, kur Reality Labs pieder visa pakete - no silīcija un zema līmeņa programmaparatūras līdz operētājsistēmai, programmatūrai un augšējā slāņa pieredzei. Mēs to pilnībā izmantojām, cieši sadarbojoties ar saviem starpfunkcionālajiem partneriem, un mainījāmies, atstājot mūsu starppaketes integrāciju silīcija validācijas posmā. Orion bija mūsu izmēģinājuma brauciens ar šo metodoloģiju - mēs attīstījām savus "shift-left" muskuļus un izveidojām stingru pamatu, lai Reality Labs varētu pilnībā izmantot pielāgota silīcija priekšrocības nākotnē."

Un pēc izveides bija pienācis laiks optimizēt programmatūru.

"Ir iteratīvs process, kurā jūs sākat ar pilnīgi neoptimizētu programmatūras kaudzi, lai viss tiktu palaists un darbotos," saka Snodgrass. "Pēc tam pa kārtai tiek veikta apakšsistēmu optimizācija, lai optimizētu programmatūru konkrētajai aparatūrai, tostarp samazinot programmatūras izmantotās atmiņas apjomu. Aparatūra var būt lieliski izstrādāta, bet jūs nesasniegsiet teorētisko energoefektivitāti, ja neieguldīsiet tikpat daudz vai vairāk laika, lai programmatūra pilnībā izmantotu aparatūras priekšrocības. Tāds ir Orion stāsts: līdz galam optimizēta aparatūra un programmatūra. Neviens pikodžouls vai milivats nav atstāts novārtā."

Lai gan Orion, iespējams, ir prototips, tā izstrādē paveiktajam darbam ir ievērojams potenciāls ietekmēt Meta ceļvedi.

"Uz mūsu izstrādātajiem silīcija IP mēs raugāmies kā uz platformām tādā nozīmē, ka tie ir vērtīgi IP, kurus mēs pilnveidosim no vienas paaudzes vai viena produkta uz citu," piebilst Meitavs. "Visi datorredzes un grafikas algoritmi nav radīti tikai Orion. Tie tiks izmantoti turpmākajos produktos."

Mūsu darbs ar silīciju ietver jaunu risinājumu radīšanu, vienlaikus cieši sadarbojoties ar partneriem. Patiesībā silīcija komandas ietekme sniedzas ārpus Orion un aptver gan Ray-Ban Meta brilles un Meta Quest austiņas šodien - lai gan abos tiek izmantotas trešo pušu mikroshēmas. Silīcija komanda regulāri dalās savā darbā ar jauktās realitātes komandu, parādot, kas ir iespējams energoefektivitātes ziņā. MR komanda pēc tam dalās ar šiem atklājumiem ar partneriem, piemēram. Qualcomm lai sniegtu informāciju par turpmāko mikroshēmu izstrādi. Tā kā silīcija komanda izmanto tos pašus pieejamos ciparu signālu procesorus (DSP), ko izmanto Ray-Ban Meta brilles, viņi varēja dalīties pieredzē un labākajā praksē, ieviešot un rakstot kodu šiem DSP, lai palīdzētu uzlabot mūsu mākslīgā intelekta brillēs pieejamo audio pieredzi.

Zināšanu apmaiņa notiek abos virzienos: MR komanda ir sniegusi silīcija komandai ieskatu par šādām lietām. Asinhronais TimeWarp un Pieteikums SpaceWarp ražošanā.

"Tas, ko cilvēks dara ražošanā, ir daudz interesantāk nekā tas, ko mēs varētu izdarīt ar prototipu," saka Klohsets. "Mēs centāmies pēc iespējas vairāk integrēt to, ko viņi darīja ar izšuvumiem."

Neskaidrība < Ambīcijas

Tā kā Orion bija patiešām nulle pret vienu, iesaistītajām komandām pēc nepieciešamības nācās saskarties ar nesamērīgi daudz neskaidrību.

"Ar Orion es nevaru pārspīlēt, cik sarežģītu situāciju padarīja neskaidrība," saka Klohsets. "Kad jūs, piemēram, izgatavojat datoru, jums parasti ir laba ideja par to, kāds būs displejs. Bet mēs nezinājām, kāds galu galā būs viļņvads, tāpēc mums nācās izmēģināt dažādus viļņvadus un izdomāt mehānismu, kas varētu tikt galā ar vissliktāko scenāriju, jo mēs nezinājām, kur viss nonāks. Viena optimizācija šeit sasaucās ar visām pārējām izvēlēm, un galu galā izveidojās matrica ar visām šīm dažādajām lietām, kuras jums vajadzēja atbalstīt un mēģināt apstiprināt, jo jūs nezinājāt, kur produkts nonāks pēc sešiem mēnešiem."

Svarīgi atzīmēt, ka Orion nav tikai AR brilles - tas ir trīsdaļīgs aparatūras komplekss. Liela daļa apstrādes notiek aprēķināt ripu, kas nosaka, ka starp to un brillēm ir cieša saikne. Pievienojiet virsmas EMG aproce cilpā, un sistēmas arhitektūra kļūst vēl sarežģītāka.

"Tas komandām bija milzīgs izaicinājums, un tas viss vienkārši darbojas," saka Snodgrass. "Tā bija apbrīnojama sadarbība starp silīcija komandu, bezvadu komandu un programmatūras komandām visā organizācijā."

Oriona skaitļošanas ripa.

"Kopā ar Orion mēs izveidojām veselu komandu ar plašu inženieru loku, un viņi varēja izstrādāt pilnīgi jaunu cauruļvadu," piebilst Klohsets. "Tas ir cauruļvads, kas apstrādā sešu brīvības pakāpju objektu kustību 3D telpā. Tas izmanto savu pielāgotu displeja draiveri. Mums bija jāveic patiešām unikālas attēla kvalitātes korekcijas. Un, manuprāt, mūsu izaicinājums bija tas, ka, tā kā šis bija nulle viens projekts, nebija nekādas esošās specifikācijas, ko varētu pielāgot un uzlabot. Šeit viss ir pilnīgi jauns, tāpēc mums bija rīcības brīvība."

Līdzīgi kā ripa ir dažas neaktivizētas funkcijas, kas paslēptas zem virsmas, pielāgotais silīcijs ir arī spēcīgāks par savu svaru. Lai gan Orion neļauj lietotājam fotografēt ar RGB kamerām, silīcijs spēj to atbalstīt, kā arī. kodeku avatāri. Un tāpat kā ripa palīdzēja atraisīt patiesu briļļu formu faktoru, novirzot lielu daļu skaitļošanas tehnikas, Orion pielāgotais silīcijs izrādījās nepieciešama AR puzles sastāvdaļa.

"Lai īstenotu tādu nulles-līdz-vienai pieredzi kā AR brilles, ir nepieciešams pielāgots silīcijs - pilnīga apstāšanās," skaidro Snodgrass. "Laika gaitā, ja būs tirgus, tad silīcija ražotāji izstrādās produktus, lai apmierinātu pieprasījumu. Taču, lai izveidotu "nulle pret vienu", jūs nevarat vienkārši paņemt no plaukta kaut ko tādu, kas ir paredzēts citam produktam, un ievietot to jaunā veidnē. Ir jāiegulda investīcijas kādā pielāgotā izstrādājumā. Un, lai īstenotu šo zero-to-one pieredzi, ir nepieciešama plaša sadarbība starp programmatūras partneriem, rūpnieciskajiem dizaineriem, mehānikas inženieriem un citiem."

"Atbrīvojoties no tradicionālajiem domāšanas modeļiem, mēs esam radījuši kaut ko patiesi ievērojamu," piebilst Šīrers. "Mēs uzskatām, ka šī skaitļošanas platforma ir tehnoloģiju nākotne, kas revolucionizēs mūsu dzīves, darba un savstarpējās mijiedarbības veidu. Mēs esam sajūsmā, ka varam būt šīs inovācijas priekšgalā, paplašinot iespējamā robežas un palīdzot veidot vēstures gaitu."

Lai iegūtu vairāk informācijas par Orion, skatiet šos emuāra ierakstus:

• Kristāldzidrs: mūsu silīcija karbīda viļņvadi un ceļš uz Orion lielo priekšplānu
• Orion's Compute Puck: Stāsts par ierīci, kas palīdzēja izveidot mūsu AR brilles.

Kad mēs pirmo reizi sākām demonstrēt Orion šī gada sākumā man tika atgādināta frāze, ko bieži dzirdat Meta - patiesībā tā bija pat mūsu pirmajā vēstulē potenciālajiem akcionāriem 2012. gadā: Kods uzvar argumenti. Iespējams, ka dažu mēnešu laikā, ko pavadījām reālās demonstrācijās, mēs par šo produktu telpu uzzinājām tikpat daudz, cik gadu gaitā, kas bija nepieciešami, lai tos radītu. Nekas nevar aizstāt to, ko reāli uzbūvējam, nododam cilvēkiem rokās un mācāmies no viņu reakcijas uz to.

Orion nebija vienīgais piemērs šogad. Mūsu jauktās realitātes aparatūra un AI brilles ir sasnieguši jaunu kvalitātes un pieejamības līmeni. Šo platformu stabilitāte ļauj mūsu programmatūras izstrādātājiem daudz ātrāk izstrādāt visu, sākot ar operētājsistēmām un beidzot ar jaunām mākslīgā intelekta funkcijām. Tieši tā, manuprāt, metaverss sāk pievērst lielāku uzmanību, un tāpēc esmu pārliecināts, ka nākamais gads būs vissvarīgākais Reality Labs vēsturē.

https://youtube.com/watch?v=xwMNZb6UE1o%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

2024. gads bija gads, kad mākslīgā intelekta brilles sasniedza savu augstāko līmeni. Kad 2021. gadā sākām ražot viedās brilles, mēs domājām, ka tās varētu būt labs pirmais solis ceļā uz AR brillēm, ko mēs galu galā vēlējāmies izveidot. Lai gan jauktās realitātes austiņas ir ceļā uz to, lai kļūtu par vispārējas nozīmes skaitļošanas platformu, līdzīgi kā mūsdienu personālie datori, mēs uzskatījām brilles par dabisku mūsdienu mobilo skaitļošanas platformu attīstību. Tāpēc mēs vēlējāmies pēc iespējas ātrāk sākt mācīties no reālās pasaules.

Galvenais, ko esam uzzinājuši, ir tas, ka brilles ir vislabākais veidošanas faktors patiesi mākslīgajam intelektam pielāgotai ierīcei. Patiesībā tās varētu būt pirmā aparatūras kategorija, kuru jau no paša sākuma pilnībā nosaka mākslīgais intelekts. Daudziem cilvēkiem brilles ir vieta, kur AI asistentam ir vislielākā jēga, jo īpaši, ja tas ir... multimodāla sistēma kas spēj patiesi izprast apkārtējo pasauli.

Mēs esam pašā šīs produktu kategorijas S-veida līknes sākumā, un mums paveras bezgalīgas iespējas. Viena no lietām, kas mani visvairāk satrauc 2025. gadā, ir mākslīgā intelekta asistentu evolūcija par rīkiem, kas ne tikai reaģē uz aicinājumu, kad lūdzat palīdzību, bet var kļūt par proaktīvu palīgu jūsu ikdienas gaitās. Connect izstādē mēs parādījām, kā Live AI uz brillēm var kļūt par reāllaika dalībnieku, kad jūs veicat darbus. Tā kā šī funkcija šomēnes sākas agrīnā piekļuve mēs redzēsim pirmo soli ceļā uz jauna veida personalizētu mākslīgā intelekta asistentu.

Tā nebūs pēdējā. Pašlaik mēs esam visas nozares mēroga centienu vidū, lai radītu mākslīgajam intelektam pielāgotu aparatūru. Jūs redzat, kā tālruņu un personālo datoru ražotāji cenšas pārbūvēt savus produktus, lai to pamatā būtu mākslīgā intelekta asistenti. Taču, manuprāt, daudz lielākas iespējas ir radīt ierīces, kas jau no paša sākuma ir pielāgotas mākslīgajam intelektam, un es esmu pārliecināts, ka brilles būs pirmās, kas to paveiks. Meta galvenais pētnieks Maikls Abrash ir runājis par personalizēta, kontekstu zinoša AI asistenta potenciālu brillēs. daudzus gadus, un mūsu pētnieku grupas lielu uzmanību pievērsa tehnoloģiju izstrādei, kas to padara iespējamu.

Jauktā realitāte ir vēl viena joma, kurā pareizais produkts daudzu cilvēku rokās ir bijis būtisks progresa paātrinātājs. Mēs esam redzējuši Meta Quest 3 mēnesis pēc mēneša kļūst arvien labāks, jo mēs turpinām pilnveidot galvenās sistēmas caurlaides, daudzuzdevumu programmas, telpiskās lietotāja saskarnes un daudz ko citu. Visi šie ieguvumi tika attiecināti uz Quest 3S brīdī, kad tas tika palaists. Tas nozīmē, ka $299 Quest 3S daudzējādā ziņā bija labākas austiņas pirmajā dienā nekā $499 Quest 3, kad tās pirmo reizi tika laistas tirgū 2023. gadā. Un visa Quest 3 saime kļūst arvien labāka, jo katrs atjauninājums.

2025. gadā mēs redzēsim nākamo atkārtojumu, jo Quest 3S pirmo reizi jauktajā realitātē iesaistīs daudz vairāk cilvēku. Lai gan Quest 3 ir bijis hits starp cilvēkiem, kuri ir sajūsmā par vislabāko ierīci tirgū, gaidāms, ka Quest 3S būs ļoti apdāvināts 2024. gadā. Melnās piektdienas nedēļas nogalē pārdošanas apjomi bija augsti, un sagaidāms, ka svētku brīvdienās cilvēki aktivizēs savas jaunās austiņas.

Tādējādi turpināsies tendence, kas iezīmējās pagājušajā gadā: jaunu lietotāju skaita pieaugums, kuri meklē plašāku darbību klāstu, izmantojot savas austiņas. Mēs vēlamies, lai šie jaunie lietotāji saskatītu MR burvību un paliktu ilgāku laiku, tāpēc mēs finansējam izstrādātājus, lai tie radītu jauna veida lietotnes un spēles, ko viņi meklē.

Īpaši liels ir jauniešu pieplūdums, un viņi pievēršas sociālajām un konkurētspējīgajām multiplayer spēlēm, kā arī bezmaksas saturam. Un tādi tituli kā Skydance's BEHEMOTH, Betmens: Arkhemas ēna (kas tikko ieguva balvu kā labākā AR/VR spēle The Game Awards!), un Metro atmoda vēlreiz apliecināja, ka dažas no labākajām jaunajām spēlēm, ko ražo mūsu nozare, tagad ir iespējams spēlēt tikai ar mūsdienu austiņām.

Pieaugot MR lietotāju skaitam, līdz ar to pieaug arī sociālās pieredzes kvalitāte, ko tā var sniegt. Tas ir galvenais, ko Meta cenšas panākt ar Reality Labs un kur tiks atraisīts vislielākais metaversa potenciāls: "iespēja radīt vissociālāko platformu, kāda jebkad ir bijusi" - tā mēs to raksturojām, kad mēs pirmo reizi sāka strādāt pie tā.. 2024. gadā mēs šajā jomā spērām divus soļus uz priekšu: pirmkārt, mēs veicām daudzus Horizon Worlds uzlabojumus, tostarp paplašinājām to uz mobilajām ierīcēm, un, otrkārt, mēs izveidojām nākamās paaudzes Meta Avatars sistēmu, kas ļauj cilvēkiem atveidot sevi mūsu lietotnēs un austiņās. Un, uzlabojoties šo sistēmu vizuālajai kvalitātei un vispārējai pieredzei, arvien vairāk cilvēku pirmo reizi ieskatās sociālajā metaversālā. Mēs novērojam līdzīgas tendences - jaunie Quest 3S lietotāji pavada vairāk laika Horizon Worlds, padarot to par Quest 3S trīs labāko imersīvo aplikāciju, un cilvēki turpina radīt jaunus Meta Avatars mobilajās ierīcēs un MR.

Jauktās realitātes ienākšana mainstreamā ir palīdzējusi noskaidrot, kas notiks tālāk. Viena no pirmajām tendencēm, ko mēs atklājām pēc Quest 3 palaišanas pagājušajā gadā, bija tā, ka cilvēki izmantoja jaukto realitāti, lai skatītos videoklipus, vienlaikus veicot vairākus uzdevumus mājās - mazgājot traukus vai slaucot putekļus dzīvojamā istabā. Tas bija agrīns signāls, ka cilvēkiem patīk liels virtuālais ekrāns, ko var paņemt līdzi jebkur un novietot fiziskajā pasaulē ap sevi. Mēs esam novērojuši, ka šī tendence strauji attīstās, un visā Quest 3 saimē strauji pieaug visdažādāko izklaides iespēju klāsts. Jaunas funkcijas, piemēram, YouTube Co-Watch parāda, cik liels potenciāls ir pavisam jauna veida sociālajai izklaidei metaversālā.

Tāpēc Džeimss Kamerons, viens no tehnoloģiski inovatīvākajiem stāstniekiem mūsu mūžā, tagad strādā, lai palīdzētu vairāk filmu veidotājiem un veidotājiem. radīt lielisku 3D saturu Meta Quest. Lai gan 3D filmas tiek veidotas jau vairākus gadu desmitus, vēl nekad nav bijis tik laba veida, kā tās skatīties ar MR austiņām, un nākamajā gadā austiņas piederēs vairāk cilvēkiem nekā jebkad agrāk. "Mēs atrodamies īstā, vēsturiskā atskaites punktā,"Džims teica kad mēs uzsāka mūsu jauno partnerību šomēnes.

Tas notiek vienlaikus ar plašākām pārmaiņām Mark Rabkin šogad dalījās Connect: Mūsu redzējums par Horizon OS ir izveidot jauna veida vispārējas nozīmes skaitļošanas platformu, kas spēj darbināt visu veidu programmatūru, atbalstīt visu veidu lietotājus un ir atvērta visiem radītājiem un izstrādātājiem. Mūsu nesen izdotie 2D/3D daudzuzdevumu, paneļu pozicionēšanas, labākas roku izsekošanas, Windows Remote Desktop integrācijas un Open Store laidieni ir sākuši veidot impulsu šajā jaunajā virzienā. Horizon OS ir ceļā uz to, lai kļūtu par pirmo platformu, kas atbalsta pilnu pieredzes spektru, sākot no visaptverošas VR līdz 2D ekrāniem, mobilajām lietotnēm un virtuālajiem darbvirsmas datoriem, un izstrādātāju kopiena ir šā panākuma pamatā.

Nākamais lielais solis uz metaversālu apvienos mākslīgā intelekta brilles ar īstu papildinātās realitātes pieredzi, ko šogad atklājām ar Orion. Nereti gadās ieskatīties nākotnē un ieraudzīt pilnīgi jaunu tehnoloģiju, kas parāda, uz kurieni viss virzās. Cilvēki, kas redzēja Orion, uzreiz saprata, ko tas nozīmē nākotnei, līdzīgi kā cilvēki, kas redzēja, kā 70. gados Xerox PARC veidojās pirmie personālie datori ("desmit minūšu laikā man bija skaidrs, ka visi datori kādreiz darbosies šādi," vēlāk Stīvs Džobss teica par savu 1979. gada Xerox Alto demonstrāciju).

Iespēja ievietot cilvēkus laika mašīnā un parādīt viņiem, kā izskatīsies nākamā skaitļošanas platforma, bija 2024. gada un manas līdzšinējās karjeras nozīmīgākais notikums. Taču patiesā Orion ietekme būs nākamajos produktos, ko mēs piegādāsim, un veidos, kā tas palīdzēs mums labāk saprast, kas cilvēkiem patīk AR brillēs un kas ir jāuzlabo. Mēs gadiem ilgi strādājām pie lietotāju izpētes, produktu plānošanas vingrinājumiem un eksperimentāliem pētījumiem, lai saprastu, kā vajadzētu darboties AR brillēm, un šis darbs ļāva mums izveidot Orion. Taču tagad, kad mums ir reāls produkts, uz kura balstīt savu intuīciju, progresa temps būs daudz straujāks.

Šī ir bijusi mācība atkal un atkal pēdējo desmit gadu laikā Reality Labs. Vissvarīgākais, ko varat darīt, mēģinot izgudrot nākotni, ir nosūtīt preces un mācīties no tā, kā tās izmanto reāli cilvēki. Tās ne vienmēr būs tūlītēji hiti, bet tās vienmēr jums kaut ko iemācīs. Un, kad jūs nonākat pie lietām, kas patiešām ir trāpīgas, piemēram, jauktā realitāte Quest 3 vai mākslīgais intelekts brillēs, tad jūs spiežat kāju uz gāzes. Tas ir tas, kas 2025. gadu padarīs tik īpašu: Tā kā tirgū ir pieejamas pareizās ierīces, cilvēki tās pirmo reizi izmēģina un izstrādātāji atklāj visas gaidāmās iespējas, ir pienācis laiks paātrināties.

Laipni lūdzam atgriezties vēl vienā epizodē Boz uz nākotni, Reality Labs podkāsts. In šodienas epizode, mūsu raidījuma vadītājam, Meta tehniskajam direktoram un Reality Labs vadītājam Endrjū "Boz" Bosvortam pievienojas Meta viceprezidents valkājamo ierīču jomā Alekss Himels.

Himela komanda strādā pie sarežģītākajām tehniskajām problēmām nozarē, lai palīdzētu izveidot nākamo skaitļošanas platformu. Tāpat kā Bosvorts, arī Himels ir ilggadējs Meta vadītājs, kurš vairāk nekā 15 gadu laikā uzņēmumā ir ieņēmis vairākus vadošus amatus visā uzņēmumā.

Bosvorts un Himels aplūko dažādas tēmas, tostarp valkājamās ierīces, papildināto realitāti un to, kā mākslīgais intelekts paātrina un uzlabo pieredzes veidus, kas ietverti Ray-Ban Meta brilles un nākotnes produktiem.

Viņi dziļi Orion un pozitīvā uzņemšana, ko tā ir saņēmusi, kopš Marks Zuckerbergs par to paziņoja plkst. Savienot. Tāpat kā Stīvs Džobss atzina, ka Alto ir pagrieziena punkts skaitļošanas tehnikā, Bosvorts apgalvoja, ka, lai gan mēs varam nepiekrist par detaļām, ir grūti apstrīdēt, ka tas ir nākotne. Himels un Bosvorts turpina runāt par prototipēšanas un veidošanas milzīgo vērtību, sakot, cik daudz vairāk viņi ir uzzinājuši par Orion un tā ievades paradigmām trīs nedēļu laikā, kad to lietojuši, salīdzinājumā ar gadiem, kas pavadīti, to veidojot.

Viņi runāja arī par mākslīgā intelekta izšķirošo lomu valkājamo ierīču jomā un par to, kā tas kļūst aizvien noderīgāks ikdienā - īpaši tagad, kad varat uzdot Meta AI jautājumus par lietām, ko redzat, un izmantot to, lai iestatītu vizuālus atgādinājumus.

Himels stāsta arī par savu lielo pieredzi cita veida kaudzēs - sviestmaizēs. Septiņus gadus strādājis slavenajā Lange's Little Store Čappakā, Ņujorkas štatā, kur viņš ir uzaudzis, Himels un Bosvorts iztirzā, kas veido lielisku sviestmaizi, kur patiešām der tomāti un kura maize ir labāka.

Varat pieslēgties Boz uz nākotni vietnē Apple podkāsti, Spotifyun visur, kur klausāties podkāstus.

Jūs varat sekot Himel Diegi. Jūs varat sekot Bosworth Instagram, Twitter/X, un Diegi @boztank.