Kategorija: Orion

2017. gadā Reality Labs galvenais zinātnieks Maikls Abrash, ko atbalstīja Meta dibinātājs un izpilddirektors Marks Zuckerbergs, izveidoja jaunu, slepenu komandu toreizējā Oculus Research, lai izveidotu nākamās skaitļošanas platformas pamatu. Viņu herkulesa uzdevums: Izveidot pielāgotu silīcija risinājumu, kas varētu atbalstīt unikālas nākotnes prasības. papildinātās realitātes brilles-tehnisks sasniegums, kura dēļ bija jāpārdomā katrs komponents, lai to varētu nēsāt visu dienu. AR brilles formas faktors, kas vienkārši vēl nepastāvēja.

Orion AR briļļu prototipa priekšējais leņķis.

Kompakts formas faktors, ievērojama problēmtelpa

Pielāgotā silīcija komanda, kas no dažiem pētniekiem izauga līdz simtiem cilvēku produktu jomā, tika izveidota, pamatojoties uz pieņēmumu, ka AR brilles nevar paļauties uz mūsdienu viedtālruņos pieejamo silīciju. Un šo pieņēmumu apstiprina vairākas pielāgotās mikroshēmas, kas ir iekšpusē. Orion, mūsu pirmais īstais AR briļļu produkta prototips.

"Veidojot kuģi, kad tas izbrauc no ostas - tieši to mēs arī darījām," saka progresīvo tehnoloģiju stratēģijas direktors Džeremijs Snodgrass. "Mums vajadzēja palielināt to, kas bija neliela komanda, vienlaikus veidojot šīs mikroshēmas. Bija aizraujoši vērot, kā vadība pieņēma darbā jaunus darbiniekus, vienlaikus veidojot kultūru, kurā tiek novērtēta veiklība. Nekas nebija kāda cita problēma. Tu paņem airu un sāc airēt, pat ja tas nebija tieši tas, kam tevi pieņēma darbā. Tas bija ļoti, ļoti aizraujošs laiks."

"Gandrīz viss Orion bija jaunums daudzējādā ziņā," piekrīt Display Architecture tehniskais direktors Maiks Jī (Mike Yee). "Dažas no idejām jau bija zināmas, bet neviens nebija uzņēmies pētniecības projektu, lai faktiski izveidotu visu dienu valkājamu AR briļļu pāri."

Komandai bija jānodrošina pārliecinoša AR pieredze ar pēc iespējas mazāku enerģijas patēriņu. Briļļu formas faktors var izkliedēt tikai tik daudz siltuma, un tajā var ievietot tikai tik lielu akumulatora ietilpību. Rezultātā pieredze, ko ir iespējams nodrošināt ar šīm brillēm, ir pilnībā atkarīga no silīcija. Citiem vārdiem sakot, ja siltuma un akumulatora jauda ir nemainīga, vienīgais veids, kā nodrošināt noteiktu pieredzi, ir optimizēt silīciju.

"Lai izstrādātu jaunu Orion arhitektūru, komandai nācās ne tikai intensīvi attīstīt esošās tehnoloģijas, piemēram, bezvadu tīklu un displejus, bet arī riskēt ar jaunām tehnoloģijām," saka produktu vadības direktors Neeraj Choubey. "Piemēram, komanda izstrādāja mašīnmācīšanās (ML) paātrinātāju bez skaidra tā brīža lietojuma gadījuma, jo bija stingri pārliecināta, ka ML kļūs arvien svarīgāks Meta produktos. Uzņēmumā Orion katrs ML paātrinātājs tiek izmantots, un dažos gadījumos tie ir pārlieku pieprasīti, jo kalpo tādām funkcijām kā acu un roku izsekošana. Tāpat komanda izstrādāja pielāgotus saspiešanas protokolus, lai samazinātu joslas platumu un enerģijas patēriņu, kad dati pārvietojas no aprēķināt ripu uz displeja. Pielāgota silīcija izstrāde, lai sasniegtu Orion formas faktora mērķus, prasīja gan toleranci pret lielu neskaidrību, gan rūpīgu uzmanību detaļām, lai nodrošinātu neticami sarežģītu sistēmas arhitektūru."

"Mūsu lielākais izaicinājums bija nodrošināt 3D grafiku, kas atveidota ar pasaules bloķēšanu, kā arī telpisku skaņu, kas atveidota tā, ka šķiet, ka tā nāk no virtuāla objekta," norāda Snodgrass. "Mums vajadzēja ietilpināt visu šo elektroniku termālajā ietilpībā un fiziskajā telpā un pēc tam darbināt to ar akumulatoru, lai tā pārāk neuzkarst. Un mums tas viss bija jāizdara, izmantojot īstu briļļu formu - nevis lielu vizieri, kādu parasti redzam šajā kategorijā."

"Mēs zinājām, kā nodrošināt nepieciešamo skaitļošanas jaudu, lai īstenotu mūsu redzējumu par Orion, taču mums bija sarežģīts uzdevums: samazināt enerģijas patēriņu 100 reizes," saka SoC risinājumu direktors Roberts Šīrers. "Tas prasīja, lai mēs paplašinātu silīcija konstrukcijas robežas, izmantojot metodoloģijas no dažādām nozares jomām - no lietu interneta līdz augstas veiktspējas skaitļošanai - un izgudrojot jaunas pieejas, lai novērstu atšķirības. Mūsu nozares partneri domāja, ka mēs esam traki, un, iespējams, viņi nebija pilnīgi nemaldīgi. Taču tieši tas bija vajadzīgs: vēlme apstrīdēt vispārpieņemto gudrību un visu pārdomāt no jauna. Lai izveidotu datoru, kas nevainojami apvieno virtuālo un fizisko pasauli, ir nepieciešama dziļa izpratne par kontekstu, kas krietni pārsniedz to, ko var piedāvāt esošās skaitļošanas platformas. Būtībā mēs esam no jauna izgudrojuši veidu, kā datori mijiedarbojas ar cilvēkiem, un tas nozīmēja no jauna izdomāt, kā mēs veidojam silīciju no pašiem pamatiem."

Orion ārējās sastāvdaļas.

MicroLED maģija

Bija brīži, kad darbi atpalika no grafika vai radās šķietami nepārvarams tehnisks izaicinājums, kad bija grūti saglabāt dinamiku un morāli. Taču komanda bija izturīga un atrada ceļus, kā apiet šķēršļus, vai vienkārši tos nojauca.

Piemēram, Orion displejs. Silīcija komanda bija atbildīga par silīciju displeja projektorā, kas atrodas briļļu stūros.

"Attiecībā uz šiem projektoriem bija atklāts jautājums, vai mēs spēsim iegūt microLED matricu ar pietiekami augstu efektivitāti un spilgtumu, lai varētu izmantot displeju ar plašu redzamības lauku," saka Snodgrass. "Bija milzīgas šaubas, vai mēs to spēsim - vai tas būs iespējams paredzētajā laikā, jo šī tehnoloģija bija ļoti jauna."

"Mēs ļoti agri sapratām, ka mums ir jāpārdomā daudzas produktu izstrādes paradigmas," piebilst Jī. "Gaismas daudzums, kas nepieciešams, lai izveidotu lietojamu displeju, AR brillēm ir daudz lielāks, jo kā valkājams displejs jūs konkurējat ar sauli. Tāpēc mums ir nepieciešams tāds enerģijas līmenis, kas konkurē ar to - vai vismaz tāds ir mērķis. Mēs vēl neesam to sasnieguši, bet tas ir liela daļa no tā. Tas nozīmē, ka displejam ir vajadzīgi gaismas avoti, kas spēj to nodrošināt, un shēmas, kas spēj to kontrolēt. Un tajā pašā laikā tas ir jāpadara mazs."

Pielāgots silīcijs, kas vada Orion µLED.

Lai gan microLED šķita vispiemērotākais gaismas avots projektoriem, silīcijs palīdzēja atraisīt to potenciālu.

"Displejos mēs runājam par pikseļu attālumiem, kas ir attālumi starp blakus esošo pikseļu centra punktiem," skaidro Jī. "Televizoriem šie attālumi ir simtiem mikronu. Tālrunī tie ir daudzi, daudzi desmiti mikronu. Un mums vajadzēja samazināt šo skaitli līdz viencipara skaitlim. Vienīgais zināmais pusvadītāju ražošanas veids, kas to varēja panākt, bija silīcijs."

Darbu sarežģīja tas, ka displeja aizmugurējai virsmai bija jābūt no silīcija, bet neviens pasaulē nebija izstrādājis silīciju mikroLED.

"Tajā laikā visas pētnieku komandas bija izmantojušas šķidro kristālu uz silīcija displejiem, lai uz tiem uzliktu mikroLED," saka Jī. "Neviens iepriekš nebija izstrādājis pamatplānu microLED. Un mēs saskārāmies ar diezgan unikālu izaicinājumu, jo tas ir optisks komponents. Tai jābūt plaknai. To nevar saskrāpēt. Tai jābūt ar visām šīm īpašībām, jo, skatoties caur viļņvadiem, caur projektoriem, jūs burtiski skatāties uz silīcija gabala augšējo virsmu."

Silīcija komanda izstrādāja sarežģītu virkni testēšanas platformu šiem microLED displejiem, kas ietvēra ciešu koordināciju ar mūsu globālajiem piegādātājiem. MikroLED displejiem ir globāla izcelsme - tie tika izgatavoti vienā vietā un pēc tam pārcelti uz citu vietu, kur tie tika uzklāti uz plāksnītes. Pēc tam plāksnītes tika nosūtītas, lai tās sagrieztu noteiktā formā, un tad tās tika nosūtītas uz ASV, lai salīmētu kopā ar citu plāksnīti, un tad nosūtītas atpakaļ pāri zemeslodei, lai izveidotu un testētu faktisko moduli. Tas bija ārkārtīgi sarežģīts process, un silīcija komanda izstrādāja testa transportlīdzekļus, lai pārbaudītu katru posmu.

Komandai bija arī jāatrod veids, kā piegādāt elektroenerģiju microLED displejiem, kas atrodas niecīgajos briļļu stūros. Mūsu analogu komanda izstrādāja pielāgotu enerģijas pārvaldības mikroshēmu, kas ietilpa šajā tilpumā.

"Enerģijas padeve ir ļoti svarīga šādām maza izmēra valkājamām ierīcēm, kur akumulatora izmērs ir ierobežots un vieta ir ļoti ierobežota," norāda Analogo un jaukto signālu sistēmu direktors Džihongs Rens (Jihong Ren). "Mūsu pielāgotais barošanas pārvaldības integrālās shēmas risinājums izmanto modernākās tehnoloģijas, lai optimizētu energoefektivitāti mūsu specifiskajai darba slodzei sistēmas līmenī, vienlaikus iekļaujoties pieejamās vietas ierobežojumos. Lai panāktu šo optimālo risinājumu, bija nepieciešama cieša starpdisciplināra sadarbība ar mūsu mehānikas, elektrotehnikas, SoC, μLED un siltuma komandām, nodrošinot visu komponentu nevainojamu integrāciju un maksimālu kopējo veiktspēju."

"Tas bija apbrīnojams ne tikai inženiertehnisks, bet arī organizatorisks sasniegums: apvienot komandu, strādāt dažādās laika joslās un ar visiem šiem dažādajiem piegādātājiem," piebilst Snodgrass. "Savā ziņā organizatoriskā pārvaldība bija tikpat liels izaicinājums kā tehnisko specifikāciju izpilde."

"Pielāgots ir ne tikai dizains, bet arī viss izgatavošanas process," piebilst Jī. "Mums ir paveicies, ka mums ir brīnišķīgi partneri šajā nozarē, kas palīdzēja to īstenot. Viņi saskata ilgtermiņa potenciālu AR displejos kopumā un, protams, Meta redzējumu par to. Tāpēc viņi ir gatavi sadarboties ar mums, lai veiktu pielāgojumus un optimizācijas, kas ļautu izmantot šo displeju."

Orion AR brilles.

Iterācija tiekas ar paātrinājumu

Starp silīcija komandu un izcilajiem prātiem Reality Labs Research un XR Tech, kas izstrādā algoritmus, bija cieša atgriezeniskā saite. Pēdējās komandas nodrošināja šos algoritmus, kurus pirmās komandas pārtulkoja aparatūrā, novēršot vispārējas nozīmes CPU darbināmas programmatūras pieskaitāmās izmaksas. Tas nozīmēja, ka algoritmi darbosies ar mazāku jaudu, bet tas arī nozīmēja, ka silīcija komanda būs piesaistīta. Tiklīdz algoritmi bija nostiprināti, viņi vairs nevarēja veikt izmaiņas.

"Teiksim, ka XR Tech izstrādāja noteiktu disciplīnu algoritmiski," skaidro Silicon Accelerators arhitektūras un algoritmu direktors Ohads Meitavs. "Viņiem pieder algoritmu kaudze un tās veiktspēja. Mana komanda, sadarbojoties ar viņiem, tad izlemtu, kā paātrināt algoritmu, kā padarīt algoritma daļas stingrākas un kā to faktiski ievietot aparatūrā tā, lai tas darbotos ļoti efektīvi. Tad XR Tech pielāgotu savu programmatūras pakotni, lai ņemtu vērā aparatūru. Tas ir ļoti iteratīvs process."

Vēl viens veiksmes stāsts ir silīcija komandas sadarbība ar Reality Labs Research, lai izstrādātu jaunu reprojekcijas algoritmu.

"Mums bija nepieciešams, lai reprojekcijas algoritms atbalstītu dažādus izkropļojumus un korekcijas," norāda silīcija arhitekts Stīvs Klohets. "RL-R izstrādātais algoritms, ko mēs galu galā izmantojām, netiek izmantots vispārējos skaitļošanas procesos. Un līdz pat šai dienai tas ir izrādījies diezgan spēcīgs rīks."

Kad algoritmi bija nostiprināti un aparatūra optimizēta, silīcija sagatavošanas komanda izmēģināja pielāgotās mikroshēmas.

"Orion pielāgotais silīcija mikroshēmu komplekts ir sarežģīts," saka "End-to-End" sistēmu un infrastruktūras vecākais direktors Lipings Guo. "Īsā laikā izveidot un apstiprināt atsevišķas mikroshēmas un to savstarpējo savietojamību ir neticami sarežģīti. Par laimi, mēs darbojamies vertikāli integrētā vidē, kur Reality Labs pieder visa pakete - no silīcija un zema līmeņa programmaparatūras līdz operētājsistēmai, programmatūrai un augšējā slāņa pieredzei. Mēs to pilnībā izmantojām, cieši sadarbojoties ar saviem starpfunkcionālajiem partneriem, un mainījāmies, atstājot mūsu starppaketes integrāciju silīcija validācijas posmā. Orion bija mūsu izmēģinājuma brauciens ar šo metodoloģiju - mēs attīstījām savus "shift-left" muskuļus un izveidojām stingru pamatu, lai Reality Labs varētu pilnībā izmantot pielāgota silīcija priekšrocības nākotnē."

Un pēc izveides bija pienācis laiks optimizēt programmatūru.

"Ir iteratīvs process, kurā jūs sākat ar pilnīgi neoptimizētu programmatūras kaudzi, lai viss tiktu palaists un darbotos," saka Snodgrass. "Pēc tam pa kārtai tiek veikta apakšsistēmu optimizācija, lai optimizētu programmatūru konkrētajai aparatūrai, tostarp samazinot programmatūras izmantotās atmiņas apjomu. Aparatūra var būt lieliski izstrādāta, bet jūs nesasniegsiet teorētisko energoefektivitāti, ja neieguldīsiet tikpat daudz vai vairāk laika, lai programmatūra pilnībā izmantotu aparatūras priekšrocības. Tāds ir Orion stāsts: līdz galam optimizēta aparatūra un programmatūra. Neviens pikodžouls vai milivats nav atstāts novārtā."

Lai gan Orion, iespējams, ir prototips, tā izstrādē paveiktajam darbam ir ievērojams potenciāls ietekmēt Meta ceļvedi.

"Uz mūsu izstrādātajiem silīcija IP mēs raugāmies kā uz platformām tādā nozīmē, ka tie ir vērtīgi IP, kurus mēs pilnveidosim no vienas paaudzes vai viena produkta uz citu," piebilst Meitavs. "Visi datorredzes un grafikas algoritmi nav radīti tikai Orion. Tie tiks izmantoti turpmākajos produktos."

Mūsu darbs ar silīciju ietver jaunu risinājumu radīšanu, vienlaikus cieši sadarbojoties ar partneriem. Patiesībā silīcija komandas ietekme sniedzas ārpus Orion un aptver gan Ray-Ban Meta brilles un Meta Quest austiņas šodien - lai gan abos tiek izmantotas trešo pušu mikroshēmas. Silīcija komanda regulāri dalās savā darbā ar jauktās realitātes komandu, parādot, kas ir iespējams energoefektivitātes ziņā. MR komanda pēc tam dalās ar šiem atklājumiem ar partneriem, piemēram. Qualcomm lai sniegtu informāciju par turpmāko mikroshēmu izstrādi. Tā kā silīcija komanda izmanto tos pašus pieejamos ciparu signālu procesorus (DSP), ko izmanto Ray-Ban Meta brilles, viņi varēja dalīties pieredzē un labākajā praksē, ieviešot un rakstot kodu šiem DSP, lai palīdzētu uzlabot mūsu mākslīgā intelekta brillēs pieejamo audio pieredzi.

Zināšanu apmaiņa notiek abos virzienos: MR komanda ir sniegusi silīcija komandai ieskatu par šādām lietām. Asinhronais TimeWarp un Pieteikums SpaceWarp ražošanā.

"Tas, ko cilvēks dara ražošanā, ir daudz interesantāk nekā tas, ko mēs varētu izdarīt ar prototipu," saka Klohsets. "Mēs centāmies pēc iespējas vairāk integrēt to, ko viņi darīja ar izšuvumiem."

Neskaidrība < Ambīcijas

Tā kā Orion bija patiešām nulle pret vienu, iesaistītajām komandām pēc nepieciešamības nācās saskarties ar nesamērīgi daudz neskaidrību.

"Ar Orion es nevaru pārspīlēt, cik sarežģītu situāciju padarīja neskaidrība," saka Klohsets. "Kad jūs, piemēram, izgatavojat datoru, jums parasti ir laba ideja par to, kāds būs displejs. Bet mēs nezinājām, kāds galu galā būs viļņvads, tāpēc mums nācās izmēģināt dažādus viļņvadus un izdomāt mehānismu, kas varētu tikt galā ar vissliktāko scenāriju, jo mēs nezinājām, kur viss nonāks. Viena optimizācija šeit sasaucās ar visām pārējām izvēlēm, un galu galā izveidojās matrica ar visām šīm dažādajām lietām, kuras jums vajadzēja atbalstīt un mēģināt apstiprināt, jo jūs nezinājāt, kur produkts nonāks pēc sešiem mēnešiem."

Svarīgi atzīmēt, ka Orion nav tikai AR brilles - tas ir trīsdaļīgs aparatūras komplekss. Liela daļa apstrādes notiek aprēķināt ripu, kas nosaka, ka starp to un brillēm ir cieša saikne. Pievienojiet virsmas EMG aproce cilpā, un sistēmas arhitektūra kļūst vēl sarežģītāka.

"Tas komandām bija milzīgs izaicinājums, un tas viss vienkārši darbojas," saka Snodgrass. "Tā bija apbrīnojama sadarbība starp silīcija komandu, bezvadu komandu un programmatūras komandām visā organizācijā."

Oriona skaitļošanas ripa.

"Kopā ar Orion mēs izveidojām veselu komandu ar plašu inženieru loku, un viņi varēja izstrādāt pilnīgi jaunu cauruļvadu," piebilst Klohsets. "Tas ir cauruļvads, kas apstrādā sešu brīvības pakāpju objektu kustību 3D telpā. Tas izmanto savu pielāgotu displeja draiveri. Mums bija jāveic patiešām unikālas attēla kvalitātes korekcijas. Un, manuprāt, mūsu izaicinājums bija tas, ka, tā kā šis bija nulle viens projekts, nebija nekādas esošās specifikācijas, ko varētu pielāgot un uzlabot. Šeit viss ir pilnīgi jauns, tāpēc mums bija rīcības brīvība."

Līdzīgi kā ripa ir dažas neaktivizētas funkcijas, kas paslēptas zem virsmas, pielāgotais silīcijs ir arī spēcīgāks par savu svaru. Lai gan Orion neļauj lietotājam fotografēt ar RGB kamerām, silīcijs spēj to atbalstīt, kā arī. kodeku avatāri. Un tāpat kā ripa palīdzēja atraisīt patiesu briļļu formu faktoru, novirzot lielu daļu skaitļošanas tehnikas, Orion pielāgotais silīcijs izrādījās nepieciešama AR puzles sastāvdaļa.

"Lai īstenotu tādu nulles-līdz-vienai pieredzi kā AR brilles, ir nepieciešams pielāgots silīcijs - pilnīga apstāšanās," skaidro Snodgrass. "Laika gaitā, ja būs tirgus, tad silīcija ražotāji izstrādās produktus, lai apmierinātu pieprasījumu. Taču, lai izveidotu "nulle pret vienu", jūs nevarat vienkārši paņemt no plaukta kaut ko tādu, kas ir paredzēts citam produktam, un ievietot to jaunā veidnē. Ir jāiegulda investīcijas kādā pielāgotā izstrādājumā. Un, lai īstenotu šo zero-to-one pieredzi, ir nepieciešama plaša sadarbība starp programmatūras partneriem, rūpnieciskajiem dizaineriem, mehānikas inženieriem un citiem."

"Atbrīvojoties no tradicionālajiem domāšanas modeļiem, mēs esam radījuši kaut ko patiesi ievērojamu," piebilst Šīrers. "Mēs uzskatām, ka šī skaitļošanas platforma ir tehnoloģiju nākotne, kas revolucionizēs mūsu dzīves, darba un savstarpējās mijiedarbības veidu. Mēs esam sajūsmā, ka varam būt šīs inovācijas priekšgalā, paplašinot iespējamā robežas un palīdzot veidot vēstures gaitu."

---

Lai iegūtu vairāk informācijas par Orion, skatiet šos emuāra ierakstus:

• Kristāldzidrs: mūsu silīcija karbīda viļņvadi un ceļš uz Orion lielo priekšplānu
• Orion's Compute Puck: Stāsts par ierīci, kas palīdzēja izveidot mūsu AR brilles.

Kad mēs pirmo reizi sākām demonstrēt Orion šī gada sākumā man tika atgādināta frāze, ko bieži dzirdat Meta - patiesībā tā bija pat mūsu pirmajā vēstulē potenciālajiem akcionāriem 2012. gadā: Kods uzvar argumenti. Iespējams, ka dažu mēnešu laikā, ko pavadījām reālās demonstrācijās, mēs par šo produktu telpu uzzinājām tikpat daudz, cik gadu gaitā, kas bija nepieciešami, lai tos radītu. Nekas nevar aizstāt to, ko reāli uzbūvējam, nododam cilvēkiem rokās un mācāmies no viņu reakcijas uz to.

Orion nebija vienīgais piemērs šogad. Mūsu jauktās realitātes aparatūra un AI brilles ir sasnieguši jaunu kvalitātes un pieejamības līmeni. Šo platformu stabilitāte ļauj mūsu programmatūras izstrādātājiem daudz ātrāk izstrādāt visu, sākot ar operētājsistēmām un beidzot ar jaunām mākslīgā intelekta funkcijām. Tieši tā, manuprāt, metaverss sāk pievērst lielāku uzmanību, un tāpēc esmu pārliecināts, ka nākamais gads būs vissvarīgākais Reality Labs vēsturē.

https://youtube.com/watch?v=xwMNZb6UE1o%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

2024. gads bija gads, kad mākslīgā intelekta brilles sasniedza savu augstāko līmeni. Kad 2021. gadā sākām ražot viedās brilles, mēs domājām, ka tās varētu būt labs pirmais solis ceļā uz AR brillēm, ko mēs galu galā vēlējāmies izveidot. Lai gan jauktās realitātes austiņas ir ceļā uz to, lai kļūtu par vispārējas nozīmes skaitļošanas platformu, līdzīgi kā mūsdienu personālie datori, mēs uzskatījām brilles par dabisku mūsdienu mobilo skaitļošanas platformu attīstību. Tāpēc mēs vēlējāmies pēc iespējas ātrāk sākt mācīties no reālās pasaules.

Galvenais, ko esam uzzinājuši, ir tas, ka brilles ir vislabākais veidošanas faktors patiesi mākslīgajam intelektam pielāgotai ierīcei. Patiesībā tās varētu būt pirmā aparatūras kategorija, kuru jau no paša sākuma pilnībā nosaka mākslīgais intelekts. Daudziem cilvēkiem brilles ir vieta, kur AI asistentam ir vislielākā jēga, jo īpaši, ja tas ir... multimodāla sistēma kas spēj patiesi izprast apkārtējo pasauli.

Mēs esam pašā šīs produktu kategorijas S-veida līknes sākumā, un mums paveras bezgalīgas iespējas. Viena no lietām, kas mani visvairāk satrauc 2025. gadā, ir mākslīgā intelekta asistentu evolūcija par rīkiem, kas ne tikai reaģē uz aicinājumu, kad lūdzat palīdzību, bet var kļūt par proaktīvu palīgu jūsu ikdienas gaitās. Connect izstādē mēs parādījām, kā Live AI uz brillēm var kļūt par reāllaika dalībnieku, kad jūs veicat darbus. Tā kā šī funkcija šomēnes sākas agrīnā piekļuve mēs redzēsim pirmo soli ceļā uz jauna veida personalizētu mākslīgā intelekta asistentu.

Tā nebūs pēdējā. Pašlaik mēs esam visas nozares mēroga centienu vidū, lai radītu mākslīgajam intelektam pielāgotu aparatūru. Jūs redzat, kā tālruņu un personālo datoru ražotāji cenšas pārbūvēt savus produktus, lai to pamatā būtu mākslīgā intelekta asistenti. Taču, manuprāt, daudz lielākas iespējas ir radīt ierīces, kas jau no paša sākuma ir pielāgotas mākslīgajam intelektam, un es esmu pārliecināts, ka brilles būs pirmās, kas to paveiks. Meta galvenais pētnieks Maikls Abrash ir runājis par personalizēta, kontekstu zinoša AI asistenta potenciālu brillēs. daudzus gadus, un mūsu pētnieku grupas lielu uzmanību pievērsa tehnoloģiju izstrādei, kas to padara iespējamu.

Jauktā realitāte ir vēl viena joma, kurā pareizais produkts daudzu cilvēku rokās ir bijis būtisks progresa paātrinātājs. Mēs esam redzējuši Meta Quest 3 mēnesis pēc mēneša kļūst arvien labāks, jo mēs turpinām pilnveidot galvenās sistēmas caurlaides, daudzuzdevumu programmas, telpiskās lietotāja saskarnes un daudz ko citu. Visi šie ieguvumi tika attiecināti uz Quest 3S brīdī, kad tas tika palaists. Tas nozīmē, ka $299 Quest 3S daudzējādā ziņā bija labākas austiņas pirmajā dienā nekā $499 Quest 3, kad tās pirmo reizi tika laistas tirgū 2023. gadā. Un visa Quest 3 saime kļūst arvien labāka, jo katrs atjauninājums.

2025. gadā mēs redzēsim nākamo atkārtojumu, jo Quest 3S pirmo reizi jauktajā realitātē iesaistīs daudz vairāk cilvēku. Lai gan Quest 3 ir bijis hits starp cilvēkiem, kuri ir sajūsmā par vislabāko ierīci tirgū, gaidāms, ka Quest 3S būs ļoti apdāvināts 2024. gadā. Melnās piektdienas nedēļas nogalē pārdošanas apjomi bija augsti, un sagaidāms, ka svētku brīvdienās cilvēki aktivizēs savas jaunās austiņas.

Tādējādi turpināsies tendence, kas iezīmējās pagājušajā gadā: jaunu lietotāju skaita pieaugums, kuri meklē plašāku darbību klāstu, izmantojot savas austiņas. Mēs vēlamies, lai šie jaunie lietotāji saskatītu MR burvību un paliktu ilgāku laiku, tāpēc mēs finansējam izstrādātājus, lai tie radītu jauna veida lietotnes un spēles, ko viņi meklē.

Īpaši liels ir jauniešu pieplūdums, un viņi pievēršas sociālajām un konkurētspējīgajām multiplayer spēlēm, kā arī bezmaksas saturam. Un tādi tituli kā Skydance's BEHEMOTH, Betmens: Arkhemas ēna (kas tikko ieguva balvu kā labākā AR/VR spēle The Game Awards!), un Metro atmoda vēlreiz apliecināja, ka dažas no labākajām jaunajām spēlēm, ko ražo mūsu nozare, tagad ir iespējams spēlēt tikai ar mūsdienu austiņām.

Pieaugot MR lietotāju skaitam, līdz ar to pieaug arī sociālās pieredzes kvalitāte, ko tā var sniegt. Tas ir galvenais, ko Meta cenšas panākt ar Reality Labs un kur tiks atraisīts vislielākais metaversa potenciāls: "iespēja radīt vissociālāko platformu, kāda jebkad ir bijusi" - tā mēs to raksturojām, kad mēs pirmo reizi sāka strādāt pie tā.. 2024. gadā mēs šajā jomā spērām divus soļus uz priekšu: pirmkārt, mēs veicām daudzus Horizon Worlds uzlabojumus, tostarp paplašinājām to uz mobilajām ierīcēm, un, otrkārt, mēs izveidojām nākamās paaudzes Meta Avatars sistēmu, kas ļauj cilvēkiem atveidot sevi mūsu lietotnēs un austiņās. Un, uzlabojoties šo sistēmu vizuālajai kvalitātei un vispārējai pieredzei, arvien vairāk cilvēku pirmo reizi ieskatās sociālajā metaversālā. Mēs novērojam līdzīgas tendences - jaunie Quest 3S lietotāji pavada vairāk laika Horizon Worlds, padarot to par Quest 3S trīs labāko imersīvo aplikāciju, un cilvēki turpina radīt jaunus Meta Avatars mobilajās ierīcēs un MR.

Jauktās realitātes ienākšana mainstreamā ir palīdzējusi noskaidrot, kas notiks tālāk. Viena no pirmajām tendencēm, ko mēs atklājām pēc Quest 3 palaišanas pagājušajā gadā, bija tā, ka cilvēki izmantoja jaukto realitāti, lai skatītos videoklipus, vienlaikus veicot vairākus uzdevumus mājās - mazgājot traukus vai slaucot putekļus dzīvojamā istabā. Tas bija agrīns signāls, ka cilvēkiem patīk liels virtuālais ekrāns, ko var paņemt līdzi jebkur un novietot fiziskajā pasaulē ap sevi. Mēs esam novērojuši, ka šī tendence strauji attīstās, un visā Quest 3 saimē strauji pieaug visdažādāko izklaides iespēju klāsts. Jaunas funkcijas, piemēram, YouTube Co-Watch parāda, cik liels potenciāls ir pavisam jauna veida sociālajai izklaidei metaversālā.

Tāpēc Džeimss Kamerons, viens no tehnoloģiski inovatīvākajiem stāstniekiem mūsu mūžā, tagad strādā, lai palīdzētu vairāk filmu veidotājiem un veidotājiem. radīt lielisku 3D saturu Meta Quest. Lai gan 3D filmas tiek veidotas jau vairākus gadu desmitus, vēl nekad nav bijis tik laba veida, kā tās skatīties ar MR austiņām, un nākamajā gadā austiņas piederēs vairāk cilvēkiem nekā jebkad agrāk. "Mēs atrodamies īstā, vēsturiskā atskaites punktā,"Džims teica kad mēs uzsāka mūsu jauno partnerību šomēnes.

Tas notiek vienlaikus ar plašākām pārmaiņām Mark Rabkin šogad dalījās Connect: Mūsu redzējums par Horizon OS ir izveidot jauna veida vispārējas nozīmes skaitļošanas platformu, kas spēj darbināt visu veidu programmatūru, atbalstīt visu veidu lietotājus un ir atvērta visiem radītājiem un izstrādātājiem. Mūsu nesen izdotie 2D/3D daudzuzdevumu, paneļu pozicionēšanas, labākas roku izsekošanas, Windows Remote Desktop integrācijas un Open Store laidieni ir sākuši veidot impulsu šajā jaunajā virzienā. Horizon OS ir ceļā uz to, lai kļūtu par pirmo platformu, kas atbalsta pilnu pieredzes spektru, sākot no visaptverošas VR līdz 2D ekrāniem, mobilajām lietotnēm un virtuālajiem darbvirsmas datoriem, un izstrādātāju kopiena ir šā panākuma pamatā.

Nākamais lielais solis uz metaversālu apvienos mākslīgā intelekta brilles ar īstu papildinātās realitātes pieredzi, ko šogad atklājām ar Orion. Nereti gadās ieskatīties nākotnē un ieraudzīt pilnīgi jaunu tehnoloģiju, kas parāda, uz kurieni viss virzās. Cilvēki, kas redzēja Orion, uzreiz saprata, ko tas nozīmē nākotnei, līdzīgi kā cilvēki, kas redzēja, kā 70. gados Xerox PARC veidojās pirmie personālie datori ("desmit minūšu laikā man bija skaidrs, ka visi datori kādreiz darbosies šādi," vēlāk Stīvs Džobss teica par savu 1979. gada Xerox Alto demonstrāciju).

Iespēja ievietot cilvēkus laika mašīnā un parādīt viņiem, kā izskatīsies nākamā skaitļošanas platforma, bija 2024. gada un manas līdzšinējās karjeras nozīmīgākais notikums. Taču patiesā Orion ietekme būs nākamajos produktos, ko mēs piegādāsim, un veidos, kā tas palīdzēs mums labāk saprast, kas cilvēkiem patīk AR brillēs un kas ir jāuzlabo. Mēs gadiem ilgi strādājām pie lietotāju izpētes, produktu plānošanas vingrinājumiem un eksperimentāliem pētījumiem, lai saprastu, kā vajadzētu darboties AR brillēm, un šis darbs ļāva mums izveidot Orion. Taču tagad, kad mums ir reāls produkts, uz kura balstīt savu intuīciju, progresa temps būs daudz straujāks.

Šī ir bijusi mācība atkal un atkal pēdējo desmit gadu laikā Reality Labs. Vissvarīgākais, ko varat darīt, mēģinot izgudrot nākotni, ir nosūtīt preces un mācīties no tā, kā tās izmanto reāli cilvēki. Tās ne vienmēr būs tūlītēji hiti, bet tās vienmēr jums kaut ko iemācīs. Un, kad jūs nonākat pie lietām, kas patiešām ir trāpīgas, piemēram, jauktā realitāte Quest 3 vai mākslīgais intelekts brillēs, tad jūs spiežat kāju uz gāzes. Tas ir tas, kas 2025. gadu padarīs tik īpašu: Tā kā tirgū ir pieejamas pareizās ierīces, cilvēki tās pirmo reizi izmēģina un izstrādātāji atklāj visas gaidāmās iespējas, ir pienācis laiks paātrināties.

Laipni lūdzam atgriezties vēl vienā epizodē Boz uz nākotni, Reality Labs podkāsts. In šodienas epizode, mūsu raidījuma vadītājam, Meta tehniskajam direktoram un Reality Labs vadītājam Endrjū "Boz" Bosvortam pievienojas Meta viceprezidents valkājamo ierīču jomā Alekss Himels.

Himela komanda strādā pie sarežģītākajām tehniskajām problēmām nozarē, lai palīdzētu izveidot nākamo skaitļošanas platformu. Tāpat kā Bosvorts, arī Himels ir ilggadējs Meta vadītājs, kurš vairāk nekā 15 gadu laikā uzņēmumā ir ieņēmis vairākus vadošus amatus visā uzņēmumā.

Bosvorts un Himels aplūko dažādas tēmas, tostarp valkājamās ierīces, papildināto realitāti un to, kā mākslīgais intelekts paātrina un uzlabo pieredzes veidus, kas ietverti Ray-Ban Meta brilles un nākotnes produktiem.

Viņi dziļi Orion un pozitīvā uzņemšana, ko tā ir saņēmusi, kopš Marks Zuckerbergs par to paziņoja plkst. Savienot. Tāpat kā Stīvs Džobss atzina, ka Alto ir pagrieziena punkts skaitļošanas tehnikā, Bosvorts apgalvoja, ka, lai gan mēs varam nepiekrist par detaļām, ir grūti apstrīdēt, ka tas ir nākotne. Himels un Bosvorts turpina runāt par prototipēšanas un veidošanas milzīgo vērtību, sakot, cik daudz vairāk viņi ir uzzinājuši par Orion un tā ievades paradigmām trīs nedēļu laikā, kad to lietojuši, salīdzinājumā ar gadiem, kas pavadīti, to veidojot.

Viņi runāja arī par mākslīgā intelekta izšķirošo lomu valkājamo ierīču jomā un par to, kā tas kļūst aizvien noderīgāks ikdienā - īpaši tagad, kad varat uzdot Meta AI jautājumus par lietām, ko redzat, un izmantot to, lai iestatītu vizuālus atgādinājumus.

Himels stāsta arī par savu lielo pieredzi cita veida kaudzēs - sviestmaizēs. Septiņus gadus strādājis slavenajā Lange's Little Store Čappakā, Ņujorkas štatā, kur viņš ir uzaudzis, Himels un Bosvorts iztirzā, kas veido lielisku sviestmaizi, kur patiešām der tomāti un kura maize ir labāka.

Varat pieslēgties Boz uz nākotni vietnē Apple podkāsti, Spotifyun visur, kur klausāties podkāstus.

Jūs varat sekot Himel Diegi. Jūs varat sekot Bosworth Instagram, Twitter/X, un Diegi @boztank.

0:00 / 0:00

2019. gadā Orion komanda sagatavoja svarīgu demonstrāciju Meta dibinātājam un izpilddirektoram Markam Zuckerbergam, demonstrējot potenciālos viļņvadus, kas paredzēti papildinātās realitātes brilles-izšķirošais brīdis, kad teorētiskie aprēķini uz papīra tika īstenoti dzīvē. Tā bija demonstrācija, kas mainīja visu.

"Valkājot brilles ar stikla viļņvadiem un vairākām plāksnēm, varēja justies kā diskotēkā," atceras optikas zinātnieks Paskāls Rivera. "Visur bija varavīksnes, un tas tik ļoti novērsa uzmanību - jūs pat neskatījāties uz AR saturu. Tad jūs uzliekat brilles ar silīcija karbīds viļņvadiem, un bija sajūta, it kā tu būtu simfonijā un klausītos klusu, klasisku skaņdarbu. Jūs patiešām varējāt pievērst uzmanību tam, ko mēs veidojām. Tas pilnībā mainīja spēles gaitu."

Tomēr, lai arī cik skaidra (kalambūrs) šodien šķiet silīcija karbīda kā substrāta izvēle, kad mēs pirmo reizi sākām darbu pie ceļš uz AR brillēm pirms desmit gadiem, tas bija kaut kas cits.

"Parasti silīcija karbīds ir ļoti bagātināts ar slāpekli," saka Rivera. "Tas ir zaļš, un, ja tas kļūst pietiekami biezs, izskatās melns. No tā nekādi nevar izgatavot optisko lēcu. Tas ir elektronisks materiāls. Tas ir iemesls, kāpēc tas ir šādā krāsā, un tas ir elektronisko īpašību dēļ."

"Silīcija karbīds kā materiāls ir izmantots jau ilgu laiku," piekrīt AR viļņvadu tehniskais vadītājs Džuzepe Kalafiore. "Tā galvenais pielietojums ir lieljaudas elektronikā. Piemēram, elektriskie transportlīdzekļi: Visiem elektriskajiem transportlīdzekļiem ir nepieciešama mikroshēma, bet šai mikroshēmai ir jāspēj nodrošināt arī ļoti lielu jaudu, kustināt riteņus un vadīt šo ierīci. Izrādās, ka to nevar izdarīt ar parasto silīcija substrātu, no kura tiek izgatavotas mikroshēmas, ko mēs izmantojam datoros un elektronikā. Ir vajadzīga platforma, kas ļauj izmantot lielas strāvas un jaudas, un šis materiāls ir silīcija karbīds."

Kamēr pavisam nesen nesākās diskusijas par atjaunojamajiem enerģijas avotiem, šo lieljaudas mikroshēmu tirgus ne tuvu nebija tik liels kā plaša patēriņa elektronikas mikroshēmu tirgus. Silīcija karbīds vienmēr ir bijis dārgs, un nebija lielas motivācijas samazināt izmaksas, jo tāda izmēra mikroshēmai, kāda tiek ražota automašīnai, substrāta cena bija pieņemama.

"Taču izrādās, ka silīcija karbīdam piemīt arī dažas īpašības, kas mums nepieciešamas viļņvadiem un optikai," saka Kalafjērs. "Galvenā īpašība, kas mūs interesē, ir refrakcijas indekss. Un silīcija karbīdam ir augsts refrakcijas koeficients, kas nozīmē, ka tas spēj novadīt un izvadīt lielu optisko datu daudzumu. Var domāt par to kā par optisko joslas platumu - gluži tāpat kā jums ir interneta joslas platums, un jūs vēlaties, lai tas būtu pietiekami liels, lai pa šo kanālu varētu nosūtīt milzīgu datu apjomu. Tas pats attiecas uz optiskām ierīcēm."

Jo augstāks ir materiāla refrakcijas koeficients, jo augstāks ir tā refrakcijas koeficients. étendue, lai pa šo kanālu varētu nosūtīt vairāk optisko datu.

"Mūsu gadījumā kanāls ir viļņvads, un lielāks ētendue nozīmē lielāku redzamības lauku," skaidro Kalafjērs. "Jo lielāks ir materiāla refrakcijas koeficients, jo lielāku redzamības lauku var nodrošināt displejs."

Ceļš uz pareizo refrakcijas koeficientu

Kad Kalafjērs 2016. gadā pirmo reizi pievienojās toreizējai Oculus Research, komandas rīcībā esošais augstākais refrakcijas koeficients bija 1,8, tāpēc vajadzēja sakraut vairākas plāksnes, lai iegūtu vēlamo redzes lauku. Ja neskaita nevēlamos optiskos artefaktus, montāžas līnija kļuva arvien sarežģītāka, jo pirmie divi viļņvadi bija perfekti jāsaskaņo, un pēc tam šis kaudze bija perfekti jāsaskaņo ar trešo viļņvadu.

"Tas bija ne tikai dārgi, bet arī uzreiz kļuva skaidrs, ka brilles nevar būt no trim stikla gabaliem katrā lēcu pārī," atceras Kalafjērs. "Tās bija pārāk smagas, un to biezums bija pārāk liels un neglīts - neviens tās nepirktu. Tāpēc mēs atgriezāmies pie sākuma: mēģinājām palielināt pamatnes refrakcijas koeficientu, lai samazinātu nepieciešamo plākšņu skaitu."

Pirmais materiāls, ko komanda pētīja, bija litija niobāts, kura refrakcijas koeficients ir aptuveni 2,3, kas ir nedaudz augstāks nekā stiklam, kura refrakcijas koeficients ir 1,8.

"Mēs sapratām, ka mums vajadzēja salikt tikai divas plāksnes un varbūt pat varēja iztikt ar vienu plāksni, lai pārklātu redzamības lauku," saka Kalafjērs. "Gandrīz paralēli mēs sākām pētīt citus materiālus - tā mēs kopā ar piegādātājiem 2019. gadā noskaidrojām, ka silīcija karbīds tā tīrākajā formā patiesībā ir ļoti caurspīdīgs. Tam ir arī augstākais zināmais optiskā pielietojuma refrakcijas koeficients, kas ir 2,7."

Tas ir 17,4% pieaugums salīdzinājumā ar litija niobātu un 50% pieaugums salīdzinājumā ar stiklu, lai tie, kas mājās skaita rādītājus.

"Ar dažām modifikācijām tajās pašās iekārtās, kas jau tika izmantotas rūpniecībā, bija iespējams iegūt caurspīdīgu silīcija karbīdu," stāsta Kalafjore. "Varēja tikai mainīt procesu, būt daudz uzmanīgākiem, un tā vietā, lai optimizētu elektroniskās īpašības, optimizēt optiskās īpašības: caurspīdīgumu, refrakcijas indeksa vienmērīgumu utt."

Kompromisa iespējamās izmaksas

Tolaik Reality Labs komanda bija pirmā, kas pat mēģināja pāriet no necaurspīdīgām silīcija karbīda plāksnēm uz caurspīdīgām. Tā kā silīcija karbīds ir viens no cietākajiem zināmajiem materiāliem, tā griešanai vai pulēšanai ir nepieciešami dimanta instrumenti. Rezultātā vienreizējās inženiertehniskās izmaksas bija ļoti augstas, tāpēc iegūtais substrāts bija diezgan dārgs.

Lai gan pastāv ekonomiski izdevīgākas alternatīvas, tāpat kā jebkurai citai tehnoloģijai, katrai no tām ir savi kompromisi. Un, palielinoties redzamības laukam līdz Orion nozarē vadošajam redzamības laukam, kas ir aptuveni 70 grādu, rodas jaunas problēmas, piemēram, spoku attēli un varavīksnes.

"Lai atrastu optimālo risinājumu AR displejam ar plašu redzamības lauku, ir jārod kompromiss starp veiktspēju un izmaksām," skaidro pētniecības zinātnes direktors Barijs Silveršteins. "Izmaksas bieži vien var samazināt, bet, ja veiktspēja nav pietiekama, izmaksām galu galā nav nozīmes."

Spoku attēli ir kā uz displeja projicētā galvenā attēla vizuālās atbalsis. Varavīksnes ir krāsainas gaismas svītras, kas rodas, kad apkārtējā gaisma atstarojas no viļņvada. "Pieņemsim, ka jūs braucat naktī, kad ap jums ir kustīgi automašīnu lukturi," saka Silveršteins. "Jums būs arī kustīgas varavīksnes. Vai arī, ja esat pludmalē, spēlējot volejbolu, un spīd saule, jums radīsies varavīksnes svītra, kas kustēsies kopā ar jums, un jūs palaidīsiet garām savu šāvienu. Un viena no brīnumainām silīcija karbīda īpašībām ir tā, ka tas atbrīvojas no šīm varavīksnēm."

"Vēl viena silīcija karbīda priekšrocība, kas nepiemīt nevienam citam materiālam, ir siltumvadītspēja," piebilst Kalafjērs. "Plastmasa ir briesmīgs izolators. Stikls, litija niobāts - tas pats. Pāriet uz silīcija karbīdu, un tas ir caurspīdīgs, izskatās kā stikls, un uzminiet ko: tas vada siltumu."

Tāpēc 2020. gada jūlijā komanda noteica, ka silīcija karbīds ir optimālā izvēle trīs galveno iemeslu dēļ: Tas ļāva uzlabot formas faktoru, jo tam bija nepieciešama tikai viena plāksne un mazākas montāžas struktūras, tam bija labākas optiskās īpašības un tas bija vieglāks nekā stikla plāksne ar divām plāksnēm.

Slant Etch noslēpums

Ņemot vērā materiālu, nākamais uzdevums bija viļņvadu izgatavošana - un jo īpaši netradicionāla režģu izgatavošanas tehnika, ko sauc par slīpu kodināšanu.

"Režģis ir nanostruktūra, kas savieno un savieno gaismu no lēcas," skaidro Kalafjore. "Un, lai silīcija karbīds darbotos, režģim jābūt slīpi kodinātam. Tā vietā, lai režģa līnijas būtu vertikālas, ir nepieciešams, lai tās būtu slīpi slīpi pa diagonāli."

"Mēs bijām pirmie, kas veica slīpu kodināšanu tieši uz ierīcēm," stāsta pētniecības vadītājs Nihars Mohanti. "Visa nozare izmantoja nanoatspiedumu, kas nedarbojas substrātiem ar tik augstu refrakcijas koeficientu. Tāpēc neviens cits pasaulē nebija domājis par silīcija karbīda izgatavošanu."

Taču, tā kā slīpā kodināšana ir vēl nepieredzējusi tehnoloģija, lielākajai daļai pusvadītāju mikroshēmu piegādātāju un rūpnīcu trūkst nepieciešamo rīku.

"2019. gadā mēs ar toreizējo vadītāju Matu Kolbērnu (Matt Colburn) izveidojām savu ražotni, jo pasaulē nebija nekā tāda, kas varētu ražot kodinātus silīcija karbīda viļņvadus un kur mēs varētu pārbaudīt tehnoloģiju, kas pārsniegtu laboratorijas mērogus," skaidro Mohanti. "Tas bija milzīgs ieguldījums, un mēs tur izveidojām visu cauruļvadu. Instrumentus mums pēc pasūtījuma izgatavoja mūsu partneri, un process tika izstrādāts Meta uzņēmumā, lai gan mūsu sistēmas ir pētniecības klases, jo nebija ražošanas klases sistēmu. Mēs sadarbojāmies ar ražošanas partneri, lai izstrādātu ražošanas klases slīpās kodināšanas instrumentus un procesus. Un tagad, kad esam parādījuši, kas ir iespējams ar silīcija karbīdu, mēs vēlamies, lai arī citi nozares pārstāvji sāktu ražot savus instrumentus."

Jo vairāk uzņēmumu ieguldīs optiskā silīcija karbīda ražošanā un izstrādās aprīkojumu, jo spēcīgāka kļūs patērētāju AR briļļu kategorija.

Vairs nevajag dzīties pakaļ varavīksnei

Kamēr tehnoloģiskā neizbēgamība ir mīts, zvaigznes, šķiet, noteikti sakārtojas silīcija karbīda labā. Un, lai gan komanda turpina pētīt alternatīvas, ir spēcīga sajūta, ka īstie cilvēki ir sanākuši kopā īstajā laikā un pareizajos tirgus apstākļos, lai izveidotu AR brilles, izmantojot šo materiālu.

"Orion pierādīja, ka silīcija karbīds ir dzīvotspējīgs risinājums AR brillēm," saka Silveršteins, "un tagad mēs redzam, ka par to interesi izrāda piegādes ķēdes trīs dažādos kontinentos, kur viņi aktīvi izmanto šo iespēju. Silīcija karbīds būs labākais. Manuprāt, tas ir tikai laika jautājums."

Un šajā laikā var notikt ļoti daudz kas - līdzīgi kā tas, kā ir mainījušies notikumi kopš mūsu pirmo silīcija karbīda kristālu audzēšanas.

"Visi šie silīcija karbīda ražotāji, reaģējot uz gaidāmo elektromobiļu bumu, bija ievērojami palielinājuši piegādi," norāda Kalafjore. "Šobrīd ir jaudas pārpalikums, kas nepastāvēja, kad mēs būvējām Orion. Tā kā tagad piedāvājums ir liels, bet pieprasījums zems, substrāta izmaksas ir sākušas samazināties."

"Piegādātāji ir ļoti satraukti par jauno iespēju ražot optiskās kvalitātes silīcija karbīdu - galu galā katra viļņvada lēca ir liels materiāla daudzums, salīdzinot ar elektronisko mikroshēmu, un visas viņu esošās iespējas attiecas uz šo jauno telpu," piebilst Silveršteins. "Rūpnīcas piepildīšana ir būtiska, un rūpnīcas paplašināšana ir sapnis. Svarīgs ir arī plāksnītes izmērs: Jo lielāka plāksne, jo zemākas izmaksas, bet palielinās arī procesa sarežģītība. Tomēr mēs esam redzējuši, ka piegādātāji pāriet no četru collu uz astoņu collu platēm, un daži strādā pie 12 collu platēm, kas ļautu ražot eksponenciāli vairāk AR briļļu pāru."

Šiem sasniegumiem vajadzētu palīdzēt arī turpmāk samazināt izmaksas. Pagaidām vēl ir agri, bet nākotne jau ir iezīmējusies.

"Jebkuras jaunas tehnoloģiskās revolūcijas sākumā jūs izmēģināt vairākas lietas," saka Kalafjore. "Paskatieties uz televīziju: Mēs sākām ar katodstaru lampām, tad sākām ar LED plazmas televizoriem un tagad ar mikroLED. Mēs izmantojām vairākas dažādas tehnoloģijas un arhitektūras. Meklējot ceļu, daudzi ceļi beidzas nekur, bet ir daži, pie kuriem jūs pastāvīgi atgriežaties kā pie visdaudzsološākajiem. Mēs neesam ceļa galā, un mēs to nevaram izdarīt vieni paši, bet silīcija karbīds ir brīnumains materiāls, kurā ir vērts ieguldīt."

"Pasaule ir pamodusies," piebilst Silveršteins. "Mēs esam veiksmīgi pierādījuši, ka silīcija karbīds var elastīgi darboties elektronikā un fotonikā. Tas ir materiāls, ko nākotnē varētu izmantot kvantu skaitļošanā. Un mēs redzam pazīmes, ka ir iespējams ievērojami samazināt izmaksas. Vēl ir daudz darāmā, bet potenciāls ir milzīgs."

---

Uzziniet vairāk par silīcija karbīdu Fotonikas spektrs.

Lai iegūtu vairāk informācijas par Orion, skatiet šos emuāra ierakstus:

• No nulles līdz vienai: kā mūsu pielāgotais silīcijs un mikroshēmas revolucionizē AR
• Orion's Compute Puck: Stāsts par ierīci, kas palīdzēja izveidot mūsu AR brilles.

TL;DR:

• Šodien plkst. Savienot, Marks Zuckerbergs atklāja Orion - mūsu pirmo reālo AR briļļu pāri, kas iepriekš tika kodēts ar nosaukumu Projekts Nazare.
• Ar nozarē labāko redzamības lauku, silīcija karbīda lēcas, sarežģītiem viļņvadiem, uLED prožektoriem un daudz ko citu, Orion ir mūsu līdz šim modernākais un pilnveidotākais produkta prototips.
• Tagad mēs turpinām optimizēt produktus un samazināt izmaksas, lai izveidotu mērogojamu patēriņa ierīci, kas revolucionāri mainīs veidu, kā cilvēki mijiedarbojas ar pasauli.

---

"Mēs veidojam AR brilles."

Pieci vienkārši vārdi, runāts pirms pieciem gadiem. Kopā ar tiem mēs izkārtojām karogu mūsu nākotnes vīzijai, kurā mums vairs nebūs jāizvēlas starp informācijas pasauli, kas mums ir rokas stiepiena attālumā, un fizisko pasauli mums visapkārt.

Un tagad, piecus gadus vēlāk, vēl pieci vārdi, kas atkal var mainīt spēles gaitu:

Mēs esam izveidojuši AR brilles.

https://youtube.com/watch?v=2CJsnyS8u3c%3Fsi%3DTr77gOKEq3PnA7-k%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Mūsu Meta misija ir vienkārša: sniegt cilvēkiem iespēju veidot kopienu un tuvināt pasauli. Un Reality Labs mēs radām rīkus, kas palīdz cilvēkiem justies savienotiem jebkurā laikā un jebkurā vietā. Tāpēc mēs strādājam, lai izveidotu nākamo skaitļošanas platformu, kuras centrā ir cilvēki, lai viņi varētu vairāk būt klātesoši, saistīti un pilnvērtīgi pasaulē.

Ray-Ban Meta brilles ir pierādījuši, ka ir iespējams nodrošināt cilvēkiem brīvroku piekļuvi galvenajām digitālās dzīves daļām no viņu fiziskās dzīves. Mēs varam sarunāties ar gudru mākslīgā intelekta asistentu, sazināties ar draugiem un iemūžināt svarīgus mirkļus - un tas viss bez nepieciešamības izvilkt telefonu. Šīs stilīgās brilles nevainojami iekļaujas mūsu ikdienas dzīvē, un cilvēki tās absolūti iemīlējuši.

Tomēr, lai gan Ray-Ban Meta atklāja pilnīgi jaunu bezdisplejveida briļļu kategoriju, ko papildina mākslīgais intelekts, XR nozare jau sen sapņo par īstām AR brillēm - produktu, kas apvieno liela hologrāfiskā displeja un personalizētas mākslīgā intelekta palīdzības priekšrocības ērtā, stilīgā, visu dienu valkājamā formā.

Un šodien mēs esam pietuvojuši šo sapni realitātei, atklājot Orion, kas, mūsuprāt, ir vismodernākās AR brilles, kādas jebkad izgatavotas. Patiesībā, iespējams, tā ir sarežģītākā plaša patēriņa elektronikas ierīce, kas ražota kopš viedtālruņa. Orion ir izcilāko izgudrojumu rezultāts praktiski visās mūsdienu skaitļošanas tehnikas jomās - balstoties uz... darbs, ko esam veikuši Reality Labs pēdējo desmit gadu laikā.. Tas ir aprīkots ar pilnīgi jaunām tehnoloģijām, tostarp līdz šim modernāko AR displeju un pielāgots silīcijs kas ļauj jaudīgu AR pieredzi izmantot briļļu pārī, izmantojot tikai nelielu daļu no MR austiņu jaudas un svara.

Orion ievades sistēma nevainojami apvieno balss, acu skatiena un roku izsekošanas funkciju ar. EMG aproce kas ļauj tev pārcilāt, klikšķināt un ritināt, turot roku ērti novietotu pie sāniem, lai tu varētu būt klātesošs pasaulē un ar apkārtējiem cilvēkiem, kad izmanto bagātīgu digitālo saturu.

Sākot no šodienas Connect un turpinot visa gada garumā, mēs atveram piekļuvi mūsu Orion produkta prototipam Meta darbiniekiem un izvēlētai ārējai auditorijai, lai mūsu izstrādes komanda varētu mācīties, pilnveidot un pilnveidot mūsu patērētājiem paredzēto AR briļļu produktu līniju, kuru mēs plānojam sākt piegādāt tuvākajā nākotnē.

Kāpēc AR brilles?

Ir trīs galvenie iemesli, kādēļ AR brilles ir atslēga nākamā lielā lēciena atklāšanai uz cilvēku orientētās skaitļošanas jomā.

1. Tie nodrošina digitālo pieredzi, ko neierobežo viedtālruņa ekrāna ierobežojumi. Izmantojot lielos hologrāfiskos displejus, jūs varat izmantot fizisko pasauli kā savu audeklu, izvietojot 2D un 3D saturu un pieredzi jebkurā vietā.
2. Tajos ir integrēts kontekstuāls mākslīgais intelekts, kas spēj uztvert un izprast apkārtējo pasauli, lai paredzētu un proaktīvi reaģētu uz jūsu vajadzībām.
3. Tās ir vieglas un lieliski piemērotas gan iekštelpām, gan āra telpām, un tās ļauj cilvēkiem saskatīt viens otra īsto seju, īstās acis un īstās izteiksmes.

Tā ir ziemeļu zvaigzne, uz kuru mūsu nozare ir virzījusies: produkts, kas apvieno valkājamo ierīču ērtības un tūlītēju lietojamību ar lielu displeju, liela joslas platuma ievadi un kontekstualizētu mākslīgo intelektuālo intelektu, turklāt tādā formā, ko cilvēki jūtas ērti valkāt ikdienā.

Kompakts formas faktors, sarežģīti izaicinājumi

Gadiem ilgi esam saskārušies ar nepareizu izvēli - vai nu virtuālās un jauktās realitātes austiņas, kas nodrošina dziļu un aizraujošu pieredzi lielgabarīta formātā, vai arī brilles, kas ir ideāli piemērotas lietošanai visas dienas garumā, bet nepiedāvā bagātīgas vizuālās lietotnes un pieredzi, jo nav liela displeja un atbilstošas skaitļošanas jaudas.

Bet mēs vēlamies visu, bez kompromisiem. Jau gadiem ilgi esam cītīgi strādājuši pie tā, lai VR un MR austiņas sniegtu neticamu telpisko pieredzi un miniaturizētu tehnoloģiju, kas nepieciešama šīs pieredzes nodrošināšanai vieglās un stilīgās brillēs. Izstrādāt formu, nodrošināt hologrāfiskos displejus, radīt pārliecinošu AR pieredzi un radīt jaunas cilvēka un datora mijiedarbības (HCI) paradigmas - un to visu paveikt vienā vienotā produktā - ir viens no sarežģītākajiem izaicinājumiem, ar ko mūsu nozare jebkad ir saskārusies. Tas bija tik liels izaicinājums, ka mēs domājām, ka mums ir mazāk nekā 10 % izredžu to veiksmīgi paveikt.

Līdz šim.

Pārsteidzošs displejs nepārspējamā formātā

Orion ir aptuveni 70 grādu liels redzes lauks līdz šim mazākajās AR briļļu formās. Šāds redzes lauks Orion paver patiesi aizraujošus izmantošanas gadījumus, sākot no daudzfunkcionāliem logiem un izklaides uz liela ekrāna un beidzot ar cilvēku hologrammām - visu digitālo saturu, kas var nevainojami saplūst ar jūsu skatījumu uz fizisko pasauli.

Orion redzamības lauks bija mūsu svētais grāls. Mums nācās saskarties ar fizikas likumiem un gaismas starus izliekt tā, kā tie dabiski neizliekas, un mums tas bija jādara, ņemot vērā milivatos mērāmo jaudu.

Stikla vietā, mēs izgatavojām lēcas no silīcija karbīda.-jauns AR briļļu lietojums. Silīcija karbīds tas ir neticami viegls, nerada optiskus artefaktus vai izkliedēto gaismu, un tam ir augsts refrakcijas koeficients - visas optiskās īpašības, kas ir svarīgas lielam redzamības laukam. Pašiem viļņvadiem ir patiešām sarežģītas un komplicētas nano mēroga 3D struktūras, lai izkliedētu vai izkliedētu gaismu tādā veidā, kas nepieciešams šāda redzamības lauka sasniegšanai. Projektori ir uLED - jauna veida displeju tehnoloģija, kas ir ļoti maza un ļoti energoefektīva.

Orion ir nepārprotami brilles gan izskata, gan izjūtas ziņā - ar caurspīdīgām lēcām. Atšķirībā no MR austiņām vai citām mūsdienu AR brillēm jūs joprojām varat redzēt citu cilvēku reālās acis un izteiksmes, lai jūs varētu būt klāt un dalīties pieredzē ar apkārtējiem. Bija nepieciešami desmitiem inovāciju, lai panāktu, ka rūpnieciskais dizains ir mūsdienīgs briļļu formas faktors, ko būtu ērti valkāt katru dienu. Orion ir miniaturizācijas sasniegums - komponenti ir iepakoti milimetra daļiņās. Mums izdevās rāmja apmalēs iestrādāt septiņas mazas kameras un sensorus.

Mums bija jāsaglabā optiskā precizitāte, kas bija viena desmitā daļa no cilvēka matu šķiedras biezuma. Sistēma var noteikt sīkas kustības, piemēram, kadri paplašinās vai sarūk dažādās telpas temperatūrās, un pēc tam digitāli koriģēt nepieciešamo optisko izlīdzināšanu milisekundes laikā. Mēs izgatavojām rāmjus no magnija - tā paša materiāla, ko izmanto F1 sacīkšu automašīnās un kosmosa kuģos, jo tas ir viegls, bet stingrs, tāpēc saglabā optisko elementu izlīdzinājumu un efektīvi novada siltumu.

Apkure un dzesēšana

Kad mēs atrisinājām displeja problēmu (bez pārspīlējuma) un pārvarējām fizikas problēmas, mums nācās risināt problēmu, kas saistīta ar patiešām jaudīgu skaitļošanu un patiešām mazu enerģijas patēriņu, kā arī siltuma izkliedēšanu. Atšķirībā no mūsdienu MR austiņām jūs nevarat ievietot ventilatoru briļļu pārī. Tāpēc mums bija jābūt radošiem. Daudzi materiāli, kas izmantoti Orion dzesēšanai, ir līdzīgi tiem, ko NASA izmanto satelītu dzesēšanai kosmosā.

Mēs uzbūvējām augsti specializēts silīcijs pēc pasūtījuma kas ir īpaši energoefektīvs un optimizēts mūsu mākslīgā intelekta, mašīniskās uztveres un grafikas algoritmiem. Mēs izveidojām vairākas pielāgotas mikroshēmas un desmitiem īpaši pielāgotu silīcija IP bloku šajās mikroshēmās. Tas ļauj mums izmantot algoritmus, kas nepieciešami roku un acu izsekošanai, kā arī vienlaicīgas lokalizācijas un kartēšanas (SLAM) tehnoloģiju, kas parasti patērē simtiem milivatu enerģijas - un tādējādi rada atbilstošu siltuma daudzumu - un samazināt to līdz tikai dažiem desmitiem milivatu.

Un, jā, neskatoties uz to, ko esat lasījis citur, Reality Labs produktu izstrādē joprojām būtiska nozīme ir pielāgotam silīcija elementam. 😎

EMG bez piepūles

Katra jauna skaitļošanas platforma ir saistīta ar paradigmas maiņa mūsu mijiedarbībā ar ierīcēm. Peles izgudrošana palīdzēja bruģēt ceļu grafiskajām lietotāja saskarnēm (GUI), kas šodien dominē mūsu pasaulē, un viedtālruņi sāka iegūt popularitāti tikai ar skārienekrāna parādīšanos. Tas pats noteikums attiecas arī uz valkājamām ierīcēm.

Mēs esam runājuši par mūsu darbu ar elektromiogrāfija jeb EMG, jau gadiem ilgi, pamatojoties uz mūsu pārliecību, ka AR briļļu ievadei jābūt ātrai, ērtai, uzticamai, smalkai un sociāli pieņemamai. Un tagad šis darbs ir gatavs pirmajam laikam.

Orion ievades un mijiedarbības sistēma nevainojami apvieno balss, acu skatiena un rokas izsekošanu ar EMG aproci, kas ļauj viegli pārcilāt, klikšķināt un ritināt.

Tas darbojas - un sajūta ir maģiska. Iedomājieties, ka rīta skriešanas laikā varat uzņemt fotoattēlu, vienkārši pieskaroties ar pirkstu galiem, vai pārvietoties pa izvēlnēm ar tikko pamanāmām roku kustībām. Mūsu aproce apvieno augstas veiktspējas tekstilmateriālu ar iebūvētiem EMG sensoriem, lai noteiktu elektriskos signālus, ko rada pat vissīkākās muskuļu kustības. Ierīcē iebūvēts ML procesors interpretē šos EMG signālus, lai radītu ievades notikumus, kas bezvadu režīmā tiek pārraidīti uz brillēm. Sistēma pielāgojas jums, tāpēc laika gaitā tā kļūst arvien labāka un spēj atpazīt vissīkākos žestus. Un šodien mēs dalāmies ar informāciju par mūsu atbalstu ārējiem pētījumiem, kas vērsti uz. paplašināt EMG aprocesu vienlīdzības un pieejamības potenciālu..

Iepazīstieties ar bezvadu skaitļošanas ierīci Puck

Īstām AR brillēm jābūt bezvadu, un tām jābūt arī mazām.Tāpēc mēs izveidojām Orion bezvadu skaitļošanas ripa. Tas daļēji atslogo brilles, nodrošinot ilgāku akumulatora darbības laiku un labāku formas faktoru, kā arī zemu latentuma līmeni.

Uz brillēm darbojas visi rokas izsekošanas, acu izsekošanas, SLAM un specializētie AR pasaules bloķēšanas grafikas algoritmi, savukārt lietotnes loģika darbojas uz ripas, lai brilles būtu pēc iespējas vieglākas un kompaktākas.

Šai ripai ir divi procesori, tostarp viens pēc pasūtījuma izstrādāts tieši šeit, Meta, un tā nodrošina skaitļošanas jaudu, kas nepieciešama grafikas atveidošanai ar zemu latentumu, mākslīgajam intelektam un dažām papildu mašīnu uztveres funkcijām.

Tā kā tas ir mazs un gluds, varat ērti iebāzt ripu somā vai kabatā un doties savās darīšanās - bez pieķeršanās.

AR pieredze

Protams, tāpat kā jebkura cita aparatūras daļa, tā ir tik laba, cik laba ir tā. darīt ar to. Un, lai gan vēl ir tikai sākumposms, Orion sniegtā pieredze ir aizraujošs priekšstats par to, kas gaidāms nākotnē.

https://youtube.com/watch?v=HkdSv3QPhNw%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Mums ir mūsu gudrais palīgs, Meta AI, kas darbojas ar Orion. Tā saprot, ko jūs skatāties fiziskajā pasaulē, un var palīdzēt jums ar noderīgām vizualizācijām. Orion izmanto to pašu Llama modeli, kas šobrīd nodrošina mākslīgā intelekta pieredzi, kas darbojas Ray-Ban Meta viedajās brillēs, kā arī pielāgotus izpētes modeļus, lai demonstrētu iespējamos izmantošanas gadījumus turpmākai valkājamo ierīču izstrādei.

Lai reālajā laikā sazinātos ar draugiem un ģimeni, varat veikt brīvroku videozvanu, un varat uzturēt savienojumu ar WhatsApp un Messenger, lai skatītu un sūtītu ziņojumus. Nav nepieciešams izvilkt tālruni, atbloķēt to, atrast pareizo lietotni un paziņot draugam, ka kavējat vakariņas - to visu varat izdarīt, izmantojot brilles.

https://youtube.com/watch?v=el7lUVvu8Bo%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Varat spēlēt koplietošanas AR spēles ar ģimeni otrā valsts malā vai ar draugu otrā dīvāna pusē. Orion lielais displejs ļauj veikt vairākus uzdevumus, izmantojot vairākus logus, lai paveiktu dažādus darbus un nevajadzētu nēsāt līdzi klēpjdatoru.

Orion šodien pieejamā pieredze palīdzēs iezīmēt mūsu AR briļļu līnijas ceļvedi nākotnē. Mūsu komandas kopā ar izstrādātāju partneriem turpinās pilnveidot un veidot jaunas aizraujošas sociālās pieredzes, un mēs nevaram vien sagaidīt, kad varēsim dalīties ar nākamajiem notikumiem.

Mērķtiecīgs produkta prototips

Lai gan Orion nenonāks līdz patērētājiem, nekļūdieties: Tas ir ne pētniecības prototips. Tas ir vispilnīgākais produkta prototips, kādu jebkad esam izstrādājuši, un tas patiesi reprezentē kaut ko tādu. varētu nosūtīt patērētājiem. Tā vietā, lai steigtos to laist veikalu plauktos, mēs nolēmām vispirms pievērsties iekšējai izstrādei, kas nozīmē, ka mēs varam ātri turpināt veidot un turpināt paplašināt tehnoloģijas un pieredzes robežas.

Tas nozīmē, ka mēs ātrāk izstrādāsim vēl labāku patēriņa produktu.

Kas notiks tālāk

Divi galvenie šķēršļi jau ilgu laiku ir kavējuši AR briļļu ieviešanu plaša patēriņa klases ierīcēs: tehnoloģiskais izrāviens, kas nepieciešams, lai nodrošinātu lielu displeju kompaktās briļļu formās, un nepieciešamība pēc noderīgas un pārliecinošas AR pieredzes, ko var izmantot šajās brillēs. Orion ir milzīgs pagrieziena punkts, kas pirmo reizi nodrošina patiesu AR pieredzi, kas darbojas uz samērā stilīgas aparatūras.

Tagad, kad esam iepazīstinājuši pasauli ar Orion, mēs koncentrējamies uz dažām lietām:

• AR displeja kvalitātes pielāgošana, lai attēli būtu vēl asāki.
• Optimizēšana, kur vien iespējams, lai padarītu formu vēl mazāku.
• Būvniecība mērogā, lai padarītu tos pieejamākus.

Dažos nākamajos gados varat sagaidīt jaunas ierīces, kas balstīsies uz mūsu pētniecības un izstrādes centieniem. Vairākas Orion inovācijas ir attiecinātas uz mūsu pašreizējiem patēriņa produktiem, kā arī uz mūsu nākotnes produktu plānu. Mēs esam optimizējuši dažus no mūsu telpiskās uztveres algoritmiem, kas darbojas gan ierīcē Meta Quest 3S un Orions. Lai gan acu skatiena un smalku žestu ievades sistēma sākotnēji tika izstrādāta Orion, mēs plānojam to izmantot arī turpmākajos produktos. Un mēs pētām iespēju izmantot EMG aproces arī turpmākajos patēriņa produktos.

Orion nav tikai logs nākotnē - tas ir ieskats reālās iespējās, kas ir sasniedzamas jau šodien. Mēs to izveidojām, cenšoties sasniegt to, ko darām vislabāk: palīdzot cilvēkiem veidot saikni. Sākot ar Ray-Ban Meta brillēm un beidzot ar Orion, mēs esam redzējuši, cik daudz laba var panākt, ļaujot cilvēkiem būt klātesošākiem un pilnvērtīgākiem fiziskajā pasaulē, pat tad, kad viņi izmanto visas digitālās pasaules piedāvātās bagātības.

Mēs uzskatām, ka jums nav jāizvēlas starp abām iespējām. Un ar nākamo skaitļošanas platformu jums tas nebūs jādara.

---

Lai iegūtu vairāk informācijas par Orion, skatiet šos emuāra ierakstus:

• Orion's Compute Puck: Stāsts par ierīci, kas palīdzēja izveidot mūsu AR brilles.
• No nulles līdz vienai: kā mūsu pielāgotais silīcijs un mikroshēmas revolucionizē AR
• Kristāldzidrs: mūsu silīcija karbīda viļņvadi un ceļš uz Orion lielo priekšplānu

Pagājušajā gadā izstādē Connect mēs atklājām Orion-mūsu pirmais īstais AR briļļu pāris. Kulminācija mūsu darbs Reality Labs pēdējo desmit gadu laikā.Orion apvieno liela hologrāfiskā displeja un personalizētas mākslīgā intelekta palīdzības priekšrocības ērtā, visu dienu valkājamā formā. Tas izpelnījās zināmu ievērību, pateicoties savam nozarē vadošajam redzamības laukam, silīcija karbīda viļņvadiem, uLED prožektoriem un citiem elementiem. Taču šodien mēs pievēršam uzmanību Orion nepiedēvētajam varonim - skaitļošanas ripai.

Izstrādāts tā, lai to varētu viegli iebāzt kabatā vai somā un jūs to varētu ņemt līdzi jebkurā vietā, kad dodaties savā ikdienas gaitās, un tas atslogo Orion procesora jaudu, lai darbinātu lietojumprogrammu loģiku un nodrošinātu pārliecinošāku, mazāku briļļu formu. Tas bezvadu režīmā savienojas ar brillēm un EMG aproci, nodrošinot viengabalainu lietošanas pieredzi.

Iestatiet un aizmirstiet, vai ne?

Taču ripas vēsture - pat prototipa stadijā - ir saistoša, ar dramatisku loku, par kuru jūs nekad nenojaušat pēc tās izskata.

"Veidojot kaut ko līdzīgu, jūs sākat pārvarēt fizikas robežas," skaidro produktu vadības direktors Rahuls Prāsads. "Pēdējo 50 gadu laikā Mūra likums visu ir padarījis mazāku, ātrāku un ar mazāku jaudu. Problēma ir tā, ka tagad jūs sākat saskarties ar ierobežojumiem attiecībā uz to, cik daudz siltuma jūs varat izkliedēt, cik lielu akumulatoru jūs varat saspiest un cik lielu antenas veiktspēju jūs varat ievietot konkrēta izmēra objektā."

Lai gan retrospektīvais skatījums var būt 20/20, ripas potenciāls nebija acīmredzams uzreiz. Ja esat pirmais, kas kaut ko rada, jums ir jāizpēta visas iespējas, neatstājot nevienu akmeni uz akmens. Kā izveidot kaut ko tādu, ko daži varētu uzskatīt par nevēlamu aksesuāru, nevis par svarīgu komplekta daļu?

"Mēs zinājām, ka ripa ir papildu ierīce, ko mēs lūdzam cilvēkiem nēsāt līdzi," norāda produktu dizaina inženierijas vadītājs Džareds Van Klīvs, "tāpēc mēs izpētījām, kā kļūdu pārvērst par funkciju."

Galu galā šī ētikas nostādne atmaksājās ar pīķiem, jo ripa nelielā izmērā iespiež daudz skaitļošanas (un vēl vairāk Meta izstrādāta pielāgota silīcija mākslīgajam intelektam un mašīnu uztverei). Tas palīdzēja Orion no zinātniskās fantastikas sfēras pārtapt realitātē.

"Ja jums nebūtu ripas, jūs nevarētu gūt pieredzi, ko Orion piedāvā savā formātā," saka Prasads. "Labai AR pieredzei ir nepieciešama patiešām augsta veiktspēja: augsts kadru ātrums, ārkārtīgi zema latence, smalka bezvadu un enerģijas pārvaldība utt. Pūķis un brilles ir jāprojektē tā, lai tie patiešām cieši sadarbotos ne tikai lietotņu līmenī, bet arī operētājsistēmas, programmaparatūras un aparatūras līmenī. Pat ja viedtālrunis būtu kopīgi izstrādāts darbam ar AR brillēm, augstas veiktspējas prasības iztukšotu tālruņa akumulatoru un atņemtu skaitļošanas jaudu tālruņa lietošanas gadījumiem. No otras puses, pulksteņbrillēm ir sava augstas kapacitātes baterija, augstas veiktspējas SoC un Meta izstrādāts mākslīgā intelekta kopprocesors, kas optimizēts Orion vajadzībām."

Protams, ripa netika radīta vienā naktī. Tas prasīja vairākus gadus ilgu iteratīvu darbu.

"Mēs nezinājām, kā cilvēki gribētu mijiedarboties ar Orion no ievades viedokļa - nebija nekā, ko mēs varētu izstrādāt, pamatojoties uz tirgū pieejamajiem datiem," saka produktu vadītājs Mets Resmans. "Ja paskatās uz mūsu agrīnajiem briļļu prototipiem, tās bija masīvas austiņas, kas svēra trīs vai četrus kilogramus. Un, kad jūs mēģināt izveidot produktu, ir ļoti grūti saprast lietotāja pieredzi, ja jums nav pareizā formas faktora. Ar riņķi mēs varējām ļoti ātri izveidot prototipu, lai sāktu saprast, kā cilvēki to izmantos."

Sākotnēji toreizējais Oculus Research to sākotnēji bija iecerējis kā Ω-veida joslu, kas būtu apvijama ap lietotāja kaklu un savienota ar brillēm...

... līdz brīdim, kad Reality Labs bezvadu komanda, cita starpā, ieviešot dažus jauninājumus, ļāva viņiem pārtraukt savienojumu. Tas ļāva izveidot vairāk kabatas vai kabatā/ somā ievietojamu ierīci, kas pavēra daudz iespēju.

"Tolaik paplašinātās realitātes zvani joprojām bija galvenais izmantošanas gadījums," skaidro Van Klīvs. "Hologrāfiskie videoklipi bija vieta, kur tie tika izvietoti hologrāfiski. Jūs to noliktu uz galda ar sensoru soliņu pret jums, attēlotu jūs un pēc tam no ripas virsmas projicētu to, ar ko jūs runājat, lai veiktu zvanu."

"Orion mērķis ir savienot cilvēkus un tuvināt mūs," saka Resmans. "Viena no sākotnējām ripas koncepcijām bija palīdzēt radīt šo klātbūtnes sajūtu ar citiem cilvēkiem un nodrošināt bagātāku saziņas veidu.""

"Tā nav līdzīga nekam citam, ko esat jebkad redzējuši - ierīcei ir potenciāls radīt patiešām jautras un unikālas mijiedarbības," piebilst rūpnieciskais dizainers Emrons Henrijs. "Lietotāja pieredze nedaudz atgādina džina izlaišanu no pudeles, kad hologrammas nemanāmi parādās no ierīces un atkal izšķīst tajā."

Kā jau tagad droši vien varat secināt, ripiņā ir vairāk potenciāla nekā tas, kas galu galā tika iekļauts kā funkcija. Papildus sensoriem un kamerām, kas tiktu izmantotas AR izsaukšanai, ripai ir arī haptika un 6DOF sensori, kas ļautu to izmantot kā izsekošanas kontrolieri, lai izvēlētos un manipulētu ar virtuāliem objektiem un spēlētu AR spēles. Komanda pētīja arī kapacitatīvo un spēka pieskāriena ievadi, lai ripu varētu izmantot kā spēļu bloku, kad to tur portretā un ainaviskā režīmā.

"Mēs runājām par nepieciešamību nēsāt šo papildu lietu," saka Van Klīvs. "Kā to padarīt noderīgāku? Ap to bija vesela darba grupa. Vienā brīdī tika izvirzīta hipotēze, ka AR spēlēšana būs galvenais izmantošanas gadījums."

Jau pašā sākumā mēs zinājām, ka mums ir jāizpēta iespējas, kā ar ripu izdarīt lietas, ko telefoni nespēj. Galu galā mēs izvēlējāmies izmantot acu skatienu, EMG un roku izsekošanu AR spēlēm, piemēram, Stargazer un Pong, bet Orion pirmsākumos mēs izstrādājām dažādus demo un spēļu prototipus, kuros ripa tika izmantota kā kontrolieris.

0:00 / 0:00

0:00 / 0:00

0:00 / 0:00

Renderēti pētījumi par ripu kā 6DOF kontrolieri AR spēlēm, piemēram, Pong.

"Tā kā tas nav tālrunis, tas mums deva lielu dizaina brīvību," piebilst Prasads. "Tas var būt biezāks, es varu to veidot noapaļotāku, lai tas ērti iederētos rokā kā kontrolieris. Tas ir diezgan neticami, ka ripa patiesībā ir mazāka par vidējo tālruni, bet tā ir jaudīgāka par tālruni, jo tajā ir Meta izstrādāts līdzprocesors mākslīgā intelekta un mašīniskās uztveres vajadzībām."

Komanda pētīja, kā kvalitatīva AR spēle varētu atšķirties no MR vai konsoles spēles. Tas nozīmēja izpētīt dažādas AR spēles kontroliera iespējas, tostarp džoistikus, fizisku pogu izkārtojumu, sprūda pogas un citas.

"Mēs galu galā neko no tā faktiski neuzbūvējām," norāda Van Klīvs. "Mēs izveidojām prototipu, bet tā arī nekad to pilnībā neuzbūvējām. Mēs vēlējāmies saglabāt vienkāršību. Mēs vēlējāmies izveidot šīs mīkstās saskarnes, bet ne fiziskas, mehāniskas pogas."

Lai gan gatavajā produkta prototipā sensori un haptika netika ieslēgti, tie pildīja neatņemamu funkciju izstrādes laikā, ļaujot komandām iesniegt kļūdas, vienkārši dažas reizes pieskaroties ierīces augšdaļai, lai ievadītu kļūdas ziņojumu.

Kad mākslīgais intelekts sāka ieņemt centrālo vietu kā galvenais izmantošanas gadījums, skaitļošanas tehnika kļuva arvien svarīgāka. Galu galā ripiņā ir izvietota Orion bezvadu savienojamība, skaitļošanas jauda un akumulatora ietilpība - milzīgs tehnisks sasniegums pats par sevi -, un tas viss palīdz samazināt briļļu svaru un formas faktoru, vienlaikus izkliedējot daudz vairāk siltuma, pateicoties tā virsmas laukumam.

Visā tās evolūcijas gaitā viena lieta ir palikusi nemainīga: ripa ir kas vairāk, nekā šķiet neapmācītam skatienam. Netradicionālu ideju pieņemšana ļāva mūsu komandām pētīt, pārkāpt robežas un veidot nākotni.

"Mēs definējam kategoriju, kas vēl neeksistē," norāda Henrijs. "Kā jau tas ir gaidāms pētniecības un izstrādes gadījumā, pa ceļam bija sākumi un apstāšanās. Kā lietotāji sagaida mijiedarbību ar hologrammām? Vai viņi labprātāk izmantotu AR tālvadības pulti, vai arī ievadei pietiek ar roku izsekošanu, acu skatienu un EMG? Kas ir intuitīvs, maz berzes, pazīstams un noderīgs?"

"Tā vietā, lai uz ripu raudzītos kā uz akmeni, mēs jautājām sev, ko vēl varētu piedāvāt, lai tā vēl vairāk atšķirtos no tālruņiem un pamatotu, kāpēc jūs vēlētos to nēsāt līdzi," atzīst Resmans. "Vai tā neapstrādātā skaitļošanas jauda un praktiskais dizains - kas palīdzēja atraisīt briļļu formas faktoru, kuru reāli var nēsāt visu dienu - galu galā piedāvā pietiekamu vērtību? Mūsu uzdevums ir palīdzēt atbildēt uz šiem jautājumiem."

"Sākumā mēs pārorientējāmies uz to, ko mēs varam izdarīt, ko nevar izdarīt tālrunis," piebilst Van Klīvs. "Telefoniem ir jābūt ekrānam, tiem ir jābūt noteiktam fizisku pogu izkārtojumam, ko lietotāji sagaida. Mums nav šo ierobežojumu. Mūsu skaitļošanas ripa var būt, kāda vien mēs vēlamies, lai tā būtu."

---

Lai iegūtu vairāk informācijas par Orion, skatiet šos emuāra ierakstus:

• Kristāldzidrs: mūsu silīcija karbīda viļņvadi un ceļš uz Orion lielo priekšplānu
• No nulles līdz vienai: kā mūsu pielāgotais silīcijs un mikroshēmas revolucionizē AR

TL;DR:

• Šodien plkst. Savienot, Marks Zuckerbergs atklāja Orion - mūsu pirmo reālo AR briļļu pāri, kas iepriekš tika kodēts ar nosaukumu Projekts Nazare.
• Ar nozarē labāko redzamības lauku, silīcija karbīda lēcas, sarežģītiem viļņvadiem, uLED prožektoriem un daudz ko citu, Orion ir mūsu līdz šim modernākais un pilnveidotākais produkta prototips.
• Tagad mēs turpinām optimizēt produktus un samazināt izmaksas, lai izveidotu mērogojamu patēriņa ierīci, kas revolucionāri mainīs veidu, kā cilvēki mijiedarbojas ar pasauli.

---

"Mēs veidojam AR brilles."

Pieci vienkārši vārdi, runāts pirms pieciem gadiem. Kopā ar tiem mēs izkārtojām karogu mūsu nākotnes vīzijai, kurā mums vairs nebūs jāizvēlas starp informācijas pasauli, kas mums ir rokas stiepiena attālumā, un fizisko pasauli mums visapkārt.

Un tagad, piecus gadus vēlāk, vēl pieci vārdi, kas atkal var mainīt spēles gaitu:

Mēs esam izveidojuši AR brilles.

https://youtube.com/watch?v=2CJsnyS8u3c%3Fsi%3DTr77gOKEq3PnA7-k%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Mūsu Meta misija ir vienkārša: sniegt cilvēkiem iespēju veidot kopienu un tuvināt pasauli. Un Reality Labs mēs radām rīkus, kas palīdz cilvēkiem justies savienotiem jebkurā laikā un jebkurā vietā. Tāpēc mēs strādājam, lai izveidotu nākamo skaitļošanas platformu, kuras centrā ir cilvēki, lai viņi varētu vairāk būt klātesoši, saistīti un pilnvērtīgi pasaulē.

Ray-Ban Meta brilles ir pierādījuši, ka ir iespējams nodrošināt cilvēkiem brīvroku piekļuvi galvenajām digitālās dzīves daļām no viņu fiziskās dzīves. Mēs varam sarunāties ar gudru mākslīgā intelekta asistentu, sazināties ar draugiem un iemūžināt svarīgus mirkļus - un tas viss bez nepieciešamības izvilkt telefonu. Šīs stilīgās brilles nevainojami iekļaujas mūsu ikdienas dzīvē, un cilvēki tās absolūti iemīlējuši.

Tomēr, lai gan Ray-Ban Meta atklāja pilnīgi jaunu bezdisplejveida briļļu kategoriju, ko papildina mākslīgais intelekts, XR nozare jau sen sapņo par īstām AR brillēm - produktu, kas apvieno liela hologrāfiskā displeja un personalizētas mākslīgā intelekta palīdzības priekšrocības ērtā, stilīgā, visu dienu valkājamā formā.

Un šodien mēs esam pietuvojuši šo sapni realitātei, atklājot Orion, kas, mūsuprāt, ir vismodernākās AR brilles, kādas jebkad izgatavotas. Patiesībā, iespējams, tā ir sarežģītākā plaša patēriņa elektronikas ierīce, kas ražota kopš viedtālruņa. Orion ir izcilāko izgudrojumu rezultāts praktiski visās mūsdienu skaitļošanas tehnikas jomās - balstoties uz... darbs, ko esam veikuši Reality Labs pēdējo desmit gadu laikā.. Tas ir aprīkots ar pilnīgi jaunām tehnoloģijām, tostarp līdz šim modernāko AR displeju un pielāgots silīcijs kas ļauj jaudīgu AR pieredzi izmantot briļļu pārī, izmantojot tikai nelielu daļu no MR austiņu jaudas un svara.

Orion ievades sistēma nevainojami apvieno balss, acu skatiena un roku izsekošanas funkciju ar. EMG aproce kas ļauj tev pārcilāt, klikšķināt un ritināt, turot roku ērti novietotu pie sāniem, lai tu varētu būt klātesošs pasaulē un ar apkārtējiem cilvēkiem, kad izmanto bagātīgu digitālo saturu.

Sākot no šodienas Connect un turpinot visa gada garumā, mēs atveram piekļuvi mūsu Orion produkta prototipam Meta darbiniekiem un izvēlētai ārējai auditorijai, lai mūsu izstrādes komanda varētu mācīties, pilnveidot un pilnveidot mūsu patērētājiem paredzēto AR briļļu produktu līniju, kuru mēs plānojam sākt piegādāt tuvākajā nākotnē.

Kāpēc AR brilles?

Ir trīs galvenie iemesli, kādēļ AR brilles ir atslēga nākamā lielā lēciena atklāšanai uz cilvēku orientētās skaitļošanas jomā.

1. Tie nodrošina digitālo pieredzi, ko neierobežo viedtālruņa ekrāna ierobežojumi. Izmantojot lielos hologrāfiskos displejus, jūs varat izmantot fizisko pasauli kā savu audeklu, izvietojot 2D un 3D saturu un pieredzi jebkurā vietā.
2. Tajos ir integrēts kontekstuāls mākslīgais intelekts, kas spēj uztvert un izprast apkārtējo pasauli, lai paredzētu un proaktīvi reaģētu uz jūsu vajadzībām.
3. Tās ir vieglas un lieliski piemērotas gan iekštelpām, gan āra telpām, un tās ļauj cilvēkiem saskatīt viens otra īsto seju, īstās acis un īstās izteiksmes.

Tā ir ziemeļu zvaigzne, uz kuru mūsu nozare ir virzījusies: produkts, kas apvieno valkājamo ierīču ērtības un tūlītēju lietojamību ar lielu displeju, liela joslas platuma ievadi un kontekstualizētu mākslīgo intelektuālo intelektu, turklāt tādā formā, ko cilvēki jūtas ērti valkāt ikdienā.

Kompakts formas faktors, sarežģīti izaicinājumi

Gadiem ilgi esam saskārušies ar nepareizu izvēli - vai nu virtuālās un jauktās realitātes austiņas, kas nodrošina dziļu un aizraujošu pieredzi lielgabarīta formātā, vai arī brilles, kas ir ideāli piemērotas lietošanai visas dienas garumā, bet nepiedāvā bagātīgas vizuālās lietotnes un pieredzi, jo nav liela displeja un atbilstošas skaitļošanas jaudas.

Bet mēs vēlamies visu, bez kompromisiem. Jau gadiem ilgi esam cītīgi strādājuši pie tā, lai VR un MR austiņas sniegtu neticamu telpisko pieredzi un miniaturizētu tehnoloģiju, kas nepieciešama šīs pieredzes nodrošināšanai vieglās un stilīgās brillēs. Izstrādāt formu, nodrošināt hologrāfiskos displejus, radīt pārliecinošu AR pieredzi un radīt jaunas cilvēka un datora mijiedarbības (HCI) paradigmas - un to visu paveikt vienā vienotā produktā - ir viens no sarežģītākajiem izaicinājumiem, ar ko mūsu nozare jebkad ir saskārusies. Tas bija tik liels izaicinājums, ka mēs domājām, ka mums ir mazāk nekā 10 % izredžu to veiksmīgi paveikt.

Līdz šim.

Pārsteidzošs displejs nepārspējamā formātā

Orion ir aptuveni 70 grādu liels redzes lauks līdz šim mazākajās AR briļļu formās. Šāds redzes lauks Orion paver patiesi aizraujošus izmantošanas gadījumus, sākot no daudzfunkcionāliem logiem un izklaides uz liela ekrāna un beidzot ar cilvēku hologrammām - visu digitālo saturu, kas var nevainojami saplūst ar jūsu skatījumu uz fizisko pasauli.

Orion redzamības lauks bija mūsu svētais grāls. Mums nācās saskarties ar fizikas likumiem un gaismas starus izliekt tā, kā tie dabiski neizliekas, un mums tas bija jādara, ņemot vērā milivatos mērāmo jaudu.

Stikla vietā, mēs izgatavojām lēcas no silīcija karbīda.-jauns AR briļļu lietojums. Silīcija karbīds tas ir neticami viegls, nerada optiskus artefaktus vai izkliedēto gaismu, un tam ir augsts refrakcijas koeficients - visas optiskās īpašības, kas ir svarīgas lielam redzamības laukam. Pašiem viļņvadiem ir patiešām sarežģītas un komplicētas nano mēroga 3D struktūras, lai izkliedētu vai izkliedētu gaismu tādā veidā, kas nepieciešams šāda redzamības lauka sasniegšanai. Projektori ir uLED - jauna veida displeju tehnoloģija, kas ir ļoti maza un ļoti energoefektīva.

Orion ir nepārprotami brilles gan izskata, gan izjūtas ziņā - ar caurspīdīgām lēcām. Atšķirībā no MR austiņām vai citām mūsdienu AR brillēm jūs joprojām varat redzēt citu cilvēku reālās acis un izteiksmes, lai jūs varētu būt klāt un dalīties pieredzē ar apkārtējiem. Bija nepieciešami desmitiem inovāciju, lai panāktu, ka rūpnieciskais dizains ir mūsdienīgs briļļu formas faktors, ko būtu ērti valkāt katru dienu. Orion ir miniaturizācijas sasniegums - komponenti ir iepakoti milimetra daļiņās. Mums izdevās rāmja apmalēs iestrādāt septiņas mazas kameras un sensorus.

Mums bija jāsaglabā optiskā precizitāte, kas bija viena desmitā daļa no cilvēka matu šķiedras biezuma. Sistēma var noteikt sīkas kustības, piemēram, kadri paplašinās vai sarūk dažādās telpas temperatūrās, un pēc tam digitāli koriģēt nepieciešamo optisko izlīdzināšanu milisekundes laikā. Mēs izgatavojām rāmjus no magnija - tā paša materiāla, ko izmanto F1 sacīkšu automašīnās un kosmosa kuģos, jo tas ir viegls, bet stingrs, tāpēc saglabā optisko elementu izlīdzinājumu un efektīvi novada siltumu.

Apkure un dzesēšana

Kad mēs atrisinājām displeja problēmu (bez pārspīlējuma) un pārvarējām fizikas problēmas, mums nācās risināt problēmu, kas saistīta ar patiešām jaudīgu skaitļošanu un patiešām mazu enerģijas patēriņu, kā arī siltuma izkliedēšanu. Atšķirībā no mūsdienu MR austiņām jūs nevarat ievietot ventilatoru briļļu pārī. Tāpēc mums bija jābūt radošiem. Daudzi materiāli, kas izmantoti Orion dzesēšanai, ir līdzīgi tiem, ko NASA izmanto satelītu dzesēšanai kosmosā.

Mēs uzbūvējām augsti specializēts silīcijs pēc pasūtījuma kas ir īpaši energoefektīvs un optimizēts mūsu mākslīgā intelekta, mašīniskās uztveres un grafikas algoritmiem. Mēs izveidojām vairākas pielāgotas mikroshēmas un desmitiem īpaši pielāgotu silīcija IP bloku šajās mikroshēmās. Tas ļauj mums izmantot algoritmus, kas nepieciešami roku un acu izsekošanai, kā arī vienlaicīgas lokalizācijas un kartēšanas (SLAM) tehnoloģiju, kas parasti patērē simtiem milivatu enerģijas - un tādējādi rada atbilstošu siltuma daudzumu - un samazināt to līdz tikai dažiem desmitiem milivatu.

Un, jā, neskatoties uz to, ko esat lasījis citur, Reality Labs produktu izstrādē joprojām būtiska nozīme ir pielāgotam silīcija elementam. 😎

EMG bez piepūles

Katra jauna skaitļošanas platforma ir saistīta ar paradigmas maiņa mūsu mijiedarbībā ar ierīcēm. Peles izgudrošana palīdzēja bruģēt ceļu grafiskajām lietotāja saskarnēm (GUI), kas šodien dominē mūsu pasaulē, un viedtālruņi sāka iegūt popularitāti tikai ar skārienekrāna parādīšanos. Tas pats noteikums attiecas arī uz valkājamām ierīcēm.

Mēs esam runājuši par mūsu darbu ar elektromiogrāfija jeb EMG, jau gadiem ilgi, pamatojoties uz mūsu pārliecību, ka AR briļļu ievadei jābūt ātrai, ērtai, uzticamai, smalkai un sociāli pieņemamai. Un tagad šis darbs ir gatavs pirmajam laikam.

Orion ievades un mijiedarbības sistēma nevainojami apvieno balss, acu skatiena un rokas izsekošanu ar EMG aproci, kas ļauj viegli pārcilāt, klikšķināt un ritināt.

Tas darbojas - un sajūta ir maģiska. Iedomājieties, ka rīta skriešanas laikā varat uzņemt fotoattēlu, vienkārši pieskaroties ar pirkstu galiem, vai pārvietoties pa izvēlnēm ar tikko pamanāmām roku kustībām. Mūsu aproce apvieno augstas veiktspējas tekstilmateriālu ar iebūvētiem EMG sensoriem, lai noteiktu elektriskos signālus, ko rada pat vissīkākās muskuļu kustības. Ierīcē iebūvēts ML procesors interpretē šos EMG signālus, lai radītu ievades notikumus, kas bezvadu režīmā tiek pārraidīti uz brillēm. Sistēma pielāgojas jums, tāpēc laika gaitā tā kļūst arvien labāka un spēj atpazīt vissīkākos žestus. Un šodien mēs dalāmies ar informāciju par mūsu atbalstu ārējiem pētījumiem, kas vērsti uz. paplašināt EMG aprocesu vienlīdzības un pieejamības potenciālu..

Iepazīstieties ar bezvadu skaitļošanas ierīci Puck

Īstām AR brillēm jābūt bezvadu, un tām jābūt arī mazām.Tāpēc mēs izveidojām Orion bezvadu skaitļošanas ripa. Tas daļēji atslogo brilles, nodrošinot ilgāku akumulatora darbības laiku un labāku formas faktoru, kā arī zemu latentuma līmeni.

Uz brillēm darbojas visi rokas izsekošanas, acu izsekošanas, SLAM un specializētie AR pasaules bloķēšanas grafikas algoritmi, savukārt lietotnes loģika darbojas uz ripas, lai brilles būtu pēc iespējas vieglākas un kompaktākas.

Šai ripai ir divi procesori, tostarp viens pēc pasūtījuma izstrādāts tieši šeit, Meta, un tā nodrošina skaitļošanas jaudu, kas nepieciešama grafikas atveidošanai ar zemu latentumu, mākslīgajam intelektam un dažām papildu mašīnu uztveres funkcijām.

Tā kā tas ir mazs un gluds, varat ērti iebāzt ripu somā vai kabatā un doties savās darīšanās - bez pieķeršanās.

AR pieredze

Protams, tāpat kā jebkura cita aparatūras daļa, tā ir tik laba, cik laba ir tā. darīt ar to. Un, lai gan vēl ir tikai sākumposms, Orion sniegtā pieredze ir aizraujošs priekšstats par to, kas gaidāms nākotnē.

https://youtube.com/watch?v=HkdSv3QPhNw%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Mums ir mūsu gudrais palīgs, Meta AI, kas darbojas ar Orion. Tā saprot, ko jūs skatāties fiziskajā pasaulē, un var palīdzēt jums ar noderīgām vizualizācijām. Orion izmanto to pašu Llama modeli, kas šobrīd nodrošina mākslīgā intelekta pieredzi, kas darbojas Ray-Ban Meta viedajās brillēs, kā arī pielāgotus izpētes modeļus, lai demonstrētu iespējamos izmantošanas gadījumus turpmākai valkājamo ierīču izstrādei.

Lai reālajā laikā sazinātos ar draugiem un ģimeni, varat veikt brīvroku videozvanu, un varat uzturēt savienojumu ar WhatsApp un Messenger, lai skatītu un sūtītu ziņojumus. Nav nepieciešams izvilkt tālruni, atbloķēt to, atrast pareizo lietotni un paziņot draugam, ka kavējat vakariņas - to visu varat izdarīt, izmantojot brilles.

https://youtube.com/watch?v=el7lUVvu8Bo%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Varat spēlēt koplietošanas AR spēles ar ģimeni otrā valsts malā vai ar draugu otrā dīvāna pusē. Orion lielais displejs ļauj veikt vairākus uzdevumus, izmantojot vairākus logus, lai paveiktu dažādus darbus un nevajadzētu nēsāt līdzi klēpjdatoru.

Orion šodien pieejamā pieredze palīdzēs iezīmēt mūsu AR briļļu līnijas ceļvedi nākotnē. Mūsu komandas kopā ar izstrādātāju partneriem turpinās pilnveidot un veidot jaunas aizraujošas sociālās pieredzes, un mēs nevaram vien sagaidīt, kad varēsim dalīties ar nākamajiem notikumiem.

Mērķtiecīgs produkta prototips

Lai gan Orion nenonāks līdz patērētājiem, nekļūdieties: Tas ir ne pētniecības prototips. Tas ir vispilnīgākais produkta prototips, kādu jebkad esam izstrādājuši, un tas patiesi reprezentē kaut ko tādu. varētu nosūtīt patērētājiem. Tā vietā, lai steigtos to laist veikalu plauktos, mēs nolēmām vispirms pievērsties iekšējai izstrādei, kas nozīmē, ka mēs varam ātri turpināt veidot un turpināt paplašināt tehnoloģijas un pieredzes robežas.

Tas nozīmē, ka mēs ātrāk izstrādāsim vēl labāku patēriņa produktu.

Kas notiks tālāk

Divi galvenie šķēršļi jau ilgu laiku ir kavējuši AR briļļu ieviešanu plaša patēriņa klases ierīcēs: tehnoloģiskais izrāviens, kas nepieciešams, lai nodrošinātu lielu displeju kompaktās briļļu formās, un nepieciešamība pēc noderīgas un pārliecinošas AR pieredzes, ko var izmantot šajās brillēs. Orion ir milzīgs pagrieziena punkts, kas pirmo reizi nodrošina patiesu AR pieredzi, kas darbojas uz samērā stilīgas aparatūras.

Tagad, kad esam iepazīstinājuši pasauli ar Orion, mēs koncentrējamies uz dažām lietām:

• AR displeja kvalitātes pielāgošana, lai attēli būtu vēl asāki.
• Optimizēšana, kur vien iespējams, lai padarītu formu vēl mazāku.
• Būvniecība mērogā, lai padarītu tos pieejamākus.

Dažos nākamajos gados varat sagaidīt jaunas ierīces, kas balstīsies uz mūsu pētniecības un izstrādes centieniem. Vairākas Orion inovācijas ir attiecinātas uz mūsu pašreizējiem patēriņa produktiem, kā arī uz mūsu nākotnes produktu plānu. Mēs esam optimizējuši dažus no mūsu telpiskās uztveres algoritmiem, kas darbojas gan ierīcē Meta Quest 3S un Orions. Lai gan acu skatiena un smalku žestu ievades sistēma sākotnēji tika izstrādāta Orion, mēs plānojam to izmantot arī turpmākajos produktos. Un mēs pētām iespēju izmantot EMG aproces arī turpmākajos patēriņa produktos.

Orion nav tikai logs nākotnē - tas ir ieskats reālās iespējās, kas ir sasniedzamas jau šodien. Mēs to izveidojām, cenšoties sasniegt to, ko darām vislabāk: palīdzot cilvēkiem veidot saikni. Sākot ar Ray-Ban Meta brillēm un beidzot ar Orion, mēs esam redzējuši, cik daudz laba var panākt, ļaujot cilvēkiem būt klātesošākiem un pilnvērtīgākiem fiziskajā pasaulē, pat tad, kad viņi izmanto visas digitālās pasaules piedāvātās bagātības.

Mēs uzskatām, ka jums nav jāizvēlas starp abām iespējām. Un ar nākamo skaitļošanas platformu jums tas nebūs jādara.

---

Lai iegūtu vairāk informācijas par Orion, skatiet šos emuāra ierakstus:

• Orion's Compute Puck: Stāsts par ierīci, kas palīdzēja izveidot mūsu AR brilles.
• No nulles līdz vienai: kā mūsu pielāgotais silīcijs un mikroshēmas revolucionizē AR
• Kristāldzidrs: mūsu silīcija karbīda viļņvadi un ceļš uz Orion lielo priekšplānu