Autor: Kristián Ivančo

0:00 / 0:00

Još 2019. godine, Orion Tim je pripremio važnu demonstraciju za osnivača i izvršnog direktora Mete, Marka Zuckerberga, predstavljajući potencijalne valovode za naočale proširene stvarnosti—prekretni trenutak kada su teorijski izračuni na papiru oživjeli. I bila je to demonstracija koja je sve promijenila.

„Noseći naočale sa staklenim valovodima i više ploča, osjećali ste se kao da ste u diskoteci“, prisjeća se optički znanstvenik Pasqual Rivera. „Duge su bile posvuda i to je bilo toliko ometajuće - niste čak ni gledali AR sadržaj. Zatim biste stavili naočale s…“ silicijev karbid valovode, i bilo je kao da ste u simfoniji i slušate tihi, klasični komad. Zapravo ste mogli posvetiti pozornost potpunom doživljaju onoga što smo gradili. To je bila potpuna promjena pravila igre.”

Pa ipak, koliko god jasan (namjerna igra riječi) bio izbor silicijevog karbida kao supstrata danas, kada smo prvi put krenuli put do AR naočala prije deset godina, bilo je sve samo ne to.

„Silicijev karbid je obično jako dopiran dušikom“, kaže Rivera. „Zelene je boje, a ako postane dovoljno gust, izgleda crno. Nema šanse da se od njega napravi optička leća. To je elektronički materijal. Postoji razlog zašto je te boje, a to je zbog elektroničkih svojstava.“

„Silicijev karbid postoji kao materijal već dugo vremena“, slaže se Giuseppe Calafiore, tehnički voditelj AR Waveguidesa. „Njegova glavna primjena je elektronika velike snage. Uzmimo za primjer električna vozila: sva električna vozila zahtijevaju čip - ali taj čip također mora biti sposoban za vrlo veliku snagu, pomicanje kotača i upravljanje ovom stvari. Ispada da to ne možete učiniti s običnom silicijskom podlogom, koja je ono što čini čipove koje koristimo u našim računalima i elektronici. Potrebna vam je platforma koja vam omogućuje prolazak kroz velike struje, veliku snagu, a taj materijal je silicijev karbid.“

Sve do relativno nedavnih rasprava o obnovljivim izvorima energije, tržište za ove visokosnažne čipove nije bilo ni blizu veličine tržišta za čipove za potrošačku elektroniku. Silicijev karbid oduvijek je bio skup i nije bilo puno poticaja za smanjenje troškova jer je, za veličinu čipa koji se proizvodi za automobil, cijena podloge bila podnošljiva.

„No ispada da silicijev karbid također ima neka svojstva koja su nam potrebna za valovode i optiku“, kaže Calafiore. „Indeks loma ključno je svojstvo koje nas zanima. A silicijev karbid ima visoki indeks loma, što znači da je sposoban kanalizirati i odašiljati veliku količinu optičkih podataka. Možete to smatrati optičkom propusnošću - baš kao što imate propusnost za internet i želite da bude dovoljno velika da možete slati ogromne količine podataka putem tog kanala. Isto vrijedi i za optičke uređaje.“

Što je indeks loma materijala veći, to je njegov produžetak, tako da možete poslati više optičkih podataka putem tog kanala.

„Kanal je u našem slučaju naš valovod, a veći étendue znači veće vidno polje“, objašnjava Calafiore. „Što je veći indeks loma materijala, to je veće vidno polje koje zaslon može podržati.“

Put do pravog indeksa loma

Kada se Calafiore prvi put pridružio tadašnjem Oculus Researchu 2016. godine, staklo s najvišim indeksom loma koje je tim imao na raspolaganju bilo je 1,8 - što je zahtijevalo slaganje više ploča kako bi se postiglo željeno vidno polje. Osim neželjenih optičkih artefakata, proizvodna traka postajala je sve kompliciranija jer su prva dva valovoda morala biti savršeno poravnata, a zatim taj snop morao biti savršeno poravnat s trećim valovodom.

„Ne samo da je bilo skupo, već je odmah bilo očito da se u naočalama ne mogu imati tri komada stakla po leći“, prisjeća se Calafiore. „Bile su preteške, a debljina pretjerano velika i ružna - nitko ih nije htio kupiti. Stoga smo se vratili na početak: pokušali smo povećati indeks loma podloge kako bismo smanjili broj potrebnih ploča.“

Prvi materijal koji je tim proučavao bio je litijev niobat, koji ima indeks loma od otprilike 2,3 - što je znatno više od stakla s 1,8.

„Shvatili smo da moramo složiti samo dvije ploče i da bismo možda čak mogli uspjeti s jednom pločom da i dalje pokrijemo vidno polje“, kaže Calafiore. „Gotovo paralelno, počeli smo istraživati i druge materijale - tako smo zajedno s našim dobavljačima 2019. godine shvatili da je silicijev karbid, u svom najčišćem obliku, zapravo vrlo proziran. Također ima najveći indeks loma poznat za optičku primjenu, koji iznosi 2,7.“

To je povećanje od 17,41 TP3T u odnosu na litijev niobat i porast od 501 TP3T u odnosu na staklo, za one koji vode računa kod kuće.

„Uz nekoliko modifikacija iste opreme koja se već koristila u industriji, bilo je moguće dobiti prozirni silicijev karbid“, kaže Calafiore. „Mogli ste jednostavno promijeniti proces, biti puno pažljiviji i umjesto optimizacije elektroničkih svojstava, optimizirati optička svojstva: prozirnost, ujednačenost indeksa loma itd.“

Potencijalni trošak kompromisa

U to vrijeme, tim Reality Labsa bio je prvi koji je uopće pokušao prijeći s neprozirnih na prozirne pločice silicij-karbida. A budući da je silicij-karbid jedan od najtvrđih poznatih materijala, za rezanje ili poliranje u biti je potrebna dijamantna obrada. Kao rezultat toga, jednokratni inženjerski troškovi bili su vrlo visoki, pa je rezultirajuća podloga bila prilično skupa.

Iako postoje isplativije alternative, kao i kod svake tehnologije, svaka od njih ima svoje nedostatke. Kako se vidno polje povećava prema Orionovom vodećem vidnom polju u industriji od približno 70 stupnjeva, pojavljuju se novi problemi poput slika duhova i duga.

„Pronalaženje optimalnog rješenja za AR zaslon sa širokim vidnim poljem prepuno je kompromisa između performansi i troškova“, objašnjava direktor istraživačke znanosti Barry Silverstein. „Troškovi se često mogu smanjiti, ali ako ih performanse ne smanje, troškovi u konačnici neće biti važni.“

Slike duhova su poput vizualnih odjeka primarne slike koja se projicira na zaslon. Duge su šarene pruge svjetlosti koje nastaju kada se ambijentalna svjetlost reflektira od valovoda. „Recimo da vozite noću s pokretnim svjetlima automobila oko vas“, kaže Silverstein. „Imat ćete i duge koje se pomiču. Ili ako ste na plaži i igrate odbojku, a sunce sja, dobit ćete duginu prugu koja se pomiče s vama i promašit ćete svoj udarac. A jedno od čudesnih svojstava silicijevog karbida je da uklanja te duge.“

„Druga prednost silicijevog karbida koju nijedan drugi materijal nema je toplinska vodljivost“, dodaje Calafiore. „Plastika je užasan izolator. Staklo, litijev niobat, ista stvar. Uzmete silicijev karbid i on je proziran, izgleda kao staklo i pogodite što: provodi toplinu.“

Stoga je u srpnju 2020. tim utvrdio da je silicijev karbid optimalan izbor iz tri glavna razloga: doveo je do poboljšanog faktora oblika jer je zahtijevao samo jednu ploču i manje montažne strukture, imao je bolja optička svojstva i bio je lakši od dvostrukog stakla.

Tajna kosog jetkanja

Imajući materijal na umu, sljedeći izazov bio je izrada valovoda - i to nekonvencionalna tehnika rešetke nazvana koso jetkanje.

„Rešetka je nanostruktura koja spaja i odvaja svjetlost iz leće“, objašnjava Calafiore. „A da bi silicijev karbid funkcionirao, rešetka mora biti koso nagrizena. Umjesto da bude okomita, želite da linije rešetke budu dijagonalno nagnute.“

„Bili smo prvi koji su izravno na uređajima izvodili koso jetkanje“, kaže voditeljica istraživanja Nihar Mohanty. „Cijela se industrija prije oslanjala na nano otisak, koji ne funkcionira za podloge s tako visokim indeksom loma. Zato nitko drugi na svijetu nije razmišljao o radu sa silicijevim karbidom.“

No, budući da je koso jetkanje nezrela tehnologija, većini dobavljača i tvornica poluvodičkih čipova nedostaju potrebni alati.

„Davne 2019. godine, moj tadašnji menadžer, Matt Colburn, i ja osnovali smo vlastiti pogon jer nije postojalo ništa na svijetu što bi moglo proizvoditi valovode od jetkanog silicijevog karbida i gdje bismo mogli isprobati tehnologiju izvan laboratorijskih razmjera“, objašnjava Mohanty. „Bila je to ogromna investicija i tamo smo uspostavili cijeli proces. Alat su nam po mjeri izradili naši partneri, a proces je razvijen interno u Meti, iako su naši sustavi istraživačke kvalitete jer nije bilo sustava proizvodne kvalitete. Surađivali smo s proizvodnim partnerom kako bismo razvili alate i procese za koso jetkanje proizvodne kvalitete. A sada kada smo pokazali što je moguće sa silicijevim karbidom, želimo da i drugi u industriji počnu izrađivati vlastite alate.“

Što više tvrtki ulaže u optički silicijev karbid i razvija opremu, to će jača postati kategorija AR naočala za potrošače.

Više ne jurim duge

Dok tehnološka neizbježnost je mit, zvijezde se svakako čini da se poravnavaju u korist silicijevog karbida. I premda tim nastavlja istraživati alternative, postoji snažan osjećaj da su se pravi ljudi okupili u pravo vrijeme pod pravim tržišnim uvjetima kako bi izgradili AR naočale koristeći ovaj materijal.

„Orion je dokazao da je silicijev karbid održiva opcija za AR naočale“, kaže Silverstein, „i sada vidimo interes u cijelom lancu opskrbe na tri različita kontinenta gdje to intenzivno koriste kao priliku. Silicijev karbid će se istaknuti. Po mom mišljenju, to je samo pitanje vremena.“

I mnogo se toga može dogoditi u tom vremenu - slično kao što se situacija okrenula otkako smo uzgojili naše prve kristale prozirnog silicijevog karbida.

„Svi ovi proizvođači silicijevog karbida znatno su povećali ponudu kao odgovor na očekivani procvat električnih vozila“, napominje Calafiore. „Trenutno postoji prekapacitet koji nije postojao kada smo gradili Orion. Dakle, sada, budući da je ponuda velika, a potražnja niska, cijena podloge počela je padati.“

„Dobavljači su vrlo uzbuđeni novom prilikom proizvodnje silicijevog karbida optičke kvalitete - uostalom, svaka leća valovoda predstavlja veliku količinu materijala u odnosu na elektronički čip, a sve njihove postojeće mogućnosti primjenjuju se na ovaj novi prostor“, dodaje Silverstein. „Popunjavanje vaše tvornice je ključno, a skaliranje vaše tvornice je san. Veličina pločice je također važna: što je pločica veća, to je niži trošak - ali složenost procesa također raste. Uz to, vidjeli smo dobavljače kako prelaze s pločica od četiri inča na osam inča, a neki rade na prekursorima pločica od 12 inča, što bi dalo eksponencijalno više parova AR naočala.“

Ovi napredci trebali bi pomoći u daljnjem smanjenju troškova. Još je rano, ali budućnost se nazira.

„Na početku svake nove tehnološke revolucije isprobavate hrpu stvari“, kaže Calafiore. „Pogledajte televiziju: Počeli smo s katodnim cijevima, zatim smo prešli na LED plazma televizore, a sada na mikroLED. Prošli smo kroz nekoliko različitih tehnologija i arhitektura. Dok tražite put, mnogi putevi ne završavaju nigdje, ali postoje neki na koje se jednostavno stalno vraćate kao na najperspektivnije. Nismo na kraju puta i ne možemo to učiniti sami, ali silicijev karbid je čudesan materijal u koji se isplati uložiti.“

„Svijet se sada probudio“, dodaje Silverstein. „Uspješno smo pokazali da se silicijev karbid može primjenjivati u elektronici i fotonici. To je materijal koji bi mogao imati buduću primjenu u kvantnom računarstvu. I vidimo znakove da je moguće značajno smanjiti troškove. Puno je toga još za napraviti, ali potencijalna prednost ovdje je ogroman.“

---

Saznajte više o silicijevom karbidu u Fotonski spektri.

Za više informacija o Orionu, pogledajte ove objave na blogu:

• Od nule do jedan: Kako naš prilagođeni silicij i čipovi revolucioniraju proširenu stvarnost (AR)
• Orionov računalni pak: Priča iza uređaja koji je omogućio stvaranje naših AR naočala

TL;DR:

• Danas u Poveži seMark Zuckerberg predstavio je Orion - naš prvi par pravih AR naočala, prethodno kodnog naziva Projekt Nazare.
• S vodećim vidnim poljem u industriji, silicij-karbidne leće, zamršene valovode, uLED projektore i još mnogo toga, Orion je naš najnapredniji i najdovršeniji prototip proizvoda do sada.
• Sada nastavljamo s optimizacijama proizvoda i snižavanjem troškova dok se krećemo prema skalabilnom potrošačkom uređaju koji će revolucionirati način na koji ljudi komuniciraju sa svijetom.

---

„Izrađujemo AR naočale.“

Pet jednostavnih riječi, izgovoreno prije pet godinaS njima smo postavili zastavu na našu viziju budućnosti u kojoj više ne moramo praviti lažni izbor između svijeta informacija na dohvat ruke i fizičkog svijeta oko nas.

A sada, pet godina kasnije, još pet riječi koje će ponovno promijeniti pravila igre:

Izradili smo AR naočale.

https://youtube.com/watch?v=2CJsnyS8u3c%3Fsi%3DTr77gOKEq3PnA7-k%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

U Meti, naša misija je jednostavna: dati ljudima moć da izgrade zajednicu i zbliže svijet. A u Reality Labsu gradimo alate koji pomažu ljudima da se osjećaju povezanima bilo kada i bilo gdje. Zato radimo na izgradnji sljedeće računalne platforme koja ljude stavlja u središte kako bi mogli biti prisutniji, povezaniji i osnaženiji u svijetu.

Ray-Ban Meta naočale pokazali su moć pružanja ljudima pristupa ključnim dijelovima njihovog digitalnog života bez upotrebe ruku iz njihovog fizičkog života. Možemo razgovarati s pametnim AI asistentom, povezati se s prijateljima i zabilježiti trenutke koji su važni - sve to bez potrebe da ikada izvadimo telefon. Ove elegantne naočale besprijekorno se uklapaju u naš svakodnevni život i ljudi ih apsolutno obožavaju.

Iako je Ray-Ban Meta otvorio potpuno novu kategoriju naočala bez zaslona, napunjenih umjetnom inteligencijom, XR industrija već dugo sanja o pravim AR naočalama - proizvodu koji kombinira prednosti velikog holografskog zaslona i personalizirane umjetne inteligencije u udobnom, elegantnom i cjelodnevno nosivom obliku.

A danas smo taj san približili stvarnosti otkrivanjem Orion, za koje vjerujemo da su najnapredniji AR naočale ikad napravljene. Zapravo, to bi mogao biti najizazovniji uređaj potrošačke elektronike proizveden od pametnih telefona. Orion je rezultat revolucionarnih izuma u gotovo svakom području modernog računarstva - nadograđujući se na posao koji radimo u Reality Labsu posljednjih deset godinaPrepun je potpuno novih tehnologija, uključujući najnapredniji AR zaslon ikad sastavljen i prilagođeni silikon koji omogućuje snažna AR iskustva na naočalama koristeći djelić snage i težine MR slušalica.

Orionov sustav unosa besprijekorno kombinira glas, pogled i praćenje ruke s... EMG narukvica koji vam omogućuje prevlačenje, klikanje i pomicanje dok vam ruka udobno leži uz tijelo, omogućujući vam da ostanete prisutni u svijetu i s ljudima oko sebe dok komunicirate s bogatim digitalnim sadržajem.

Počevši od danas u Connectu, pa sve do kraja godine, otvaramo pristup prototipu našeg Orion proizvoda za zaposlenike tvrtke Meta i odabranu vanjsku publiku kako bi naš razvojni tim mogao učiti, unapređivati i graditi prema našoj liniji proizvoda za AR naočale za široku potrošnju, koju planiramo početi isporučivati u bliskoj budućnosti.

Zašto AR naočale?

Postoje tri glavna razloga zašto su AR naočale ključne za otključavanje sljedećeg velikog skoka u računarstvu orijentiranom na ljude.

1. Omogućuju digitalna iskustva koja nisu ograničena ograničenjima zaslona pametnog telefona. S velikim holografskim zaslonima možete koristiti fizički svijet kao svoje platno, postavljajući 2D i 3D sadržaj i iskustva gdje god želite.
2. Besprijekorno integriraju kontekstualnu umjetnu inteligenciju koja može osjetiti i razumjeti svijet oko vas kako bi predvidjela i proaktivno odgovorila na vaše potrebe.
3. Lagane su i izvrsne za unutarnju i vanjsku upotrebu - i omogućuju ljudima da vide pravo lice, prave oči i prave izraze lica.

To je zvijezda sjevernjača prema kojoj je naša industrija gradila: proizvod koji kombinira praktičnost i neposrednost nosivih uređaja s velikim zaslonom, brzim ulazom i kontekstualiziranom umjetnom inteligencijom u obliku koji ljudi osjećaju ugodno noseći u svakodnevnom životu.

Kompaktni oblik, složeni izazovi

Godinama smo se suočavali s lažnim izborom - ili slušalice za virtualnu i miješanu stvarnost koje omogućuju duboka, impresivna iskustva u glomaznom obliku ili naočale koje su idealne za cjelodnevnu upotrebu, ali ne nude bogate vizualne aplikacije i iskustva s obzirom na nedostatak velikog zaslona i odgovarajuće računalne snage.

Ali mi želimo sve, bez kompromisa. Godinama smo naporno radili na tome da nevjerojatna prostorna iskustva koja pružaju VR i MR naočale pretvorimo u minijaturiziranu tehnologiju potrebnu za isporuku tih iskustava u lagane, elegantne naočale. Savršeno oblikovanje, isporuka holografskih zaslona, razvoj uvjerljivih AR iskustava i stvaranje novih paradigmi interakcije čovjeka i računala (HCI) - i sve to u jednom kohezivnom proizvodu - jedan je od najtežih izazova s kojima se naša industrija ikada suočila. Bilo je toliko izazovno da smo mislili da imamo manje od 10 posto šanse da to uspješno izvedemo.

Do sada.

Revolucionarni zaslon u neusporedivom formatu

S otprilike 70 stupnjeva, Orion ima najveće vidno polje u najmanjem formatu AR naočala do danas. To vidno polje otključava uistinu impresivne slučajeve upotrebe za Orion, od prozora za više zadataka istovremeno i zabave na velikom zaslonu do holograma ljudi u prirodnoj veličini - sav digitalni sadržaj koji se može besprijekorno stopiti s vašim pogledom na fizički svijet.

Za Orion, vidno polje bilo je naš sveti gral. Suočavali smo se sa zakonima fizike i morali smo savijati snopove svjetlosti na načine na koje se oni prirodno ne savijaju - i to smo morali učiniti u energetskoj ovojnici mjerenoj u milivatima.

Umjesto stakla, Leće smo napravili od silicijevog karbida—nova aplikacija za AR naočale. Silicijev karbid Nevjerojatno je lagan, ne rezultira optičkim artefaktima ili rasipnom svjetlošću i ima visoki indeks loma - sve optička svojstva koja su ključna za veliko vidno polje. Sami valovodi imaju zaista zamršene i kompleksne 3D strukture nano-razmjera za difrakciju ili širenje svjetlosti na načine potrebne za postizanje ovog vidnog polja. A projektori su uLED - nova vrsta tehnologije prikaza koja je super mala i izuzetno energetski učinkovita.

Orion su nepogrešivo naočale, i izgledom i osjećajem - s prozirnim lećama. Za razliku od MR slušalica ili drugih AR naočala danas, i dalje možete vidjeti prave oči i izraze lica jedno drugome, tako da možete biti prisutni i podijeliti iskustvo s ljudima oko sebe. Deseci inovacija bili su potrebni kako bi se industrijski dizajn sveo na suvremeni oblik naočala koje biste mogli udobno nositi svaki dan. Orion je podvig minijaturizacije - komponente su spakirane u djelić milimetra. Uspjeli smo ugraditi sedam sićušnih kamera i senzora u okvire.

Morali smo održavati optičku preciznost na jednoj desetini debljine vlasi ljudske kose. Sustav može detektirati sitne pokrete - poput okvira koji se šire ili skupljaju na različitim sobnim temperaturama - a zatim digitalno ispraviti potrebno optičko poravnanje, sve unutar milisekundi. Okvire smo napravili od magnezija - istog materijala koji se koristi u trkaćim automobilima Formule 1 i svemirskim letjelicama - jer je lagan, a opet krut, pa održava optičke elemente u poravnanju i učinkovito odvodi toplinu.

Grijanje i hlađenje

Nakon što smo "razbili" zaslon (bez igre riječi) i prevladali fizikalne probleme, morali smo se suočiti s izazovom stvarno snažnog računalstva uz stvarno nisku potrošnju energije i potrebu za odvođenjem topline. Za razliku od današnjih MR slušalica, ne možete ugurati ventilator u naočale. Stoga smo morali biti kreativni. Mnogi materijali koji se koriste za hlađenje Oriona slični su onima koje NASA koristi za hlađenje satelita u svemiru.

Izgradili smo visoko specijalizirani prilagođeni silikon što je izuzetno energetski učinkovito i optimizirano za našu umjetnu inteligenciju, percepciju strojeva i grafičke algoritme. Izgradili smo više prilagođenih čipova i desetke visoko prilagođenih silicijskih IP blokova unutar tih čipova. To nam omogućuje da algoritme potrebne za praćenje ruku i očiju, kao i tehnologiju simultane lokalizacije i mapiranja (SLAM) koja inače troši stotine milivata energije - i stoga generira odgovarajuću količinu topline - smanjimo na samo nekoliko desetaka milivata.

I da, prilagođeni silikon i dalje igra ključnu ulogu u razvoju proizvoda u Reality Labsu, unatoč onome što ste možda negdje drugdje pročitali. 😎

EMG bez napora

Svaka nova računalna platforma sa sobom donosi promjena paradigme u načinu na koji komuniciramo s našim uređajima. Izum miša pomogao je utrti put grafičkim korisničkim sučeljima (GUI) koja danas dominiraju našim svijetom, a pametni telefoni nisu počeli dobivati na popularnosti sve do pojave zaslona osjetljivog na dodir. Isto pravilo vrijedi i za nosive uređaje.

Razgovarali smo o našem radu s elektromiografija ili EMG, godinama, vođeni našim uvjerenjem da unos za AR naočale mora biti brz, praktičan, pouzdan, suptilan i društveno prihvatljiv. A sada je taj rad spreman za veliki termin.

Orionov sustav unosa i interakcije besprijekorno kombinira glas, pogled i praćenje ruke s EMG narukvicom koja vam omogućuje jednostavno prevlačenje, klikanje i pomicanje.

Djeluje – i osjeća se – kao magija. Zamislite da snimate fotografiju tijekom jutarnjeg trčanja jednostavnim dodirom vrhova prstiju ili da se krećete kroz izbornike jedva primjetnim pokretima ruku. Naša narukvica kombinira visokoučinkovitu tekstilnu tkaninu s ugrađenim EMG senzorima za detekciju električnih signala generiranih čak i najsitnijim pokretima mišića. ML procesor na uređaju zatim interpretira te EMG signale kako bi proizveo ulazne događaje koji se bežično prenose na naočale. Sustav se prilagođava vama, pa s vremenom postaje bolji i sposobniji prepoznavati najsuptilnije geste. A danas dijelimo više o našoj podršci vanjskim istraživanjima usmjerenima na… proširenje potencijala jednakosti i dostupnosti EMG narukvica.

Upoznajte bežični računalni puck

Prave AR naočale moraju biti bežične i moraju biti male.Tako smo izgradili bežični računalni pak za OrionTo smanjuje dio opterećenja s naočala, omogućujući dulje trajanje baterije i bolji oblik uz nisku latenciju.

Naočale pokreću sve algoritme za praćenje ruku, praćenje očiju, SLAM i specijalizirane algoritme za zaključavanje AR svijeta, dok se logika aplikacije izvršava na paku kako bi naočale bile što lakše i kompaktnije.

Pak ima dva procesora, uključujući jedan posebno dizajniran ovdje u Meti, i pruža računalnu snagu potrebnu za renderiranje grafike s niskom latencijom, umjetnu inteligenciju i dodatnu strojnu percepciju.

A budući da je malen i elegantan, pak možete udobno ubaciti u torbu ili džep i obavljati svoje poslove - bez ikakvih obaveza.

AR iskustva

Naravno, kao i sa svakim hardverom, dobar je samo onoliko koliko je dobro ono što možete učiniti s tim. I premda je još rano, iskustva koja pruža Orion uzbudljiv su uvid u ono što dolazi.

https://youtube.com/watch?v=HkdSv3QPhNw%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Imamo našeg pametnog asistenta, Meta umjetna inteligencija, koji radi na Orionu. Razumije što gledate u fizičkom svijetu i može vam pomoći s korisnim vizualizacijama. Orion koristi isti Llama model koji danas pokreće AI iskustva na pametnim naočalama Ray-Ban Meta, plus prilagođene istraživačke modele kako bi demonstrirao potencijalne slučajeve upotrebe za budući razvoj nosive elektronike.

Možete u pokretu obaviti videopoziv bez upotrebe ruku kako biste se u stvarnom vremenu čuli s prijateljima i obitelji, a možete ostati povezani putem WhatsAppa i Messengera kako biste pregledavali i slali poruke. Nema potrebe vaditi telefon, otključavati ga, tražiti pravu aplikaciju i obavještavati prijatelja da kasnite na večeru - sve to možete učiniti putem naočala.

https://youtube.com/watch?v=el7lUVvu8Bo%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Možete igrati zajedničke AR igre s obitelji na drugom kraju zemlje ili s prijateljem na drugom kraju kauča. A Orionov veliki zaslon omogućuje vam obavljanje više zadataka istovremeno s više prozora kako biste obavili stvari bez potrebe za nošenjem prijenosnog računala.

Iskustva dostupna na Orionu danas pomoći će u definiranju plana za našu liniju AR naočala za potrošače u budućnosti. Naši će timovi nastaviti s ponavljanjem i izgradnjom novih impresivnih društvenih iskustava, zajedno s našim partnerskim razvojnim programerima, i jedva čekamo podijeliti što slijedi.

Svrhovit prototip proizvoda

Iako Orion neće doći u ruke potrošača, nemojte se zavaravati: Ovo je ne istraživački prototip. To je najdotjeraniji prototip proizvoda koji smo ikada razvili - i on je zaista reprezentativan za nešto što mogao isporučiti potrošačima. Umjesto da žurimo s stavljanjem na police, odlučili smo se prvo usredotočiti na interni razvoj, što znači da možemo brzo nastaviti graditi i pomicati granice tehnologije i iskustava.

A to znači da ćemo brže doći do još boljeg potrošačkog proizvoda.

Što slijedi

Dvije glavne prepreke dugo su stajale na putu razvoja AR naočala za široku potrošnju: tehnološki prodori potrebni za pružanje velikog zaslona u kompaktnom obliku naočala i potreba za korisnim i uvjerljivim AR iskustvima koja se mogu pokretati na tim naočalama. Orion je velika prekretnica koja prvi put pruža prava AR iskustva koja rade na razumno elegantnom hardveru.

Sada kada smo podijelili Orion sa svijetom, usredotočeni smo na nekoliko stvari:

• Podešavanje kvalitete AR prikaza kako bi vizualni prikazi bili još oštriji
• Optimiziramo gdje god možemo kako bismo oblik učinili još manjim
• Gradnja u velikim razmjerima kako bi bili pristupačniji

U sljedećih nekoliko godina možete očekivati nove uređaje koji se nadovezuju na naše istraživačko-razvojne napore. Brojne Orionove inovacije proširene su na naše trenutne potrošačke proizvode, kao i na naš budući plan razvoja proizvoda. Optimizirali smo neke od naših algoritama prostorne percepcije, koji rade na oba... Meta Quest 3S i Orion. Iako je sustav za pogled i suptilni gestikulacijski unos izvorno dizajniran za Orion, planiramo ga koristiti u budućim proizvodima. Također istražujemo upotrebu EMG narukvica u budućim potrošačkim proizvodima.

Orion nije samo prozor u budućnost - to je pogled na vrlo stvarne mogućnosti koje su nam danas dostupne. Izgradili smo ga u našoj težnji za onim što najbolje radimo: pomaganjem ljudima da se povežu. Od Ray-Ban Meta naočala do Oriona, vidjeli smo dobrobit koju može proizaći iz toga što ljudima omogućujemo da ostanu prisutniji i osnaženiji u fizičkom svijetu, čak i dok koriste sva dodatna bogatstva koja digitalni svijet nudi.

Vjerujemo da ne biste trebali birati između njih dvoje. A sa sljedećom računalnom platformom, nećete morati.

---

Za više informacija o Orionu, pogledajte ove objave na blogu:

• Orionov računalni pak: Priča iza uređaja koji je omogućio stvaranje naših AR naočala
• Od nule do jedan: Kako naš prilagođeni silicij i čipovi revolucioniraju proširenu stvarnost (AR)
• Kristalno jasno: Naši silicijev-karbidni valovodi i put do Orionovog velikog vidnog polja

Prošle godine na Connectu smo predstavili Orion—naš prvi pravi par AR naočala. Kulminacija naš rad u Reality Labsu tijekom posljednjeg desetljećaOrion kombinira prednosti velikog holografskog zaslona i personalizirane umjetne inteligencije u udobnom, cjelodnevno nosivom obliku. Privukao je pozornost zbog vodećeg vidnog polja u industriji, silicij-karbidnih valovoda, uLED projektora i još mnogo toga. Ali danas svoju pozornost usmjeravamo na neopjevanog heroja Oriona: računalni pak.

Dizajniran da se lako uvuče u džep ili torbu, tako da ga možete ponijeti gotovo bilo gdje tijekom dana, pak rasterećuje Orionovu procesorsku snagu za pokretanje aplikacijske logike i omogućuje uvjerljiviji, manji oblik naočala. Bežično se povezuje s naočalama i EMG narukvicom za besprijekorno iskustvo.

Postavi i zaboravi, zar ne?

Ali pozadinska priča paka - čak i kao prototipa - je složena, s dramatičnim lukom koji nikada ne biste pogodili na temelju njegovog izgleda.

„Kada gradite nešto ovakvo, počinjete ulaziti u granice fizike“, objašnjava direktor upravljanja proizvodima Rahul Prasad. „Posljednjih 50 godina, Mooreov zakon je sve učinio manjim, bržim i energetski manje energetskim. Problem je što sada počinjete nailaziti na ograničenja u pogledu količine topline koju možete raspršiti, količine baterije koju možete komprimirati i performansi antene koju možete smjestiti u objekt određene veličine.“

Iako retrospektiva može biti 20/20, potencijal paka nije bio odmah očit. Kada ste prvi koji nešto gradi, morate istražiti svaku mogućnost - ne ostavljajući kamen na kamenu. Kako izgraditi nešto što bi neki mogli smatrati nepoželjnim dodatkom, a ne ključnim dijelom paketa?

„Znali smo da je pak dodatni uređaj koji smo tražili od ljudi da nose“, napominje voditelj inženjerskog dizajna proizvoda Jared Van Cleave, „pa smo istražili kako pretvoriti bubu u značajku.“

U konačnici, taj etos se isplatio u izobilju jer pak u malu veličinu stišće mnogo računalnih resursa (i još više prilagođenog silicija dizajniranog od strane Meta za umjetnu inteligenciju i strojnu percepciju). To je bilo ključno u pomaganju Orionu da prijeđe iz područja znanstvene fantastike u stvarnost.

„Da nemate pak, ne biste mogli imati iskustva koja Orion nudi u svom formatu - točka“, kaže Prasad. „Dobro AR iskustvo zahtijeva stvarno visoke performanse: visoku brzinu kadrova, izuzetno nisku latenciju, precizno upravljanje bežičnom vezom i napajanjem itd. Pak i naočale moraju biti zajednički dizajnirani da blisko surađuju, ne samo na razini aplikacije, već i na razini operativnog sustava, firmvera i hardvera. Čak i ako bi se zajednički dizajnirao pametni telefon za rad s AR naočalama, zahtjevni zahtjevi za performansama ispraznili bi bateriju telefona i isisali računalni kapacitet iz slučajeva upotrebe telefona. S druge strane, pak ima vlastitu bateriju velikog kapaciteta, visokoučinkoviti SoC i prilagođeni AI koprocesor dizajniran od strane Meta, optimiziran za Orion.“

Naravno, pak nije dizajniran preko noći. Zahtijevao je godine iterativnog rada.

„Nismo znali kako bi ljudi htjeli komunicirati s Orionom s gledišta unosa podataka - nije bilo ničega što bismo mogli skicirati s tržišta“, kaže voditelj proizvoda Matt Resman. „Ako pogledate naše rane prototipove naočala, to su bile te masivne slušalice koje su težile tri ili dva kilograma. A kada pokušavate izraditi proizvod, stvarno je teško razumjeti korisničko iskustvo ako niste u pravom formatu. S puckom smo mogli vrlo brzo izraditi prototip kako bismo počeli shvaćati kako bi ga ljudi koristili.“

Kodnog naziva Omega u ranim danima, pak je isprva zamišljen od strane tadašnjeg Oculus Researcha kao traka u obliku slova Ω koja bi se stavljala oko vrata korisnika i bila bi čvrsto povezana s naočalama...

... sve dok im neke nove inovacije bežičnog tima Reality Labsa, između ostalog, nisu omogućile da se riješe kabela. To je omogućilo oblik koji se lakše nosi u ruci ili džepu / u torbi, što je otvorilo mnogo mogućnosti.

„U tom trenutku, pozivanje proširenom stvarnošću još je uvijek bilo primarni slučaj upotrebe“, objašnjava Van Cleave. „Pak je bio mjesto gdje bi se holografski videozapisi usidrili. Stavili biste ga na stol sa senzorskom klupom okrenutom prema vama, snimajući vas, a zatim biste projicirali s kim razgovarate s površine paka tijekom poziva.“

„Orion se bavi povezivanjem ljudi i njihovim okupljanjem“, kaže Resman. „Jedan od početnih koncepata za pak bio je pomoći u stvaranju osjećaja prisutnosti s drugim ljudima i omogućiti ovaj bogatiji oblik komunikacije.“

„To je nešto što nikada niste vidjeli – uređaj ima potencijal stvoriti zaista zabavne i jedinstvene interakcije“, dodaje industrijski dizajner Emron Henry. „Korisničko iskustvo pomalo se osjeća kao oslobađanje duha iz boce, gdje hologrami neprimjetno izlaze iz uređaja i ponovno se otapaju u njemu.“

Kao što vjerojatno već možete vidjeti, u paku se krije više potencijala nego što je na kraju postalo dio funkcije. Osim senzora i kamera koji bi se koristili za AR pozivanje, pak ima haptičke i 6DOF senzore koji bi mu omogućili korištenje kao praćenog kontrolera za odabir i manipuliranje virtualnim objektima te igranje AR igara. Tim je također istražio kapacitivni i forsirani dodirni unos kako bi pak mogao poslužiti kao gamepad kada se drži i u portretnom i u pejzažnom načinu.

„Razgovarali bismo o potrebi nošenja ove dodatne stvari“, kaže Van Cleave. „Kako je možemo učiniti korisnijom? Postojao je cijeli radni tok oko toga. I u jednom trenutku, hipoteza je bila da će AR igranje biti taj ubojiti slučaj upotrebe.“

U ranoj fazi smo znali da moramo istražiti mogućnosti paka da radi stvari koje telefoni ne mogu. Na kraju smo se odlučili za korištenje pogleda, EMG-a i praćenja ruku za AR igre, poput Stargazera i Ponga, ali smo u ranim danima Oriona izradili prototipove raznih demo verzija i igara koje su koristile pak kao kontroler.

0:00 / 0:00

0:00 / 0:00

0:00 / 0:00

Renderirana istraživanja paka kao 6DOF kontroler za AR igre poput Ponga.

„Budući da nije telefon, to nam je dalo puno dizajnerske slobode“, dodaje Prasad. „Može biti deblji, mogu ga učiniti zaobljenijim kako bi udobno stajao u ruci kao kontroler. Prilično je nevjerojatno da je pak zapravo manji od prosječnog telefona, ali je snažniji od telefona jer ima koprocesor koji je dizajnirao Meta za umjetnu inteligenciju i strojnu percepciju.“

Tim se pozabavio pitanjem kako se kvalitetna AR igra može razlikovati od MR ili konzolske igre. To je značilo istraživanje različitih mogućnosti za AR kontroler igara, uključujući joysticke, raspored fizičkih tipki, okidačke tipke i još mnogo toga.

„Na kraju nismo ništa od toga zapravo izgradili“, primjećuje Van Cleave. „Napravili smo prototip, ali nikada nismo išli na potpunu izradu. Željeli smo da sve bude jednostavno. Željeli smo napraviti ova softverska sučelja, ali ne i fizičke, mehaničke gumbe.“

I premda senzori i haptika nisu bili uključeni u prototipu gotovog proizvoda, imali su ključnu funkciju tijekom razvoja, omogućujući timovima da prijave greške jednostavnim dodirom na vrh uređaja nekoliko puta kako bi se pokrenulo izvješće o grešci.

Kako je umjetna inteligencija počela zauzimati središnje mjesto kao ključni slučaj upotrebe, računalstvo je došlo u sve oštriji fokus. Na kraju krajeva, pak je dom Orionove bežične povezivosti, računalne snage i kapaciteta baterije - što je samo po sebi ogroman tehnički podvig - a sve to pomaže u smanjenju težine i oblika naočala, a istovremeno raspršuje puno više topline zbog svoje površine.

Kroz cijelu svoju evoluciju, jedna stvar je ostala ista: pak nudi više nego što se vidi na prvi pogled. Prihvaćanje nekonvencionalnih ideja omogućilo je našim timovima da istražuju, pomiču granice i grade budućnost.

„Definiramo kategoriju koja još ne postoji“, napominje Henry. „Kao što biste i očekivali s istraživanjem i razvojem, bilo je početaka i zaustavljanja na tom putu. Kako će korisnici očekivati interakciju s hologramima? Bi li radije koristili AR daljinski upravljač ili je praćenje ruke, pogled i EMG dovoljni za unos? Što se čini intuitivnim, bez trenja, poznatim i korisnim?“

„Umjesto da na pak gledamo samo kao na kamen, pitali smo se što još možemo ponuditi kako bismo ga dodatno razlikovali od telefona i opravdali zašto biste ga htjeli nositi sa sobom“, priznaje Resman. „Nude li njegova sirova računalna snaga i praktičan dizajn – koji su pomogli u oblikovanju naočala koje realno možete nositi cijeli dan – u konačnici dovoljno vrijednosti? Naš je posao pomoći u odgovorima na ta pitanja.“

„U početku smo promijenili smjer kako bismo se usredotočili na ono što možemo učiniti, a što telefon ne može“, dodaje Van Cleave. „Telefoni moraju imati zaslon, moraju imati određeni fizički raspored tipki koji korisnici očekuju. A mi nemamo ta ograničenja. Naš računalni paket može biti što god želimo.“

---

Za više informacija o Orionu, pogledajte ove objave na blogu:

• Kristalno jasno: Naši silicijev-karbidni valovodi i put do Orionovog velikog vidnog polja
• Od nule do jedan: Kako naš prilagođeni silicij i čipovi revolucioniraju proširenu stvarnost (AR)

TL;DR:

• Danas u Poveži seMark Zuckerberg predstavio je Orion - naš prvi par pravih AR naočala, prethodno kodnog naziva Projekt Nazare.
• S vodećim vidnim poljem u industriji, silicij-karbidne leće, zamršene valovode, uLED projektore i još mnogo toga, Orion je naš najnapredniji i najdovršeniji prototip proizvoda do sada.
• Sada nastavljamo s optimizacijama proizvoda i snižavanjem troškova dok se krećemo prema skalabilnom potrošačkom uređaju koji će revolucionirati način na koji ljudi komuniciraju sa svijetom.

---

„Izrađujemo AR naočale.“

Pet jednostavnih riječi, izgovoreno prije pet godinaS njima smo postavili zastavu na našu viziju budućnosti u kojoj više ne moramo praviti lažni izbor između svijeta informacija na dohvat ruke i fizičkog svijeta oko nas.

A sada, pet godina kasnije, još pet riječi koje će ponovno promijeniti pravila igre:

Izradili smo AR naočale.

https://youtube.com/watch?v=2CJsnyS8u3c%3Fsi%3DTr77gOKEq3PnA7-k%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

U Meti, naša misija je jednostavna: dati ljudima moć da izgrade zajednicu i zbliže svijet. A u Reality Labsu gradimo alate koji pomažu ljudima da se osjećaju povezanima bilo kada i bilo gdje. Zato radimo na izgradnji sljedeće računalne platforme koja ljude stavlja u središte kako bi mogli biti prisutniji, povezaniji i osnaženiji u svijetu.

Ray-Ban Meta naočale pokazali su moć pružanja ljudima pristupa ključnim dijelovima njihovog digitalnog života bez upotrebe ruku iz njihovog fizičkog života. Možemo razgovarati s pametnim AI asistentom, povezati se s prijateljima i zabilježiti trenutke koji su važni - sve to bez potrebe da ikada izvadimo telefon. Ove elegantne naočale besprijekorno se uklapaju u naš svakodnevni život i ljudi ih apsolutno obožavaju.

Iako je Ray-Ban Meta otvorio potpuno novu kategoriju naočala bez zaslona, napunjenih umjetnom inteligencijom, XR industrija već dugo sanja o pravim AR naočalama - proizvodu koji kombinira prednosti velikog holografskog zaslona i personalizirane umjetne inteligencije u udobnom, elegantnom i cjelodnevno nosivom obliku.

A danas smo taj san približili stvarnosti otkrivanjem Orion, za koje vjerujemo da su najnapredniji AR naočale ikad napravljene. Zapravo, to bi mogao biti najizazovniji uređaj potrošačke elektronike proizveden od pametnih telefona. Orion je rezultat revolucionarnih izuma u gotovo svakom području modernog računarstva - nadograđujući se na posao koji radimo u Reality Labsu posljednjih deset godinaPrepun je potpuno novih tehnologija, uključujući najnapredniji AR zaslon ikad sastavljen i prilagođeni silikon koji omogućuje snažna AR iskustva na naočalama koristeći djelić snage i težine MR slušalica.

Orionov sustav unosa besprijekorno kombinira glas, pogled i praćenje ruke s... EMG narukvica koji vam omogućuje prevlačenje, klikanje i pomicanje dok vam ruka udobno leži uz tijelo, omogućujući vam da ostanete prisutni u svijetu i s ljudima oko sebe dok komunicirate s bogatim digitalnim sadržajem.

Počevši od danas u Connectu, pa sve do kraja godine, otvaramo pristup prototipu našeg Orion proizvoda za zaposlenike tvrtke Meta i odabranu vanjsku publiku kako bi naš razvojni tim mogao učiti, unapređivati i graditi prema našoj liniji proizvoda za AR naočale za široku potrošnju, koju planiramo početi isporučivati u bliskoj budućnosti.

Zašto AR naočale?

Postoje tri glavna razloga zašto su AR naočale ključne za otključavanje sljedećeg velikog skoka u računarstvu orijentiranom na ljude.

1. Omogućuju digitalna iskustva koja nisu ograničena ograničenjima zaslona pametnog telefona. S velikim holografskim zaslonima možete koristiti fizički svijet kao svoje platno, postavljajući 2D i 3D sadržaj i iskustva gdje god želite.
2. Besprijekorno integriraju kontekstualnu umjetnu inteligenciju koja može osjetiti i razumjeti svijet oko vas kako bi predvidjela i proaktivno odgovorila na vaše potrebe.
3. Lagane su i izvrsne za unutarnju i vanjsku upotrebu - i omogućuju ljudima da vide pravo lice, prave oči i prave izraze lica.

To je zvijezda sjevernjača prema kojoj je naša industrija gradila: proizvod koji kombinira praktičnost i neposrednost nosivih uređaja s velikim zaslonom, brzim ulazom i kontekstualiziranom umjetnom inteligencijom u obliku koji ljudi osjećaju ugodno noseći u svakodnevnom životu.

Kompaktni oblik, složeni izazovi

Godinama smo se suočavali s lažnim izborom - ili slušalice za virtualnu i miješanu stvarnost koje omogućuju duboka, impresivna iskustva u glomaznom obliku ili naočale koje su idealne za cjelodnevnu upotrebu, ali ne nude bogate vizualne aplikacije i iskustva s obzirom na nedostatak velikog zaslona i odgovarajuće računalne snage.

Ali mi želimo sve, bez kompromisa. Godinama smo naporno radili na tome da nevjerojatna prostorna iskustva koja pružaju VR i MR naočale pretvorimo u minijaturiziranu tehnologiju potrebnu za isporuku tih iskustava u lagane, elegantne naočale. Savršeno oblikovanje, isporuka holografskih zaslona, razvoj uvjerljivih AR iskustava i stvaranje novih paradigmi interakcije čovjeka i računala (HCI) - i sve to u jednom kohezivnom proizvodu - jedan je od najtežih izazova s kojima se naša industrija ikada suočila. Bilo je toliko izazovno da smo mislili da imamo manje od 10 posto šanse da to uspješno izvedemo.

Do sada.

Revolucionarni zaslon u neusporedivom formatu

S otprilike 70 stupnjeva, Orion ima najveće vidno polje u najmanjem formatu AR naočala do danas. To vidno polje otključava uistinu impresivne slučajeve upotrebe za Orion, od prozora za više zadataka istovremeno i zabave na velikom zaslonu do holograma ljudi u prirodnoj veličini - sav digitalni sadržaj koji se može besprijekorno stopiti s vašim pogledom na fizički svijet.

Za Orion, vidno polje bilo je naš sveti gral. Suočavali smo se sa zakonima fizike i morali smo savijati snopove svjetlosti na načine na koje se oni prirodno ne savijaju - i to smo morali učiniti u energetskoj ovojnici mjerenoj u milivatima.

Umjesto stakla, Leće smo napravili od silicijevog karbida—nova aplikacija za AR naočale. Silicijev karbid Nevjerojatno je lagan, ne rezultira optičkim artefaktima ili rasipnom svjetlošću i ima visoki indeks loma - sve optička svojstva koja su ključna za veliko vidno polje. Sami valovodi imaju zaista zamršene i kompleksne 3D strukture nano-razmjera za difrakciju ili širenje svjetlosti na načine potrebne za postizanje ovog vidnog polja. A projektori su uLED - nova vrsta tehnologije prikaza koja je super mala i izuzetno energetski učinkovita.

Orion su nepogrešivo naočale, i izgledom i osjećajem - s prozirnim lećama. Za razliku od MR slušalica ili drugih AR naočala danas, i dalje možete vidjeti prave oči i izraze lica jedno drugome, tako da možete biti prisutni i podijeliti iskustvo s ljudima oko sebe. Deseci inovacija bili su potrebni kako bi se industrijski dizajn sveo na suvremeni oblik naočala koje biste mogli udobno nositi svaki dan. Orion je podvig minijaturizacije - komponente su spakirane u djelić milimetra. Uspjeli smo ugraditi sedam sićušnih kamera i senzora u okvire.

Morali smo održavati optičku preciznost na jednoj desetini debljine vlasi ljudske kose. Sustav može detektirati sitne pokrete - poput okvira koji se šire ili skupljaju na različitim sobnim temperaturama - a zatim digitalno ispraviti potrebno optičko poravnanje, sve unutar milisekundi. Okvire smo napravili od magnezija - istog materijala koji se koristi u trkaćim automobilima Formule 1 i svemirskim letjelicama - jer je lagan, a opet krut, pa održava optičke elemente u poravnanju i učinkovito odvodi toplinu.

Grijanje i hlađenje

Nakon što smo "razbili" zaslon (bez igre riječi) i prevladali fizikalne probleme, morali smo se suočiti s izazovom stvarno snažnog računalstva uz stvarno nisku potrošnju energije i potrebu za odvođenjem topline. Za razliku od današnjih MR slušalica, ne možete ugurati ventilator u naočale. Stoga smo morali biti kreativni. Mnogi materijali koji se koriste za hlađenje Oriona slični su onima koje NASA koristi za hlađenje satelita u svemiru.

Izgradili smo visoko specijalizirani prilagođeni silikon što je izuzetno energetski učinkovito i optimizirano za našu umjetnu inteligenciju, percepciju strojeva i grafičke algoritme. Izgradili smo više prilagođenih čipova i desetke visoko prilagođenih silicijskih IP blokova unutar tih čipova. To nam omogućuje da algoritme potrebne za praćenje ruku i očiju, kao i tehnologiju simultane lokalizacije i mapiranja (SLAM) koja inače troši stotine milivata energije - i stoga generira odgovarajuću količinu topline - smanjimo na samo nekoliko desetaka milivata.

I da, prilagođeni silikon i dalje igra ključnu ulogu u razvoju proizvoda u Reality Labsu, unatoč onome što ste možda negdje drugdje pročitali. 😎

EMG bez napora

Svaka nova računalna platforma sa sobom donosi promjena paradigme u načinu na koji komuniciramo s našim uređajima. Izum miša pomogao je utrti put grafičkim korisničkim sučeljima (GUI) koja danas dominiraju našim svijetom, a pametni telefoni nisu počeli dobivati na popularnosti sve do pojave zaslona osjetljivog na dodir. Isto pravilo vrijedi i za nosive uređaje.

Razgovarali smo o našem radu s elektromiografija ili EMG, godinama, vođeni našim uvjerenjem da unos za AR naočale mora biti brz, praktičan, pouzdan, suptilan i društveno prihvatljiv. A sada je taj rad spreman za veliki termin.

Orionov sustav unosa i interakcije besprijekorno kombinira glas, pogled i praćenje ruke s EMG narukvicom koja vam omogućuje jednostavno prevlačenje, klikanje i pomicanje.

Djeluje – i osjeća se – kao magija. Zamislite da snimate fotografiju tijekom jutarnjeg trčanja jednostavnim dodirom vrhova prstiju ili da se krećete kroz izbornike jedva primjetnim pokretima ruku. Naša narukvica kombinira visokoučinkovitu tekstilnu tkaninu s ugrađenim EMG senzorima za detekciju električnih signala generiranih čak i najsitnijim pokretima mišića. ML procesor na uređaju zatim interpretira te EMG signale kako bi proizveo ulazne događaje koji se bežično prenose na naočale. Sustav se prilagođava vama, pa s vremenom postaje bolji i sposobniji prepoznavati najsuptilnije geste. A danas dijelimo više o našoj podršci vanjskim istraživanjima usmjerenima na… proširenje potencijala jednakosti i dostupnosti EMG narukvica.

Upoznajte bežični računalni puck

Prave AR naočale moraju biti bežične i moraju biti male.Tako smo izgradili bežični računalni pak za OrionTo smanjuje dio opterećenja s naočala, omogućujući dulje trajanje baterije i bolji oblik uz nisku latenciju.

Naočale pokreću sve algoritme za praćenje ruku, praćenje očiju, SLAM i specijalizirane algoritme za zaključavanje AR svijeta, dok se logika aplikacije izvršava na paku kako bi naočale bile što lakše i kompaktnije.

Pak ima dva procesora, uključujući jedan posebno dizajniran ovdje u Meti, i pruža računalnu snagu potrebnu za renderiranje grafike s niskom latencijom, umjetnu inteligenciju i dodatnu strojnu percepciju.

A budući da je malen i elegantan, pak možete udobno ubaciti u torbu ili džep i obavljati svoje poslove - bez ikakvih obaveza.

AR iskustva

Naravno, kao i sa svakim hardverom, dobar je samo onoliko koliko je dobro ono što možete učiniti s tim. I premda je još rano, iskustva koja pruža Orion uzbudljiv su uvid u ono što dolazi.

https://youtube.com/watch?v=HkdSv3QPhNw%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Imamo našeg pametnog asistenta, Meta umjetna inteligencija, koji radi na Orionu. Razumije što gledate u fizičkom svijetu i može vam pomoći s korisnim vizualizacijama. Orion koristi isti Llama model koji danas pokreće AI iskustva na pametnim naočalama Ray-Ban Meta, plus prilagođene istraživačke modele kako bi demonstrirao potencijalne slučajeve upotrebe za budući razvoj nosive elektronike.

Možete u pokretu obaviti videopoziv bez upotrebe ruku kako biste se u stvarnom vremenu čuli s prijateljima i obitelji, a možete ostati povezani putem WhatsAppa i Messengera kako biste pregledavali i slali poruke. Nema potrebe vaditi telefon, otključavati ga, tražiti pravu aplikaciju i obavještavati prijatelja da kasnite na večeru - sve to možete učiniti putem naočala.

https://youtube.com/watch?v=el7lUVvu8Bo%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Možete igrati zajedničke AR igre s obitelji na drugom kraju zemlje ili s prijateljem na drugom kraju kauča. A Orionov veliki zaslon omogućuje vam obavljanje više zadataka istovremeno s više prozora kako biste obavili stvari bez potrebe za nošenjem prijenosnog računala.

Iskustva dostupna na Orionu danas pomoći će u definiranju plana za našu liniju AR naočala za potrošače u budućnosti. Naši će timovi nastaviti s ponavljanjem i izgradnjom novih impresivnih društvenih iskustava, zajedno s našim partnerskim razvojnim programerima, i jedva čekamo podijeliti što slijedi.

Svrhovit prototip proizvoda

Iako Orion neće doći u ruke potrošača, nemojte se zavaravati: Ovo je ne istraživački prototip. To je najdotjeraniji prototip proizvoda koji smo ikada razvili - i on je zaista reprezentativan za nešto što mogao isporučiti potrošačima. Umjesto da žurimo s stavljanjem na police, odlučili smo se prvo usredotočiti na interni razvoj, što znači da možemo brzo nastaviti graditi i pomicati granice tehnologije i iskustava.

A to znači da ćemo brže doći do još boljeg potrošačkog proizvoda.

Što slijedi

Dvije glavne prepreke dugo su stajale na putu razvoja AR naočala za široku potrošnju: tehnološki prodori potrebni za pružanje velikog zaslona u kompaktnom obliku naočala i potreba za korisnim i uvjerljivim AR iskustvima koja se mogu pokretati na tim naočalama. Orion je velika prekretnica koja prvi put pruža prava AR iskustva koja rade na razumno elegantnom hardveru.

Sada kada smo podijelili Orion sa svijetom, usredotočeni smo na nekoliko stvari:

• Podešavanje kvalitete AR prikaza kako bi vizualni prikazi bili još oštriji
• Optimiziramo gdje god možemo kako bismo oblik učinili još manjim
• Gradnja u velikim razmjerima kako bi bili pristupačniji

U sljedećih nekoliko godina možete očekivati nove uređaje koji se nadovezuju na naše istraživačko-razvojne napore. Brojne Orionove inovacije proširene su na naše trenutne potrošačke proizvode, kao i na naš budući plan razvoja proizvoda. Optimizirali smo neke od naših algoritama prostorne percepcije, koji rade na oba... Meta Quest 3S i Orion. Iako je sustav za pogled i suptilni gestikulacijski unos izvorno dizajniran za Orion, planiramo ga koristiti u budućim proizvodima. Također istražujemo upotrebu EMG narukvica u budućim potrošačkim proizvodima.

Orion nije samo prozor u budućnost - to je pogled na vrlo stvarne mogućnosti koje su nam danas dostupne. Izgradili smo ga u našoj težnji za onim što najbolje radimo: pomaganjem ljudima da se povežu. Od Ray-Ban Meta naočala do Oriona, vidjeli smo dobrobit koju može proizaći iz toga što ljudima omogućujemo da ostanu prisutniji i osnaženiji u fizičkom svijetu, čak i dok koriste sva dodatna bogatstva koja digitalni svijet nudi.

Vjerujemo da ne biste trebali birati između njih dvoje. A sa sljedećom računalnom platformom, nećete morati.

---

Za više informacija o Orionu, pogledajte ove objave na blogu:

• Orionov računalni pak: Priča iza uređaja koji je omogućio stvaranje naših AR naočala
• Od nule do jedan: Kako naš prilagođeni silicij i čipovi revolucioniraju proširenu stvarnost (AR)
• Kristalno jasno: Naši silicijev-karbidni valovodi i put do Orionovog velikog vidnog polja