Avtor: Kristián Ivančo

0:00 / 0:00

V letu 2019 je Orion ekipa je za ustanovitelja in izvršnega direktorja Mete Marka Zuckerberga pripravila pomembno predstavitev, v kateri je predstavila potencialne valovode za očala za razširjeno resničnost-ključni trenutek, ko so teoretični izračuni na papirju zaživeli. To je bila demonstracija, ki je spremenila vse.

"Ko ste nosili očala s steklenimi valovodi in številnimi ploščami, ste se počutili kot v diskoteki," se spominja optični znanstvenik Pasqual Rivera. "Povsod so bile mavrice in to je bilo tako moteče, da sploh niste gledali vsebine AR. Potem si nadenete očala z silicijev karbid valovodov in občutek je bil, kot da bi na simfoniji poslušali tiho, klasično skladbo. Lahko si bil pozoren na celotno izkušnjo tega, kar smo gradili. To je popolnoma spremenilo pravila igre."

Vendar se zdi izbira silicijevega karbida kot substrata danes še tako jasna (besedna igra), ko smo se prvič podali na pot pot do očal AR pred desetletjem, je bilo vse prej kot to.

"Silicijev karbid je običajno močno dopiran z dušikom," pravi Rivera. "Je zelene barve, in če je dovolj debel, je videti črn. Iz njega ni mogoče narediti optične leče. To je elektronski material. Ne brez razloga ima takšno barvo, in sicer zaradi elektronskih lastnosti."

"Silicijev karbid je že dolgo časa material," se strinja Giuseppe Calafiore, tehnični vodja družbe AR Waveguides. "Njegova glavna uporaba je visokozmogljiva elektronika. Vzemimo za primer električna vozila: Vsa električna vozila potrebujejo čip - vendar mora biti ta čip zmožen tudi zelo visoke moči, premikati kolesa in poganjati to stvar. Izkazalo se je, da tega ne morete storiti z običajnim silicijevim substratom, iz katerega so narejeni čipi, ki jih uporabljamo v naših računalnikih in elektroniki. Potrebuješ platformo, ki omogoča visoke tokove in visoko moč, in ta material je silicijev karbid."

Do nedavnega, ko so se začele razprave o obnovljivih virih energije, trg teh visokozmogljivih čipov ni bil niti približno tako velik kot trg čipov za potrošniško elektroniko. Silicijev karbid je bil vedno drag in ni bilo veliko spodbud za zniževanje stroškov, saj je bila cena substrata sprejemljiva za velikost čipa, ki se izdeluje za avtomobil.

"Vendar se je izkazalo, da ima silicijev karbid tudi nekatere lastnosti, ki jih potrebujemo za valovode in optiko," pravi Calafiore. "Ključna lastnost, ki nas zanima, je lomni količnik. Silicijev karbid ima visok lomni količnik, kar pomeni, da lahko prevaja in oddaja veliko količino optičnih podatkov. To si lahko predstavljamo kot optično pasovno širino - tako kot imate pasovno širino za internet in želite, da je dovolj velika, da lahko po tem kanalu pošiljate velike količine podatkov. Enako velja za optične naprave."

Večji kot je lomni količnik materiala, večji je njegov étenduezato lahko po tem kanalu pošljete več optičnih podatkov.

"Kanal je v našem primeru valovod, večji etendue pa pomeni večje vidno polje," pojasnjuje Calafiore. "Večji kot je lomni količnik materiala, večje vidno polje lahko zaslon podpira."

Pot do pravega lomnega količnika

Ko se je Calafiore leta 2016 prvič pridružil takratni ekipi Oculus Research, je bil najvišji lomni količnik stekla, ki ga je imela ekipa na voljo, 1,8, kar je zahtevalo zlaganje več plošč, da bi dosegli želeno vidno polje. Poleg nezaželenih optičnih artefaktov je montažna linija postajala vse bolj zapletena, saj sta morala biti prva dva valovoda popolnoma poravnana, nato pa je moral biti ta kup popolnoma poravnan s tretjim valovodom.

"Ne samo, da je bilo to drago, takoj je bilo tudi jasno, da v paru očal ne morete imeti treh kosov stekla na lečo," se spominja Calafiore. "Bila so pretežka, debelina je bila prevelika in grda - nihče jih ne bi kupil. Zato smo se vrnili na začetek: poskušali smo povečati lomni količnik podlage, da bi zmanjšali število potrebnih plošč."

Prvi material, ki ga je skupina preučila, je bil litijev niobatki ima lomni količnik približno 2,3, kar je precej več kot steklo (1,8).

"Ugotovili smo, da bi morali zložiti le dve plošči in da bi lahko morda celo z eno ploščo pokrili vidno polje," pravi Calafiore. "Skoraj vzporedno smo začeli preučevati druge materiale - tako smo skupaj z našimi dobavitelji leta 2019 ugotovili, da je silicijev karbid v svoji najčistejši obliki dejansko zelo prozoren. Prav tako ima največji lomni količnik, ki je znan za optično uporabo, in sicer 2,7."

To je 17,4% več kot pri litijevem niobatu in 50% več kot pri steklu, za tiste, ki doma vodijo račun.

"Z nekaj spremembami iste opreme, ki se je že uporabljala v industriji, je bilo mogoče pridobiti prozoren silicijev karbid," pravi Calafiore. "Lahko bi samo spremenili postopek, bili veliko bolj previdni in namesto za elektronske lastnosti bi optimizirali za optične lastnosti: preglednost, enakomernost lomnega količnika itd."

Potencialni stroški kompromisa

Takrat je bila ekipa Reality Labs prva, ki je sploh poskusila preiti z neprozornih silicijevokarbidnih ploščic na prozorne. Ker je silicijev karbid eden najtrših znanih materialov, je za njegovo rezanje ali poliranje v bistvu potrebno diamantno orodje. Zaradi tega so bili enkratni inženirski stroški zelo visoki, zato je bila nastala podlaga precej draga.

Čeprav obstajajo stroškovno učinkovitejše alternative, pa imajo tako kot pri vsaki tehnologiji tudi te svoje kompromise. Z večanjem vidnega polja v smeri Orionovega najboljšega vidnega polja v panogi, ki znaša približno 70 stopinj, se pojavijo nove težave, kot so slike duhov in mavrice.

"Pri iskanju optimalne rešitve za zaslon AR s širokim vidnim poljem je treba iskati kompromise med zmogljivostjo in stroški," pojasnjuje Barry Silverstein, direktor znanstvenih raziskav. "Stroške je pogosto mogoče znižati, vendar če zmogljivost ne bo zadostovala, stroški na koncu ne bodo pomembni."

Slike duhov so kot vizualni odmev primarne slike, ki se projicira na zaslon. Mavrice so barvni svetlobni prameni, ki nastanejo, ko se svetloba iz okolice odbije od valovoda. "Recimo, da se vozite ponoči in okoli vas se premikajo avtomobilske luči," pravi Silverstein. "Tudi mavrice se bodo premikale. Ali če igrate odbojko na plaži in sije sonce, boste dobili mavrično črto, ki se premika skupaj z vami, in boste zgrešili strel. Ena od čudežnih lastnosti silicijevega karbida je, da se znebi teh mavric."

"Druga prednost silicijevega karbida, ki je nima noben drug material, je toplotna prevodnost," dodaja Calafiore. "Plastika je grozen izolator. Steklo, litijev niobat, enako. Silicijev karbid je prozoren, videti je kot steklo in uganite kaj: prevaja toploto."

Julija 2020 je ekipa ugotovila, da je silicijev karbid optimalna izbira zaradi treh glavnih razlogov: Ker zahteva le eno ploščo in manjše montažne strukture, ima boljše optične lastnosti in je lažji od stekla z dvema ploščama, je omogočil izboljšano obliko.

Skrivnost poševnega jedkanja

Ko je bil material pripravljen, je bilo treba razvozlati še izdelavo valovodov - in sicer z nekonvencionalno tehniko jedkanja rešetk, imenovano poševno jedkanje.

"Rešetka je nanostruktura, ki povezuje in razvezuje svetlobo iz leče," pojasnjuje Calafiore. "Da bi silicijev karbid deloval, je treba rešetko poševno jedkati. Namesto da bi bile navpične, morajo biti linije rešetke nagnjene poševno."

"Bili smo prvi, ki smo izvedli poševno jedkanje neposredno na napravah," pravi vodja raziskav Nihar Mohanty. "Celotna industrija se je prej zanašala na nanotisk, ki pa ni primeren za podlage s tako visokim lomnim količnikom. Zato še nihče na svetu ni razmišljal o silicijevem karbidu."

Ker pa je poševno jedkanje nezrela tehnologija, večina dobaviteljev in tovarn polprevodniških čipov nima potrebnih orodij.

"Leta 2019 sva s takratnim vodjo Mattom Colburnom ustanovila lasten obrat, saj na svetu ni bilo ničesar, kar bi lahko izdelovalo jedkane valovode iz silicijevega karbida in kjer bi lahko preizkusili tehnologijo zunaj laboratorijskih mer," pojasnjuje Mohanty. "To je bila velika naložba, v kateri smo vzpostavili celoten cevovod. Orodja so nam po meri izdelali naši partnerji, postopek pa smo razvili v podjetju Meta, čeprav so naši sistemi raziskovalni, ker ni bilo sistemov za proizvodnjo. Pri razvoju orodij in procesov za poševno jedkanje, primernih za proizvodnjo, smo sodelovali s proizvodnim partnerjem. In zdaj, ko smo pokazali, kaj je mogoče s silicijevim karbidom, želimo, da bi tudi drugi v industriji začeli izdelovati lastna orodja."

Več podjetij, ki vlagajo v silicijev karbid optične kakovosti in razvijajo opremo, bo okrepilo kategorijo potrošniških očal AR.

Nič več v lovu za mavrico

Medtem ko tehnološka neizogibnost je mit, se zdi, da se zvezde vsekakor postavljajo v prid silicijevega karbida. Čeprav ekipa še naprej raziskuje alternative, se zdi, da so se pravi ljudje ob pravem času in v pravih tržnih razmerah zbrali, da bi izdelali očala AR iz tega materiala.

"Orion je dokazal, da je silicijev karbid izvedljiva možnost za očala AR," pravi Silverstein, "in zdaj opažamo zanimanje v dobavni verigi na treh različnih celinah, kjer to priložnost intenzivno iščejo. Silicijev karbid bo na vrhu. Po mojem mnenju je to samo vprašanje časa."

V tem času se lahko zgodi marsikaj - podobno kot se je obrnilo dogajanje, odkar smo vzgojili prve kristale čistega silicijevega karbida.

"Vsi ti proizvajalci silicijevega karbida so zaradi pričakovanega razcveta električnih vozil močno povečali ponudbo," ugotavlja Calafiore. "Zdaj je presežek zmogljivosti, ki ga ni bilo, ko smo gradili Orion. Ker je ponudba velika, povpraševanje pa majhno, se je cena substrata začela zniževati."

"Dobavitelji so zelo navdušeni nad novo možnostjo proizvodnje optičnega silicijevega karbida - navsezadnje vsaka valovodna leča predstavlja veliko količino materiala v primerjavi z elektronskim čipom in vse njihove obstoječe zmogljivosti veljajo za ta novi prostor," dodaja Silverstein. "Zapolnitev tovarne je bistvenega pomena, razširitev tovarne pa so sanje. Pomembna je tudi velikost rezin: Večja kot je ploščica, nižji so stroški, vendar se poveča tudi zapletenost postopka. Kljub temu smo videli, da dobavitelji prehajajo s štiri- in osempalčnih na osempalčne rezine, nekateri pa delajo na predhodnikih 12-palčnih rezin, kar bi omogočilo eksponentno več parov očal AR."

Ti dosežki naj bi pripomogli k nadaljnjemu zniževanju stroškov. Še vedno je zgodaj, vendar se prihodnost že izrisuje.

"Na začetku vsake nove tehnološke revolucije preizkusite več stvari," pravi Calafiore. "Poglejte televizijo: Začeli smo s katodnimi cevmi, nato smo prešli na plazemske televizorje LED in zdaj na mikroLED. Šli smo skozi več različnih tehnologij in arhitektur. Pri iskanju poti se veliko poti ne konča nikjer, vendar se k nekaterim vedno znova vračamo kot k najbolj obetavnim. Nismo na koncu poti in tega ne moremo storiti sami, vendar je silicijev karbid čudovit material, v katerega je vredno vlagati."

"Svet se je prebudil," dodaja Silverstein. "Uspešno smo pokazali, da se silicijev karbid lahko upogne v elektroniki in fotoniki. To je material, ki bi se lahko v prihodnosti uporabljal pri kvantnem računalništvu. Vidimo tudi znake, da je mogoče znatno znižati stroške. Pred nami je še veliko dela, vendar je potencialna prednost tega področja ogromna."

---

Več o silicijevem karbidu v Fotonika Spektra.

Če želite več informacij o Orionu, si oglejte te objave na blogu:

• Od nič do ena: kako naš silicij in čipi po meri spreminjajo AR
• Orionov računski paket: Zgodba o napravi, ki je omogočila uporabo očal AR

TL;DR:

• Danes na Povežite, je Mark Zuckerberg predstavil Orion - naša prva očala za AR, ki so imela prej kodno ime Projekt Nazare.
• Z najboljšim vidnim poljem v panogi, leče iz silicijevega karbida, zapletenih valovodov, projektorjev uLED in drugih, je Orion naš najnaprednejši in najbolj izpopolnjen prototip izdelka do zdaj.
• Zdaj nadaljujemo z optimizacijo izdelkov in zniževanjem stroškov, da bi ustvarili razširljivo potrošniško napravo, ki bo revolucionarno spremenila način, kako ljudje komunicirajo s svetom.

---

"Izdelujemo očala AR."

Pet preprostih besed, povedano pred petimi leti. Z njimi smo izobesili zastavo naše vizije prihodnosti, v kateri nam ne bo več treba izbirati med svetom informacij na dosegu roke in fizičnim svetom, ki nas obdaja.

In zdaj, pet let pozneje, še pet besed, ki bodo ponovno spremenile igro:

Izdelali smo očala AR.

https://youtube.com/watch?v=2CJsnyS8u3c%3Fsi%3DTr77gOKEq3PnA7-k%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Naše poslanstvo v družbi Meta je preprosto: dati ljudem moč, da gradijo skupnost in zbližujejo svet. V Reality Labs pa ustvarjamo orodja, ki ljudem pomagajo, da se počutijo povezane kadar koli in kjer koli. Zato si prizadevamo ustvariti naslednjo računalniško platformo, ki bo v središče postavila ljudi, da bodo lahko v svetu bolj prisotni, povezani in opolnomočeni.

Očala Ray-Ban Meta so dokazali, da lahko ljudje prostoročno dostopajo do ključnih delov svojega digitalnega življenja iz fizičnega življenja. Pogovarjamo se lahko s pametnim pomočnikom z umetno inteligenco, se povežemo s prijatelji in zajamemo pomembne trenutke - vse to, ne da bi nam bilo treba izvleči telefon. Ta elegantna očala se brez težav vključijo v naš vsakdan, ljudje pa jih naravnost obožujejo.

Medtem ko je Ray-Ban Meta odprl povsem novo kategorijo očal brez zaslona, ki jih je nadgradila umetna inteligenca, pa industrija XR že dolgo sanja o pravih očalih AR - izdelku, ki združuje prednosti velikega holografskega zaslona in prilagojene pomoči umetne inteligence v udobni, elegantni in celodnevno nosljivi obliki.

Danes pa smo te sanje približali resničnosti s predstavitvijo Orionki so po našem mnenju najnaprednejša očala AR doslej. Pravzaprav je to morda najzahtevnejša naprava potrošniške elektronike po pametnem telefonu. Orion je rezultat prebojnih izumov na praktično vseh področjih sodobnega računalništva - temelji na delo, ki smo ga v Reality Labs opravljali v zadnjem desetletju.. Opremljen je s povsem novimi tehnologijami, vključno z najnaprednejšim zaslonom AR, kar jih je bilo kdaj koli sestavljenih, in silicij po meri ki omogoča, da se zmogljiva doživetja AR izvajajo na paru očal z manjšo močjo in težo kot slušalke za magnetno resonanco.

Orionov vhodni sistem gladko združuje glas, pogled oči in sledenje rokam z Zapestnica EMG ki vam omogoča, da podrsate, kliknete in se pomikate, medtem ko je vaša roka udobno ob strani, kar vam omogoča, da ostanete prisotni v svetu in z ljudmi okoli sebe, medtem ko se ukvarjate z bogato digitalno vsebino.

Z današnjim dnem na konferenci Connect in še naprej skozi vse leto odpiramo dostop do prototipa izdelka Orion za zaposlene v podjetju Meta in izbrano zunanje občinstvo, da se lahko naša razvojna ekipa uči, izboljšuje in gradi na liniji izdelkov AR očal za potrošnike, ki jih nameravamo začeti dobavljati v bližnji prihodnosti.

Zakaj očala AR?

Obstajajo trije glavni razlogi, zakaj so očala AR ključna za sprostitev naslednjega velikega preskoka na področju računalništva, usmerjenega v človeka.

1. Omogočajo digitalne izkušnje, ki jih ne omejujejo omejitve zaslona pametnega telefona. Z velikimi holografskimi zasloni lahko fizični svet uporabljate kot platno in 2D- in 3D-vsebine ter doživetja postavite kamor koli želite.
2. V njih je brezhibno vključena kontekstualna umetna inteligenca, ki zaznava in razume svet okoli vas ter tako predvideva in proaktivno obravnava vaše potrebe.
3. So lahki in primerni za uporabo tako v zaprtih prostorih kot na prostem, poleg tega pa omogočajo, da ljudje vidijo pravi obraz, prave oči in prave izraze drug drugega.

To je severna zvezda, h kateri je naša industrija stremela: izdelek, ki združuje priročnost in neposrednost nosljivih naprav z velikim zaslonom, vnosom visoke pasovne širine in kontekstualizirano umetno inteligenco v obliki, ki jo ljudje z veseljem nosijo v vsakdanjem življenju.

Kompaktna oblika, zapleteni izzivi

Že leta se soočamo z napačno izbiro - ali slušalke za navidezno in mešano resničnost, ki omogočajo globoke in potopitvene izkušnje v okorni obliki, ali očala, ki so idealna za celodnevno uporabo, vendar zaradi pomanjkanja velikega zaslona in ustrezne računske moči ne ponujajo bogatih vizualnih aplikacij in izkušenj.

Vendar želimo vse, brez kompromisov. Že več let se trudimo, da bi neverjetne prostorske izkušnje, ki jih omogočajo slušalke za navidezno resničnost in magnetno resonanco, prenesli v par lahkih in elegantnih očal ter miniaturizirali tehnologijo, ki je potrebna za zagotavljanje teh izkušenj. Ujemanje oblike, zagotavljanje holografskih zaslonov, razvijanje prepričljivih izkušenj AR in ustvarjanje novih paradigem interakcije med človekom in računalnikom (HCI) - in vse to v enem celovitem izdelku - je eden najtežjih izzivov, s katerimi se je naša industrija kdajkoli soočila. Bil je tako zahteven, da smo menili, da imamo manj kot 10 odstotkov možnosti, da ga uspešno izpeljemo.

Do zdaj.

Prelomni zaslon v neprekosljivem ohišju

Orion ima s približno 70 stopinjami največje vidno polje v najmanjši obliki očal AR doslej. To vidno polje omogoča za Orion resnično potopitvene primere uporabe, od večopravilnih oken in zabave na velikem zaslonu do hologramov ljudi v naravni velikosti - vse digitalne vsebine, ki se lahko brez težav zlijejo z vašim pogledom na fizični svet.

Za Orion je bilo vidno polje naš sveti gral. Pri tem smo trčili ob zakone fizike in morali smo upogibati svetlobne žarke na načine, ki niso naravni, in to smo morali narediti v okviru moči, ki se meri v milivatih.

Namesto stekla, leče smo izdelali iz silicijevega karbida-nova aplikacija za očala AR. Silicijev karbid je izjemno lahek, ne povzroča optičnih artefaktov in razpršene svetlobe ter ima visok lomni količnik - vse optične lastnosti, ki so ključne za veliko vidno polje. Sami valovodi imajo zelo zapletene in kompleksne 3D strukture v nanometrskem merilu, ki razpršijo ali razpršijo svetlobo na načine, ki so potrebni za doseganje tega vidnega polja. Projektorji pa so uLED - nova vrsta zaslonske tehnologije, ki je zelo majhna in izjemno energetsko učinkovita.

Orion je tako po videzu kot po otipu nedvomno par očal - s prozornimi lečami. Za razliko od slušalk MR ali drugih očal AR lahko še vedno vidite resnične oči in izraze drugih, zato ste lahko prisotni in izkušnjo delite z ljudmi okoli sebe. Da bi industrijsko zasnovo približali sodobni obliki očal, ki bi jo lahko udobno nosili vsak dan, je bilo potrebnih na desetine inovacij. Orion je dosežek miniaturizacije - komponente so zapakirane do delčka milimetra. V obrobe okvirja nam je uspelo vgraditi sedem majhnih kamer in senzorjev.

Optično natančnost smo morali ohraniti na eni desetini debeline človeškega lasa. Sistem lahko zazna drobne premike, kot je širjenje ali krčenje okvirjev pri različnih temperaturah v prostoru, in nato digitalno popravi potrebno optično poravnavo, vse v milisekundah. Okvirje smo izdelali iz magnezija - istega materiala, ki se uporablja v dirkalnih avtomobilih F1 in vesoljskih plovilih -, ker je lahek, a tog, zato ohranja optične elemente v ravnovesju in učinkovito odvaja toploto.

Ogrevanje in hlajenje

Ko smo razvozlali zaslon (brez besedne igre) in premagali fizikalne težave, smo se morali spopasti z izzivom res zmogljivega računanja ob res nizki porabi energije in potrebi po odvajanju toplote. V nasprotju z današnjimi naglavnimi slušalkami za magnetno resonanco v očala ne morete vstaviti ventilatorja. Zato smo morali biti ustvarjalni. Veliko materialov, uporabljenih za hlajenje Oriona, je podobnih tistim, ki jih NASA uporablja za hlajenje satelitov v vesolju.

Zgradili smo visoko specializiran silicij po meri ki je izjemno energetsko učinkovit in optimiziran za našo umetno inteligenco, strojno zaznavanje in grafične algoritme. Izdelali smo več čipov po meri in na desetine zelo prilagojenih silicijevih blokov IP znotraj teh čipov. To nam omogoča, da algoritme, potrebne za sledenje rokam in očem ter tehnologijo za hkratno lokalizacijo in kartiranje (SLAM), ki običajno porabijo na stotine milivatov energije in s tem ustvarjajo ustrezno količino toplote, zmanjšamo na le nekaj deset milivatov.

In da, kljub temu, da ste morda prebrali kje drugje, ima silicij po meri pri razvoju izdelkov v podjetju Reality Labs še vedno ključno vlogo. 😎

EMG brez težav

Vsaka nova računalniška platforma prinaša sprememba paradigme v načinu interakcije z napravami. Izum miške je pomagal utreti pot grafičnim uporabniškim vmesnikom (GUI), ki danes prevladujejo v našem svetu, pametni telefoni pa so se začeli uveljavljati šele s pojavom zaslona na dotik. Enako pravilo velja za nosljive naprave.

Govorili smo o našem delu z elektromiografija ali EMG, že več let, saj smo prepričani, da mora biti vnos za očala AR hiter, priročen, zanesljiv, subtilen in družbeno sprejemljiv. In zdaj je to delo pripravljeno za najboljši čas.

Orionov sistem za vnos in interakcijo brezhibno združuje glas, pogled oči in sledenje roke z zapestnico EMG, ki omogoča enostavno podrsavanje, klikanje in pomikanje.

Deluje in deluje kot čarovnija. Predstavljajte si, da na jutranjem teku posnamete fotografijo s preprostim dotikom konic prstov ali se po menijih premikate s komaj zaznavnimi gibi rok. Naša zapestnica združuje visoko zmogljiv tekstil z vgrajenimi senzorji EMG za zaznavanje električnih signalov, ki jih ustvarjajo tudi najmanjši gibi mišic. Procesor ML v napravi nato interpretira te signale EMG in ustvari vhodne dogodke, ki se brezžično prenesejo v očala. Sistem se prilagaja vam, tako da sčasoma vedno bolje prepoznava tudi najneznatnejše geste. Danes pa vam predstavljamo našo podporo zunanjim raziskavam, ki se osredotočajo na razširitev možnosti enakosti in dostopnosti zapestnic EMG.

Spoznajte brezžični računalniški priključek

Prava očala AR morajo biti brezžična in majhna.Zato smo zgradili brezžična računska ploščica za Orion. Očala so tako nekoliko razbremenjena, kar omogoča daljšo življenjsko dobo baterije in boljšo obliko z nizko zakasnitvijo.

V očalih se izvajajo vsi algoritmi za sledenje rokam, sledenje očem, SLAM in specializirani grafični algoritmi za zaklepanje sveta AR, medtem ko se logika aplikacije izvaja na ploščku, da so očala čim lažja in kompaktnejša.

Puk ima dva procesorja, vključno z enim, ki je bil po meri zasnovan tukaj v podjetju Meta, in zagotavlja računsko moč, ki je potrebna za grafično upodabljanje z nizko zakasnitvijo, umetno inteligenco in nekatere dodatne strojne zaznave.

Ker je majhen in eleganten, ga lahko udobno pospravite v torbo ali žep in se odpravite na delo - brez kakršnih koli težav.

Izkušnje AR

Seveda je tako kot vsaka strojna oprema tudi ta dobra le toliko, kolikor lahko z njo narediti z njim. In čeprav je še zgodaj, so izkušnje, ki jih omogoča Orion, vznemirljiv vpogled v to, kar se bo zgodilo.

https://youtube.com/watch?v=HkdSv3QPhNw%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Imamo pametnega pomočnika, Meta AI, ki deluje v sistemu Orion. Razume, kaj gledate v fizičnem svetu, in vam lahko pomaga z uporabnimi vizualizacijami. Orion uporablja isti model Llama, ki poganja izkušnje umetne inteligence, ki danes tečejo na pametnih očalih Ray-Ban Meta, ter prilagojene raziskovalne modele za prikaz možnih primerov uporabe za prihodnji razvoj nosljivih naprav.

Na poti lahko opravite videoklic brez uporabe rok in se v realnem času pogovarjate s prijatelji in družino ter ostanete povezani v aplikacijah WhatsApp in Messenger, kjer lahko pregledujete in pošiljate sporočila. Ni vam treba izvleči telefona, ga odkleniti, poiskati prave aplikacije in sporočiti prijatelju, da zamujate na večerjo - vse to lahko storite prek očal.

https://youtube.com/watch?v=el7lUVvu8Bo%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Igre AR lahko igrate v skupni rabi z družino na drugem koncu države ali s prijateljem na drugi strani kavča. Orionov velik zaslon vam omogoča večopravilnost z več okni, tako da lahko opravljate stvari, ne da bi morali s seboj nositi prenosni računalnik.

Izkušnje, ki so danes na voljo na Orionu, bodo pomagale začrtati načrt za našo linijo očal AR za potrošnike v prihodnosti. Naše ekipe bodo skupaj s partnerji razvijalci še naprej izpopolnjevale in ustvarjale nove potopitvene družbene izkušnje, zato komaj čakamo, da z vami delimo, kaj bo sledilo.

Namenski prototip izdelka

Čeprav Orion ne bo prišel v roke potrošnikov, se ne smete zmotiti: To je ne raziskovalni prototip. To je najbolj izpopolnjen prototip izdelka, kar smo jih kdajkoli razvili - in je resnično predstavnik nečesa, kar lahko pošiljanje potrošnikom. Namesto da bi hiteli z dajanjem na prodajne police, smo se odločili, da se najprej osredotočimo na notranji razvoj, kar pomeni, da lahko hitro gradimo in še naprej premikamo meje tehnologije in izkušenj.

To pomeni, da bomo hitreje prišli do še boljšega potrošniškega izdelka.

Kaj sledi

Na poti do očal AR za široko potrošnjo sta že dolgo dve glavni oviri: tehnološki preboj, ki je potreben za zagotovitev velikega zaslona v kompaktni obliki očal, ter potreba po uporabnih in privlačnih izkušnjah AR, ki jih je mogoče zagnati na teh očalih. Orion je velik mejnik, saj prvič zagotavlja prave izkušnje AR, ki se izvajajo na razumno elegantni strojni opremi.

Zdaj, ko smo Orion predstavili svetu, se osredotočamo na nekaj stvari:

• prilagajanje kakovosti zaslona AR za še bolj ostre slike
• Optimiziramo vse, kar je mogoče, da bi še zmanjšali velikost ohišja
• Gradnja v večjem obsegu, da bodo cenovno dostopnejše.

V naslednjih nekaj letih lahko pričakujete nove naprave, ki bodo temeljile na naših prizadevanjih na področju raziskav in razvoja. Številne Orionove inovacije so danes razširjene na naše trenutne potrošniške izdelke in tudi na naš načrt prihodnjih izdelkov. Optimizirali smo nekatere naše algoritme za prostorsko zaznavanje, ki delujejo tako na Meta Quest 3S in Orion. Čeprav je bil sistem za pogled v oči in subtilno gestikulacijo prvotno zasnovan za Orion, ga nameravamo uporabljati tudi v prihodnjih izdelkih. Raziskujemo tudi uporabo zapestnic EMG v prihodnjih potrošniških izdelkih.

Orion ni le okno v prihodnost - je pogled na zelo realne možnosti, ki so dosegljive že danes. Ustvarili smo ga v prizadevanju za to, kar znamo najbolje: pomagati ljudem, da se povežejo. Od očal Ray-Ban Meta do Oriona - videli smo, kako dobro je, če ljudem omogočimo, da ostanejo bolj prisotni in opolnomočeni v fizičnem svetu, čeprav se hkrati poslužujejo vsega dodatnega bogastva, ki ga ponuja digitalni svet.

Menimo, da vam ne bi smelo biti treba izbirati med njima. Z naslednjo računalniško platformo vam tega ne bo treba storiti.

---

Če želite več informacij o Orionu, si oglejte te objave na blogu:

• Orionov računski paket: Zgodba o napravi, ki je omogočila uporabo očal AR
• Od nič do ena: kako naš silicij in čipi po meri spreminjajo AR
• Kristalno čisti: naši valovodi iz silicijevega karbida in pot do velikega prednjega polja Oriona

Lani smo na sejmu Connect predstavili Orion-naša prva prava očala AR. Vrhunec naše delo v Reality Labs v zadnjem desetletjuOrion združuje prednosti velikega holografskega zaslona in prilagojene pomoči umetne inteligence v udobni, celodnevno nosljivi obliki. Nekaj pozornosti je bil deležen zaradi vodilnega vidnega polja, valovodov iz silicijevega karbida, projektorjev uLED in še česa. Danes pa se bomo posvetili še neoslovljenemu junaku naprave Orion: računskemu stroju.

Puk, ki je zasnovan tako, da ga zlahka spravite v žep ali torbo in ga lahko vzamete s seboj skoraj kamor koli, ko se odpravljate na delo, razbremeni Orionovo procesno moč za izvajanje logike aplikacij in omogoča bolj privlačno, manjšo obliko očal. Z očali in zapestnico EMG se brezžično poveže, kar zagotavlja brezhibno izkušnjo.

Nastavite in pozabite, kajne?

Vendar pa je zgodba o ozadju ploščka - tudi kot prototip - zelo zanimiva in ima dramaturški lok, ki ga na podlagi videza ne bi nikoli uganili.

"Ko gradite nekaj takega, začnete presegati meje fizike," pojasnjuje direktor za upravljanje izdelkov Rahul Prasad. "V zadnjih 50 letih je zaradi Moorovega zakona vse postalo manjše, hitrejše in manj zmogljivo. Težava je v tem, da zdaj začenjate naleteti na meje, koliko toplote lahko odvedete, koliko baterije lahko stisnete in koliko zmogljivosti antene lahko spravite v predmet določene velikosti."

Čeprav je pogled nazaj morda 20/20, potencial ploščka ni bil takoj očiten. Ko ste prvi, ki nekaj ustvarite, morate raziskati vse možnosti in ne pustiti kamna na kamnu. Kako izdelati nekaj, kar bi lahko nekateri imeli za nezaželen dodatek in ne za ključni del paketa?

"Vedeli smo, da je ploščica dodatna naprava, ki jo morajo ljudje nositi s seboj," pravi Jared Van Cleave, vodja inženiringa oblikovanja izdelkov, "zato smo preučili, kako bi napako spremenili v funkcijo."

Na koncu se je ta etična usmeritev zelo obrestovala, saj je v puk vgrajeno veliko računskih zmogljivosti (in še več po meri izdelanega silicija za umetno inteligenco in strojno zaznavanje) v majhnih merah. To je bilo ključnega pomena za to, da je Orion iz znanstvene fantastike prešel v resničnost.

"Če ne bi imeli ploščka, ne bi mogli doživeti izkušenj, ki jih ponuja Orion v svoji obliki," pravi Prasad. "Dobra izkušnja AR zahteva resnično visoko zmogljivost: visoke hitrosti sličic, izjemno nizke zakasnitve, natančno upravljanje brezžičnega omrežja in energije itd. Puk in očala morajo biti zasnovana tako, da tesno sodelujejo, ne le na ravni aplikacij, temveč tudi na ravni operacijskega sistema, vdelane programske opreme in strojne opreme. Tudi če bi pametni telefon sooblikovali za delo z očali za razširjeno resničnost, bi zahtevne zahteve glede zmogljivosti izčrpale baterijo telefona in odvzele računsko zmogljivost primerom uporabe telefona. Po drugi strani pa ima očala lastno baterijo z visoko zmogljivostjo, visoko zmogljiv SoC in po meri zasnovan koprocesor umetne inteligence, optimiziran za Orion."

Seveda ploščica ni bila zasnovana čez noč. Zahteval je več let ponavljajočega se dela.

"Nismo vedeli, kako bi ljudje želeli sodelovati z Orionom z vidika vnosa - na trgu nismo imeli ničesar, na kar bi se lahko oprli," pravi produktni vodja Matt Resman. "Če pogledate naše prve prototipe očal, so bile to ogromne slušalke, ki so tehtale tri ali štiri kilograme. In ko poskušate ustvariti izdelek, je zelo težko razumeti uporabniško izkušnjo, če nimate prave oblike. S puckom smo lahko zelo hitro izdelali prototip in začeli razumeti, kako ga bodo ljudje uporabljali."

Takratna družba Oculus Research je puck s kodnim imenom Omega sprva zasnovala kot trak v obliki Ω, ki bi ga uporabnik obesil okoli vratu in bi bil trdno povezan z očali...

... dokler jim niso nekatere nove inovacije brezžične ekipe Reality Labs med drugim omogočile, da prekinejo povezavo. To je omogočilo bolj ročno ali žepno obliko, kar je odprlo veliko možnosti.

"Takrat je bilo klicanje v razširjeni resničnosti še vedno glavni primer uporabe," pojasnjuje Van Cleave. "Na ploščku so bili zasidrani holografski videoposnetki. Položili bi ga na mizo, pri čemer bi bila klop s senzorjem obrnjena proti vam, vas slikala, nato pa bi s površine krožnika projicirala osebo, s katero bi govorili za klic."

"Orion povezuje ljudi in nas združuje," pravi Resman. "Ena od začetnih zamisli za puk je bila pomagati ustvariti ta občutek prisotnosti z drugimi ljudmi in omogočiti bogatejšo obliko komunikacije."

"To je nekaj, česar še niste videli - z napravo lahko ustvarite resnično zabavne in edinstvene interakcije," dodaja industrijski oblikovalec Emron Henry. "Uporabniška izkušnja je nekoliko podobna izpustitvi džina iz steklenice, saj se hologrami brezhibno pojavljajo iz naprave in se v njej raztopijo."

Kot ste verjetno že ugotovili, je v ploščku več potenciala, kot ga je bilo na koncu vključenega v funkcijo. Poleg senzorjev in kamer, ki bi se uporabljali za klicanje AR, ima puck tudi haptične senzorje in senzorje 6DOF, ki bi ga lahko uporabljali kot sledilni krmilnik za izbiro in upravljanje virtualnih predmetov ter igranje iger AR. Ekipa je raziskala tudi kapacitivni vhod in vhod na dotik, tako da bi lahko plošček služil kot igralna ploščica, če bi ga držali v pokončnem in ležečem načinu.

"Pogovarjali smo se o tem, da je treba nositi to dodatno stvar," pravi Van Cleave. "Kako jo narediti bolj uporabno? Okoli tega je bil celoten delovni tok. V nekem trenutku je bila hipoteza, da bo igranje iger z razširjeno resničnostjo ubijalski primer uporabe."

Že na začetku smo vedeli, da moramo raziskati možnosti, da bi plošček počel stvari, ki jih telefoni ne morejo. Sčasoma smo se odločili za uporabo sledenja pogledu oči, EMG in rok za igre AR, kot sta Stargazer in Pong, vendar smo v zgodnjih dneh projekta Orion izdelali prototipe različnih demonstracij in iger, v katerih je bil plošček uporabljen kot krmilnik.

0:00 / 0:00

0:00 / 0:00

0:00 / 0:00

Renderirane raziskave ploščka kot krmilnika 6DOF za igre AR, kot je Pong.

"Ker ne gre za telefon, smo imeli veliko svobode pri oblikovanju," dodaja Prasad. "Lahko je debelejši, lahko ga naredim bolj zaobljenega, da se kot krmilnik udobno prilega v roko. Precej neverjetno je, da je plošček dejansko manjši od povprečnega telefona, vendar je zmogljivejši od telefona, saj ima koprocesor za umetno inteligenco in strojno zaznavanje, ki ga je zasnovala Meta."

Ekipa se je ukvarjala z vprašanjem, v čem se kakovostna igra AR razlikuje od igre za MR ali konzolo. To je pomenilo raziskovanje različnih možnosti krmilnika za igre AR, vključno s krmilniki, razporeditvijo fizičnih gumbov, sprožilnimi gumbi in drugimi možnostmi.

"Na koncu nismo zgradili ničesar od tega," ugotavlja Van Cleave. "Izdelali smo prototip, vendar ga nismo nikoli v celoti zgradili. Želeli smo ostati preprosti. Želeli smo narediti te mehke vmesnike, vendar ne fizičnih, mehanskih gumbov."

Senzorji in haptika sicer niso bili vklopljeni v prototipu končnega izdelka, vendar so med razvojem opravljali pomembno funkcijo, saj so ekipe lahko prijavljale napake tako, da so se nekajkrat dotaknile zgornjega dela naprave in tako sprožile prijavo napake.

Ko se je umetna inteligenca začela uveljavljati kot ključni primer uporabe, se je vse bolj izostril tudi računski vidik. Na koncu je v puku nameščena Orionova brezžična povezljivost, računska moč in zmogljivost baterije - kar je že samo po sebi velik tehnični dosežek - vse to pomaga zmanjšati težo in obliko očal, hkrati pa zaradi svoje površine odvaja veliko več toplote.

V celotnem razvoju je ostalo nekaj nespremenjeno: v ploščku se skriva več, kot je videti na prvi pogled. Sprejemanje nekonvencionalnih idej je našim ekipam omogočilo raziskovanje, premikanje meja in gradnjo prihodnosti.

"Opredeljujemo kategorijo, ki še ne obstaja," ugotavlja Henry. "Kot je pričakovati pri raziskavah in razvoju, so bili na tej poti začetki in postanki. Kako bodo uporabniki pričakovali interakcijo s hologrami? Ali bi raje uporabljali daljinski upravljalnik AR ali pa za vnos zadostujejo sledenje roke, pogled oči in EMG? Kaj se zdi intuitivno, brez trenja, znano in uporabno?"

"Namesto da bi na ploščico gledali kot na kamen, smo se vprašali, kaj lahko še ponudimo, da bi se še bolj razlikovala od telefonov in utemeljila, zakaj bi jo želeli nositi s seboj," priznava Resman. "Ali njegova surova računska moč in praktična zasnova - ki je pomagala odkriti obliko očal, ki jih lahko realno nosite ves dan - navsezadnje ponujata dovolj vrednosti? Naša naloga je, da pomagamo odgovoriti na ta vprašanja."

"Na začetku smo se osredotočili na to, kaj lahko naredimo, česar telefon ne more," dodaja Van Cleave. "Telefoni morajo imeti zaslon, določeno fizično postavitev gumbov, ki jo uporabniki pričakujejo. Mi pa teh omejitev nimamo. Naš računalniški plošček je lahko, karkoli želimo."

---

Če želite več informacij o Orionu, si oglejte te objave na blogu:

• Kristalno čisti: naši valovodi iz silicijevega karbida in pot do velikega prednjega polja Oriona
• Od nič do ena: kako naš silicij in čipi po meri spreminjajo AR

TL;DR:

• Danes na Povežite, je Mark Zuckerberg predstavil Orion - naša prva očala za AR, ki so imela prej kodno ime Projekt Nazare.
• Z najboljšim vidnim poljem v panogi, leče iz silicijevega karbida, zapletenih valovodov, projektorjev uLED in drugih, je Orion naš najnaprednejši in najbolj izpopolnjen prototip izdelka do zdaj.
• Zdaj nadaljujemo z optimizacijo izdelkov in zniževanjem stroškov, da bi ustvarili razširljivo potrošniško napravo, ki bo revolucionarno spremenila način, kako ljudje komunicirajo s svetom.

---

"Izdelujemo očala AR."

Pet preprostih besed, povedano pred petimi leti. Z njimi smo izobesili zastavo naše vizije prihodnosti, v kateri nam ne bo več treba izbirati med svetom informacij na dosegu roke in fizičnim svetom, ki nas obdaja.

In zdaj, pet let pozneje, še pet besed, ki bodo ponovno spremenile igro:

Izdelali smo očala AR.

https://youtube.com/watch?v=2CJsnyS8u3c%3Fsi%3DTr77gOKEq3PnA7-k%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Naše poslanstvo v družbi Meta je preprosto: dati ljudem moč, da gradijo skupnost in zbližujejo svet. V Reality Labs pa ustvarjamo orodja, ki ljudem pomagajo, da se počutijo povezane kadar koli in kjer koli. Zato si prizadevamo ustvariti naslednjo računalniško platformo, ki bo v središče postavila ljudi, da bodo lahko v svetu bolj prisotni, povezani in opolnomočeni.

Očala Ray-Ban Meta so dokazali, da lahko ljudje prostoročno dostopajo do ključnih delov svojega digitalnega življenja iz fizičnega življenja. Pogovarjamo se lahko s pametnim pomočnikom z umetno inteligenco, se povežemo s prijatelji in zajamemo pomembne trenutke - vse to, ne da bi nam bilo treba izvleči telefon. Ta elegantna očala se brez težav vključijo v naš vsakdan, ljudje pa jih naravnost obožujejo.

Medtem ko je Ray-Ban Meta odprl povsem novo kategorijo očal brez zaslona, ki jih je nadgradila umetna inteligenca, pa industrija XR že dolgo sanja o pravih očalih AR - izdelku, ki združuje prednosti velikega holografskega zaslona in prilagojene pomoči umetne inteligence v udobni, elegantni in celodnevno nosljivi obliki.

Danes pa smo te sanje približali resničnosti s predstavitvijo Orionki so po našem mnenju najnaprednejša očala AR doslej. Pravzaprav je to morda najzahtevnejša naprava potrošniške elektronike po pametnem telefonu. Orion je rezultat prebojnih izumov na praktično vseh področjih sodobnega računalništva - temelji na delo, ki smo ga v Reality Labs opravljali v zadnjem desetletju.. Opremljen je s povsem novimi tehnologijami, vključno z najnaprednejšim zaslonom AR, kar jih je bilo kdaj koli sestavljenih, in silicij po meri ki omogoča, da se zmogljiva doživetja AR izvajajo na paru očal z manjšo močjo in težo kot slušalke za magnetno resonanco.

Orionov vhodni sistem gladko združuje glas, pogled oči in sledenje rokam z Zapestnica EMG ki vam omogoča, da podrsate, kliknete in se pomikate, medtem ko je vaša roka udobno ob strani, kar vam omogoča, da ostanete prisotni v svetu in z ljudmi okoli sebe, medtem ko se ukvarjate z bogato digitalno vsebino.

Z današnjim dnem na konferenci Connect in še naprej skozi vse leto odpiramo dostop do prototipa izdelka Orion za zaposlene v podjetju Meta in izbrano zunanje občinstvo, da se lahko naša razvojna ekipa uči, izboljšuje in gradi na liniji izdelkov AR očal za potrošnike, ki jih nameravamo začeti dobavljati v bližnji prihodnosti.

Zakaj očala AR?

Obstajajo trije glavni razlogi, zakaj so očala AR ključna za sprostitev naslednjega velikega preskoka na področju računalništva, usmerjenega v človeka.

1. Omogočajo digitalne izkušnje, ki jih ne omejujejo omejitve zaslona pametnega telefona. Z velikimi holografskimi zasloni lahko fizični svet uporabljate kot platno in 2D- in 3D-vsebine ter doživetja postavite kamor koli želite.
2. V njih je brezhibno vključena kontekstualna umetna inteligenca, ki zaznava in razume svet okoli vas ter tako predvideva in proaktivno obravnava vaše potrebe.
3. So lahki in primerni za uporabo tako v zaprtih prostorih kot na prostem, poleg tega pa omogočajo, da ljudje vidijo pravi obraz, prave oči in prave izraze drug drugega.

To je severna zvezda, h kateri je naša industrija stremela: izdelek, ki združuje priročnost in neposrednost nosljivih naprav z velikim zaslonom, vnosom visoke pasovne širine in kontekstualizirano umetno inteligenco v obliki, ki jo ljudje z veseljem nosijo v vsakdanjem življenju.

Kompaktna oblika, zapleteni izzivi

Že leta se soočamo z napačno izbiro - ali slušalke za navidezno in mešano resničnost, ki omogočajo globoke in potopitvene izkušnje v okorni obliki, ali očala, ki so idealna za celodnevno uporabo, vendar zaradi pomanjkanja velikega zaslona in ustrezne računske moči ne ponujajo bogatih vizualnih aplikacij in izkušenj.

Vendar želimo vse, brez kompromisov. Že več let se trudimo, da bi neverjetne prostorske izkušnje, ki jih omogočajo slušalke za navidezno resničnost in magnetno resonanco, prenesli v par lahkih in elegantnih očal ter miniaturizirali tehnologijo, ki je potrebna za zagotavljanje teh izkušenj. Ujemanje oblike, zagotavljanje holografskih zaslonov, razvijanje prepričljivih izkušenj AR in ustvarjanje novih paradigem interakcije med človekom in računalnikom (HCI) - in vse to v enem celovitem izdelku - je eden najtežjih izzivov, s katerimi se je naša industrija kdajkoli soočila. Bil je tako zahteven, da smo menili, da imamo manj kot 10 odstotkov možnosti, da ga uspešno izpeljemo.

Do zdaj.

Prelomni zaslon v neprekosljivem ohišju

Orion ima s približno 70 stopinjami največje vidno polje v najmanjši obliki očal AR doslej. To vidno polje omogoča za Orion resnično potopitvene primere uporabe, od večopravilnih oken in zabave na velikem zaslonu do hologramov ljudi v naravni velikosti - vse digitalne vsebine, ki se lahko brez težav zlijejo z vašim pogledom na fizični svet.

Za Orion je bilo vidno polje naš sveti gral. Pri tem smo trčili ob zakone fizike in morali smo upogibati svetlobne žarke na načine, ki niso naravni, in to smo morali narediti v okviru moči, ki se meri v milivatih.

Namesto stekla, leče smo izdelali iz silicijevega karbida-nova aplikacija za očala AR. Silicijev karbid je izjemno lahek, ne povzroča optičnih artefaktov in razpršene svetlobe ter ima visok lomni količnik - vse optične lastnosti, ki so ključne za veliko vidno polje. Sami valovodi imajo zelo zapletene in kompleksne 3D strukture v nanometrskem merilu, ki razpršijo ali razpršijo svetlobo na načine, ki so potrebni za doseganje tega vidnega polja. Projektorji pa so uLED - nova vrsta zaslonske tehnologije, ki je zelo majhna in izjemno energetsko učinkovita.

Orion je tako po videzu kot po otipu nedvomno par očal - s prozornimi lečami. Za razliko od slušalk MR ali drugih očal AR lahko še vedno vidite resnične oči in izraze drugih, zato ste lahko prisotni in izkušnjo delite z ljudmi okoli sebe. Da bi industrijsko zasnovo približali sodobni obliki očal, ki bi jo lahko udobno nosili vsak dan, je bilo potrebnih na desetine inovacij. Orion je dosežek miniaturizacije - komponente so zapakirane do delčka milimetra. V obrobe okvirja nam je uspelo vgraditi sedem majhnih kamer in senzorjev.

Optično natančnost smo morali ohraniti na eni desetini debeline človeškega lasa. Sistem lahko zazna drobne premike, kot je širjenje ali krčenje okvirjev pri različnih temperaturah v prostoru, in nato digitalno popravi potrebno optično poravnavo, vse v milisekundah. Okvirje smo izdelali iz magnezija - istega materiala, ki se uporablja v dirkalnih avtomobilih F1 in vesoljskih plovilih -, ker je lahek, a tog, zato ohranja optične elemente v ravnovesju in učinkovito odvaja toploto.

Ogrevanje in hlajenje

Ko smo razvozlali zaslon (brez besedne igre) in premagali fizikalne težave, smo se morali spopasti z izzivom res zmogljivega računanja ob res nizki porabi energije in potrebi po odvajanju toplote. V nasprotju z današnjimi naglavnimi slušalkami za magnetno resonanco v očala ne morete vstaviti ventilatorja. Zato smo morali biti ustvarjalni. Veliko materialov, uporabljenih za hlajenje Oriona, je podobnih tistim, ki jih NASA uporablja za hlajenje satelitov v vesolju.

Zgradili smo visoko specializiran silicij po meri ki je izjemno energetsko učinkovit in optimiziran za našo umetno inteligenco, strojno zaznavanje in grafične algoritme. Izdelali smo več čipov po meri in na desetine zelo prilagojenih silicijevih blokov IP znotraj teh čipov. To nam omogoča, da algoritme, potrebne za sledenje rokam in očem ter tehnologijo za hkratno lokalizacijo in kartiranje (SLAM), ki običajno porabijo na stotine milivatov energije in s tem ustvarjajo ustrezno količino toplote, zmanjšamo na le nekaj deset milivatov.

In da, kljub temu, da ste morda prebrali kje drugje, ima silicij po meri pri razvoju izdelkov v podjetju Reality Labs še vedno ključno vlogo. 😎

EMG brez težav

Vsaka nova računalniška platforma prinaša sprememba paradigme v načinu interakcije z napravami. Izum miške je pomagal utreti pot grafičnim uporabniškim vmesnikom (GUI), ki danes prevladujejo v našem svetu, pametni telefoni pa so se začeli uveljavljati šele s pojavom zaslona na dotik. Enako pravilo velja za nosljive naprave.

Govorili smo o našem delu z elektromiografija ali EMG, že več let, saj smo prepričani, da mora biti vnos za očala AR hiter, priročen, zanesljiv, subtilen in družbeno sprejemljiv. In zdaj je to delo pripravljeno za najboljši čas.

Orionov sistem za vnos in interakcijo brezhibno združuje glas, pogled oči in sledenje roke z zapestnico EMG, ki omogoča enostavno podrsavanje, klikanje in pomikanje.

Deluje in deluje kot čarovnija. Predstavljajte si, da na jutranjem teku posnamete fotografijo s preprostim dotikom konic prstov ali se po menijih premikate s komaj zaznavnimi gibi rok. Naša zapestnica združuje visoko zmogljiv tekstil z vgrajenimi senzorji EMG za zaznavanje električnih signalov, ki jih ustvarjajo tudi najmanjši gibi mišic. Procesor ML v napravi nato interpretira te signale EMG in ustvari vhodne dogodke, ki se brezžično prenesejo v očala. Sistem se prilagaja vam, tako da sčasoma vedno bolje prepoznava tudi najneznatnejše geste. Danes pa vam predstavljamo našo podporo zunanjim raziskavam, ki se osredotočajo na razširitev možnosti enakosti in dostopnosti zapestnic EMG.

Spoznajte brezžični računalniški priključek

Prava očala AR morajo biti brezžična in majhna.Zato smo zgradili brezžična računska ploščica za Orion. Očala so tako nekoliko razbremenjena, kar omogoča daljšo življenjsko dobo baterije in boljšo obliko z nizko zakasnitvijo.

V očalih se izvajajo vsi algoritmi za sledenje rokam, sledenje očem, SLAM in specializirani grafični algoritmi za zaklepanje sveta AR, medtem ko se logika aplikacije izvaja na ploščku, da so očala čim lažja in kompaktnejša.

Puk ima dva procesorja, vključno z enim, ki je bil po meri zasnovan tukaj v podjetju Meta, in zagotavlja računsko moč, ki je potrebna za grafično upodabljanje z nizko zakasnitvijo, umetno inteligenco in nekatere dodatne strojne zaznave.

Ker je majhen in eleganten, ga lahko udobno pospravite v torbo ali žep in se odpravite na delo - brez kakršnih koli težav.

Izkušnje AR

Seveda je tako kot vsaka strojna oprema tudi ta dobra le toliko, kolikor lahko z njo narediti z njim. In čeprav je še zgodaj, so izkušnje, ki jih omogoča Orion, vznemirljiv vpogled v to, kar se bo zgodilo.

https://youtube.com/watch?v=HkdSv3QPhNw%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Imamo pametnega pomočnika, Meta AI, ki deluje v sistemu Orion. Razume, kaj gledate v fizičnem svetu, in vam lahko pomaga z uporabnimi vizualizacijami. Orion uporablja isti model Llama, ki poganja izkušnje umetne inteligence, ki danes tečejo na pametnih očalih Ray-Ban Meta, ter prilagojene raziskovalne modele za prikaz možnih primerov uporabe za prihodnji razvoj nosljivih naprav.

Na poti lahko opravite videoklic brez uporabe rok in se v realnem času pogovarjate s prijatelji in družino ter ostanete povezani v aplikacijah WhatsApp in Messenger, kjer lahko pregledujete in pošiljate sporočila. Ni vam treba izvleči telefona, ga odkleniti, poiskati prave aplikacije in sporočiti prijatelju, da zamujate na večerjo - vse to lahko storite prek očal.

https://youtube.com/watch?v=el7lUVvu8Bo%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Igre AR lahko igrate v skupni rabi z družino na drugem koncu države ali s prijateljem na drugi strani kavča. Orionov velik zaslon vam omogoča večopravilnost z več okni, tako da lahko opravljate stvari, ne da bi morali s seboj nositi prenosni računalnik.

Izkušnje, ki so danes na voljo na Orionu, bodo pomagale začrtati načrt za našo linijo očal AR za potrošnike v prihodnosti. Naše ekipe bodo skupaj s partnerji razvijalci še naprej izpopolnjevale in ustvarjale nove potopitvene družbene izkušnje, zato komaj čakamo, da z vami delimo, kaj bo sledilo.

Namenski prototip izdelka

Čeprav Orion ne bo prišel v roke potrošnikov, se ne smete zmotiti: To je ne raziskovalni prototip. To je najbolj izpopolnjen prototip izdelka, kar smo jih kdajkoli razvili - in je resnično predstavnik nečesa, kar lahko pošiljanje potrošnikom. Namesto da bi hiteli z dajanjem na prodajne police, smo se odločili, da se najprej osredotočimo na notranji razvoj, kar pomeni, da lahko hitro gradimo in še naprej premikamo meje tehnologije in izkušenj.

To pomeni, da bomo hitreje prišli do še boljšega potrošniškega izdelka.

Kaj sledi

Na poti do očal AR za široko potrošnjo sta že dolgo dve glavni oviri: tehnološki preboj, ki je potreben za zagotovitev velikega zaslona v kompaktni obliki očal, ter potreba po uporabnih in privlačnih izkušnjah AR, ki jih je mogoče zagnati na teh očalih. Orion je velik mejnik, saj prvič zagotavlja prave izkušnje AR, ki se izvajajo na razumno elegantni strojni opremi.

Zdaj, ko smo Orion predstavili svetu, se osredotočamo na nekaj stvari:

• prilagajanje kakovosti zaslona AR za še bolj ostre slike
• Optimiziramo vse, kar je mogoče, da bi še zmanjšali velikost ohišja
• Gradnja v večjem obsegu, da bodo cenovno dostopnejše.

V naslednjih nekaj letih lahko pričakujete nove naprave, ki bodo temeljile na naših prizadevanjih na področju raziskav in razvoja. Številne Orionove inovacije so danes razširjene na naše trenutne potrošniške izdelke in tudi na naš načrt prihodnjih izdelkov. Optimizirali smo nekatere naše algoritme za prostorsko zaznavanje, ki delujejo tako na Meta Quest 3S in Orion. Čeprav je bil sistem za pogled v oči in subtilno gestikulacijo prvotno zasnovan za Orion, ga nameravamo uporabljati tudi v prihodnjih izdelkih. Raziskujemo tudi uporabo zapestnic EMG v prihodnjih potrošniških izdelkih.

Orion ni le okno v prihodnost - je pogled na zelo realne možnosti, ki so dosegljive že danes. Ustvarili smo ga v prizadevanju za to, kar znamo najbolje: pomagati ljudem, da se povežejo. Od očal Ray-Ban Meta do Oriona - videli smo, kako dobro je, če ljudem omogočimo, da ostanejo bolj prisotni in opolnomočeni v fizičnem svetu, čeprav se hkrati poslužujejo vsega dodatnega bogastva, ki ga ponuja digitalni svet.

Menimo, da vam ne bi smelo biti treba izbirati med njima. Z naslednjo računalniško platformo vam tega ne bo treba storiti.

---

Če želite več informacij o Orionu, si oglejte te objave na blogu:

• Orionov računski paket: Zgodba o napravi, ki je omogočila uporabo očal AR
• Od nič do ena: kako naš silicij in čipi po meri spreminjajo AR
• Kristalno čisti: naši valovodi iz silicijevega karbida in pot do velikega prednjega polja Oriona