Eelmisel aastal esitlesime Connecti konverentsil Orionmeie esimesed tõelised AR-prillid. Kulminatsiooniks on meie töö Reality Labs'is viimase kümne aasta jooksulOrion ühendab suure holograafilise ekraani ja personaalse AI-abi eelised mugavas, kogu päeva kantavas vormis. See sai tähelepanu oma valdkonna juhtiva vaatevälja, ränikarbiidist lainejuhtide, uLED-projektorite ja muu eest. Kuid täna pöörame tähelepanu Orioni laulmata kangelasele: arvutipuuteele.
Puck on loodud nii, et see mahub hõlpsasti taskusse või kotti, nii et saate seda oma päeva jooksul peaaegu kõikjale kaasa võtta, ning see vabastab Orioni töötlemisvõimsuse rakendusloogika käivitamiseks ja võimaldab prillide veenvamat, väiksemat vormifaktorit. See ühendub juhtmevabalt prillidega ja EMG-randmepaelaga, et tagada sujuv kogemus.
Seadke see ja unustage see, eks ole?
Kuid selle plaadi taustalugu - isegi prototüübina - on seotud dramaatilise kaarega, mida selle välimuse põhjal ei oskaks iialgi arvata.
"Kui sa ehitad midagi sellist, siis hakkad füüsika piiridesse jõudma," selgitab tootejuhtimise direktor Rahul Prasad. "Viimase 50 aasta jooksul on Moore'i seadus muutnud kõik väiksemaks, kiiremaks ja energiatõhusamaks. Probleem seisneb selles, et nüüd hakkad jõudma piiridesse, kui palju soojust saad hajutada, kui palju akut saad kokku suruda ja kui palju antenni jõudlust saad teatud suurusega objekti sisse mahutada."
Kuigi tagantjärele võib olla 20/20, ei olnud selle plaadi potentsiaal kohe ilmne. Kui sa oled esimene, kes midagi ehitab, pead sa uurima kõiki võimalusi - ei jäta ühtegi kivi maha. Kuidas ehitada midagi, mida mõned võivad pidada pigem ebasoovitavaks lisaseadmeks kui paketi oluliseks osaks?
"Me teadsime, et puck on lisaseadme, mida me palume inimestel kaasas kanda," märgib tootekujundusjuht Jared Van Cleave, "seega uurisime, kuidas muuta see viga funktsiooniks."
Lõppkokkuvõttes tasus see eetos end ära, kuna see puck pigistab palju arvutusvõimsust (ja veelgi rohkem Meta poolt loodud kohandatud räni AI ja masintaju jaoks) väikesesse suurusesse. See aitas Orionil ulme vallast tegelikkuseks saada.
"Kui sul poleks seda plaati, ei oleks sul võimalik saada kogemusi, mida Orion oma vormifaktoriga pakub," ütleb Prasad. "Hea AR-kogemus nõuab väga suurt jõudlust: kõrget kaadrisagedust, äärmiselt madalat latentsust, peensusteni välja töötatud traadita side- ja energiahaldust jne. Puck ja prillid peavad olema ühiselt disainitud, et nad töötaksid väga tihedalt koos, mitte ainult rakenduse tasandil, vaid ka operatsioonisüsteemi, püsivara ja riistvara tasandil. Ja isegi kui nutitelefon kavandataks koos AR-prillidega, tühjendaksid nõudlikud jõudlusnõuded telefoni akut ja võtaksid arvutusvõimsuse ära telefoni kasutusjuhtumite arvutusmahust. Seevastu on puckil oma suure võimsusega aku, suure jõudlusega SoC ja kohandatud Meta poolt disainitud ja Orioni jaoks optimeeritud tehisintellekti kaasprotsessor."
Loomulikult ei loodud see ketas üleöö. See nõudis aastatepikkust iteratiivset tööd.
"Me ei teadnud, kuidas inimesed tahaksid Orioniga suhelda sisendi seisukohast - me ei saanud turul midagi ette valmistada," ütleb tootejuht Matt Resman. "Kui te vaatate meie varaseid prillide prototüüpe, siis need olid massiivsed kõrvaklapid, mis kaalusid kolm või neli kilo. Ja kui sa üritad toodet luua, siis on väga raske mõista kasutajakogemust, kui sa ei ole õiges vormifaktoris. Pucki puhul saime väga kiiresti prototüüpe luua, et mõista, kuidas inimesed seda kasutaksid."
Alguses kandis Oculus Research esialgu koodnimetust Omega, mis oli tollase Oculus Researchi poolt ette nähtud Ω-kujulise rihmana, mis käiks kasutaja kaela ümber ja oleks prillidega ühendatud....
... kuni Reality Labs'i traadita side meeskonna mõned uued uuendused võimaldasid neil muu hulgas kaabli katkestada. See võimaldas rohkem pihuarvuti või taskusse / kotti paigutatavat vormi, mis avas palju võimalusi.
"Sel hetkel oli liitreaalsuse helistamine veel esmane kasutusviis," selgitab Van Cleave. "Pakk oli see, kuhu holograafilised videod ankurdati. Paneksite selle lauale, sensorpink teie poole, kujutaks teid ja siis projitseeriksite kõne jaoks selle, kellega te räägite korvi pinnalt."
"Orioni eesmärk on ühendada inimesi ja tuua meid kokku," ütleb Resman. "Üks esialgsetest kontseptsioonidest oli aidata luua seda kohaloleku tunnet teiste inimestega ja võimaldada seda rikkalikumat suhtlemisvormi."
"See on erinev kõigest, mida te olete kunagi näinud - seadmel on potentsiaali luua tõeliselt lõbusaid ja unikaalseid interaktsioone," lisab tööstusdisainer Emron Henry. "Kasutajakogemus on natuke nagu džinni vabastamine pudelist, kus hologrammid tekivad sujuvalt seadmest välja ja lahustuvad sinna tagasi."
Nagu nüüdseks ilmselt juba aru saad, on puckis rohkem potentsiaali kui see, mis lõpuks funktsioonina sisse lülitati. Lisaks anduritele ja kaameratele, mida oleks kasutatud AR-kõne jaoks, on puckil haptika ja 6DOF-andurid, mis võimaldaksid seda kasutada jälgitava kontrollerina virtuaalsete objektide valimiseks ja nendega manipuleerimiseks ning AR-mängude mängimiseks. Meeskond uuris ka mahtuvus- ja jõupuute sisendit, nii et puck võiks olla mängupadina, kui seda hoitakse nii portree- kui ka maastikurežiimil.
"Rääkisime sellest, et seda lisa asja on vaja kaasas kanda," ütleb Van Cleave. "Kuidas me selle kasulikumaks teeme? Selle ümber oli terve töövoog. Ja ühel hetkel oli hüpotees, et AR-mängudest saab see peamine kasutusviis."
Juba varakult teadsime, et peame uurima võimalusi, mida telefonid ei saa teha. Lõpuks jõudsime silma pilgu, EMG ja käe jälgimise kasutamiseni AR-mängudes, nagu Stargazer ja Pong, kuid Orioni algusaegadel prototüüpisime mitmesuguseid demosid ja mänge, milles kasutasime puck'i kontrollerina.
0:00 / 0:00
0:00 / 0:00
0:00 / 0:00
Renderdatud uurimused puckist kui 6DOF kontrollerist AR-mängude, näiteks Pongi jaoks.
"Kuna tegemist ei ole telefoniga, andis see meile palju vabadust disainis," lisab Prasad. "See võib olla paksem, ma võin selle teha ümaramaks, et see sobiks mugavalt käes kui kontroller. See on päris uskumatu, et puck on tegelikult väiksem kui keskmine telefon, kuid see on võimsam kui telefon, sest sellel on Meta poolt loodud kaasprotsessor tehisintellekti ja masintaju jaoks."
Meeskond uuris, kuidas kvaliteetne AR-mäng võiks erineda MR- või konsoolimängust. See tähendas AR-mängu kontrolleri erinevate võimaluste, sealhulgas joystickide, füüsiliste nuppude paigutuse, päästikunuppude ja muude võimaluste uurimist.
"Me ei hakanud tegelikult midagi sellist ehitama," märgib Van Cleave. "Me prototüüpisime seda, kuid me ei hakanud seda kunagi täielikult ehitama. Me tahtsime hoida asja lihtsana. Tahtsime teha neid pehmeid liideseid, kuid mitte teha füüsilisi, mehaanilisi nuppe."
Ja kuigi andurid ja haptika ei olnud valmis toote prototüübis sisse lülitatud, oli neil arenduse ajal oluline funktsioon, võimaldades meeskondadel esitada vigu, koputades lihtsalt paar korda seadme ülaosa, et käivitada veateade.
Kui tehisintellekt hakkas peamise kasutusviisina esile tõusma, muutus arvutamine üha teravamaks. Lõpuks on Orioni juhtmevaba ühenduvus, arvutusvõimsus ja aku mahtuvus - iseenesest suur tehniline saavutus -, mis kõik aitab vähendada prillide kaalu ja vormifaktorit, hajutades samal ajal tänu oma pindalale palju rohkem soojust.
Kogu selle arengu vältel on üks asi jäänud samaks: puckis on rohkem, kui treenimata silmale paistab. Ebakonventsionaalsete ideede omaksvõtmine võimaldas meie meeskondadel uurida, ületada piire ja ehitada tulevikku.
"Me määratleme kategooriat, mida veel ei ole päris olemas," märgib Henry. "Nagu uurimis- ja arendustegevuse puhul võib eeldada, oli teel algusi ja peatusi. Kuidas ootavad kasutajad hologrammidega suhtlemist? Kas nad eelistavad kasutada AR-pulti või piisab käe jälgimisest, pilgupildist ja EMG-st? Mis tundub intuitiivne, vähese hõõrdumisega, tuttavlik ja kasulik?"
"Selle asemel, et vaadata puck'i kui pelgalt kivi, küsisime endalt, mida võiksime veel pakkuda, et seda telefonidest veelgi enam eristada ja põhjendada, miks sa seda kaasas kanda tahad," tunnistab Resman. "Kas selle toores arvutusvõimsus ja praktiline disain - mis aitas avada prillide vormifaktori, mida saab reaalselt kogu päeva kaasas kanda - pakub lõpuks piisavalt väärtust? Meie ülesanne on aidata neile küsimustele vastata."
"Varakult nihutasime käike, et keskenduda sellele, mida me saame teha, mida telefon ei saa teha," lisab Van Cleave. "Telefonidel peab olema ekraan, neil peab olema teatud füüsiline nupu paigutus, mida kasutajad ootavad. Meil ei ole neid piiranguid. Meie arvutipuute saab olla selline, nagu me tahame."
Lisateavet Orioni kohta leiate nendest blogipostitustest:
ET 
EN 
BG 
CS 
EL 
HR 
HU 
LT 
LV 
FR 
NL 
PL 
PT 
RO 
SL 
SK