Welcome back for another episode of Boz To The Future, a podcast from Reality Labs. In today’s episode, our host, Meta CTO and Head of Reality Labs Andrew “Boz” Bosworth, is joined by Meta’s VP of Wearables Alex Himel.
Himel’s team works on some of the industry’s hardest technical problems, all in the service of helping to build the next computing platform. Like Bosworth, he’s a tenured leader at Meta, having filled numerous leadership roles across the business in his 15+ years at the company.
Bosworth and Himel cover a range of topics, including wearables, augmented reality, and how AI is accelerating and improving the kinds of experiences embedded in "Ray-Ban Meta" akiniai and future products.
They go deep on Orion and the positive reception it’s received since Mark Zuckerberg announced it at Prisijungti. Just as Steve Jobs recognized the Alto as a turning point in computing, Bosworth asserted that, while we may disagree about the details, it’s hard to argue against this as the future. Himel and Bosworth go on to talk about the tremendous value of prototyping and building, saying how much more they’ve learned about Orion and its input paradigms in the three weeks of using it compared to the years spent building it.
They also talked about the crucial role of AI in wearables, and how it’s becoming increasingly useful in everyday life—especially now that you’re able to ask Meta AI about things you’re seeing and use it to set visual reminders.
Himel also talks about his deep experience in a different kind of stack: sandwiches. With seven years under his belt working in the famous Lange’s Little Store in Chappaqua, NY, where he grew up, Himel and Bosworth get into what makes a great sandwich, where tomatoes really go, and which bread is superior.
You can tune in to Boz to the Future on Apple Podcasts, "Spotify", and wherever you listen to podcasts.
Back in 2019, the Orion team prepared an important demo for Meta Founder & CEO Mark Zuckerberg, showcasing potential waveguides for papildytosios realybės akiniai—a pivotal moment when theoretical calculations on paper were brought to life. And it was a demo that changed everything.
“Wearing the glasses with glass-based waveguides and multiple plates, it felt like you were in a disco,” recalls Optical Scientist Pasqual Rivera. “There were rainbows everywhere, and it was so distracting—you weren’t even looking at the AR content. Then, you put on the glasses with silicon carbide waveguides, and it was like you were at the symphony listening to a quiet, classical piece. You could actually pay attention to the full experience of what we were building. It was a total game changer.”
Yet as clear (pun intended) as the choice of silicon carbide as a substrate seems today, when we first started down the road to AR glasses a decade ago, it was anything but.
“Silicon carbide is normally heavily nitrogen-doped,” says Rivera. “It’s green, and if it gets thick enough, it looks black. There’s no way you could make an optical lens out of it. It’s an electronic material. There’s a reason it’s that color, and it’s because of electronic properties.”
“Silicon carbide has been around as a material for a long time,” agrees AR Waveguides Tech Lead Giuseppe Calafiore. “Its main application is high-power electronics. Take electric vehicles: All EVs require a chip—but that chip must also be capable of very high power, moving the wheels, and driving this thing. It turns out you can’t do it with the regular silicon substrate, which is what makes the chips that we use in our computers and electronics. You need a platform that allows you to go through high currents, high power, and that material is silicon carbide.”
Until fairly recent discussions around renewable energy sources started to heat up, the market for these high-power chipsets was nowhere near the size of the market for chips for consumer electronics. Silicon carbide has always been expensive, and there wasn’t much incentive to bring costs down because, for the size of chip that you make for a car, the price of the substrate was tolerable.
“But it turns out that silicon carbide also has some of the properties that we need for waveguides and optics,” Calafiore says. “The refractive index is the key property that we care about. And silicon carbide has a high refractive index, which means that it’s capable of channeling in and outputting a large quantity of optical data. You can think of it as optical bandwidth—just like you have bandwidth for the internet, and you want it to be large enough so that you can send huge amounts of data through that channel. The same goes for optical devices.”
The higher a material’s refractive index, the higher its étendue, so you can send more optical data through that channel.
“The channel in our case is our waveguide, and a larger étendue translates to a larger field of view,” explains Calafiore. “The larger the refractive index of a material, the larger field of view the display can support.”
The Road to the Right Refractive Index
When Calafiore first joined what was then Oculus Research in 2016, the highest refractive index glass the team had at its disposal was 1.8—which required stacking multiple plates to achieve the desired field of view. Undesirable optical artifacts aside, the assembly line became increasingly complicated as the first two waveguides had to be perfectly aligned, and then that stack had to be perfectly aligned with a third waveguide.
“Not only was it expensive, it was immediately obvious that you couldn’t have three pieces of glass per lens in a pair of glasses,” Calafiore recalls. “They were too heavy, and the thickness was prohibitively large and ugly—nobody would buy it. So we went back to square one: trying to boost the refractive index of the substrate to reduce the number of plates needed.”
The first material the team looked into was lithium niobate, which has a refractive index of roughly 2.3—quite a bit higher than the glass at 1.8.
“We realized that we only had to stack two plates and could maybe even manage with one plate to still cover the field of view,” says Calafiore. “Almost in parallel, we started looking at other materials—which is how we figured out alongside our suppliers in 2019 that silicon carbide, in its purest form, is actually very transparent. It also happens to have the highest refractive index known for an optical application, which is 2.7.”
That’s a 17.4% increase over lithium niobate and a 50% bump over glass, for those keeping score at home.
“With a few modifications to the very same equipment that was used in the industry already, it was possible to get transparent silicon carbide,” Calafiore says. “You could just change the process, be a lot more careful, and instead of optimizing for electronic properties, you optimize for optical properties: transparency, uniformity of the refractive index, etc.”
The Potential Cost of Compromise
At that time, the Reality Labs team was the first to even attempt moving from opaque silicon carbide wafers to transparent ones. And because silicon carbide is one of the hardest known materials, it essentially requires diamond tooling to cut or polish it. As a result, the non-recurring engineering costs were very high, so the resulting substrate was quite expensive.
While more cost-effective alternatives exist, as with any technology, they each have tradeoffs. And as the field of view increases towards Orion’s industry-leading field of view of approximately 70 degrees, new issues arise like ghost images and rainbows.
“Finding the optimum solution for a wide field of view AR display is fraught with tradeoffs between performance and costs,” explains Director of Research Science Barry Silverstein. “Costs can often be driven down, but if performance doesn’t cut it, costs won’t ultimately matter.”
Ghost images are like visual echoes of the primary image being projected onto the display. Rainbows are colorful streaks of light that are created when ambient light reflects off of the waveguide. “Say you’re driving at night with moving car lights around you,” says Silverstein. “You’re going to have rainbows that move, too. Or if you’re out on the beach playing volleyball and the sun’s shining, you’re going to get a rainbow streak that’s moving with you and you’ll miss your shot. And one of the miraculous properties of silicon carbide is that it gets rid of those rainbows.”
“The other advantage of silicon carbide that none of the other materials have is thermal conductivity,” Calafiore adds. “Plastic is a terrible insulator. Glass, lithium niobate, same thing. You go to silicon carbide and it’s transparent, looks like glass, and guess what: It conducts heat.”
So in July 2020, the team determined that silicon carbide was the optimum choice for three primary reasons: It led to an improved form factor because it required only a single plate and smaller mounting structures, it had better optical properties, and it was lighter than dual-plate glass.
The Secret of Slant Etch
With the material in mind, the next nut to crack was the fabrication of the waveguides—and specifically, an unconventional grating technique called slant etch.
“The grating is the nanostructure that in-couples and out-couples the light from the lens,” explains Calafiore. “And for silicon carbide to work, the grating needs to be slant etch. Instead of being vertical, you want the lines of the grating to be sloped diagonally.”
“We were the first ones to do slant etch directly on the devices,” says Research Manager Nihar Mohanty. “The whole industry used to rely on nano imprint, which doesn’t work for substrates with such a high refractive index. That’s why no one else in the world had thought about doing silicon carbide.”
But because slant etch is an immature technology, most semiconductor chip suppliers and factories lack the necessary tools.
“Back in 2019, my manager at the time, Matt Colburn, and I established our own facility as there was nothing in the world that could produce etched silicon carbide waveguides and where we could prove out the technology beyond the labscale,” explains Mohanty. “It was a huge investment, and we established the whole pipeline there. The tooling was custom-made for us by our partners, and the process was developed in-house in Meta, though our systems are research-grade because there were no manufacturing-grade systems out there. We worked with a manufacturing partner to develop manufacturing-grade slant etch tooling and processes. And now that we’ve shown what’s possible with silicon carbide, we want others in the industry to start making tools of their own.”
The more companies that invest in optical-grade silicon carbide and develop equipment, the stronger the category of consumer AR glasses will become.
No Longer Chasing Rainbows
While technological inevitability is a myth, the stars certainly seem to be aligning in silicon carbide’s favor. And although the team continues to investigate alternatives, there’s a strong sense that the right people have come together at the right time under the right market conditions to build AR glasses using this material.
“Orion proved that silicon carbide is a viable option for AR glasses,” says Silverstein, “and we’re now seeing interest across the supply chain on three different continents where they’re heavily pursuing this as an opportunity. Silicon carbide will come out on top. It’s just a matter of time in my book.”
And a lot can happen in that time—much like the way the tables have turned since we grew our first clear silicon carbide crystals.
“All of these silicon carbide manufacturers had cranked up the supply massively in response to the expected EV boom,” notes Calafiore. “Right now, there’s an overcapacity that didn’t exist when we were building Orion. So now, because supply is high and demand is low, the cost of the substrate has started to come down.”
“Suppliers are very excited by the new opportunity of manufacturing optical-grade silicon carbide—after all, each waveguide lens represents a large amount of material relative to an electronic chip, and all of their existing capabilities apply to this new space,” adds Silverstein. “Filling your factory is essential, and scaling your factory is the dream. The size of the wafer matters, too: The bigger the wafer, the lower the cost—but the complexity of the process also goes up. That said, we’ve seen suppliers move from four-inch to eight-inch wafers, and some are working on precursors to 12-inch wafers, which would yield exponentially more pairs of AR glasses.”
These advancements should help continue to drive costs down. It’s still early days, but the future is coming into focus.
“At the beginning of any new technological revolution, you try a bunch of things,” says Calafiore. “Look at television: We started with cathode-ray tubes, and then we went to the LED plasma TVs and now microLEDs. We went through several different technologies and architectures. As you pathfind, lots of paths end up nowhere, but there are some that you just keep coming back to as the most promising. We’re not at the end of the road, and we can’t do it alone, but silicon carbide is a wonder material that is well worth the investment.”
“The world is awake now,” adds Silverstein. “We’ve successfully shown that silicon carbide can flex across electronics and photonics. It’s a material that could have future applications in quantum computing. And we’re seeing signs that it’s possible to significantly reduce the cost. There’s a lot of work left to be done, but the potential upside here is huge.”
Šiandien Prisijungti, Markas Zuckerbergas pristatė "Orion" - pirmuosius tikrus AR akinius, anksčiau vadintus kodiniu pavadinimu Projektas Nazare.
Geriausias pramonėje matymo laukas, silicio karbido lęšiai, sudėtingi bangolaidžiai, uLED projektoriai ir kt., "Orion" yra pažangiausias ir labiausiai ištobulintas iki šiol mūsų gaminio prototipas.
Dabar toliau optimizuojame gaminius ir mažiname sąnaudas, kad sukurtume keičiamo dydžio vartotojo įrenginį, kuris pakeis žmonių bendravimo su pasauliu būdą.
"Kuriame AR akinius."
Penki paprasti žodžiai, kalbėta prieš penkerius metus. Jais mes padėjome vėliavą ant savo ateities vizijos, kurioje mums nebereikės klaidingai rinktis tarp informacijos pasaulio, esančio po ranka, ir mus supančio fizinio pasaulio.
O dabar, po penkerių metų, dar penki žodžiai, kurie gali dar kartą pakeisti žaidimą:
"Meta" misija paprasta: suteikti žmonėms galią kurti bendruomenę ir suartinti pasaulį. O "Reality Labs" kuriame įrankius, padedančius žmonėms jaustis prisijungusiems bet kada ir bet kur. Todėl dirbame kurdami kitą kompiuterinę platformą, kurios centre atsiduria žmonės, kad jie galėtų labiau būti pasaulyje, palaikyti ryšį ir įgyti daugiau galių.
"Ray-Ban Meta" akiniai įrodė, kad žmonėms suteikiama galimybė laisvai naudotis pagrindinėmis skaitmeninio gyvenimo dalimis iš fizinio gyvenimo. Galime kalbėtis su išmaniuoju dirbtinio intelekto asistentu, bendrauti su draugais ir fiksuoti svarbias akimirkas - ir visa tai galime daryti neišsitraukdami telefono. Šie stilingi akiniai sklandžiai įsilieja į mūsų kasdienį gyvenimą, o žmonės juos be galo mėgsta.
Nors "Ray-Ban Meta" sukūrė visiškai naują akinių be ekrano kategoriją, kurią papildė dirbtinis intelektas, XR pramonė jau seniai svajojo apie tikrus AR akinius - gaminį, kuris sujungtų didelio holografinio ekrano privalumus ir asmeninę dirbtinio intelekto pagalbą patogiame, stilingame, visą dieną nešiojamame formate.
Šiandien mes priartinome šią svajonę prie realybės, pristatydami Orion, kurie, mūsų nuomone, yra pažangiausi kada nors sukurti AR akiniai. Tiesą sakant, tai gali būti sudėtingiausias buitinės elektronikos prietaisas, pagamintas nuo išmaniojo telefono laikų. Orion" yra proveržio išradimų beveik visose šiuolaikinės kompiuterijos srityse rezultatas - remiantis darbą, kurį "Reality Labs" atliekame jau dešimtmetį.. Jame įdiegtos visiškai naujos technologijos, įskaitant pažangiausią kada nors sukurtą AR ekraną ir pasirinktinis silicis kuri leidžia galingą AR patirtį įdiegti į akinius, naudojant tik dalį MR ausinių galios ir svorio.
"Orion" įvesties sistema sklandžiai sujungia balsą, akių žvilgsnį ir rankos sekimą su EMG apyrankė kuri leidžia braukti, spausti ir slinkti, o ranką patogiai laikyti šalia savęs, kad galėtumėte išlikti pasaulyje ir bendrauti su aplinkiniais žmonėmis, kai naudojatės turtingu skaitmeniniu turiniu.
Nuo šiandien "Connect" ir toliau visus metus "Meta" darbuotojams ir atrinktai išorės auditorijai suteikiame prieigą prie "Orion" produkto prototipo, kad mūsų kūrimo komanda galėtų mokytis, tobulinti ir kurti savo vartotojui skirtų AR akinių liniją, kurią planuojame pradėti tiekti netolimoje ateityje.
Kodėl AR akiniai?
Yra trys pagrindinės priežastys, dėl kurių AR akiniai yra svarbiausi, norint atverti kitą didelį šuolį į žmogų orientuotų kompiuterių srityje.
Jie suteikia galimybę patirti skaitmeninę patirtį, kurios nevaržo išmaniojo telefono ekrano ribos. Naudodami didelius holografinius ekranus, fizinį pasaulį galite naudoti kaip drobę ir bet kur patalpinti 2D ir 3D turinį bei patirtį.
Juose sklandžiai integruotas kontekstinis dirbtinis intelektas, kuris gali pajusti ir suprasti jus supantį pasaulį, kad numatytų ir aktyviai atsižvelgtų į jūsų poreikius.
Jie yra lengvi ir puikiai tinka naudoti tiek patalpose, tiek lauke, be to, žmonės gali matyti tikrus vienas kito veidus, akis ir išraiškas.
Tai šiaurinė žvaigždė, prie kurios mūsų pramonė artėja: gaminys, kuriame būtų suderintas dėvimųjų įrenginių patogumas ir greitaveika, didelis ekranas, didelio pralaidumo įvestis ir kontekstualizuotas dirbtinis intelektas, ir kuris būtų tokios formos, kad žmonės jaustųsi patogiai nešiojami kasdieniame gyvenime.
Kompaktiškas formatas, sudėtingi iššūkiai
Jau daugelį metų susiduriame su klaidingu pasirinkimu - arba virtualios ir mišrios realybės ausinės, leidžiančios patirti gilią ir įtraukiančią patirtį, bet turinčios didelių gabaritų, arba akiniai, kurie idealiai tinka naudoti visą dieną, bet nesuteikia galimybės naudotis turtingomis vaizdinėmis programomis ir patirtimis, nes neturi didelio ekrano ir atitinkamos skaičiavimo galios.
Tačiau mes norime visko, be jokių kompromisų. Daugelį metų sunkiai dirbome, kad galėtume pritaikyti neįtikėtiną erdvinę patirtį, kurią suteikia VR ir MR ausinės, ir miniatiūrizuoti technologiją, reikalingą šiai patirčiai perteikti lengvuose ir stilinguose akiniuose. Formos faktoriaus suderinimas, holografiniai ekranai, įtikinama AR patirtis, naujos žmogaus ir kompiuterio sąveikos (HCI) paradigmos ir visa tai padaryti vienu vientisu produktu - tai vienas sudėtingiausių iššūkių, su kuriais kada nors teko susidurti mūsų pramonei. Jis buvo toks sudėtingas, kad manėme, jog turime mažiau nei 10 proc. tikimybę jį sėkmingai įgyvendinti.
Iki šiol.
Pažangus ekranas neprilygstamo formato ekrane
Maždaug 70 laipsnių kampu "Orion" turi didžiausią matymo lauką mažiausiuose iki šiol AR akiniuose. Toks matymo laukas atveria tikrai įtraukiančius "Orion" naudojimo atvejus - nuo daugiafunkcinių langų ir pramogų dideliame ekrane iki natūralaus dydžio žmonių hologramų - visą skaitmeninį turinį, kuris gali sklandžiai susilieti su jūsų fizinio pasaulio vaizdu.
"Orion" atveju regėjimo laukas buvo mūsų šventasis gralis. Susidūrėme su fizikos dėsniais ir turėjome sulenkti šviesos pluoštus taip, kaip jie natūraliai nesilenkia, ir turėjome tai padaryti neviršydami milivatais matuojamos galios.
Vietoj stiklo, lęšius gaminome iš silicio karbido-naujas AR akinių pritaikymas. Silicio karbidas yra neįtikėtinai lengvas, nesukelia optinių artefaktų ar išblaškytos šviesos, turi didelį lūžio rodiklį - visos optinės savybės, kurios yra labai svarbios dideliam matymo laukui. Patys bangolaidžiai turi išties sudėtingas ir kompleksines nano mastelio 3D struktūras, kad būtų galima išsklaidyti arba paskleisti šviesą taip, kaip reikia tokiam matymo laukui pasiekti. Projektoriai yra uLED - naujo tipo ekranų technologija, kuri yra itin maža ir itin efektyviai naudoja energiją.
"Orion" - tai akiniai, kurių išvaizda ir pojūtis yra neabejotini - su skaidriais lęšiais. Skirtingai nei MR ausinėse ar kituose dabartiniuose AR akiniuose, vis dar galite matyti tikrąsias kitų žmonių akis ir išraiškas, todėl galite būti šalia ir dalytis patirtimi su aplinkiniais. Reikėjo dešimčių naujovių, kad pramoninis dizainas taptų šiuolaikinės formos akiniais, kuriuos būtų patogu nešioti kasdien. Orion yra miniatiūrizacijos pasiekimas - komponentai sutalpinti iki milimetro dalies. Į rėmelio apvadus pavyko įmontuoti septynias mažytes kameras ir jutiklius.
Turėjome išlaikyti optinį tikslumą, kurio storis prilygo vienai dešimtajai žmogaus plauko sruogai. Be to, sistema gali aptikti nedidelius judesius, pavyzdžiui, rėmų išsiplėtimą ar susitraukimą esant skirtingai kambario temperatūrai, ir skaitmeniniu būdu ištaisyti reikiamą optinį išlyginimą per milisekundes. Rėmeliai pagaminti iš magnio - tos pačios medžiagos, kuri naudojama F1 lenktyniniuose automobiliuose ir kosminiuose laivuose, nes ji yra lengva, bet standi, todėl išlaiko optinių elementų pusiausvyrą ir efektyviai praleidžia šilumą.
Šildymas ir vėsinimas
Kai tik įveikėme ekraną (be kalambūro) ir įveikėme fizikos problemas, turėjome išspręsti tikrai galingų skaičiavimų ir mažo energijos suvartojimo bei šilumos išsklaidymo problemą. Skirtingai nuo šiuolaikinių MR ausinių, į akinius negalima įdėti ventiliatoriaus. Taigi turėjome būti kūrybingi. Daugelis medžiagų, naudojamų "Orion" aušinimui, yra panašios į tas, kurias NASA naudoja palydovams kosmose aušinti.
Mes sukūrėme labai specializuotas pasirinktinis silicis itin efektyviai naudojantis energiją ir optimizuotas mūsų dirbtinio intelekto, mašininio suvokimo ir grafikos algoritmams. Sukūrėme kelis pagal užsakymą pagamintus lustus ir dešimtis itin pritaikytų silicio IP blokų tuose lustuose. Tai leidžia mums naudoti algoritmus, reikalingus rankų ir akių stebėjimui, taip pat vienalaikio vietos nustatymo ir žemėlapių sudarymo (SLAM) technologijai, kuriai paprastai reikia šimtų milivatų galios - ir kuri atitinkamai išskiria daug šilumos - ir sumažinti ją iki vos kelių dešimčių milivatų.
Ir taip, nepaisant to, ką teko skaityti kitur, "Reality Labs" kuriant gaminius ir toliau labai svarbus vaidmuo tenka pasirinktiniam siliciui. 😎
"Effortless EMG
Kiekviena nauja kompiuterių platforma paradigmos pasikeitimas mūsų sąveikos su prietaisais būdą. Pelės išradimas padėjo nutiesti kelią grafinėms naudotojo sąsajoms (GUI), kurios šiandien dominuoja mūsų pasaulyje, o išmanieji telefonai iš tikrųjų pradėjo populiarėti tik atsiradus jutikliniam ekranui. Ta pati taisyklė galioja ir dėvimiesiems įrenginiams.
Kalbėjome apie savo darbą su elektromiografija arba EMG, jau ne vienerius metus tikėdami, kad AR akinių įvestis turi būti greita, patogi, patikima, subtili ir socialiai priimtina. Dabar šis darbas yra parengtas geriausiam laikui.
"Orion" įvesties ir sąveikos sistema sklandžiai sujungia balsą, akių žvilgsnį ir rankos sekimą su EMG apyranke, kuri leidžia lengvai perbraukti, spustelėti ir slinkti.
Tai veikia ir atrodo tarsi magija. Įsivaizduokite, kad ryte bėgiodami fotografuojate vos palietę pirštus arba naršote meniu vos pastebimais rankų judesiais. Mūsų apyrankė sujungia aukštos kokybės tekstilę su įmontuotais EMG jutikliais, kad būtų galima aptikti elektrinius signalus, atsirandančius net dėl menkiausių raumenų judesių. Įrenginyje esantis ML procesorius interpretuoja šiuos EMG signalus ir sukuria įvesties įvykius, kurie belaidžiu ryšiu perduodami į akinius. Sistema prisitaiko prie jūsų, todėl laikui bėgant vis geriau atpažįsta subtiliausius gestus. Šiandien dalijamės informacija apie mūsų paramą išorės moksliniams tyrimams, skirtiems EMG apyrankių teisingumo ir prieinamumo galimybių didinimas..
Susipažinkite su belaidžiu skaičiavimo įrenginiu "Puck
Tikrieji AR akiniai turi būti belaidžiai, be to, jie turi būti maži.Todėl sukūrėme "Orion" belaidis skaičiavimo įrenginys. Dėl to akiniams tenka mažesnė apkrova, o akumuliatorius veikia ilgiau ir yra geresnės formos bei mažo vėlavimo.
Akiniuose veikia visi rankų sekimo, akių sekimo, SLAM ir specializuoti AR pasaulio užrakinimo grafikos algoritmai, o programėlės logika veikia lėkštėje, kad akiniai būtų kuo lengvesni ir kompaktiškesni.
Ritulys turi du procesorius, įskaitant vieną pagal užsakymą sukurtą čia, "Meta", ir užtikrina skaičiavimo galią, reikalingą mažo vėlavimo grafikos atvaizdavimui, dirbtiniam intelektui ir kai kuriems papildomiems mašinų suvokimo būdams.
Kadangi jis mažas ir aptakus, galite patogiai įsidėti jį į krepšį ar kišenę ir tęsti darbus - be jokių įsipareigojimų.
AR patirtis
Žinoma, kaip ir bet kuri kita aparatinė įranga, ji yra tik tiek gera, kiek geri yra dalykai, kuriuos galite daryti su juo. Nors dar tik pradedama, "Orion" suteikiama patirtis yra įdomi ateities perspektyva.
Turime išmanųjį asistentą, "Meta AI, veikianti "Orion" sistemoje. Ji supranta, į ką žiūrite fiziniame pasaulyje, ir gali padėti jums naudingomis vizualizacijomis. Orion" naudoja tą patį "Llama" modelį, kuris šiandien palaiko "Ray-Ban Meta" išmaniuosiuose akiniuose veikiančią dirbtinio intelekto patirtį, taip pat užsakomuosius tyrimų modelius, pademonstruojančius galimus būsimų dėvimųjų prietaisų naudojimo atvejus.
Keliaudami galite laisvų rankų įranga atlikti vaizdo skambutį ir realiuoju laiku bendrauti su draugais ir šeima, o "WhatsApp" ir "Messenger" galite palaikyti ryšį ir peržiūrėti bei siųsti žinutes. Nereikia išsitraukti telefono, atrakinti jo, ieškoti tinkamos programos ir pranešti draugui, kad vėluojate į vakarienę - visa tai galite padaryti per akinius.
Galite žaisti bendrus AR žaidimus su kitoje šalies pusėje esančia šeima arba su kitoje sofos pusėje sėdinčiu draugu. O dideliame "Orion" ekrane galite atlikti kelias užduotis keliuose languose ir atlikti darbus nesinešiodami su savimi nešiojamojo kompiuterio.
Šiandien su "Orion" įgyta patirtis padės nubrėžti būsimos AR akinių linijos vartotojui gaires. Mūsų komandos kartu su kūrėjų partneriais ir toliau tobulins ir kurs naujas įtraukiančias socialines patirtis, todėl negalime sulaukti, kada galėsime pasidalyti tuo, kas bus toliau.
Tikslingas produkto prototipas
Nors "Orion" nepateks į vartotojų rankas, nesuklyskite: Tai yra ne tyrimų prototipą. Tai labiausiai ištobulintas produkto prototipas, kokį kada nors esame sukūrę, ir jis iš tiesų atspindi tai, kas galėtų siųsti vartotojams. Užuot skubėję išleisti jį į parduotuvių lentynas, nusprendėme pirmiausia sutelkti dėmesį į vidinę plėtrą, o tai reiškia, kad galime greitai kurti ir toliau plėsti technologijų ir patirties ribas.
Tai reiškia, kad greičiau sukursime dar geresnį produktą vartotojui.
Kas toliau
Ilgai trukdė dvi pagrindinės kliūtys, trukdžiusios sukurti plataus vartojimo AR akinius: technologinis proveržis, būtinas norint sukurti didelį ekraną kompaktiškoje akinių formoje, ir būtinybė sukurti naudingą ir įtikinamą AR patirtį, kurią būtų galima paleisti šiuose akiniuose. "Orion" - tai didžiulis įvykis, nes pirmą kartą užtikrinama tikra AR patirtis, veikianti pakankamai stilingoje aparatinėje įrangoje.
Dabar, kai pasauliui pristatėme "Orion", daugiausia dėmesio skiriame keliems dalykams:
AR ekrano kokybės reguliavimas, kad vaizdai būtų dar ryškesni
Optimizuojame, kur tik galime, kad formos faktorius būtų dar mažesnis.
Statyba dideliu mastu, kad jie būtų prieinamesni.
Per ateinančius kelerius metus galite tikėtis išvysti naujų mūsų prietaisų, kurie bus sukurti remiantis mūsų mokslinių tyrimų ir plėtros pastangomis. Keletas "Orion" naujovių buvo pritaikytos ir dabartiniuose mūsų vartojimo gaminiuose, ir būsimų gaminių plane. Optimizavome kai kuriuos savo erdvės suvokimo algoritmus, kurie veikia tiek "Meta Quest 3S ir Orionas. Nors akių žvilgsnio ir subtilios gestų įvesties sistema iš pradžių buvo sukurta "Orion", planuojame ją naudoti ir būsimuose produktuose. Be to, tiriame galimybę EMG apyrankes naudoti ir būsimuose plataus vartojimo produktuose.
"Orion" - tai ne tik langas į ateitį - tai žvilgsnis į labai realias galimybes, kurias galima pasiekti jau šiandien. Jį sukūrėme siekdami to, ką darome geriausiai: padėti žmonėms užmegzti ryšį. Nuo "Ray-Ban Meta" akinių iki "Orion" - matėme, kiek gerų rezultatų galima pasiekti, kai žmonės gali būti fiziniame pasaulyje ir turėti daugiau galimybių, net ir naudodamiesi visais skaitmeninio pasaulio teikiamais turtais.
Manome, kad neturėtumėte rinktis tarp šių dviejų dalykų. Su kita kompiuterių platforma jums to daryti nereikės.
Daugiau informacijos apie "Orion" rasite šiuose tinklaraščio įrašuose:
Last year at Connect, we unveiled Orion—our first true pair of AR glasses. The culmination of our work at Reality Labs over the last decade, Orion combines the benefits of a large holographic display and personalized AI assistance in a comfortable, all-day wearable form factor. It got some attention for its industry-leading field of view, silicon carbide waveguides, uLED projectors, and more. But today, we’re turning our attention to an unsung hero of Orion: the compute puck.
Designed to easily slip into your pocket or bag so you can bring it just about anywhere as you go about your day, the puck offloads Orion’s processing power to run application logic and enable a more compelling, smaller form factor for the glasses. It connects wirelessly to the glasses and EMG wristband for a seamless experience.
Set it and forget it, right?
But the puck’s backstory—even as a prototype—is involved, with a dramatic arc you’d never guess at from its appearance.
“When you’re building something like this, you start getting into the limits of physics,” explains Director of Product Management Rahul Prasad. “For the last 50 years, Moore’s Law has made everything smaller, faster, and lower power. The problem is that now you’re starting to hit limits on how much heat you can dissipate, how much battery you can compress, and how much antenna performance you can fit into a particular sized object.”
While hindsight may be 20/20, the puck’s potential wasn’t immediately obvious. When you’re the first to build something, you need to explore every possibility—leaving no stone unturned. How do you build something that some might think of as an undesirable accessory rather than a critical part of the package?
“We knew the puck was an extra device we were asking people to carry,” notes Product Design Engineering Manager Jared Van Cleave, “so we explored how to turn the bug into a feature.”
Ultimately, that ethos paid off in spades as the puck squeezes a lot of compute (and even more Meta-designed custom silicon for AI and machine perception) into a small size. This was instrumental in helping Orion go from the realm of science fiction into reality.
“If you didn’t have the puck, you wouldn’t be able to have the experiences that Orion offers in its form factor—period,” says Prasad. “A good AR experience demands really high performance: high frame rates, extremely low latency, fine-grained wireless and power management, etc. The puck and the glasses need to be co-designed to work really closely together, not just at the app layer, but also at the operating system, firmware, and hardware layers. And even if one were to co-design a smartphone to work with AR glasses, the demanding performance requirements would drain the phone battery and suck away compute capacity from phone use cases. On the other hand, the puck has its own high-capacity battery, high-performance SoC, and a custom Meta-designed AI co-processor optimized for Orion.”
Of course, the puck wasn’t designed overnight. It required years of iterative work.
“We didn’t know how people would want to interact with Orion from an input perspective—there was nothing we could draft off of in-market,” says Product Manager Matt Resman. “If you look at our early glasses prototypes, they were these massive headsets that weighed three or four pounds. And when you’re trying to build a product, it’s really difficult to understand the user experience if you’re not in the right form factor. With the puck, we were able to prototype very quickly to start understanding how people would use it.”
Codenamed Omega in the early days, the puck was initially envisioned by what was then Oculus Research as an Ω-shaped band that would go around the user’s neck and be hard-wired to the glasses…
… until some new innovations by the Reality Labs wireless team, among other things, allowed them to cut the cord. That enabled a more handheld or pocketable / in-bag form factor, which opened up a lot of possibilities.
“At that point, augmented reality calling was still a primary use case,” Van Cleave explains. “The puck was where the holographic videos would be anchored. You’d put it down on the table with the sensor bench facing you, imaging you, and then projecting who you were speaking to from the puck’s surface for the call.”
“Orion is about connecting people and bringing us together,” says Resman. “One of the initial concepts for the puck was to help create this sense of presence with other people and enable this richer form of communication.”
“It’s unlike anything you’ve ever seen—the device has the potential to create really fun and unique interactions,” adds Industrial Designer Emron Henry. “The user experience feels a bit like unleashing a genie from a bottle, where holograms seamlessly emerge from and dissolve back into the device.”
As you can probably tell by now, there’s more potential inside the puck than what ultimately got turned on as a feature. In addition to the sensors and cameras that would’ve been used for AR calling, the puck has haptics and 6DOF sensors that could enable it to be used as a tracked controller to select and manipulate virtual objects and play AR games. The team also explored capacitive and force touch input so the puck could serve as a gamepad when held in both portrait and landscape mode.
“We would talk about the need to carry this extra thing,” says Van Cleave. “How do we make it more useful? There was a whole workstream around it. And at one point, the hypothesis was that AR gaming was going to be this killer use case.”
Early on, we knew we needed to explore the possibilities of the puck doing things that phones cannot. Eventually, we landed on using eye gaze, EMG, and hand tracking for AR games, like Stargazer and Pong, but we prototyped various demos and games that used the puck as a controller in the early days of Orion.
0:00 / 0:00
0:00 / 0:00
0:00 / 0:00
Rendered explorations of the puck as a 6DOF controller for AR games like Pong.
“Because it’s not a phone, that gave us a lot of design freedom,” adds Prasad. “It can be thicker, I can make it more rounded so it fits comfortably in your hand as a controller. It’s pretty incredible that the puck is actually smaller than the average phone, but it’s more powerful than a phone because it has a Meta-designed co-processor for AI and machine perception.”
The team dug into the question of how a quality AR game might differ from a MR or console game. That meant exploring different affordances for an AR game controller, including joysticks, physical button layouts, trigger buttons, and more.
“We didn’t end up actually building any of that stuff,” Van Cleave notes. “We prototyped it, but we didn’t ever go for a full build. We wanted to keep it simple. We wanted to do these soft interfaces but not make physical, mechanical buttons.”
And while the sensors and haptics weren’t turned on in the finished product prototype, they served an integral function during development, letting teams file bugs by simply tapping on the top of the device a few times to trigger a bug report.
As AI began to take center stage as a key use case, compute came into increasingly sharp focus. In the end, the puck is home to Orion’s wireless connectivity, computing power, and battery capacity—a huge technical feat in itself—all of which helps reduce the weight and form factor of the glasses while dissipating a lot more thermals by virtue of its surface area.
Throughout its evolution, one thing has remained the same: There’s more to the puck than meets the untrained eye. Embracing unconventional ideas allowed our teams to explore, push boundaries, and build the future.
“We’re defining a category that doesn’t quite exist yet,” notes Henry. “As you’d expect with R&D, there were starts and stops along the way. How will users expect to interact with holograms? Would they prefer to use an AR remote or is hand tracking, eye gaze, and EMG sufficient for input? What feels intuitive, low-friction, familiar, and useful?”
“Rather than looking at the puck as just a rock, we asked ourselves what else we could provide to further differentiate it from phones and justify why you’d want to carry it around,” acknowledges Resman. “Does its raw compute power and practical design—which helped unlock a glasses form factor that you can realistically wear around all day—ultimately offer enough value? It’s our job to help answer these questions.”
“Early on, we shifted gears to focus on what we can do that a phone can’t do,” Van Cleave adds. “Phones need to have the screen, they need to have the certain physical button layout that users expect. And we don’t have those constraints. Our compute puck can be whatever we want it to be.”
Daugiau informacijos apie "Orion" rasite šiuose tinklaraščio įrašuose:
Šiandien Prisijungti, Markas Zuckerbergas pristatė "Orion" - pirmuosius tikrus AR akinius, anksčiau vadintus kodiniu pavadinimu Projektas Nazare.
Geriausias pramonėje matymo laukas, silicio karbido lęšiai, sudėtingi bangolaidžiai, uLED projektoriai ir kt., "Orion" yra pažangiausias ir labiausiai ištobulintas iki šiol mūsų gaminio prototipas.
Dabar toliau optimizuojame gaminius ir mažiname sąnaudas, kad sukurtume keičiamo dydžio vartotojo įrenginį, kuris pakeis žmonių bendravimo su pasauliu būdą.
"Kuriame AR akinius."
Penki paprasti žodžiai, kalbėta prieš penkerius metus. Jais mes padėjome vėliavą ant savo ateities vizijos, kurioje mums nebereikės klaidingai rinktis tarp informacijos pasaulio, esančio po ranka, ir mus supančio fizinio pasaulio.
O dabar, po penkerių metų, dar penki žodžiai, kurie gali dar kartą pakeisti žaidimą:
"Meta" misija paprasta: suteikti žmonėms galią kurti bendruomenę ir suartinti pasaulį. O "Reality Labs" kuriame įrankius, padedančius žmonėms jaustis prisijungusiems bet kada ir bet kur. Todėl dirbame kurdami kitą kompiuterinę platformą, kurios centre atsiduria žmonės, kad jie galėtų labiau būti pasaulyje, palaikyti ryšį ir įgyti daugiau galių.
"Ray-Ban Meta" akiniai įrodė, kad žmonėms suteikiama galimybė laisvai naudotis pagrindinėmis skaitmeninio gyvenimo dalimis iš fizinio gyvenimo. Galime kalbėtis su išmaniuoju dirbtinio intelekto asistentu, bendrauti su draugais ir fiksuoti svarbias akimirkas - ir visa tai galime daryti neišsitraukdami telefono. Šie stilingi akiniai sklandžiai įsilieja į mūsų kasdienį gyvenimą, o žmonės juos be galo mėgsta.
Nors "Ray-Ban Meta" sukūrė visiškai naują akinių be ekrano kategoriją, kurią papildė dirbtinis intelektas, XR pramonė jau seniai svajojo apie tikrus AR akinius - gaminį, kuris sujungtų didelio holografinio ekrano privalumus ir asmeninę dirbtinio intelekto pagalbą patogiame, stilingame, visą dieną nešiojamame formate.
Šiandien mes priartinome šią svajonę prie realybės, pristatydami Orion, kurie, mūsų nuomone, yra pažangiausi kada nors sukurti AR akiniai. Tiesą sakant, tai gali būti sudėtingiausias buitinės elektronikos prietaisas, pagamintas nuo išmaniojo telefono laikų. Orion" yra proveržio išradimų beveik visose šiuolaikinės kompiuterijos srityse rezultatas - remiantis darbą, kurį "Reality Labs" atliekame jau dešimtmetį.. Jame įdiegtos visiškai naujos technologijos, įskaitant pažangiausią kada nors sukurtą AR ekraną ir pasirinktinis silicis kuri leidžia galingą AR patirtį įdiegti į akinius, naudojant tik dalį MR ausinių galios ir svorio.
"Orion" įvesties sistema sklandžiai sujungia balsą, akių žvilgsnį ir rankos sekimą su EMG apyrankė kuri leidžia braukti, spausti ir slinkti, o ranką patogiai laikyti šalia savęs, kad galėtumėte išlikti pasaulyje ir bendrauti su aplinkiniais žmonėmis, kai naudojatės turtingu skaitmeniniu turiniu.
Nuo šiandien "Connect" ir toliau visus metus "Meta" darbuotojams ir atrinktai išorės auditorijai suteikiame prieigą prie "Orion" produkto prototipo, kad mūsų kūrimo komanda galėtų mokytis, tobulinti ir kurti savo vartotojui skirtų AR akinių liniją, kurią planuojame pradėti tiekti netolimoje ateityje.
Kodėl AR akiniai?
Yra trys pagrindinės priežastys, dėl kurių AR akiniai yra svarbiausi, norint atverti kitą didelį šuolį į žmogų orientuotų kompiuterių srityje.
Jie suteikia galimybę patirti skaitmeninę patirtį, kurios nevaržo išmaniojo telefono ekrano ribos. Naudodami didelius holografinius ekranus, fizinį pasaulį galite naudoti kaip drobę ir bet kur patalpinti 2D ir 3D turinį bei patirtį.
Juose sklandžiai integruotas kontekstinis dirbtinis intelektas, kuris gali pajusti ir suprasti jus supantį pasaulį, kad numatytų ir aktyviai atsižvelgtų į jūsų poreikius.
Jie yra lengvi ir puikiai tinka naudoti tiek patalpose, tiek lauke, be to, žmonės gali matyti tikrus vienas kito veidus, akis ir išraiškas.
Tai šiaurinė žvaigždė, prie kurios mūsų pramonė artėja: gaminys, kuriame būtų suderintas dėvimųjų įrenginių patogumas ir greitaveika, didelis ekranas, didelio pralaidumo įvestis ir kontekstualizuotas dirbtinis intelektas, ir kuris būtų tokios formos, kad žmonės jaustųsi patogiai nešiojami kasdieniame gyvenime.
Kompaktiškas formatas, sudėtingi iššūkiai
Jau daugelį metų susiduriame su klaidingu pasirinkimu - arba virtualios ir mišrios realybės ausinės, leidžiančios patirti gilią ir įtraukiančią patirtį, bet turinčios didelių gabaritų, arba akiniai, kurie idealiai tinka naudoti visą dieną, bet nesuteikia galimybės naudotis turtingomis vaizdinėmis programomis ir patirtimis, nes neturi didelio ekrano ir atitinkamos skaičiavimo galios.
Tačiau mes norime visko, be jokių kompromisų. Daugelį metų sunkiai dirbome, kad galėtume pritaikyti neįtikėtiną erdvinę patirtį, kurią suteikia VR ir MR ausinės, ir miniatiūrizuoti technologiją, reikalingą šiai patirčiai perteikti lengvuose ir stilinguose akiniuose. Formos faktoriaus suderinimas, holografiniai ekranai, įtikinama AR patirtis, naujos žmogaus ir kompiuterio sąveikos (HCI) paradigmos ir visa tai padaryti vienu vientisu produktu - tai vienas sudėtingiausių iššūkių, su kuriais kada nors teko susidurti mūsų pramonei. Jis buvo toks sudėtingas, kad manėme, jog turime mažiau nei 10 proc. tikimybę jį sėkmingai įgyvendinti.
Iki šiol.
Pažangus ekranas neprilygstamo formato ekrane
Maždaug 70 laipsnių kampu "Orion" turi didžiausią matymo lauką mažiausiuose iki šiol AR akiniuose. Toks matymo laukas atveria tikrai įtraukiančius "Orion" naudojimo atvejus - nuo daugiafunkcinių langų ir pramogų dideliame ekrane iki natūralaus dydžio žmonių hologramų - visą skaitmeninį turinį, kuris gali sklandžiai susilieti su jūsų fizinio pasaulio vaizdu.
"Orion" atveju regėjimo laukas buvo mūsų šventasis gralis. Susidūrėme su fizikos dėsniais ir turėjome sulenkti šviesos pluoštus taip, kaip jie natūraliai nesilenkia, ir turėjome tai padaryti neviršydami milivatais matuojamos galios.
Vietoj stiklo, lęšius gaminome iš silicio karbido-naujas AR akinių pritaikymas. Silicio karbidas yra neįtikėtinai lengvas, nesukelia optinių artefaktų ar išblaškytos šviesos, turi didelį lūžio rodiklį - visos optinės savybės, kurios yra labai svarbios dideliam matymo laukui. Patys bangolaidžiai turi išties sudėtingas ir kompleksines nano mastelio 3D struktūras, kad būtų galima išsklaidyti arba paskleisti šviesą taip, kaip reikia tokiam matymo laukui pasiekti. Projektoriai yra uLED - naujo tipo ekranų technologija, kuri yra itin maža ir itin efektyviai naudoja energiją.
"Orion" - tai akiniai, kurių išvaizda ir pojūtis yra neabejotini - su skaidriais lęšiais. Skirtingai nei MR ausinėse ar kituose dabartiniuose AR akiniuose, vis dar galite matyti tikrąsias kitų žmonių akis ir išraiškas, todėl galite būti šalia ir dalytis patirtimi su aplinkiniais. Reikėjo dešimčių naujovių, kad pramoninis dizainas taptų šiuolaikinės formos akiniais, kuriuos būtų patogu nešioti kasdien. Orion yra miniatiūrizacijos pasiekimas - komponentai sutalpinti iki milimetro dalies. Į rėmelio apvadus pavyko įmontuoti septynias mažytes kameras ir jutiklius.
Turėjome išlaikyti optinį tikslumą, kurio storis prilygo vienai dešimtajai žmogaus plauko sruogai. Be to, sistema gali aptikti nedidelius judesius, pavyzdžiui, rėmų išsiplėtimą ar susitraukimą esant skirtingai kambario temperatūrai, ir skaitmeniniu būdu ištaisyti reikiamą optinį išlyginimą per milisekundes. Rėmeliai pagaminti iš magnio - tos pačios medžiagos, kuri naudojama F1 lenktyniniuose automobiliuose ir kosminiuose laivuose, nes ji yra lengva, bet standi, todėl išlaiko optinių elementų pusiausvyrą ir efektyviai praleidžia šilumą.
Šildymas ir vėsinimas
Kai tik įveikėme ekraną (be kalambūro) ir įveikėme fizikos problemas, turėjome išspręsti tikrai galingų skaičiavimų ir mažo energijos suvartojimo bei šilumos išsklaidymo problemą. Skirtingai nuo šiuolaikinių MR ausinių, į akinius negalima įdėti ventiliatoriaus. Taigi turėjome būti kūrybingi. Daugelis medžiagų, naudojamų "Orion" aušinimui, yra panašios į tas, kurias NASA naudoja palydovams kosmose aušinti.
Mes sukūrėme labai specializuotas pasirinktinis silicis itin efektyviai naudojantis energiją ir optimizuotas mūsų dirbtinio intelekto, mašininio suvokimo ir grafikos algoritmams. Sukūrėme kelis pagal užsakymą pagamintus lustus ir dešimtis itin pritaikytų silicio IP blokų tuose lustuose. Tai leidžia mums naudoti algoritmus, reikalingus rankų ir akių stebėjimui, taip pat vienalaikio vietos nustatymo ir žemėlapių sudarymo (SLAM) technologijai, kuriai paprastai reikia šimtų milivatų galios - ir kuri atitinkamai išskiria daug šilumos - ir sumažinti ją iki vos kelių dešimčių milivatų.
Ir taip, nepaisant to, ką teko skaityti kitur, "Reality Labs" kuriant gaminius ir toliau labai svarbus vaidmuo tenka pasirinktiniam siliciui. 😎
"Effortless EMG
Kiekviena nauja kompiuterių platforma paradigmos pasikeitimas mūsų sąveikos su prietaisais būdą. Pelės išradimas padėjo nutiesti kelią grafinėms naudotojo sąsajoms (GUI), kurios šiandien dominuoja mūsų pasaulyje, o išmanieji telefonai iš tikrųjų pradėjo populiarėti tik atsiradus jutikliniam ekranui. Ta pati taisyklė galioja ir dėvimiesiems įrenginiams.
Kalbėjome apie savo darbą su elektromiografija arba EMG, jau ne vienerius metus tikėdami, kad AR akinių įvestis turi būti greita, patogi, patikima, subtili ir socialiai priimtina. Dabar šis darbas yra parengtas geriausiam laikui.
"Orion" įvesties ir sąveikos sistema sklandžiai sujungia balsą, akių žvilgsnį ir rankos sekimą su EMG apyranke, kuri leidžia lengvai perbraukti, spustelėti ir slinkti.
Tai veikia ir atrodo tarsi magija. Įsivaizduokite, kad ryte bėgiodami fotografuojate vos palietę pirštus arba naršote meniu vos pastebimais rankų judesiais. Mūsų apyrankė sujungia aukštos kokybės tekstilę su įmontuotais EMG jutikliais, kad būtų galima aptikti elektrinius signalus, atsirandančius net dėl menkiausių raumenų judesių. Įrenginyje esantis ML procesorius interpretuoja šiuos EMG signalus ir sukuria įvesties įvykius, kurie belaidžiu ryšiu perduodami į akinius. Sistema prisitaiko prie jūsų, todėl laikui bėgant vis geriau atpažįsta subtiliausius gestus. Šiandien dalijamės informacija apie mūsų paramą išorės moksliniams tyrimams, skirtiems EMG apyrankių teisingumo ir prieinamumo galimybių didinimas..
Susipažinkite su belaidžiu skaičiavimo įrenginiu "Puck
Tikrieji AR akiniai turi būti belaidžiai, be to, jie turi būti maži.Todėl sukūrėme "Orion" belaidis skaičiavimo įrenginys. Dėl to akiniams tenka mažesnė apkrova, o akumuliatorius veikia ilgiau ir yra geresnės formos bei mažo vėlavimo.
Akiniuose veikia visi rankų sekimo, akių sekimo, SLAM ir specializuoti AR pasaulio užrakinimo grafikos algoritmai, o programėlės logika veikia lėkštėje, kad akiniai būtų kuo lengvesni ir kompaktiškesni.
Ritulys turi du procesorius, įskaitant vieną pagal užsakymą sukurtą čia, "Meta", ir užtikrina skaičiavimo galią, reikalingą mažo vėlavimo grafikos atvaizdavimui, dirbtiniam intelektui ir kai kuriems papildomiems mašinų suvokimo būdams.
Kadangi jis mažas ir aptakus, galite patogiai įsidėti jį į krepšį ar kišenę ir tęsti darbus - be jokių įsipareigojimų.
AR patirtis
Žinoma, kaip ir bet kuri kita aparatinė įranga, ji yra tik tiek gera, kiek geri yra dalykai, kuriuos galite daryti su juo. Nors dar tik pradedama, "Orion" suteikiama patirtis yra įdomi ateities perspektyva.
Turime išmanųjį asistentą, "Meta AI, veikianti "Orion" sistemoje. Ji supranta, į ką žiūrite fiziniame pasaulyje, ir gali padėti jums naudingomis vizualizacijomis. Orion" naudoja tą patį "Llama" modelį, kuris šiandien palaiko "Ray-Ban Meta" išmaniuosiuose akiniuose veikiančią dirbtinio intelekto patirtį, taip pat užsakomuosius tyrimų modelius, pademonstruojančius galimus būsimų dėvimųjų prietaisų naudojimo atvejus.
Keliaudami galite laisvų rankų įranga atlikti vaizdo skambutį ir realiuoju laiku bendrauti su draugais ir šeima, o "WhatsApp" ir "Messenger" galite palaikyti ryšį ir peržiūrėti bei siųsti žinutes. Nereikia išsitraukti telefono, atrakinti jo, ieškoti tinkamos programos ir pranešti draugui, kad vėluojate į vakarienę - visa tai galite padaryti per akinius.
Galite žaisti bendrus AR žaidimus su kitoje šalies pusėje esančia šeima arba su kitoje sofos pusėje sėdinčiu draugu. O dideliame "Orion" ekrane galite atlikti kelias užduotis keliuose languose ir atlikti darbus nesinešiodami su savimi nešiojamojo kompiuterio.
Šiandien su "Orion" įgyta patirtis padės nubrėžti būsimos AR akinių linijos vartotojui gaires. Mūsų komandos kartu su kūrėjų partneriais ir toliau tobulins ir kurs naujas įtraukiančias socialines patirtis, todėl negalime sulaukti, kada galėsime pasidalyti tuo, kas bus toliau.
Tikslingas produkto prototipas
Nors "Orion" nepateks į vartotojų rankas, nesuklyskite: Tai yra ne tyrimų prototipą. Tai labiausiai ištobulintas produkto prototipas, kokį kada nors esame sukūrę, ir jis iš tiesų atspindi tai, kas galėtų siųsti vartotojams. Užuot skubėję išleisti jį į parduotuvių lentynas, nusprendėme pirmiausia sutelkti dėmesį į vidinę plėtrą, o tai reiškia, kad galime greitai kurti ir toliau plėsti technologijų ir patirties ribas.
Tai reiškia, kad greičiau sukursime dar geresnį produktą vartotojui.
Kas toliau
Ilgai trukdė dvi pagrindinės kliūtys, trukdžiusios sukurti plataus vartojimo AR akinius: technologinis proveržis, būtinas norint sukurti didelį ekraną kompaktiškoje akinių formoje, ir būtinybė sukurti naudingą ir įtikinamą AR patirtį, kurią būtų galima paleisti šiuose akiniuose. "Orion" - tai didžiulis įvykis, nes pirmą kartą užtikrinama tikra AR patirtis, veikianti pakankamai stilingoje aparatinėje įrangoje.
Dabar, kai pasauliui pristatėme "Orion", daugiausia dėmesio skiriame keliems dalykams:
AR ekrano kokybės reguliavimas, kad vaizdai būtų dar ryškesni
Optimizuojame, kur tik galime, kad formos faktorius būtų dar mažesnis.
Statyba dideliu mastu, kad jie būtų prieinamesni.
Per ateinančius kelerius metus galite tikėtis išvysti naujų mūsų prietaisų, kurie bus sukurti remiantis mūsų mokslinių tyrimų ir plėtros pastangomis. Keletas "Orion" naujovių buvo pritaikytos ir dabartiniuose mūsų vartojimo gaminiuose, ir būsimų gaminių plane. Optimizavome kai kuriuos savo erdvės suvokimo algoritmus, kurie veikia tiek "Meta Quest 3S ir Orionas. Nors akių žvilgsnio ir subtilios gestų įvesties sistema iš pradžių buvo sukurta "Orion", planuojame ją naudoti ir būsimuose produktuose. Be to, tiriame galimybę EMG apyrankes naudoti ir būsimuose plataus vartojimo produktuose.
"Orion" - tai ne tik langas į ateitį - tai žvilgsnis į labai realias galimybes, kurias galima pasiekti jau šiandien. Jį sukūrėme siekdami to, ką darome geriausiai: padėti žmonėms užmegzti ryšį. Nuo "Ray-Ban Meta" akinių iki "Orion" - matėme, kiek gerų rezultatų galima pasiekti, kai žmonės gali būti fiziniame pasaulyje ir turėti daugiau galimybių, net ir naudodamiesi visais skaitmeninio pasaulio teikiamais turtais.
Manome, kad neturėtumėte rinktis tarp šių dviejų dalykų. Su kita kompiuterių platforma jums to daryti nereikės.
Daugiau informacijos apie "Orion" rasite šiuose tinklaraščio įrašuose:
Today, we’re highlighting new research from Georgia Tech that helps train robots to perform basic everyday tasks using egocentric recordings from wearers of Meta’s Project Aria research glasses. Check out the video below, read the full story, or apply for your own Project Aria Research Kit.
Imagine having help completing everyday tasks in your home such as doing the laundry, washing dishes, and making repairs. We already use tools to help with these tasks, like washing machines, dishwashers, and electric drills. But what if you could have an even more powerful and flexible tool in the form of a humanoid robot that could learn from you and accelerate any number of physical projects on your to-do list?
Even if you had the available hardware system, teaching a robot to do everyday tasks can only be achieved through a slow and clunky data collection method called robot teleoperation. Until now. By using the Project Aria Research Kit, Professor Danfei Xu and the Robotic Learning and Reasoning Lab at Georgia Tech use the egocentric sensors on Aria glasses to create what they call “human data” for tasks that they want a humanoid robot to replicate. They use human data to dramatically reduce the amount of robot teleoperation data needed to train a robot’s policy—a breakthrough that could some day make humanoid robots capable of learning any number of tasks a human could demonstrate.
Kareer teleoperates the robot to capture co-training data for EgoMimic. Teleoperation can be difficult to scale and require significant human effort.
“Traditionally, collecting data for robotics means creating demonstration data,” says Simar Kareer, a PhD student in Georgia Tech’s School of Interactive Computing. “You operate the robot’s joints with a controller to move it and achieve the task you want, and you do this hundreds of times while recording sensor data, then train your models. This is slow and difficult. The only way to break that cycle is to detach the data collection from the robot itself.”
Today, robot policy models are trained with large amounts of targeted demonstration data specific to each narrow task at a high cost. Kareer hypothesizes that passively collected data from many researchers, like the data captured by Aria glasses, could instead be used to enable data creation for a much broader set of tasks to create more generally useful robots in the future.
Inspired by Project Aria ir Ego-Exo4D which includes a massive egocentric dataset of over 3K hours of video recordings of daily-life activities, Kareer developed EgoMimic, a new algorithmic framework that utilizes human data and robot data for humanoid robot development.
“When I looked at Ego4D, I saw a dataset that’s the same as all the large robot datasets we’re trying to collect, except it’s with humans,” Kareer explains. “You just wear a pair of glasses, and you go do things. It doesn’t need to come from the robot. It should come from something more scalable and passively generated, which is us.” In Kareer’s research, Aria glasses were used to create human data for co-training the EgoMimic framework.
Kareer creates co-training human data by recording with Aria glasses while folding a t-shirt.
Aria glasses aren’t just used for human data collection in Georgia Tech’s research. They’re also used as an integral component of the robot’s real-time operation setup. Aria glasses are mounted to their humanoid robot platform just like a pair of eyes and serve as an integrated sensor package that enables the robot to perceive its environment in real time. The Aria Client SDK is utilized to stream Aria’s sensor data directly into the robot’s policy, running on an attached PC, which in turn controls the robot’s actuation. Using Aria glasses for both the data collection and the real-time perception pipeline minimizes the domain gap between the human demonstrator and the robot, paving the way for scaled human data generation for future robotics task training.
Aria glasses mounted to the top of the robot provide the system with sensor data that allows the robot to perceive and interact with the space.
Thanks to EgoMimic, Kareer achieved a 400% increase in his robot’s performance across various tasks vs previous methods with just 90 minutes of Aria recordings. The robot was also able to successfully perform these tasks in previously unseen environments.
In the future, humanoid robots could be trained at scale using egocentric data in order to perform a variety of tasks in the same way humans do.
“We look at Aria as an investment in the research community,” says James Fort, a Reality Labs Research Product Manager at Meta. “The more that the egocentric research community standardizes, the more researchers will be able to collaborate. It’s really through scaling with the community like this that we can start to solve bigger problems around how things are going to work in the future.”
Since its launch in 2020, Project Aria has enabled researchers across the world to advance the state of the art in machine perception and AI, through access to cutting-edge research hardware and open-source datasets, models, and tooling. Today, we’re excited to announce the next step in this journey: the introduction of Aria Gen 2 glasses. This next generation of hardware will unlock new possibilities across a wide range of research areas including machine perception, egocentric and contextual AI, and robotics.
0:00 / 0:00
For researchers looking to explore how AI systems can better understand the world from a human perspective, Aria Gen 2 glasses add a new set of capabilities to the Aria platform. They include a number of advances not found on any other device available today, and access to these breakthrough technologies will enable researchers to push the boundaries of what’s possible.
Compared to Aria Gen 1, Aria Gen 2’s unique value proposition includes:
State-of-the-art sensor suite: The upgraded sensor suite features an RGB camera, 6DOF SLAM cameras, eye tracking cameras, spatial microphones, IMUs, barometer, magnetometer, and GNSS. Compared to its predecessor, Aria Gen 1, the new generation introduces two innovative sensors embedded in the nosepad: a PPG sensor for measuring heart rate and a contact microphone to distinguish the wearer’s voice from that of bystanders.
Ultra low-power and on-device machine perception: SLAM, eye tracking, hand tracking, and speech recognition are all processed on-device using Meta’s custom silicon.
All-day usability: Aria Gen 2 glasses are capable of six to eight hours of continuous use, weigh about 75 grams, and have foldable arms for easy portability.
Interaction through audio: Users get audio feedback via best-in-class open-ear force-canceling speakers, enabling user-in-the-loop system prototyping.
Our decade-long journey to create the next computing platform has led to the development of these critical technologies. At Meta, teams at Reality Labs Research and the FAIR AI lab will use them to advance our long-term research vision. Making them available to academic and commercial research labs through Project Aria will further advance open research and public understanding of a key set of technologies that we believe will help shape the future of computing and AI.
The open research enabled by Project Aria since 2020 has already led to important work, including the creation of open-source tools in wide use across academia and industry. The Ego-Exo4D dataset, collected using the first generation of Aria glasses, has become a foundational tool across modern computer vision and the growing field of robotics. Researchers at Georgia Tech recently showed how the Aria Research Kit can help humanoid robots learn to assist people in the home, while teams at BMW used it to explore how to integrate augmented and virtual reality systems into smart vehicles.
And Aria is also enabling the development of new technologies for accessibility. The first-generation Aria glasses were utilized by Carnegie Mellon University in their NavCog project, which aimed to build technologies to assist blind and low-vision individuals with indoor navigation. Building on this foundation, the Aria Gen 2 glasses are now being leveraged by Envision, a company dedicated to creating solutions for people who are blind or have low vision. Envision is exploring the integration of its Ally AI assistant and spatial audio using the latest Aria Gen 2 glasses to enhance indoor navigation and accessibility experiences.
0:00 / 0:00
Envision used the on-device SLAM capabilities of Aria Gen 2, along with spatial audio features via onboard speakers, to assist blind and low-vision individuals seamlessly navigate indoor environments. This innovative use of the technologies, which is still in the exploratory and research phase, exemplifies how researchers can leverage Aria Gen 2 glasses for prototyping AI experiences based on egocentric observations. The advanced sensors and on-device machine perception capabilities, including SLAM, eye tracking, hand tracking, and audio interactions, also make them ideal for data collection for research and robotics applications.
Over the coming months, we’ll share more details about the timing of device availability to partners. Researchers interested in accessing Aria Gen 2 can sign up to receive updates. We’re excited to see how researchers will leverage Aria Gen 2 to pave the way for future innovations that will shape the next computing platform.
Ray-Ban has been an iconic name in eyewear fashion for decades. But in collaboration with Meta (formerly Facebook), they’ve launched a product that pushes boundaries – the "Ray-Ban Meta" išmanieji akiniai. This fusion of classic design with modern technology offers a unique experience for both fashion enthusiasts and tech lovers.
At First Glance: Classic with a Twist
At first look, they seem like classic Ray-Bans – elegant black frames, premium craftsmanship, and a stylish eco-leather case. But take a closer look and you’ll realize they hide more than just style – they’re glasses with a built-in camera, microphone, speakers, and smartphone connectivity.
What Can Ray-Ban Meta Do?
Video and photo capture: A discreet camera on the frame lets you capture the world from your point of view – hands-free.
Music and calls: With built-in directional speakers and microphones, you can take calls or listen to music without earbuds.
Sync with the Meta View app: Everything you record syncs automatically to the app, ready to be shared on your socials.
Voice control: Thanks to voice assistant support, you can control your glasses with simple voice commands – ideal for driving, sports, or on-the-go use.
Who Are They For?
Ray-Ban Meta glasses are perfect for content creators, influencers, travelers, or anyone who wants to capture moments without pulling out their phone. They’re also great for business use – ideal for quick documentation, live streams, or mobile video calls.
Final Verdict: Smart Elegance Without Compromise
If you’re looking for eyewear that blends classic fashion with top-tier technology, Ray-Ban Meta is the clear choice. They’re not just a stylish accessory – they’re išmanieji akiniai that redefine how we see and capture the world around us.
Svarbus atnaujinimas "Ray-Ban Meta" akiniai savininkai šiandien: "Meta View" programa dabar yra "Meta AI" programa "iOS" ir "Android". Kartu su nauju pavadinimu atnaujinama ir jūsų dirbtinio intelekto akinių palydovo programa, kurioje atsirado naujų funkcijų, kad patirtis būtų dar įdomesnė, naudingesnė ir asmeniškesnė nei bet kada anksčiau. Mes esame čia, kad supažindintume jus su pakeitimais. Tačiau galite būti tikri, kad pagrindinės funkcijos, kurias jau pažįstate, išliks tos pačios.
Akiniai tapo įdomiausia nauja dirbtinio intelekto eros techninės įrangos kategorija, o "Ray-Ban Meta" akiniai pirmauja apibrėždami, kas yra įmanoma. Džiaugiamės, kad tą pačią balso patirtį, dėl kurios mūsų akiniai tapo tokie populiarūs, galėsime perkelti į daugiau paviršių, pavyzdžiui, į "Meta AI" programėlę.
Draugiškas ir pažįstamas
Nors "Meta AI" programėlė turi naują pavadinimą ir išvaizdą, ji vis dar yra jums pažįstamų ir mėgstamų "Ray-Ban Meta" akinių palydovinė programėlė. Naujojoje programėlėje vis dar galima naudotis esamomis nuotraukomis ir vaizdo įrašais, kuriuos užfiksavote su akiniais, prietaiso nustatymais ir funkcijomis, kurias žinote iš "Meta View". Be to, mes automatiškai perkeliame jūsų turimą mediją ir įrenginio nustatymus iš "Meta View" į "Meta AI" programėlę, todėl nieko nepraleisite. Kaip ir paskutiniame atnaujinime, "Meta AI" programėlę galite naudoti iki septynių porų akinių suporavimui ir valdymui.
"All-In-One" programėlė
Nauji "Ray-Ban Meta" akiniai? "Meta AI" programėlė - tai jūsų "viskas viename" draugas, skirtas įrenginiui nustatyti ir valdyti. Galite importuoti, peržiūrėti ir bendrinti nuotraukas ir vaizdo įrašus, užfiksuotus su AI akiniais, tiesiai iš programėlės. Meta AI programėlę taip pat naudosite nustatymams konfigūruoti, programinei įrangai atnaujinti ir privatumo parinktims tvarkyti. Iš programėlės galite nustatyti balso komandas, kad galėtumėte naudotis akiniais laisvomis rankomis, ir net reguliuoti fotoaparato nustatymus.
Integruodami "Meta AI" ir visas jo teikiamas galimybes į palydovo programėlę, pageriname "Ray-Ban Meta" akinių naudojimo patirtį. Galite kūrybiškai dirbti su akinių nuotraukomis tiesiai "Meta AI" programėlėje - importavę nuotraukas, paprašykite "Meta AI" programėlėje pridėti, pašalinti ar pakeisti vaizdo dalis.
Tikrinate naują miestą? Paprašykite "Meta AI" papasakoti daugiau apie vietinę įžymybę. Galite pasiekti ir tvarkyti išsaugotus prisiminimus, kad laikui bėgant pagerintumėte asmeninius "Meta AI" atsakymus programėlėje ir akiniuose. Taip pat galite pradėti pokalbį su "Meta AI" savo "Ray-Ban Meta" akiniuose, o paskui pasiekti jį istorijos skirtuke iš programėlės ir tęsti nuo tos vietos, kur baigėte.
Naujos ir svarbios programėlės funkcijos
Programėlė "Meta AI" sukurta tam, kad padėtų rasti įkvėpimo ir kuo geriau išnaudoti akinius.
Naujasis Atraskite kanalą galite pamatyti, kaip kiti žmonės naudoja dirbtinį intelektą darbams atlikti. Tai puikus būdas rasti naujų idėjų. Perdirbkite gudrią užuominą arba perdarykite ją, kad sukurtumėte savo. Ir kaip visada, viską kontroliuojate jūs: Jūsų pokalbiai su "Meta AI" nėra vieši, nebent pasirenkate juos bendrinti su kanalu.
Nors kalbėjimas su dirbtiniu intelektu naudojant balsą nėra naujiena, mes naudojame Lama 4 programėlėje "Meta AI", kad atsakymai būtų asmeniškesni, tinkamesni ir pokalbiai. Ši patirtis integruota su kitomis funkcijomis, pvz., paveikslėlių generavimu ir redagavimu, kuriuos dabar galima atlikti per balso arba teksto pokalbis su dirbtinio intelekto asistentu programėlėje.
Taip pat įtraukėme kuriamos balso patirties, kuri yra visiškai dvipusio kalbėjimo technologija, demonstracinę versiją, kurią galite įjungti ir išjungti ir išbandyti "Meta AI" programėlėje. Ši funkcija neturi prieigos prie realaus laiko informacijos, todėl galite susidurti su techninėmis problemomis ar neatitikimais. Toliau rinksime atsiliepimus, kad laikui bėgant ją patobulintume.
Kad būtų lengviau atlikti kelias užduotis, galite ir toliau naudotis "Meta AI" balso funkcijomis atlikdami kitus veiksmus telefone - matoma piktograma informuoja, kada mikrofonas naudojamas.
Balso pokalbiai "Meta AI" programėlėje, įskaitant visiškai dvipusio ryšio demonstracinę versiją, iš pradžių galimi JAV, Kanadoje, Australijoje ir Naujojoje Zelandijoje.* Norėdami sužinoti daugiau apie tai, kaip galite valdyti savo patirtį "Meta AI" programėlėje ir perjungti režimus, apsilankykite mūsų svetainėje. pagalbos centras.
Intelektas jums
Programėlėje "Meta AI" naudojama "Llama 4" padeda spręsti problemas, lengviau judėti per dieną ir geriau suprasti jus supantį pasaulį. Galėdama atlikti paiešką internete, ji gali padėti gauti rekomendacijas, gilintis į temą ir palaikyti ryšį su draugais bei šeima.
Mes naudojamės savo dešimtmečių patirtimi personalizuoti žmonių patirtį. mūsų platformose, kad "Meta AI" taptų asmeniškesnė. Galite nurodyti "Meta AI" įsiminti konkrečią informaciją apie jus (pvz., kad mėgstate keliauti ir mokytis naujų kalbų), o jis gali nustatyti svarbias detales iš konteksto užuominų. Be to, "Meta AI" pateikia tinkamesnius atsakymus į jūsų klausimus, remdamasis informacija, kuria jau nusprendėte dalytis. "Facebook" ir "Instagram" (jei jie įtraukti į tą patį paskyrų centrą), pavyzdžiui, profilio duomenys ir turinys, kuris jums patinka arba kuriame dalyvaujate. Personalizuotus atsakymus šiandien galima gauti JAV ir Kanadoje.
Mes tik pradedame
Tai yra pirmoji "Meta AI" programos versija, kurią laikui bėgant planuojame atnaujinti ir tobulinti. "Meta AI" sukurta tam, kad jus pažintų, todėl jos atsakymai bus naudingesni. Su juo lengva bendrauti, todėl bendravimas su juo yra sklandesnis ir natūralesnis. Ir jis labiau susietas, todėl gali dalytis dalykais iš jums svarbių žmonių ir vietų.
The AI glasses—Shiny Black Skyler frames with Polarized Green sun lenses—were the perfect accessory to capture photos and videos throughout the day while also helping her get ready. From taking calls hands-free and listening to music or a podcast to getting answers from Meta AI on the fly, Ray-Ban Meta glasses make any pre-event routine anything but.
This isn’t the first time our AI glasses have gone high fashion. Earlier this year, Gray debuted our sold-out Ray-Ban Meta x Coperni Limited Edition frames on the runway at Paris Fashion Week. Ray-Ban Meta glasses are fashion’s most useful tech-accessory, gaining traction among editors, stylists, and models from the pages of magazines to the runway—and now on the red carpet of fashion’s biggest night of the year.
“I’m still radiating from the night!” said Amelia Gray. “And to know that I will be able to relive so many of those special moments from my own perspective is truly surreal. It’s an entirely new way to experience and share these once-in-a-lifetime moments, and I couldn’t be more excited to be part of Ray-Ban Meta’s Met Gala debut. ”
Inside the event, Gray was joined by Charli XCX, Jeff Goldblum, Jenna Ortega, Kim Kardashian, Nicki Minaj, Rosé, Shaboozey, and Taraji P. Henson as guests at Instagram’s table along with Adam Mosseri and Eva Chen.
Photographer: Quil Lemons
And off the carpet, "Instagram" ir Threads hosted a number of icons who are driving the cultural conversation forward at The Mark Hotel for our 5th annual Watch Party. More than 50 creators and pop culture and fashion commentators gathered to watch the red carpet arrivals and share real-time looks on Instagram and Threads.
CREDIT: Huy Luong
Styles may come and go, but fashion is forever. And the future of AI glasses is looking bright.
Raskite sau tinkamą
"Ray-Ban Meta Wayfarer" (standartiniai)
Nuo vyrio iki vyrio: 131 mmObjektyvo aukštis: 41 mmObjektyvo plotis: 50 mmTilto plotis: 22 mmŠventyklos ilgis: 150 mm
Ray-Ban Meta Wayfarer (dideli)
Nuo vyrio iki vyrio: 137 mmObjektyvo aukštis: 44 mmObjektyvo plotis: 53 mmTilto plotis: 22 mmAkiduobės ilgis: 155 mm
"Ray-Ban Meta Headliner" (LBF)
Nuo vyrio iki vyrio: 134 mmObjektyvo aukštis: 44 mmObjektyvo plotis: 51 mmTilto plotis: 23 mmŠventyklos ilgis: 150 mm
"Ray-Ban Meta Skyler" (standartiniai)
Nuo vyrių iki vyrių: 133 mmObjektyvo aukštis: 42 mmObjektyvo plotis: 52 mmTilto plotis: 20 mmŠventyklos ilgis: 150 mm
Koks yra rėmo dydis?
Rėmelio dydis reiškia horizontalųjį rėmelio plotį matuojama tarp kairiojo ir dešiniojo lanksto centro. Mūsų rėmeliai būna vienas arba kelių dydžių.
Raudonos linijos žymi plotį nuo lanksto iki lanksto
Kaip sužinoti, koks dydis man tinka?
Norėdami nustatyti tinkamą rėmo dydį, liniuote išmatuokite nuo lanksto iki lanksto atstumą nuo jau turimų akinių poros, kuri jums gerai tinka. Apsvarstykite toleranciją +/- 4 mm diapazonas.
Pakuotės būklės vadovas
Naujas
Originali pakuotė su nepažeista apsaugine plomba
Naujas - išpakuotas
Išpakuota pakuotė be apsauginės plombos
Nauja pakuotė (su apsaugine plomba): Ši pakuotė yra visiškai neatidaryta, su originalia apsaugine plomba, užtikrinančia, kad produktas niekada nebuvo pažeistas. Tai idealus pasirinkimas klientams, kurie pageidauja, kad gaminys išliktų pirminės būklės, ir nori būti tikri, kad gaminys nebuvo atidarytas ar grąžintas. Šios pakuotės kaina yra didesnė, nes ji yra visiškai nauja ir nepažeista.
Naujas - neišpakuotas (be apsauginės plombos): Ši pakuotė buvo išpakuota, tačiau produktas nebuvo naudojamas. Apsauginė plomba buvo nuimta, t. y. pakuotė buvo atidaryta (pvz., dėl grąžinimo per 14 dienų), tačiau pats gaminys vis dar yra naujas ir nepažeistas. Išpakuota pakuotė yra pigiau, nes ant jo nebėra originalios plombos, tačiau klientams, kuriems nerūpi neišpakuota pakuotė, tai vis dar puikus pasirinkimas už mažesnę kainą.