TL;DR:
- Dnes v Připojení, Mark Zuckerberg představil Orion - naše první brýle s rozšířenou realitou, které měly dříve kódové označení. Projekt Nazare.
- S nejlepším zorným polem v oboru, čočky z karbidu křemíku, složitých vlnovodů, uLED projektorů a dalších, je Orion naším dosud nejpokročilejším a nejpropracovanějším prototypem produktu.
- Nyní pokračujeme v optimalizaci produktů a snižování nákladů, protože se snažíme vytvořit škálovatelné spotřebitelské zařízení, které způsobí revoluci ve způsobu, jakým lidé komunikují se světem.
"Vyrábíme brýle rozšířené reality."
Pět jednoduchých slov, řečeno před pěti lety. Spolu s nimi jsme vyvěsili vlajku naší vize budoucnosti, ve které už nebudeme muset dělat falešnou volbu mezi světem informací na dosah ruky a fyzickým světem kolem nás.
A nyní, o pět let později, dalších pět slov, která mohou opět změnit pravidla hry:
Vytvořili jsme brýle rozšířené reality.
https://youtube.com/watch?v=2CJsnyS8u3c%3Fsi%3DTr77gOKEq3PnA7-k%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com
Naše poslání ve společnosti Meta je jednoduché: dát lidem sílu budovat komunitu a sbližovat svět. A v Reality Labs vytváříme nástroje, které lidem pomáhají cítit se ve spojení kdykoli a kdekoli. Proto pracujeme na vytvoření další počítačové platformy, která postaví lidi do centra pozornosti, aby mohli být ve světě více přítomni, propojeni a posíleni.
Brýle Ray-Ban Meta ukázaly, jakou sílu má možnost poskytnout lidem volný přístup ke klíčovým částem jejich digitálního života z jejich fyzického života. Můžeme mluvit s chytrým asistentem s umělou inteligencí, spojit se s přáteli a zachytit důležité okamžiky - to vše, aniž bychom museli vytáhnout telefon. Tyto stylové brýle bez problémů zapadají do našeho každodenního života a lidé si je naprosto zamilovali.
Zatímco společnost Ray-Ban Meta otevřela zcela novou kategorii brýlí bez displeje s umělou inteligencí, odvětví XR již dlouho sní o skutečných brýlích s rozšířenou realitou - produktu, který kombinuje výhody velkého holografického displeje a personalizované asistence umělé inteligence v pohodlném, stylovém a celodenně nositelném provedení.
A dnes jsme tento sen posunuli blíže k realitě, když jsme představili Orion, které považujeme za nejpokročilejší brýle rozšířené reality, jaké kdy byly vyrobeny. Ve skutečnosti by se mohlo jednat o nejnáročnější zařízení spotřební elektroniky vyrobené od dob chytrého telefonu. Orion je výsledkem průlomových vynálezů prakticky ve všech oblastech moderní výpočetní techniky - staví na bázi práce, kterou v Reality Labs děláme už deset let.. Je vybaven zcela novými technologiemi, včetně nejpokročilejšího displeje pro rozšířenou realitu, který byl kdy sestaven, a zakázkový křemík která umožňuje provozovat výkonné zážitky rozšířené reality na brýlích s využitím zlomku výkonu a hmotnosti náhlavní soupravy pro magnetickou rezonanci.
Vstupní systém Orion plynule kombinuje hlas, pohled očí a sledování rukou s EMG náramek která vám umožní posouvat, klikat a rolovat, zatímco máte ruku pohodlně položenou vedle sebe, a zůstat tak přítomni ve světě a s lidmi kolem sebe při interakci s bohatým digitálním obsahem.
Počínaje dnešním dnem na konferenci Connect a pokračujíc v průběhu celého roku zpřístupňujeme prototyp produktu Orion zaměstnancům společnosti Meta a vybraným externím zájemcům, aby se náš vývojový tým mohl učit, vylepšovat a budovat naši produktovou řadu brýlí pro rozšířenou realitu pro spotřebitele, kterou plánujeme začít dodávat v blízké budoucnosti.
Proč brýle rozšířené reality?
Existují tři hlavní důvody, proč jsou brýle pro rozšířenou realitu klíčem k odemknutí dalšího velkého skoku v oblasti počítačů orientovaných na člověka.
- Umožňují digitální zážitky, které nejsou omezeny hranicemi obrazovky chytrého telefonu. Díky velkým holografickým displejům můžete používat fyzický svět jako plátno a umístit 2D a 3D obsah a zážitky kamkoli chcete.
- Bez problémů integrují kontextovou umělou inteligenci, která dokáže vnímat a chápat svět kolem vás, aby předvídala a proaktivně řešila vaše potřeby.
- Jsou lehké a skvěle se hodí pro vnitřní i venkovní použití - a umožňují lidem vidět si navzájem skutečnou tvář, skutečné oči a skutečné výrazy.
To je severní hvězda, ke které naše odvětví směřuje: produkt kombinující pohodlí a bezprostřednost nositelných zařízení s velkým displejem, širokopásmovým vstupem a kontextualizovanou umělou inteligencí v podobě, kterou lidé pohodlně nosí v každodenním životě.
Kompaktní formát, složité výzvy
Po léta jsme stáli před falešnou volbou - buď náhlavní soupravy pro virtuální a smíšenou realitu, které umožňují hluboké a pohlcující zážitky v objemném provedení, nebo brýle, které jsou ideální pro celodenní používání, ale nenabízejí bohaté vizuální aplikace a zážitky, protože nemají velký displej a odpovídající výpočetní výkon.
Chceme ale všechno a bez kompromisů. Již několik let usilovně pracujeme na tom, abychom do lehkých a stylových brýlí vložili neuvěřitelné prostorové zážitky, které poskytují náhlavní soupravy VR a MR, a miniaturizovali technologii potřebnou k jejich zprostředkování. Vyladění tvaru, holografických displejů, vývoj přesvědčivých zážitků s rozšířenou realitou a vytvoření nových paradigmat interakce člověka s počítačem (HCI) - a to vše v jednom uceleném produktu - je jednou z nejtěžších výzev, které kdy naše odvětví čelilo. Byla to taková výzva, že jsme si mysleli, že máme méně než desetiprocentní šanci ji úspěšně zvládnout.
Až dosud.
Přelomový displej v bezkonkurenčním provedení
S úhlem záběru přibližně 70 stupňů má Orion dosud největší zorné pole v nejmenším provedení brýlí AR. Toto zorné pole umožňuje skutečně pohlcující případy použití brýlí Orion, od multitaskingových oken a zábavy na velké obrazovce až po hologramy lidí v životní velikosti - veškerý digitální obsah se může plynule prolínat s vaším pohledem na fyzický svět.
Pro Orion bylo zorné pole naším svatým grálem. Naráželi jsme na fyzikální zákony a museli jsme ohýbat světelné paprsky způsobem, který není přirozený - a museli jsme to udělat ve výkonové obálce měřené v miliwattech.
Místo skla, čočky jsme vyrobili z karbidu křemíku.-nová aplikace pro brýle rozšířené reality. Karbid křemíku je neuvěřitelně lehký, nevznikají v něm optické artefakty ani rozptýlené světlo a má vysoký index lomu - všechny tyto optické vlastnosti jsou klíčové pro velké zorné pole. Samotné vlnovody mají opravdu složité a komplexní 3D struktury v nano měřítku, které rozptylují nebo rozptylují světlo způsobem nezbytným pro dosažení tohoto zorného pole. A projektory jsou uLED - nový typ zobrazovací technologie, která je velmi malá a extrémně energeticky účinná.
Orion jsou vzhledově i na dotek nezaměnitelné brýle s průhlednými skly. Na rozdíl od náhlavních souprav pro magnetickou rezonanci nebo jiných dnešních brýlí pro rozšířenou realitu stále vidíte skutečné oči a výrazy druhých, takže můžete být přítomni a sdílet zážitek s lidmi kolem sebe. Bylo zapotřebí desítek inovací, aby se průmyslový design dostal do podoby moderních brýlí, které budete pohodlně nosit každý den. Orion je výdobytkem miniaturizace - komponenty jsou zabaleny do zlomku milimetru. A do obrouček se nám podařilo zabudovat sedm malých kamer a senzorů.
Museli jsme zachovat optickou přesnost na tloušťce jedné desetiny lidského vlasu. Systém dokáže detekovat nepatrné pohyby, jako je rozpínání nebo smršťování rámečků při různých teplotách v místnosti, a následně digitálně korigovat potřebné optické vyrovnání, a to vše v řádu milisekund. Rámy jsme vyrobili z hořčíku - stejného materiálu, který se používá v závodních vozech F1 a vesmírných lodích - protože je lehký a zároveň tuhý, takže udržuje optické prvky v jedné rovině a účinně odvádí teplo.
Vytápění a chlazení
Jakmile jsme rozlouskli displej (bez slovní hříčky) a překonali problémy s fyzikou, museli jsme se vypořádat s výzvou opravdu výkonných počítačů a zároveň s opravdu nízkou spotřebou energie a potřebou odvádět teplo. Na rozdíl od dnešních náhlavních souprav pro magnetickou rezonanci nemůžete do brýlí nacpat ventilátor. Takže jsme museli být kreativní. Mnoho materiálů použitých k chlazení Orionu je podobných těm, které NASA používá k chlazení satelitů ve vesmíru.
Postavili jsme vysoce specializovaný křemík na zakázku který je extrémně úsporný a optimalizovaný pro naše algoritmy umělé inteligence, strojového vnímání a grafiky. Vytvořili jsme několik vlastních čipů a desítky vysoce přizpůsobených křemíkových IP bloků uvnitř těchto čipů. To nám umožňuje použít algoritmy potřebné pro sledování rukou a očí a technologii simultánní lokalizace a mapování (SLAM), která běžně spotřebovává stovky miliwattů energie - a generuje tak odpovídající množství tepla - a zmenšit ji na pouhých několik desítek miliwattů.
A ano, navzdory tomu, co jste se mohli dočíst jinde, vlastní křemík hraje ve společnosti Reality Labs při vývoji produktů i nadále zásadní roli. 😎
EMG bez námahy
Každá nová počítačová platforma s sebou přináší změna paradigmatu ve způsobu, jakým komunikujeme se svými zařízeními. Vynález myši pomohl připravit půdu pro grafická uživatelská rozhraní (GUI), která dnes dominují našemu světu, a chytré telefony se začaly skutečně prosazovat až s příchodem dotykového displeje. A stejné pravidlo platí i pro nositelná zařízení.
Mluvili jsme o naší práci s elektromyografie nebo EMG, již několik let vedeni přesvědčením, že zadávání dat do brýlí rozšířené reality musí být rychlé, pohodlné, spolehlivé, jemné a společensky přijatelné. A nyní je tato práce připravena pro hlavní vysílací čas.
Vstupní a interakční systém Orion hladce kombinuje hlas, pohled očí a sledování ruky s EMG náramkem, který umožňuje snadné posouvání, klikání a rolování.
Funguje to - a působí to jako kouzlo. Představte si, že při ranním běhu pořídíte fotografii pouhým klepnutím prstu nebo že se v menu pohybujete sotva znatelnými pohyby rukou. Náš náramek kombinuje vysoce výkonný textil se zabudovanými EMG senzory, které detekují elektrické signály generované i těmi nejmenšími pohyby svalů. ML procesor v zařízení pak tyto EMG signály interpretuje a vytváří vstupní události, které jsou bezdrátově přenášeny do brýlí. Systém se vám přizpůsobuje, takže se postupem času zlepšuje a lépe rozpoznává i ta nejjemnější gesta. A dnes se s vámi podělíme o další informace o naší podpoře externího výzkumu zaměřeného na rozšíření potenciálu rovnosti a dostupnosti EMG náramků..
Seznamte se s bezdrátovým výpočetním modulem Puck
Skutečné brýle rozšířené reality musí být bezdrátové a také malé.Tak jsme postavili bezdrátový výpočetní puk pro Orion. Odlehčuje část zátěže brýlí, což umožňuje delší výdrž baterie a lepší provedení s nízkou latencí.
Na brýlích běží všechny algoritmy pro sledování rukou, očí, SLAM a specializované grafické algoritmy pro uzamčení světa AR, zatímco logika aplikace běží na puku, aby byly brýle co nejlehčí a nejkompaktnější.
Puk má dva procesory, z nichž jeden byl navržen na zakázku přímo ve společnosti Meta, a poskytuje výpočetní výkon potřebný pro vykreslování grafiky s nízkou latencí, umělou inteligenci a další strojové vnímání.
Jelikož je malý a elegantní, můžete si ho pohodlně hodit do tašky nebo do kapsy a jít si po svých - bez jakýchkoli závazků.
Zkušenosti s rozšířenou realitou
Samozřejmě, stejně jako u jakéhokoli jiného hardwaru platí, že je tak dobrý, jak dobré jsou věci, které můžete použít. do s ním. A přestože je na to ještě brzy, zkušenosti, které Orion nabízí, jsou vzrušujícím zábleskem toho, co přijde.
https://youtube.com/watch?v=HkdSv3QPhNw%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com
Máme svého chytrého asistenta, Meta AI, spuštěný v systému Orion. Rozumí tomu, na co se díváte ve fyzickém světě, a může vám pomoci s užitečnými vizualizacemi. Orion využívá stejný model Llama, který dnes pohání zkušenosti s umělou inteligencí běžící na chytrých brýlích Ray-Ban Meta, a navíc vlastní výzkumné modely, které demonstrují potenciální případy použití pro budoucí vývoj nositelných zařízení.
Na cestách můžete uskutečnit videohovor handsfree, abyste se v reálném čase setkali s přáteli a rodinou, a můžete zůstat ve spojení v aplikacích WhatsApp a Messenger a prohlížet a posílat zprávy. Nemusíte vytahovat telefon, odemykat ho, hledat správnou aplikaci a oznamovat kamarádovi, že máte zpoždění na večeři - to vše můžete udělat přes brýle.
https://youtube.com/watch?v=el7lUVvu8Bo%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com
Sdílené hry rozšířené reality můžete hrát s rodinou na druhém konci země nebo s kamarádem na druhé straně gauče. A velký displej Orionu vám umožní multitasking s více okny, abyste mohli dělat různé věci, aniž byste s sebou museli tahat notebook.
Zkušenosti, které jsou dnes k dispozici na Orionu, pomohou v budoucnu nastínit plán pro naši řadu brýlí pro rozšířenou realitu pro spotřebitele. Naše týmy budou spolu s partnery z řad vývojářů pokračovat v iteracích a vytváření nových pohlcujících sociálních zážitků a my se nemůžeme dočkat, až se s vámi podělíme o to, co přijde příště.
Účelný prototyp výrobku
I když se Orion nedostane do rukou spotřebitelů, nenechte se mýlit: Tohle je ne výzkumný prototyp. Je to nejpropracovanější prototyp produktu, jaký jsme kdy vytvořili - a je to skutečně reprezentativní vzorek něčeho. mohl dodávat spotřebitelům. Než abychom spěchali s uvedením na pulty, rozhodli jsme se nejprve zaměřit na interní vývoj, což znamená, že můžeme pokračovat v rychlém budování a nadále posouvat hranice technologie a zážitků.
A to znamená, že rychleji dosáhneme ještě lepšího spotřebitelského produktu.
Co bude následovat
Dvě hlavní překážky dlouho stály v cestě brýlím pro rozšířenou realitu pro běžné spotřebitele: technologický průlom nutný k dosažení velkého displeje v kompaktním provedení brýlí a nutnost užitečných a přesvědčivých zážitků s rozšířenou realitou, které by bylo možné na těchto brýlích spustit. Orion je obrovským milníkem, který poprvé přináší skutečné zážitky z rozšířené reality běžící na přiměřeně stylovém hardwaru.
Teď, když jsme se o Orion podělili se světem, jsme se zaměřili na několik věcí:
- Vyladění kvality zobrazení rozšířené reality, aby byl obraz ještě ostřejší.
- Optimalizace všude, kde to jde, aby se tvar ještě zmenšil.
- Budování ve velkém měřítku, aby byly cenově dostupnější
V příštích několika letech můžete očekávat nová zařízení, která budou vycházet z našeho výzkumu a vývoje. A řada inovací společnosti Orion byla rozšířena na naše současné spotřebitelské produkty i na náš plán budoucích produktů. Optimalizovali jsme některé z našich algoritmů prostorového vnímání, které běží na obou zařízeních. Meta Quest 3S a Orion. Systém pohledu očí a jemných gest byl původně navržen pro Orion, ale plánujeme jej použít i v budoucích produktech. A zkoumáme možnosti využití EMG náramků i v budoucích spotřebitelských produktech.
Orion není jen oknem do budoucnosti - je to pohled na velmi reálné možnosti, které jsou dnes na dosah. Vytvořili jsme jej v rámci naší snahy o to, co umíme nejlépe: pomáhat lidem spojovat se. Od brýlí Ray-Ban Meta až po Orion jsme viděli, co dobrého může přinést, když lidem umožníme zůstat více přítomní a posílit jejich postavení ve fyzickém světě, a to i při využití veškerého dalšího bohatství, které nabízí digitální svět.
Věříme, že byste si neměli vybírat mezi těmito dvěma možnostmi. A s příští výpočetní platformou už nebudete muset.
Další informace o společnosti Orion najdete v těchto příspěvcích na blogu:
CS 
EN 
BG 
ET 
EL 
HR 
HU 
LT 
LV 
FR 
NL 
PL 
PT 
RO 
SL 
SK