Δημοσιεύθηκε την - Σχολιάστε

Boz to the Future Episode 22: The Future of Orion and Wearables With Guest Alex Himel

Welcome back for another episode of Boz To The Future, a podcast from Reality Labs. In today’s episode, our host, Meta CTO and Head of Reality Labs Andrew “Boz” Bosworth, is joined by Meta’s VP of Wearables Alex Himel.

Himel’s team works on some of the industry’s hardest technical problems, all in the service of helping to build the next computing platform. Like Bosworth, he’s a tenured leader at Meta, having filled numerous leadership roles across the business in his 15+ years at the company.

Bosworth and Himel cover a range of topics, including wearables, augmented reality, and how AI is accelerating and improving the kinds of experiences embedded in Γυαλιά Ray-Ban Meta and future products.

They go deep on Orion and the positive reception it’s received since Mark Zuckerberg announced it at Συνδέστε το. Just as Steve Jobs recognized the Alto as a turning point in computing, Bosworth asserted that, while we may disagree about the details, it’s hard to argue against this as the future. Himel and Bosworth go on to talk about the tremendous value of prototyping and building, saying how much more they’ve learned about Orion and its input paradigms in the three weeks of using it compared to the years spent building it.

They also talked about the crucial role of AI in wearables, and how it’s becoming increasingly useful in everyday life—especially now that you’re able to ask Meta AI about things you’re seeing and use it to set visual reminders.

Himel also talks about his deep experience in a different kind of stack: sandwiches. With seven years under his belt working in the famous Lange’s Little Store in Chappaqua, NY, where he grew up, Himel and Bosworth get into what makes a great sandwich, where tomatoes really go, and which bread is superior.

You can tune in to Boz to the Future on Apple PodcastsSpotify, and wherever you listen to podcasts.

You can follow Himel on Threads. You can follow Bosworth on InstagramTwitter/X, και Threads @boztank.

Δημοσιεύθηκε την - Σχολιάστε

Κρυστάλλινη καθαρότητα: Οι κυματοδηγοί μας από καρβίδιο πυριτίου και η πορεία προς το μεγάλο FoV του Orion

0:00 / 0:00

Back in 2019, the Orion team prepared an important demo for Meta Founder & CEO Mark Zuckerberg, showcasing potential waveguides for augmented reality glasses—a pivotal moment when theoretical calculations on paper were brought to life. And it was a demo that changed everything.

“Wearing the glasses with glass-based waveguides and multiple plates, it felt like you were in a disco,” recalls Optical Scientist Pasqual Rivera. “There were rainbows everywhere, and it was so distracting—you weren’t even looking at the AR content. Then, you put on the glasses with silicon carbide waveguides, and it was like you were at the symphony listening to a quiet, classical piece. You could actually pay attention to the full experience of what we were building. It was a total game changer.”

Yet as clear (pun intended) as the choice of silicon carbide as a substrate seems today, when we first started down the road to AR glasses a decade ago, it was anything but.

“Silicon carbide is normally heavily nitrogen-doped,” says Rivera. “It’s green, and if it gets thick enough, it looks black. There’s no way you could make an optical lens out of it. It’s an electronic material. There’s a reason it’s that color, and it’s because of electronic properties.”

“Silicon carbide has been around as a material for a long time,” agrees AR Waveguides Tech Lead Giuseppe Calafiore. “Its main application is high-power electronics. Take electric vehicles: All EVs require a chip—but that chip must also be capable of very high power, moving the wheels, and driving this thing. It turns out you can’t do it with the regular silicon substrate, which is what makes the chips that we use in our computers and electronics. You need a platform that allows you to go through high currents, high power, and that material is silicon carbide.”

Until fairly recent discussions around renewable energy sources started to heat up, the market for these high-power chipsets was nowhere near the size of the market for chips for consumer electronics. Silicon carbide has always been expensive, and there wasn’t much incentive to bring costs down because, for the size of chip that you make for a car, the price of the substrate was tolerable.

“But it turns out that silicon carbide also has some of the properties that we need for waveguides and optics,” Calafiore says. “The refractive index is the key property that we care about. And silicon carbide has a high refractive index, which means that it’s capable of channeling in and outputting a large quantity of optical data. You can think of it as optical bandwidth—just like you have bandwidth for the internet, and you want it to be large enough so that you can send huge amounts of data through that channel. The same goes for optical devices.”

The higher a material’s refractive index, the higher its étendue, so you can send more optical data through that channel.

“The channel in our case is our waveguide, and a larger étendue translates to a larger field of view,” explains Calafiore. “The larger the refractive index of a material, the larger field of view the display can support.”

The Road to the Right Refractive Index

When Calafiore first joined what was then Oculus Research in 2016, the highest refractive index glass the team had at its disposal was 1.8—which required stacking multiple plates to achieve the desired field of view. Undesirable optical artifacts aside, the assembly line became increasingly complicated as the first two waveguides had to be perfectly aligned, and then that stack had to be perfectly aligned with a third waveguide.

“Not only was it expensive, it was immediately obvious that you couldn’t have three pieces of glass per lens in a pair of glasses,” Calafiore recalls. “They were too heavy, and the thickness was prohibitively large and ugly—nobody would buy it. So we went back to square one: trying to boost the refractive index of the substrate to reduce the number of plates needed.”

The first material the team looked into was lithium niobate, which has a refractive index of roughly 2.3—quite a bit higher than the glass at 1.8.

“We realized that we only had to stack two plates and could maybe even manage with one plate to still cover the field of view,” says Calafiore. “Almost in parallel, we started looking at other materials—which is how we figured out alongside our suppliers in 2019 that silicon carbide, in its purest form, is actually very transparent. It also happens to have the highest refractive index known for an optical application, which is 2.7.”

That’s a 17.4% increase over lithium niobate and a 50% bump over glass, for those keeping score at home.

“With a few modifications to the very same equipment that was used in the industry already, it was possible to get transparent silicon carbide,” Calafiore says. “You could just change the process, be a lot more careful, and instead of optimizing for electronic properties, you optimize for optical properties: transparency, uniformity of the refractive index, etc.”

The Potential Cost of Compromise

At that time, the Reality Labs team was the first to even attempt moving from opaque silicon carbide wafers to transparent ones. And because silicon carbide is one of the hardest known materials, it essentially requires diamond tooling to cut or polish it. As a result, the non-recurring engineering costs were very high, so the resulting substrate was quite expensive.

While more cost-effective alternatives exist, as with any technology, they each have tradeoffs. And as the field of view increases towards Orion’s industry-leading field of view of approximately 70 degrees, new issues arise like ghost images and rainbows.

“Finding the optimum solution for a wide field of view AR display is fraught with tradeoffs between performance and costs,” explains Director of Research Science Barry Silverstein. “Costs can often be driven down, but if performance doesn’t cut it, costs won’t ultimately matter.”

Ghost images are like visual echoes of the primary image being projected onto the display. Rainbows are colorful streaks of light that are created when ambient light reflects off of the waveguide. “Say you’re driving at night with moving car lights around you,” says Silverstein. “You’re going to have rainbows that move, too. Or if you’re out on the beach playing volleyball and the sun’s shining, you’re going to get a rainbow streak that’s moving with you and you’ll miss your shot. And one of the miraculous properties of silicon carbide is that it gets rid of those rainbows.”

“The other advantage of silicon carbide that none of the other materials have is thermal conductivity,” Calafiore adds. “Plastic is a terrible insulator. Glass, lithium niobate, same thing. You go to silicon carbide and it’s transparent, looks like glass, and guess what: It conducts heat.”

So in July 2020, the team determined that silicon carbide was the optimum choice for three primary reasons: It led to an improved form factor because it required only a single plate and smaller mounting structures, it had better optical properties, and it was lighter than dual-plate glass.

The Secret of Slant Etch

With the material in mind, the next nut to crack was the fabrication of the waveguides—and specifically, an unconventional grating technique called slant etch.

“The grating is the nanostructure that in-couples and out-couples the light from the lens,” explains Calafiore. “And for silicon carbide to work, the grating needs to be slant etch. Instead of being vertical, you want the lines of the grating to be sloped diagonally.”

“We were the first ones to do slant etch directly on the devices,” says Research Manager Nihar Mohanty. “The whole industry used to rely on nano imprint, which doesn’t work for substrates with such a high refractive index. That’s why no one else in the world had thought about doing silicon carbide.”

But because slant etch is an immature technology, most semiconductor chip suppliers and factories lack the necessary tools.

“Back in 2019, my manager at the time, Matt Colburn, and I established our own facility as there was nothing in the world that could produce etched silicon carbide waveguides and where we could prove out the technology beyond the labscale,” explains Mohanty. “It was a huge investment, and we established the whole pipeline there. The tooling was custom-made for us by our partners, and the process was developed in-house in Meta, though our systems are research-grade because there were no manufacturing-grade systems out there. We worked with a manufacturing partner to develop manufacturing-grade slant etch tooling and processes. And now that we’ve shown what’s possible with silicon carbide, we want others in the industry to start making tools of their own.”

The more companies that invest in optical-grade silicon carbide and develop equipment, the stronger the category of consumer AR glasses will become.

No Longer Chasing Rainbows

While technological inevitability is a myth, the stars certainly seem to be aligning in silicon carbide’s favor. And although the team continues to investigate alternatives, there’s a strong sense that the right people have come together at the right time under the right market conditions to build AR glasses using this material.

“Orion proved that silicon carbide is a viable option for AR glasses,” says Silverstein, “and we’re now seeing interest across the supply chain on three different continents where they’re heavily pursuing this as an opportunity. Silicon carbide will come out on top. It’s just a matter of time in my book.”

And a lot can happen in that time—much like the way the tables have turned since we grew our first clear silicon carbide crystals.

“All of these silicon carbide manufacturers had cranked up the supply massively in response to the expected EV boom,” notes Calafiore. “Right now, there’s an overcapacity that didn’t exist when we were building Orion. So now, because supply is high and demand is low, the cost of the substrate has started to come down.”

“Suppliers are very excited by the new opportunity of manufacturing optical-grade silicon carbide—after all, each waveguide lens represents a large amount of material relative to an electronic chip, and all of their existing capabilities apply to this new space,” adds Silverstein. “Filling your factory is essential, and scaling your factory is the dream. The size of the wafer matters, too: The bigger the wafer, the lower the cost—but the complexity of the process also goes up. That said, we’ve seen suppliers move from four-inch to eight-inch wafers, and some are working on precursors to 12-inch wafers, which would yield exponentially more pairs of AR glasses.”

These advancements should help continue to drive costs down. It’s still early days, but the future is coming into focus.

“At the beginning of any new technological revolution, you try a bunch of things,” says Calafiore. “Look at television: We started with cathode-ray tubes, and then we went to the LED plasma TVs and now microLEDs. We went through several different technologies and architectures. As you pathfind, lots of paths end up nowhere, but there are some that you just keep coming back to as the most promising. We’re not at the end of the road, and we can’t do it alone, but silicon carbide is a wonder material that is well worth the investment.”

“The world is awake now,” adds Silverstein. “We’ve successfully shown that silicon carbide can flex across electronics and photonics. It’s a material that could have future applications in quantum computing. And we’re seeing signs that it’s possible to significantly reduce the cost. There’s a lot of work left to be done, but the potential upside here is huge.”


Learn more about silicon carbide in Photonics Spectra.

Για περισσότερες πληροφορίες σχετικά με τον Orion, ανατρέξτε σε αυτές τις αναρτήσεις ιστολογίου:

Δημοσιεύθηκε την - Σχολιάστε

Orion: AR γυαλιά έχουν φτάσει

TL;DR:

  • Σήμερα στο Συνδέστε το, ο Μαρκ Ζούκερμπεργκ αποκάλυψε το Orion - το πρώτο μας ζευγάρι αληθινών γυαλιών AR, με την προηγούμενη κωδική ονομασία Έργο Nazare.
  • Με κορυφαίο οπτικό πεδίο στον κλάδο, φακοί καρβιδίου πυριτίου, περίπλοκους κυματοδηγούς, προβολείς uLED και πολλά άλλα, το Orion είναι το πιο προηγμένο και πιο γυαλισμένο πρωτότυπο προϊόν μας μέχρι σήμερα.
  • Τώρα, συνεχίζουμε τη βελτιστοποίηση του προϊόντος και τη μείωση του κόστους, καθώς οδηγούμαστε σε μια επεκτάσιμη καταναλωτική συσκευή που θα φέρει επανάσταση στον τρόπο με τον οποίο οι άνθρωποι αλληλεπιδρούν με τον κόσμο.

"Κατασκευάζουμε γυαλιά AR."

Πέντε απλές λέξεις, πριν από πέντε χρόνια. Μαζί τους, βάλαμε μια σημαία στο όραμά μας για ένα μέλλον όπου δεν θα χρειάζεται πλέον να κάνουμε τη λανθασμένη επιλογή μεταξύ ενός κόσμου πληροφοριών στα χέρια μας και του φυσικού κόσμου γύρω μας.

Και τώρα, πέντε χρόνια αργότερα, άλλες πέντε λέξεις που πρόκειται να αλλάξουν και πάλι το παιχνίδι:

Έχουμε κατασκευάσει γυαλιά AR.

https://youtube.com/watch?v=2CJsnyS8u3c%3Fsi%3DTr77gOKEq3PnA7-k%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Στη Meta, η αποστολή μας είναι απλή: να δώσουμε στους ανθρώπους τη δύναμη να χτίσουν κοινότητες και να φέρουν τον κόσμο πιο κοντά. Και στα Reality Labs, δημιουργούμε εργαλεία που βοηθούν τους ανθρώπους να αισθάνονται συνδεδεμένοι οποτεδήποτε και οπουδήποτε. Γι' αυτό εργαζόμαστε για να δημιουργήσουμε την επόμενη υπολογιστική πλατφόρμα που θα θέτει τους ανθρώπους στο επίκεντρο, ώστε να είναι πιο παρόντες, συνδεδεμένοι και ενδυναμωμένοι στον κόσμο.

Γυαλιά Ray-Ban Meta έχουν αποδείξει τη δύναμη της παροχής στους ανθρώπους hands-free πρόσβασης σε βασικά τμήματα της ψηφιακής τους ζωής από τη φυσική τους ζωή. Μπορούμε να μιλάμε σε έναν έξυπνο βοηθό τεχνητής νοημοσύνης, να συνδεόμαστε με φίλους και να απαθανατίζουμε τις στιγμές που έχουν σημασία - και όλα αυτά χωρίς να χρειάζεται ποτέ να βγάλουμε το τηλέφωνο. Αυτά τα κομψά γυαλιά ταιριάζουν άψογα στην καθημερινότητά μας και οι άνθρωποι τα λατρεύουν απόλυτα.

Ωστόσο, ενώ η Ray-Ban Meta άνοιξε μια εντελώς νέα κατηγορία γυαλιών χωρίς οθόνη, υπερφορτισμένων με τεχνητή νοημοσύνη, η βιομηχανία XR ονειρεύεται εδώ και καιρό αληθινά γυαλιά AR - ένα προϊόν που συνδυάζει τα οφέλη μιας μεγάλης ολογραφικής οθόνης και εξατομικευμένης βοήθειας τεχνητής νοημοσύνης σε έναν άνετο, κομψό, φορέσιμο όλη την ημέρα παράγοντα μορφής.

Και σήμερα, κάναμε αυτό το όνειρο πιο κοντά στην πραγματικότητα με την αποκάλυψη του Orion, το οποίο πιστεύουμε ότι είναι το πιο προηγμένο ζευγάρι γυαλιών AR που έχει κατασκευαστεί ποτέ. Στην πραγματικότητα, ίσως είναι η πιο προκλητική συσκευή ηλεκτρονικών καταναλωτικών προϊόντων που κατασκευάστηκε μετά το smartphone. Το Orion είναι το αποτέλεσμα πρωτοποριακών εφευρέσεων σε σχεδόν κάθε τομέα της σύγχρονης πληροφορικής, βασιζόμενο στις τη δουλειά που κάνουμε στα Reality Labs την τελευταία δεκαετία. Είναι γεμάτο με εντελώς νέες τεχνολογίες, συμπεριλαμβανομένης της πιο προηγμένης οθόνης AR που έχει συναρμολογηθεί ποτέ και προσαρμοσμένο πυρίτιο που επιτρέπει την εκτέλεση ισχυρών εμπειριών AR σε ένα ζευγάρι γυαλιά χρησιμοποιώντας ένα κλάσμα της ισχύος και του βάρους ενός ακουστικού MR.

Το σύστημα εισόδου του Orion συνδυάζει απρόσκοπτα τη φωνή, το βλέμμα των ματιών και την παρακολούθηση των χεριών με ένα Βραχιολάκι EMG που σας επιτρέπει να κάνετε σάρωση, κλικ και κύλιση, ενώ το χέρι σας βρίσκεται άνετα στο πλευρό σας, επιτρέποντάς σας να παραμείνετε παρόντες στον κόσμο και στους ανθρώπους γύρω σας, καθώς αλληλεπιδράτε με πλούσιο ψηφιακό περιεχόμενο.

Ξεκινώντας από σήμερα στο Connect και συνεχίζοντας καθ' όλη τη διάρκεια του έτους, ανοίγουμε την πρόσβαση στο πρωτότυπο του προϊόντος Orion για τους υπαλλήλους της Meta και επιλεγμένα, εξωτερικά ακροατήρια, ώστε η ομάδα ανάπτυξης να μπορεί να μάθει, να επαναλάβει και να χτίσει προς την κατεύθυνση της σειράς προϊόντων AR γυαλιών για καταναλωτές, την οποία σχεδιάζουμε να ξεκινήσουμε να αποστέλλουμε στο εγγύς μέλλον.

Γιατί γυαλιά AR;

Υπάρχουν τρεις βασικοί λόγοι για τους οποίους τα γυαλιά AR είναι το κλειδί για την επίτευξη του επόμενου μεγάλου άλματος στην υπολογιστική με γνώμονα τον άνθρωπο.

  1. Επιτρέπουν ψηφιακές εμπειρίες που δεν περιορίζονται από τα όρια της οθόνης ενός smartphone. Με τις μεγάλες ολογραφικές οθόνες, μπορείτε να χρησιμοποιήσετε τον φυσικό κόσμο ως καμβά, τοποθετώντας 2D και 3D περιεχόμενο και εμπειρίες οπουδήποτε θέλετε.
  2. Ενσωματώνουν απρόσκοπτα την τεχνητή νοημοσύνη που μπορεί να αντιληφθεί και να κατανοήσει τον κόσμο γύρω σας, προκειμένου να προβλέψει και να αντιμετωπίσει προληπτικά τις ανάγκες σας.
  3. Είναι ελαφριές και ιδανικές για χρήση τόσο σε εσωτερικούς όσο και σε εξωτερικούς χώρους - και επιτρέπουν στους ανθρώπους να βλέπουν ο ένας το πραγματικό πρόσωπο, τα πραγματικά μάτια και τις πραγματικές εκφράσεις του άλλου.

Αυτό είναι το αστέρι του βορρά προς το οποίο ο κλάδος μας χτίζει: ένα προϊόν που συνδυάζει την ευκολία και την αμεσότητα των φορητών συσκευών με μεγάλη οθόνη, είσοδο υψηλού εύρους ζώνης και ΤΝ με βάση το περιεχόμενο, σε έναν παράγοντα μορφής που οι άνθρωποι αισθάνονται άνετα να φορούν στην καθημερινή τους ζωή.

Συμπαγής παράγοντας μορφής, σύνθετες προκλήσεις

Εδώ και χρόνια, βρισκόμαστε αντιμέτωποι με μια λανθασμένη επιλογή - είτε ακουστικά εικονικής και μικτής πραγματικότητας που επιτρέπουν βαθιές, καθηλωτικές εμπειρίες σε ογκώδη μορφή είτε γυαλιά που είναι ιδανικά για ολοήμερη χρήση, αλλά δεν προσφέρουν πλούσιες οπτικές εφαρμογές και εμπειρίες λόγω της έλλειψης μεγάλης οθόνης και αντίστοιχης υπολογιστικής ισχύος.

Αλλά τα θέλουμε όλα, χωρίς συμβιβασμούς. Εδώ και χρόνια, δουλεύουμε σκληρά για να πάρουμε τις απίστευτες χωρικές εμπειρίες που προσφέρουν τα ακουστικά VR και MR και να σμικρύνουμε την τεχνολογία που είναι απαραίτητη για την παροχή αυτών των εμπειριών σε ένα ζευγάρι ελαφρών, κομψών γυαλιών. Η επίτευξη του παράγοντα μορφής, η παροχή ολογραφικών οθονών, η ανάπτυξη συναρπαστικών εμπειριών AR και η δημιουργία νέων παραδειγμάτων αλληλεπίδρασης ανθρώπου-υπολογιστή (HCI) - και όλα αυτά σε ένα συνεκτικό προϊόν - είναι μία από τις πιο δύσκολες προκλήσεις που έχει αντιμετωπίσει ποτέ ο κλάδος μας. Ήταν τόσο μεγάλη πρόκληση που πιστεύαμε ότι είχαμε λιγότερες από 10 τοις εκατό πιθανότητες να τα καταφέρουμε με επιτυχία.

Μέχρι τώρα.

Μια πρωτοποριακή οθόνη σε έναν απαράμιλλο παράγοντα μορφής

Στις 70 μοίρες περίπου, το Orion διαθέτει το μεγαλύτερο οπτικό πεδίο στο μικρότερο μέγεθος γυαλιών AR που έχει κατασκευαστεί μέχρι σήμερα. Αυτό το οπτικό πεδίο ξεκλειδώνει πραγματικά καθηλωτικές περιπτώσεις χρήσης για το Orion, από παράθυρα πολλαπλών εργασιών και ψυχαγωγία μεγάλης οθόνης μέχρι ολογράμματα ανθρώπων σε φυσικό μέγεθος - όλο το ψηφιακό περιεχόμενο που μπορεί να συνδυάζεται απρόσκοπτα με την άποψή σας για τον φυσικό κόσμο.

Για τον Orion, το οπτικό πεδίο ήταν το ιερό μας δισκοπότηρο. Προσκρούαμε στους νόμους της φυσικής και έπρεπε να λυγίσουμε τις ακτίνες φωτός με τρόπους που δεν λυγίζουν φυσιολογικά - και έπρεπε να το κάνουμε σε ένα φάκελο ισχύος που μετριέται σε χιλιοστοβάτ.

Αντί για γυαλί, φτιάξαμε τους φακούς από καρβίδιο του πυριτίου-μια νέα εφαρμογή για τα γυαλιά AR. Καρβίδιο του πυριτίου είναι απίστευτα ελαφρύ, δεν προκαλεί οπτικά τεχνουργήματα ή αδέσποτο φως και έχει υψηλό δείκτη διάθλασης - όλες οι οπτικές ιδιότητες που είναι βασικές για ένα μεγάλο οπτικό πεδίο. Οι ίδιοι οι κυματοδηγοί έχουν πραγματικά περίπλοκες και πολύπλοκες τρισδιάστατες δομές νανοκλίμακας για τη διάθλαση ή τη διάχυση του φωτός με τους τρόπους που είναι απαραίτητοι για την επίτευξη αυτού του οπτικού πεδίου. Και οι προβολείς είναι uLEDs - ένας νέος τύπος τεχνολογίας οθόνης που είναι εξαιρετικά μικρός και εξαιρετικά αποδοτικός στην κατανάλωση ενέργειας.

Το Orion είναι αναμφισβήτητα ένα ζευγάρι γυαλιά τόσο στην εμφάνιση όσο και στην αίσθηση - με διαφανείς φακούς. Σε αντίθεση με τα ακουστικά MR ή άλλα γυαλιά AR σήμερα, μπορείτε ακόμα να βλέπετε τα πραγματικά μάτια και τις εκφράσεις των άλλων, ώστε να είστε παρόντες και να μοιράζεστε την εμπειρία με τους ανθρώπους γύρω σας. Χρειάστηκαν δεκάδες καινοτομίες για να φτάσει ο βιομηχανικός σχεδιασμός σε μια σύγχρονη μορφή γυαλιών που θα νιώθετε άνετα να φοράτε καθημερινά. Το Orion είναι ένα κατόρθωμα σμίκρυνσης - τα εξαρτήματα είναι πακεταρισμένα σε ένα κλάσμα του χιλιοστού. Και καταφέραμε να ενσωματώσουμε επτά μικροσκοπικές κάμερες και αισθητήρες στα χείλη του σκελετού.

Έπρεπε να διατηρήσουμε την οπτική ακρίβεια στο ένα δέκατο του πάχους μιας ανθρώπινης τρίχας. Και το σύστημα μπορεί να ανιχνεύει μικροσκοπικές ποσότητες κίνησης -όπως τα πλαίσια που διαστέλλονται ή συστέλλονται σε διάφορες θερμοκρασίες δωματίου- και στη συνέχεια να διορθώνει ψηφιακά την απαραίτητη οπτική ευθυγράμμιση, και όλα αυτά μέσα σε χιλιοστά του δευτερολέπτου. Κατασκευάσαμε τα πλαίσια από μαγνήσιο - το ίδιο υλικό που χρησιμοποιείται στα αγωνιστικά αυτοκίνητα F1 και στα διαστημόπλοια - επειδή είναι ελαφρύ αλλά άκαμπτο, ώστε να διατηρεί τα οπτικά στοιχεία σε ευθυγράμμιση και να απομακρύνει αποτελεσματικά τη θερμότητα.

Θέρμανση και ψύξη

Αφού σπάσαμε την οθόνη (χωρίς λογοπαίγνιο) και ξεπεράσαμε τα προβλήματα φυσικής, έπρεπε να αντιμετωπίσουμε την πρόκληση των πραγματικά ισχυρών υπολογιστών σε συνδυασμό με την πραγματικά χαμηλή κατανάλωση ενέργειας και την ανάγκη απαγωγής θερμότητας. Σε αντίθεση με τα σημερινά ακουστικά MR, δεν μπορείτε να τοποθετήσετε έναν ανεμιστήρα σε ένα ζευγάρι γυαλιά. Έτσι, έπρεπε να γίνουμε δημιουργικοί. Πολλά από τα υλικά που χρησιμοποιούνται για την ψύξη του Orion είναι παρόμοια με αυτά που χρησιμοποιεί η NASA για την ψύξη δορυφόρων στο διάστημα.

Χτίσαμε εξαιρετικά εξειδικευμένο προσαρμοσμένο πυρίτιο που είναι εξαιρετικά αποδοτικός σε ισχύ και βελτιστοποιημένος για τους αλγορίθμους τεχνητής νοημοσύνης, μηχανικής αντίληψης και γραφικών. Κατασκευάσαμε πολλαπλά προσαρμοσμένα τσιπ και δεκάδες εξαιρετικά προσαρμοσμένα μπλοκ IP πυριτίου μέσα σε αυτά τα τσιπ. Αυτό μας επιτρέπει να πάρουμε τους αλγορίθμους που είναι απαραίτητοι για την παρακολούθηση χεριών και ματιών, καθώς και την τεχνολογία ταυτόχρονου εντοπισμού και χαρτογράφησης (SLAM), η οποία κανονικά απαιτεί εκατοντάδες χιλιοστά του βατ ισχύος -και συνεπώς παράγει αντίστοιχη ποσότητα θερμότητας- και να τη συρρικνώσουμε σε μόλις μερικές δεκάδες χιλιοστά του βατ.

Και ναι, το προσαρμοσμένο πυρίτιο εξακολουθεί να παίζει κρίσιμο ρόλο στην ανάπτυξη προϊόντων στα Reality Labs, παρά τα όσα μπορεί να έχετε διαβάσει αλλού. 😎

Αβίαστο EMG

Κάθε νέα υπολογιστική πλατφόρμα φέρνει μαζί της αλλαγή παραδείγματος στον τρόπο με τον οποίο αλληλεπιδρούμε με τις συσκευές μας. Η εφεύρεση του ποντικιού βοήθησε να ανοίξει ο δρόμος για τις γραφικές διεπαφές χρήστη (GUI) που κυριαρχούν στον κόσμο μας σήμερα, και τα smartphones δεν άρχισαν να κερδίζουν πραγματικά έδαφος μέχρι την έλευση της οθόνης αφής. Και ο ίδιος κανόνας ισχύει και για τα wearables.

Έχουμε μιλήσει για το έργο μας με ηλεκτρομυογραφία ή EMG, εδώ και χρόνια, με γνώμονα την πεποίθησή μας ότι η είσοδος για τα γυαλιά AR πρέπει να είναι γρήγορη, βολική, αξιόπιστη, διακριτική και κοινωνικά αποδεκτή. Και τώρα, αυτή η εργασία είναι έτοιμη για την prime time.

Το σύστημα εισόδου και αλληλεπίδρασης της Orion συνδυάζει άψογα τη φωνή, το βλέμμα και την παρακολούθηση του χεριού με ένα EMG βραχιολάκι που σας επιτρέπει να σαρώνετε, να κάνετε κλικ και να κάνετε κύλιση με ευκολία.

Λειτουργεί - και μοιάζει με μαγεία. Φανταστείτε να τραβάτε μια φωτογραφία στο πρωινό σας τρέξιμο με ένα απλό άγγιγμα των άκρων των δακτύλων σας ή να πλοηγείστε στα μενού με ελάχιστα αισθητές κινήσεις των χεριών σας. Το βραχιολάκι μας συνδυάζει ένα ύφασμα υψηλής απόδοσης με ενσωματωμένους αισθητήρες EMG για να ανιχνεύει τα ηλεκτρικά σήματα που παράγονται ακόμη και από τις πιο μικρές μυϊκές κινήσεις. Στη συνέχεια, ένας επεξεργαστής ML της συσκευής ερμηνεύει αυτά τα σήματα ΗΜΓ για να παράγει συμβάντα εισόδου που μεταδίδονται ασύρματα στα γυαλιά. Το σύστημα προσαρμόζεται σε εσάς, ώστε να γίνεται καλύτερο και πιο ικανό στην αναγνώριση των πιο λεπτών χειρονομιών με την πάροδο του χρόνου. Και σήμερα, μοιραζόμαστε περισσότερα σχετικά με την υποστήριξή μας για εξωτερική έρευνα που επικεντρώνεται σε επέκταση των δυνατοτήτων ισότητας και προσβασιμότητας των καρτελών ΗΜΓ.

Γνωρίστε το Wireless Compute Puck

Τα αληθινά γυαλιά AR πρέπει να είναι ασύρματα και πρέπει επίσης να είναι μικρά.Έτσι φτιάξαμε ένα ασύρματο υπολογιστικό puck για το Orion. Απομακρύνει ένα μέρος του φορτίου από τα γυαλιά, επιτρέποντας μεγαλύτερη διάρκεια ζωής της μπαταρίας και έναν καλύτερο παράγοντα μορφής με χαμηλή καθυστέρηση.

Τα γυαλιά εκτελούν όλους τους αλγορίθμους παρακολούθησης χεριών, παρακολούθησης ματιών, SLAM και εξειδικευμένους αλγορίθμους γραφικών κλειδώματος του κόσμου AR, ενώ η λογική της εφαρμογής εκτελείται στο puck για να διατηρηθούν τα γυαλιά όσο το δυνατόν πιο ελαφριά και συμπαγή.

Το puck διαθέτει διπλούς επεξεργαστές, συμπεριλαμβανομένου ενός προσαρμοσμένου που έχει σχεδιαστεί εδώ στη Meta, και παρέχει την απαραίτητη υπολογιστική ισχύ για την απόδοση γραφικών χαμηλής καθυστέρησης, την τεχνητή νοημοσύνη και κάποια πρόσθετη αντίληψη της μηχανής.

Και επειδή είναι μικρό και κομψό, μπορείτε να το πετάξετε άνετα σε μια τσάντα ή στην τσέπη σας και να συνεχίσετε τις δουλειές σας - χωρίς δεσμεύσεις.

Εμπειρίες AR

Φυσικά, όπως συμβαίνει με κάθε κομμάτι υλικού, είναι τόσο καλό όσο τα πράγματα που μπορείτε να do με αυτό. Και ενώ είναι ακόμα νωρίς, οι εμπειρίες που προσφέρει ο Orion είναι μια συναρπαστική ματιά στο τι πρόκειται να συμβεί.

https://youtube.com/watch?v=HkdSv3QPhNw%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Έχουμε τον έξυπνο βοηθό μας, Meta AI, που εκτελείται στον Orion. Καταλαβαίνει τι κοιτάτε στον φυσικό κόσμο και μπορεί να σας βοηθήσει με χρήσιμες απεικονίσεις. Το Orion χρησιμοποιεί το ίδιο μοντέλο Llama που τροφοδοτεί τις εμπειρίες τεχνητής νοημοσύνης που τρέχουν σήμερα στα έξυπνα γυαλιά Ray-Ban Meta, καθώς και προσαρμοσμένα ερευνητικά μοντέλα για την επίδειξη πιθανών περιπτώσεων χρήσης για τη μελλοντική ανάπτυξη wearables.

Μπορείτε να πραγματοποιείτε βιντεοκλήσεις hands-free εν κινήσει για να ενημερώνεστε με φίλους και συγγενείς σε πραγματικό χρόνο και μπορείτε να παραμείνετε συνδεδεμένοι στο WhatsApp και το Messenger για να βλέπετε και να στέλνετε μηνύματα. Δεν χρειάζεται να βγάλετε το τηλέφωνό σας, να το ξεκλειδώσετε, να βρείτε τη σωστή εφαρμογή και να ενημερώσετε τον φίλο σας ότι έχετε αργήσει για το δείπνο - μπορείτε να τα κάνετε όλα αυτά μέσω των γυαλιών σας.

https://youtube.com/watch?v=el7lUVvu8Bo%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Μπορείτε να παίξετε κοινά παιχνίδια AR με την οικογένειά σας στην άλλη άκρη της χώρας ή με τον φίλο σας στην άλλη άκρη του καναπέ. Και η μεγάλη οθόνη του Orion σας επιτρέπει να κάνετε multitasking με πολλαπλά παράθυρα για να κάνετε πράγματα χωρίς να χρειάζεται να κουβαλάτε μαζί σας τον φορητό σας υπολογιστή.

Οι εμπειρίες που είναι διαθέσιμες στο Orion σήμερα θα βοηθήσουν να διαμορφωθεί ο οδικός χάρτης για τη σειρά γυαλιών AR για καταναλωτές στο μέλλον. Οι ομάδες μας θα συνεχίσουν να επαναλαμβάνουν και να δημιουργούν νέες καθηλωτικές κοινωνικές εμπειρίες, μαζί με τους συνεργάτες μας προγραμματιστές, και ανυπομονούμε να μοιραστούμε αυτό που θα ακολουθήσει.

Ένα σκόπιμο πρωτότυπο προϊόντος

Παρόλο που το Orion δεν θα φτάσει στα χέρια των καταναλωτών, μην κάνετε κανένα λάθος: Αυτό είναι όχι ένα ερευνητικό πρωτότυπο. Είναι το πιο γυαλισμένο πρωτότυπο προϊόντος που έχουμε αναπτύξει ποτέ - και είναι πραγματικά αντιπροσωπευτικό για κάτι που θα μπορούσε να στέλνουν στους καταναλωτές. Αντί να βιαστούμε να το βγάλουμε στα ράφια, αποφασίσαμε να επικεντρωθούμε πρώτα στην εσωτερική ανάπτυξη, πράγμα που σημαίνει ότι μπορούμε να συνεχίσουμε να χτίζουμε γρήγορα και να συνεχίσουμε να διευρύνουμε τα όρια της τεχνολογίας και των εμπειριών.

Και αυτό σημαίνει ότι θα φτάσουμε σε ένα ακόμη καλύτερο καταναλωτικό προϊόν πιο γρήγορα.

Τι θα ακολουθήσει

Δύο σημαντικά εμπόδια στέκονται εδώ και καιρό στο δρόμο για τα κύρια καταναλωτικά γυαλιά AR: οι τεχνολογικές ανακαλύψεις που είναι απαραίτητες για την παροχή μιας μεγάλης οθόνης σε έναν συμπαγή τύπο γυαλιών και η ανάγκη για χρήσιμες και συναρπαστικές εμπειρίες AR που μπορούν να τρέξουν σε αυτά τα γυαλιά. Το Orion αποτελεί ένα τεράστιο ορόσημο, παρέχοντας για πρώτη φορά πραγματικές εμπειρίες AR που τρέχουν σε λογικά κομψό υλικό.

Τώρα που μοιραστήκαμε τον Orion με τον κόσμο, επικεντρωνόμαστε σε μερικά πράγματα:

  • Ρύθμιση της ποιότητας της οθόνης AR για να γίνει η εικόνα ακόμα πιο ευκρινής
  • Βελτιστοποίηση όπου μπορούμε για να κάνουμε τον παράγοντα μορφής ακόμα μικρότερο
  • Οικοδόμηση σε κλίμακα για να γίνουν πιο προσιτές

Τα επόμενα χρόνια, μπορείτε να περιμένετε να δείτε νέες συσκευές από εμάς που θα βασίζονται στις προσπάθειες Ε&Α που καταβάλλουμε. Και ορισμένες από τις καινοτομίες της Orion έχουν επεκταθεί στα σημερινά καταναλωτικά προϊόντα μας σήμερα, καθώς και στον μελλοντικό χάρτη πορείας των προϊόντων μας. Έχουμε βελτιστοποιήσει ορισμένους από τους αλγορίθμους μας για τη χωρική αντίληψη, οι οποίοι εκτελούνται τόσο σε Meta Quest 3S και τον Ωρίωνα. Αν και το σύστημα οπτικής και διακριτικής χειρονομιακής εισόδου σχεδιάστηκε αρχικά για το Orion, σκοπεύουμε να το χρησιμοποιήσουμε και σε μελλοντικά προϊόντα. Επίσης, διερευνούμε τη χρήση των βραχιολιών EMG σε μελλοντικά καταναλωτικά προϊόντα.

Ο Orion δεν είναι απλώς ένα παράθυρο στο μέλλον - είναι μια ματιά στις πολύ πραγματικές δυνατότητες που είναι εφικτές σήμερα. Το δημιουργήσαμε επιδιώκοντας αυτό που κάνουμε καλύτερα: να βοηθάμε τους ανθρώπους να συνδέονται. Από τα γυαλιά Ray-Ban Meta μέχρι το Orion, έχουμε δει το καλό που μπορεί να προκύψει από το να αφήνουμε τους ανθρώπους να παραμένουν πιο παρόντες και ενδυναμωμένοι στον φυσικό κόσμο, ακόμη και όταν αξιοποιούν όλο τον πρόσθετο πλούτο που έχει να προσφέρει ο ψηφιακός κόσμος.

Πιστεύουμε ότι δεν θα πρέπει να χρειάζεται να επιλέξετε ανάμεσα στα δύο. Και με την επόμενη υπολογιστική πλατφόρμα, δεν θα χρειαστεί να το κάνετε.


Για περισσότερες πληροφορίες σχετικά με τον Orion, ανατρέξτε σε αυτές τις αναρτήσεις ιστολογίου:

Δημοσιεύθηκε την - Σχολιάστε

Το Compute Puck του Orion: Η ιστορία πίσω από τη συσκευή που βοήθησε να γίνουν δυνατά τα γυαλιά μας AR

Πέρυσι στο Connect, παρουσιάσαμε Orion-το πρώτο μας πραγματικό ζευγάρι γυαλιών AR. Το αποκορύφωμα των το έργο μας στα Reality Labs την τελευταία δεκαετία, το Orion συνδυάζει τα οφέλη μιας μεγάλης ολογραφικής οθόνης και της εξατομικευμένης βοήθειας τεχνητής νοημοσύνης σε έναν άνετο, φορητό παράγοντα μορφής για όλη την ημέρα. Έλαβε κάποια προσοχή για το κορυφαίο στον κλάδο οπτικό πεδίο, τους κυματοδηγούς καρβιδίου πυριτίου, τους προβολείς uLED και πολλά άλλα. Αλλά σήμερα, στρέφουμε την προσοχή μας σε έναν αφανή ήρωα του Orion: το compute puck.

Σχεδιασμένο για να χωράει εύκολα στην τσέπη ή την τσάντα σας, ώστε να μπορείτε να το έχετε μαζί σας σχεδόν παντού καθώς περνάτε την ημέρα σας, το puck αποφορτίζει την επεξεργαστική ισχύ του Orion για να τρέξει τη λογική των εφαρμογών και να επιτρέψει έναν πιο ελκυστικό, μικρότερο παράγοντα μορφής για τα γυαλιά. Συνδέεται ασύρματα με τα γυαλιά και το βραχιολάκι EMG για μια απρόσκοπτη εμπειρία.

Ρυθμίστε το και ξεχάστε το, σωστά;

Αλλά η ιστορία του πακ -ακόμη και ως πρωτότυπο- εμπλέκεται, με ένα δραματικό τόξο που δεν θα μπορούσατε ποτέ να μαντέψετε από την εμφάνισή του.

"Όταν κατασκευάζεις κάτι τέτοιο, αρχίζεις να μπαίνεις στα όρια της φυσικής", εξηγεί ο διευθυντής διαχείρισης προϊόντων Rahul Prasad. "Τα τελευταία 50 χρόνια, ο νόμος του Moore έχει κάνει τα πάντα μικρότερα, ταχύτερα και με χαμηλότερη ισχύ. Το πρόβλημα είναι ότι τώρα αρχίζεις να συναντάς όρια στο πόση θερμότητα μπορείς να αποβάλλεις, πόση μπαταρία μπορείς να συμπιέσεις και πόση απόδοση κεραίας μπορείς να χωρέσεις σε ένα αντικείμενο συγκεκριμένου μεγέθους".

Αν και η εκ των υστέρων γνώση μπορεί να είναι 20/20, οι δυνατότητες του πακ δεν ήταν αμέσως εμφανείς. Όταν είσαι ο πρώτος που κατασκευάζει κάτι, πρέπει να εξερευνήσεις κάθε πιθανότητα - χωρίς να αφήσεις καμία πέτρα αναποδογυρισμένη. Πώς φτιάχνεις κάτι που κάποιοι μπορεί να το θεωρήσουν ανεπιθύμητο αξεσουάρ και όχι κρίσιμο μέρος του πακέτου;

"Ξέραμε ότι το puck ήταν μια επιπλέον συσκευή που ζητούσαμε από τους ανθρώπους να κουβαλούν", σημειώνει ο Διευθυντής Μηχανικής Σχεδίασης Προϊόντων Jared Van Cleave, "οπότε διερευνήσαμε πώς να μετατρέψουμε το σφάλμα σε χαρακτηριστικό".

Τελικά, αυτό το ήθος απέδωσε τα μέγιστα, καθώς ο δίσκος συμπιέζει πολύ υπολογισμό (και ακόμη περισσότερο προσαρμοσμένο πυρίτιο σχεδιασμένο από τη Meta για την τεχνητή νοημοσύνη και τη μηχανική αντίληψη) σε ένα μικρό μέγεθος. Αυτό συνέβαλε καθοριστικά στο να περάσει το Orion από τη σφαίρα της επιστημονικής φαντασίας στην πραγματικότητα.

"Αν δεν είχατε το puck, δεν θα μπορούσατε να ζήσετε τις εμπειρίες που προσφέρει το Orion στον παράγοντα μορφής του -περίοδος", λέει ο Prasad. "Μια καλή εμπειρία AR απαιτεί πραγματικά υψηλές επιδόσεις: υψηλούς ρυθμούς καρέ, εξαιρετικά χαμηλή καθυστέρηση, λεπτομερή διαχείριση ασύρματων δικτύων και ενέργειας κ.λπ. Το puck και τα γυαλιά πρέπει να συν-σχεδιαστούν ώστε να συνεργάζονται πραγματικά στενά, όχι μόνο στο επίπεδο της εφαρμογής, αλλά και στο επίπεδο του λειτουργικού συστήματος, του υλικολογισμικού και του υλικού. Και ακόμη και αν κάποιος συν-σχεδιάσει ένα smartphone για να συνεργαστεί με γυαλιά AR, οι απαιτητικές απαιτήσεις επιδόσεων θα εξαντλούσαν την μπαταρία του τηλεφώνου και θα αφαιρούσαν υπολογιστική χωρητικότητα από τις περιπτώσεις χρήσης του τηλεφώνου. Από την άλλη πλευρά, το puck έχει τη δική του μπαταρία υψηλής χωρητικότητας, SoC υψηλής απόδοσης και έναν προσαρμοσμένο συν-επεξεργαστή AI σχεδιασμένο από την Meta, βελτιστοποιημένο για το Orion".

Φυσικά, το πακ δεν σχεδιάστηκε εν μία νυκτί. Απαιτήθηκαν χρόνια επαναληπτικής εργασίας.

"Δεν ξέραμε πώς οι άνθρωποι θα ήθελαν να αλληλεπιδράσουν με το Orion από την άποψη της εισόδου - δεν υπήρχε τίποτα που θα μπορούσαμε να χρησιμοποιήσουμε στην αγορά", λέει ο Product Manager Matt Resman. "Αν κοιτάξετε τα πρώτα πρωτότυπα γυαλιά μας, ήταν αυτά τα τεράστια ακουστικά που ζύγιζαν τρία ή τέσσερα κιλά. Και όταν προσπαθείς να δημιουργήσεις ένα προϊόν, είναι πολύ δύσκολο να κατανοήσεις την εμπειρία του χρήστη, αν δεν έχεις τον κατάλληλο παράγοντα μορφής. Με το puck, μπορέσαμε να δημιουργήσουμε πρωτότυπα πολύ γρήγορα και να αρχίσουμε να καταλαβαίνουμε πώς θα το χρησιμοποιούσαν οι άνθρωποι".

Με την κωδική ονομασία Omega τις πρώτες μέρες, το puck οραματίστηκε αρχικά από την τότε Oculus Research ως μια ζώνη σχήματος Ω που θα περνούσε γύρω από το λαιμό του χρήστη και θα ήταν συνδεδεμένη με τα γυαλιά...

... μέχρι που κάποιες νέες καινοτομίες από την ομάδα ασύρματης επικοινωνίας της Reality Labs, μεταξύ άλλων, τους επέτρεψαν να κόψουν το καλώδιο. Αυτό επέτρεψε μια πιο φορητή ή φορητή στην τσέπη/στην τσάντα μορφή, η οποία άνοιξε πολλές δυνατότητες.

"Σε εκείνο το σημείο, οι κλήσεις επαυξημένης πραγματικότητας αποτελούσαν ακόμα μια πρωταρχική περίπτωση χρήσης", εξηγεί ο Van Cleave. "Το πακ ήταν το σημείο στο οποίο θα αγκυροβολούνταν τα ολογραφικά βίντεο. Το τοποθετούσατε στο τραπέζι με τον πάγκο των αισθητήρων να σας κοιτάζει, να σας απεικονίζει και στη συνέχεια να προβάλλει από την επιφάνεια του puck αυτόν με τον οποίο μιλούσατε για την κλήση".

"Ο Orion συνδέει τους ανθρώπους και μας φέρνει κοντά", λέει ο Resman. "Μια από τις αρχικές ιδέες για το πακ ήταν να βοηθήσει να δημιουργηθεί αυτή η αίσθηση παρουσίας με άλλους ανθρώπους και να καταστεί δυνατή αυτή η πιο πλούσια μορφή επικοινωνίας".

"Δεν μοιάζει με οτιδήποτε έχετε δει ποτέ - η συσκευή έχει τη δυνατότητα να δημιουργήσει πραγματικά διασκεδαστικές και μοναδικές αλληλεπιδράσεις", προσθέτει ο βιομηχανικός σχεδιαστής Emron Henry. "Η εμπειρία του χρήστη μοιάζει λίγο σαν να απελευθερώνει ένα τζίνι από ένα μπουκάλι, όπου τα ολογράμματα αναδύονται απρόσκοπτα από τη συσκευή και διαλύονται πίσω σε αυτήν".

Όπως μπορείτε πιθανώς να καταλάβετε από τώρα, υπάρχουν περισσότερες δυνατότητες μέσα στο πακ από αυτό που τελικά ενεργοποιήθηκε ως χαρακτηριστικό. Εκτός από τους αισθητήρες και τις κάμερες που θα χρησιμοποιούνταν για κλήσεις AR, το puck διαθέτει απτικά και αισθητήρες 6DOF που θα μπορούσαν να του επιτρέψουν να χρησιμοποιηθεί ως χειριστήριο με παρακολούθηση για την επιλογή και το χειρισμό εικονικών αντικειμένων και την αναπαραγωγή παιχνιδιών AR. Η ομάδα διερεύνησε επίσης την εισαγωγή χωρητικής και δυναμικής αφής, ώστε το puck να μπορεί να χρησιμεύσει ως gamepad όταν κρατιέται τόσο σε κατακόρυφη όσο και σε οριζόντια θέση.

"Συζητούσαμε για την ανάγκη να κουβαλάμε αυτό το επιπλέον πράγμα", λέει ο Van Cleave. "Πώς μπορούμε να το κάνουμε πιο χρήσιμο; Υπήρχε ένα ολόκληρο ρεύμα εργασίας γύρω από αυτό. Και σε κάποιο σημείο, η υπόθεση ήταν ότι το AR gaming θα ήταν αυτή η φονική περίπτωση χρήσης".

Από πολύ νωρίς, ξέραμε ότι έπρεπε να εξερευνήσουμε τις δυνατότητες του πακ να κάνει πράγματα που δεν μπορούν να κάνουν τα τηλέφωνα. Τελικά, καταλήξαμε στη χρήση του οφθαλμικού βλέμματος, του EMG και της παρακολούθησης χεριών για παιχνίδια AR, όπως το Stargazer και το Pong, αλλά δημιουργήσαμε πρωτότυπα διάφορα demo και παιχνίδια που χρησιμοποιούσαν το puck ως χειριστήριο στις πρώτες μέρες του Orion.

0:00 / 0:00

0:00 / 0:00

0:00 / 0:00

Αναπαραστάσεις εξερεύνησης της μπάλας ως χειριστήριο 6DOF για παιχνίδια AR όπως το Pong.

"Επειδή δεν πρόκειται για τηλέφωνο, αυτό μας έδωσε μεγάλη σχεδιαστική ελευθερία", προσθέτει ο Prasad. "Μπορεί να είναι παχύτερο, μπορώ να το κάνω πιο στρογγυλεμένο, ώστε να χωράει άνετα στο χέρι σας ως χειριστήριο. Είναι αρκετά απίστευτο το γεγονός ότι το puck είναι στην πραγματικότητα μικρότερο από το μέσο τηλέφωνο, αλλά είναι πιο ισχυρό από ένα τηλέφωνο, επειδή διαθέτει έναν συν-επεξεργαστή που έχει σχεδιαστεί από τη Meta για την τεχνητή νοημοσύνη και τη μηχανική αντίληψη".

Η ομάδα ασχολήθηκε με το ερώτημα πώς ένα ποιοτικό παιχνίδι AR μπορεί να διαφέρει από ένα παιχνίδι MR ή ένα παιχνίδι κονσόλας. Αυτό σήμαινε τη διερεύνηση διαφορετικών δυνατοτήτων για ένα χειριστήριο παιχνιδιού AR, συμπεριλαμβανομένων των joysticks, της διάταξης φυσικών κουμπιών, των κουμπιών ενεργοποίησης και άλλων.

"Δεν καταλήξαμε να κατασκευάσουμε τίποτα από αυτά τα πράγματα", σημειώνει ο Van Cleave. "Τα κατασκευάσαμε πρωτότυπα, αλλά δεν προχωρήσαμε ποτέ σε πλήρη κατασκευή. Θέλαμε να το κρατήσουμε απλό. Θέλαμε να κάνουμε αυτές τις μαλακές διεπαφές, αλλά όχι να φτιάξουμε φυσικά, μηχανικά κουμπιά".

Και ενώ οι αισθητήρες και τα απτικά δεν ενεργοποιήθηκαν στο τελικό πρωτότυπο του προϊόντος, λειτούργησαν αναπόσπαστα κατά τη διάρκεια της ανάπτυξης, επιτρέποντας στις ομάδες να καταγράφουν σφάλματα, απλά πατώντας μερικές φορές το πάνω μέρος της συσκευής για να ενεργοποιήσουν μια αναφορά σφάλματος.

Καθώς η Τεχνητή Νοημοσύνη άρχισε να αποκτά κεντρική θέση ως βασική περίπτωση χρήσης, ο υπολογισμός τέθηκε σε όλο και πιο έντονη εστίαση. Τελικά, το puck φιλοξενεί την ασύρματη συνδεσιμότητα του Orion, την υπολογιστική ισχύ και τη χωρητικότητα της μπαταρίας - ένα τεράστιο τεχνικό κατόρθωμα από μόνο του - το οποίο συμβάλλει στη μείωση του βάρους και του συντελεστή μορφής των γυαλιών, ενώ παράλληλα διαχέει πολύ περισσότερα θερμικά αέρια λόγω της επιφάνειάς του.

Καθ' όλη τη διάρκεια της εξέλιξής του, ένα πράγμα παρέμεινε το ίδιο: το πακ έχει περισσότερα στοιχεία από όσα βλέπει το ανεκπαίδευτο μάτι. Η υιοθέτηση αντισυμβατικών ιδεών επέτρεψε στις ομάδες μας να εξερευνήσουν, να διευρύνουν τα όρια και να οικοδομήσουν το μέλλον.

"Ορίζουμε μια κατηγορία που δεν υπάρχει ακόμα", σημειώνει ο Henry. "Όπως θα περίμενε κανείς με την Ε&Α, υπήρξαν εκκινήσεις και στάσεις στην πορεία. Πώς θα περιμένουν οι χρήστες να αλληλεπιδράσουν με τα ολογράμματα; Θα προτιμούσαν να χρησιμοποιήσουν ένα τηλεχειριστήριο AR ή αρκεί η παρακολούθηση του χεριού, το βλέμμα των ματιών και το EMG για την είσοδο; Τι αισθάνονται διαισθητικό, χαμηλής τριβής, οικείο και χρήσιμο;"

"Αντί να βλέπουμε το puck ως μια απλή πέτρα, αναρωτηθήκαμε τι άλλο θα μπορούσαμε να προσφέρουμε για να το διαφοροποιήσουμε περαιτέρω από τα τηλέφωνα και να δικαιολογήσουμε γιατί θα θέλατε να το έχετε μαζί σας", παραδέχεται ο Resman. "Μήπως η ακατέργαστη υπολογιστική του ισχύς και ο πρακτικός σχεδιασμός του -που βοήθησε στο να ξεκλειδώσουμε έναν παράγοντα μορφής γυαλιών που μπορείτε ρεαλιστικά να φοράτε όλη μέρα- προσφέρουν τελικά αρκετή αξία; Είναι δουλειά μας να βοηθήσουμε να απαντηθούν αυτά τα ερωτήματα".

"Από πολύ νωρίς, αλλάξαμε ταχύτητα και επικεντρωθήκαμε στο τι μπορούμε να κάνουμε που δεν μπορεί να κάνει ένα τηλέφωνο", προσθέτει ο Van Cleave. "Τα τηλέφωνα πρέπει να έχουν την οθόνη, πρέπει να έχουν τη συγκεκριμένη διάταξη φυσικών κουμπιών που περιμένουν οι χρήστες. Εμείς δεν έχουμε αυτούς τους περιορισμούς. Ο υπολογιστικός μας δίσκος μπορεί να είναι ό,τι θέλουμε να είναι".


Για περισσότερες πληροφορίες σχετικά με τον Orion, ανατρέξτε σε αυτές τις αναρτήσεις ιστολογίου:

Δημοσιεύθηκε την - Σχολιάστε

Orion: AR γυαλιά έχουν φτάσει

TL;DR:

  • Σήμερα στο Συνδέστε το, ο Μαρκ Ζούκερμπεργκ αποκάλυψε το Orion - το πρώτο μας ζευγάρι αληθινών γυαλιών AR, με την προηγούμενη κωδική ονομασία Έργο Nazare.
  • Με κορυφαίο οπτικό πεδίο στον κλάδο, φακοί καρβιδίου πυριτίου, περίπλοκους κυματοδηγούς, προβολείς uLED και πολλά άλλα, το Orion είναι το πιο προηγμένο και πιο γυαλισμένο πρωτότυπο προϊόν μας μέχρι σήμερα.
  • Τώρα, συνεχίζουμε τη βελτιστοποίηση του προϊόντος και τη μείωση του κόστους, καθώς οδηγούμαστε σε μια επεκτάσιμη καταναλωτική συσκευή που θα φέρει επανάσταση στον τρόπο με τον οποίο οι άνθρωποι αλληλεπιδρούν με τον κόσμο.

"Κατασκευάζουμε γυαλιά AR."

Πέντε απλές λέξεις, πριν από πέντε χρόνια. Μαζί τους, βάλαμε μια σημαία στο όραμά μας για ένα μέλλον όπου δεν θα χρειάζεται πλέον να κάνουμε τη λανθασμένη επιλογή μεταξύ ενός κόσμου πληροφοριών στα χέρια μας και του φυσικού κόσμου γύρω μας.

Και τώρα, πέντε χρόνια αργότερα, άλλες πέντε λέξεις που πρόκειται να αλλάξουν και πάλι το παιχνίδι:

Έχουμε κατασκευάσει γυαλιά AR.

https://youtube.com/watch?v=2CJsnyS8u3c%3Fsi%3DTr77gOKEq3PnA7-k%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Στη Meta, η αποστολή μας είναι απλή: να δώσουμε στους ανθρώπους τη δύναμη να χτίσουν κοινότητες και να φέρουν τον κόσμο πιο κοντά. Και στα Reality Labs, δημιουργούμε εργαλεία που βοηθούν τους ανθρώπους να αισθάνονται συνδεδεμένοι οποτεδήποτε και οπουδήποτε. Γι' αυτό εργαζόμαστε για να δημιουργήσουμε την επόμενη υπολογιστική πλατφόρμα που θα θέτει τους ανθρώπους στο επίκεντρο, ώστε να είναι πιο παρόντες, συνδεδεμένοι και ενδυναμωμένοι στον κόσμο.

Γυαλιά Ray-Ban Meta έχουν αποδείξει τη δύναμη της παροχής στους ανθρώπους hands-free πρόσβασης σε βασικά τμήματα της ψηφιακής τους ζωής από τη φυσική τους ζωή. Μπορούμε να μιλάμε σε έναν έξυπνο βοηθό τεχνητής νοημοσύνης, να συνδεόμαστε με φίλους και να απαθανατίζουμε τις στιγμές που έχουν σημασία - και όλα αυτά χωρίς να χρειάζεται ποτέ να βγάλουμε το τηλέφωνο. Αυτά τα κομψά γυαλιά ταιριάζουν άψογα στην καθημερινότητά μας και οι άνθρωποι τα λατρεύουν απόλυτα.

Ωστόσο, ενώ η Ray-Ban Meta άνοιξε μια εντελώς νέα κατηγορία γυαλιών χωρίς οθόνη, υπερφορτισμένων με τεχνητή νοημοσύνη, η βιομηχανία XR ονειρεύεται εδώ και καιρό αληθινά γυαλιά AR - ένα προϊόν που συνδυάζει τα οφέλη μιας μεγάλης ολογραφικής οθόνης και εξατομικευμένης βοήθειας τεχνητής νοημοσύνης σε έναν άνετο, κομψό, φορέσιμο όλη την ημέρα παράγοντα μορφής.

Και σήμερα, κάναμε αυτό το όνειρο πιο κοντά στην πραγματικότητα με την αποκάλυψη του Orion, το οποίο πιστεύουμε ότι είναι το πιο προηγμένο ζευγάρι γυαλιών AR που έχει κατασκευαστεί ποτέ. Στην πραγματικότητα, ίσως είναι η πιο προκλητική συσκευή ηλεκτρονικών καταναλωτικών προϊόντων που κατασκευάστηκε μετά το smartphone. Το Orion είναι το αποτέλεσμα πρωτοποριακών εφευρέσεων σε σχεδόν κάθε τομέα της σύγχρονης πληροφορικής, βασιζόμενο στις τη δουλειά που κάνουμε στα Reality Labs την τελευταία δεκαετία. Είναι γεμάτο με εντελώς νέες τεχνολογίες, συμπεριλαμβανομένης της πιο προηγμένης οθόνης AR που έχει συναρμολογηθεί ποτέ και προσαρμοσμένο πυρίτιο που επιτρέπει την εκτέλεση ισχυρών εμπειριών AR σε ένα ζευγάρι γυαλιά χρησιμοποιώντας ένα κλάσμα της ισχύος και του βάρους ενός ακουστικού MR.

Το σύστημα εισόδου του Orion συνδυάζει απρόσκοπτα τη φωνή, το βλέμμα των ματιών και την παρακολούθηση των χεριών με ένα Βραχιολάκι EMG που σας επιτρέπει να κάνετε σάρωση, κλικ και κύλιση, ενώ το χέρι σας βρίσκεται άνετα στο πλευρό σας, επιτρέποντάς σας να παραμείνετε παρόντες στον κόσμο και στους ανθρώπους γύρω σας, καθώς αλληλεπιδράτε με πλούσιο ψηφιακό περιεχόμενο.

Ξεκινώντας από σήμερα στο Connect και συνεχίζοντας καθ' όλη τη διάρκεια του έτους, ανοίγουμε την πρόσβαση στο πρωτότυπο του προϊόντος Orion για τους υπαλλήλους της Meta και επιλεγμένα, εξωτερικά ακροατήρια, ώστε η ομάδα ανάπτυξης να μπορεί να μάθει, να επαναλάβει και να χτίσει προς την κατεύθυνση της σειράς προϊόντων AR γυαλιών για καταναλωτές, την οποία σχεδιάζουμε να ξεκινήσουμε να αποστέλλουμε στο εγγύς μέλλον.

Γιατί γυαλιά AR;

Υπάρχουν τρεις βασικοί λόγοι για τους οποίους τα γυαλιά AR είναι το κλειδί για την επίτευξη του επόμενου μεγάλου άλματος στην υπολογιστική με γνώμονα τον άνθρωπο.

  1. Επιτρέπουν ψηφιακές εμπειρίες που δεν περιορίζονται από τα όρια της οθόνης ενός smartphone. Με τις μεγάλες ολογραφικές οθόνες, μπορείτε να χρησιμοποιήσετε τον φυσικό κόσμο ως καμβά, τοποθετώντας 2D και 3D περιεχόμενο και εμπειρίες οπουδήποτε θέλετε.
  2. Ενσωματώνουν απρόσκοπτα την τεχνητή νοημοσύνη που μπορεί να αντιληφθεί και να κατανοήσει τον κόσμο γύρω σας, προκειμένου να προβλέψει και να αντιμετωπίσει προληπτικά τις ανάγκες σας.
  3. Είναι ελαφριές και ιδανικές για χρήση τόσο σε εσωτερικούς όσο και σε εξωτερικούς χώρους - και επιτρέπουν στους ανθρώπους να βλέπουν ο ένας το πραγματικό πρόσωπο, τα πραγματικά μάτια και τις πραγματικές εκφράσεις του άλλου.

Αυτό είναι το αστέρι του βορρά προς το οποίο ο κλάδος μας χτίζει: ένα προϊόν που συνδυάζει την ευκολία και την αμεσότητα των φορητών συσκευών με μεγάλη οθόνη, είσοδο υψηλού εύρους ζώνης και ΤΝ με βάση το περιεχόμενο, σε έναν παράγοντα μορφής που οι άνθρωποι αισθάνονται άνετα να φορούν στην καθημερινή τους ζωή.

Συμπαγής παράγοντας μορφής, σύνθετες προκλήσεις

Εδώ και χρόνια, βρισκόμαστε αντιμέτωποι με μια λανθασμένη επιλογή - είτε ακουστικά εικονικής και μικτής πραγματικότητας που επιτρέπουν βαθιές, καθηλωτικές εμπειρίες σε ογκώδη μορφή είτε γυαλιά που είναι ιδανικά για ολοήμερη χρήση, αλλά δεν προσφέρουν πλούσιες οπτικές εφαρμογές και εμπειρίες λόγω της έλλειψης μεγάλης οθόνης και αντίστοιχης υπολογιστικής ισχύος.

Αλλά τα θέλουμε όλα, χωρίς συμβιβασμούς. Εδώ και χρόνια, δουλεύουμε σκληρά για να πάρουμε τις απίστευτες χωρικές εμπειρίες που προσφέρουν τα ακουστικά VR και MR και να σμικρύνουμε την τεχνολογία που είναι απαραίτητη για την παροχή αυτών των εμπειριών σε ένα ζευγάρι ελαφρών, κομψών γυαλιών. Η επίτευξη του παράγοντα μορφής, η παροχή ολογραφικών οθονών, η ανάπτυξη συναρπαστικών εμπειριών AR και η δημιουργία νέων παραδειγμάτων αλληλεπίδρασης ανθρώπου-υπολογιστή (HCI) - και όλα αυτά σε ένα συνεκτικό προϊόν - είναι μία από τις πιο δύσκολες προκλήσεις που έχει αντιμετωπίσει ποτέ ο κλάδος μας. Ήταν τόσο μεγάλη πρόκληση που πιστεύαμε ότι είχαμε λιγότερες από 10 τοις εκατό πιθανότητες να τα καταφέρουμε με επιτυχία.

Μέχρι τώρα.

Μια πρωτοποριακή οθόνη σε έναν απαράμιλλο παράγοντα μορφής

Στις 70 μοίρες περίπου, το Orion διαθέτει το μεγαλύτερο οπτικό πεδίο στο μικρότερο μέγεθος γυαλιών AR που έχει κατασκευαστεί μέχρι σήμερα. Αυτό το οπτικό πεδίο ξεκλειδώνει πραγματικά καθηλωτικές περιπτώσεις χρήσης για το Orion, από παράθυρα πολλαπλών εργασιών και ψυχαγωγία μεγάλης οθόνης μέχρι ολογράμματα ανθρώπων σε φυσικό μέγεθος - όλο το ψηφιακό περιεχόμενο που μπορεί να συνδυάζεται απρόσκοπτα με την άποψή σας για τον φυσικό κόσμο.

Για τον Orion, το οπτικό πεδίο ήταν το ιερό μας δισκοπότηρο. Προσκρούαμε στους νόμους της φυσικής και έπρεπε να λυγίσουμε τις ακτίνες φωτός με τρόπους που δεν λυγίζουν φυσιολογικά - και έπρεπε να το κάνουμε σε ένα φάκελο ισχύος που μετριέται σε χιλιοστοβάτ.

Αντί για γυαλί, φτιάξαμε τους φακούς από καρβίδιο του πυριτίου-μια νέα εφαρμογή για τα γυαλιά AR. Καρβίδιο του πυριτίου είναι απίστευτα ελαφρύ, δεν προκαλεί οπτικά τεχνουργήματα ή αδέσποτο φως και έχει υψηλό δείκτη διάθλασης - όλες οι οπτικές ιδιότητες που είναι βασικές για ένα μεγάλο οπτικό πεδίο. Οι ίδιοι οι κυματοδηγοί έχουν πραγματικά περίπλοκες και πολύπλοκες τρισδιάστατες δομές νανοκλίμακας για τη διάθλαση ή τη διάχυση του φωτός με τους τρόπους που είναι απαραίτητοι για την επίτευξη αυτού του οπτικού πεδίου. Και οι προβολείς είναι uLEDs - ένας νέος τύπος τεχνολογίας οθόνης που είναι εξαιρετικά μικρός και εξαιρετικά αποδοτικός στην κατανάλωση ενέργειας.

Το Orion είναι αναμφισβήτητα ένα ζευγάρι γυαλιά τόσο στην εμφάνιση όσο και στην αίσθηση - με διαφανείς φακούς. Σε αντίθεση με τα ακουστικά MR ή άλλα γυαλιά AR σήμερα, μπορείτε ακόμα να βλέπετε τα πραγματικά μάτια και τις εκφράσεις των άλλων, ώστε να είστε παρόντες και να μοιράζεστε την εμπειρία με τους ανθρώπους γύρω σας. Χρειάστηκαν δεκάδες καινοτομίες για να φτάσει ο βιομηχανικός σχεδιασμός σε μια σύγχρονη μορφή γυαλιών που θα νιώθετε άνετα να φοράτε καθημερινά. Το Orion είναι ένα κατόρθωμα σμίκρυνσης - τα εξαρτήματα είναι πακεταρισμένα σε ένα κλάσμα του χιλιοστού. Και καταφέραμε να ενσωματώσουμε επτά μικροσκοπικές κάμερες και αισθητήρες στα χείλη του σκελετού.

Έπρεπε να διατηρήσουμε την οπτική ακρίβεια στο ένα δέκατο του πάχους μιας ανθρώπινης τρίχας. Και το σύστημα μπορεί να ανιχνεύει μικροσκοπικές ποσότητες κίνησης -όπως τα πλαίσια που διαστέλλονται ή συστέλλονται σε διάφορες θερμοκρασίες δωματίου- και στη συνέχεια να διορθώνει ψηφιακά την απαραίτητη οπτική ευθυγράμμιση, και όλα αυτά μέσα σε χιλιοστά του δευτερολέπτου. Κατασκευάσαμε τα πλαίσια από μαγνήσιο - το ίδιο υλικό που χρησιμοποιείται στα αγωνιστικά αυτοκίνητα F1 και στα διαστημόπλοια - επειδή είναι ελαφρύ αλλά άκαμπτο, ώστε να διατηρεί τα οπτικά στοιχεία σε ευθυγράμμιση και να απομακρύνει αποτελεσματικά τη θερμότητα.

Θέρμανση και ψύξη

Αφού σπάσαμε την οθόνη (χωρίς λογοπαίγνιο) και ξεπεράσαμε τα προβλήματα φυσικής, έπρεπε να αντιμετωπίσουμε την πρόκληση των πραγματικά ισχυρών υπολογιστών σε συνδυασμό με την πραγματικά χαμηλή κατανάλωση ενέργειας και την ανάγκη απαγωγής θερμότητας. Σε αντίθεση με τα σημερινά ακουστικά MR, δεν μπορείτε να τοποθετήσετε έναν ανεμιστήρα σε ένα ζευγάρι γυαλιά. Έτσι, έπρεπε να γίνουμε δημιουργικοί. Πολλά από τα υλικά που χρησιμοποιούνται για την ψύξη του Orion είναι παρόμοια με αυτά που χρησιμοποιεί η NASA για την ψύξη δορυφόρων στο διάστημα.

Χτίσαμε εξαιρετικά εξειδικευμένο προσαρμοσμένο πυρίτιο που είναι εξαιρετικά αποδοτικός σε ισχύ και βελτιστοποιημένος για τους αλγορίθμους τεχνητής νοημοσύνης, μηχανικής αντίληψης και γραφικών. Κατασκευάσαμε πολλαπλά προσαρμοσμένα τσιπ και δεκάδες εξαιρετικά προσαρμοσμένα μπλοκ IP πυριτίου μέσα σε αυτά τα τσιπ. Αυτό μας επιτρέπει να πάρουμε τους αλγορίθμους που είναι απαραίτητοι για την παρακολούθηση χεριών και ματιών, καθώς και την τεχνολογία ταυτόχρονου εντοπισμού και χαρτογράφησης (SLAM), η οποία κανονικά απαιτεί εκατοντάδες χιλιοστά του βατ ισχύος -και συνεπώς παράγει αντίστοιχη ποσότητα θερμότητας- και να τη συρρικνώσουμε σε μόλις μερικές δεκάδες χιλιοστά του βατ.

Και ναι, το προσαρμοσμένο πυρίτιο εξακολουθεί να παίζει κρίσιμο ρόλο στην ανάπτυξη προϊόντων στα Reality Labs, παρά τα όσα μπορεί να έχετε διαβάσει αλλού. 😎

Αβίαστο EMG

Κάθε νέα υπολογιστική πλατφόρμα φέρνει μαζί της αλλαγή παραδείγματος στον τρόπο με τον οποίο αλληλεπιδρούμε με τις συσκευές μας. Η εφεύρεση του ποντικιού βοήθησε να ανοίξει ο δρόμος για τις γραφικές διεπαφές χρήστη (GUI) που κυριαρχούν στον κόσμο μας σήμερα, και τα smartphones δεν άρχισαν να κερδίζουν πραγματικά έδαφος μέχρι την έλευση της οθόνης αφής. Και ο ίδιος κανόνας ισχύει και για τα wearables.

Έχουμε μιλήσει για το έργο μας με ηλεκτρομυογραφία ή EMG, εδώ και χρόνια, με γνώμονα την πεποίθησή μας ότι η είσοδος για τα γυαλιά AR πρέπει να είναι γρήγορη, βολική, αξιόπιστη, διακριτική και κοινωνικά αποδεκτή. Και τώρα, αυτή η εργασία είναι έτοιμη για την prime time.

Το σύστημα εισόδου και αλληλεπίδρασης της Orion συνδυάζει άψογα τη φωνή, το βλέμμα και την παρακολούθηση του χεριού με ένα EMG βραχιολάκι που σας επιτρέπει να σαρώνετε, να κάνετε κλικ και να κάνετε κύλιση με ευκολία.

Λειτουργεί - και μοιάζει με μαγεία. Φανταστείτε να τραβάτε μια φωτογραφία στο πρωινό σας τρέξιμο με ένα απλό άγγιγμα των άκρων των δακτύλων σας ή να πλοηγείστε στα μενού με ελάχιστα αισθητές κινήσεις των χεριών σας. Το βραχιολάκι μας συνδυάζει ένα ύφασμα υψηλής απόδοσης με ενσωματωμένους αισθητήρες EMG για να ανιχνεύει τα ηλεκτρικά σήματα που παράγονται ακόμη και από τις πιο μικρές μυϊκές κινήσεις. Στη συνέχεια, ένας επεξεργαστής ML της συσκευής ερμηνεύει αυτά τα σήματα ΗΜΓ για να παράγει συμβάντα εισόδου που μεταδίδονται ασύρματα στα γυαλιά. Το σύστημα προσαρμόζεται σε εσάς, ώστε να γίνεται καλύτερο και πιο ικανό στην αναγνώριση των πιο λεπτών χειρονομιών με την πάροδο του χρόνου. Και σήμερα, μοιραζόμαστε περισσότερα σχετικά με την υποστήριξή μας για εξωτερική έρευνα που επικεντρώνεται σε επέκταση των δυνατοτήτων ισότητας και προσβασιμότητας των καρτελών ΗΜΓ.

Γνωρίστε το Wireless Compute Puck

Τα αληθινά γυαλιά AR πρέπει να είναι ασύρματα και πρέπει επίσης να είναι μικρά.Έτσι φτιάξαμε ένα ασύρματο υπολογιστικό puck για το Orion. Απομακρύνει ένα μέρος του φορτίου από τα γυαλιά, επιτρέποντας μεγαλύτερη διάρκεια ζωής της μπαταρίας και έναν καλύτερο παράγοντα μορφής με χαμηλή καθυστέρηση.

Τα γυαλιά εκτελούν όλους τους αλγορίθμους παρακολούθησης χεριών, παρακολούθησης ματιών, SLAM και εξειδικευμένους αλγορίθμους γραφικών κλειδώματος του κόσμου AR, ενώ η λογική της εφαρμογής εκτελείται στο puck για να διατηρηθούν τα γυαλιά όσο το δυνατόν πιο ελαφριά και συμπαγή.

Το puck διαθέτει διπλούς επεξεργαστές, συμπεριλαμβανομένου ενός προσαρμοσμένου που έχει σχεδιαστεί εδώ στη Meta, και παρέχει την απαραίτητη υπολογιστική ισχύ για την απόδοση γραφικών χαμηλής καθυστέρησης, την τεχνητή νοημοσύνη και κάποια πρόσθετη αντίληψη της μηχανής.

Και επειδή είναι μικρό και κομψό, μπορείτε να το πετάξετε άνετα σε μια τσάντα ή στην τσέπη σας και να συνεχίσετε τις δουλειές σας - χωρίς δεσμεύσεις.

Εμπειρίες AR

Φυσικά, όπως συμβαίνει με κάθε κομμάτι υλικού, είναι τόσο καλό όσο τα πράγματα που μπορείτε να do με αυτό. Και ενώ είναι ακόμα νωρίς, οι εμπειρίες που προσφέρει ο Orion είναι μια συναρπαστική ματιά στο τι πρόκειται να συμβεί.

https://youtube.com/watch?v=HkdSv3QPhNw%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Έχουμε τον έξυπνο βοηθό μας, Meta AI, που εκτελείται στον Orion. Καταλαβαίνει τι κοιτάτε στον φυσικό κόσμο και μπορεί να σας βοηθήσει με χρήσιμες απεικονίσεις. Το Orion χρησιμοποιεί το ίδιο μοντέλο Llama που τροφοδοτεί τις εμπειρίες τεχνητής νοημοσύνης που τρέχουν σήμερα στα έξυπνα γυαλιά Ray-Ban Meta, καθώς και προσαρμοσμένα ερευνητικά μοντέλα για την επίδειξη πιθανών περιπτώσεων χρήσης για τη μελλοντική ανάπτυξη wearables.

Μπορείτε να πραγματοποιείτε βιντεοκλήσεις hands-free εν κινήσει για να ενημερώνεστε με φίλους και συγγενείς σε πραγματικό χρόνο και μπορείτε να παραμείνετε συνδεδεμένοι στο WhatsApp και το Messenger για να βλέπετε και να στέλνετε μηνύματα. Δεν χρειάζεται να βγάλετε το τηλέφωνό σας, να το ξεκλειδώσετε, να βρείτε τη σωστή εφαρμογή και να ενημερώσετε τον φίλο σας ότι έχετε αργήσει για το δείπνο - μπορείτε να τα κάνετε όλα αυτά μέσω των γυαλιών σας.

https://youtube.com/watch?v=el7lUVvu8Bo%3F%26controls%3D0%3Fautoplay%3D0%26color%3Dwhite%26cc_lang_pref%3Den%26cc_load_policy%3D0%26enablejsapi%3D1%26frameborder%3D0%26hl%3Den%26rel%3D0%26origin%3Dhttps%253A%252F%252Fwww.meta.com

Μπορείτε να παίξετε κοινά παιχνίδια AR με την οικογένειά σας στην άλλη άκρη της χώρας ή με τον φίλο σας στην άλλη άκρη του καναπέ. Και η μεγάλη οθόνη του Orion σας επιτρέπει να κάνετε multitasking με πολλαπλά παράθυρα για να κάνετε πράγματα χωρίς να χρειάζεται να κουβαλάτε μαζί σας τον φορητό σας υπολογιστή.

Οι εμπειρίες που είναι διαθέσιμες στο Orion σήμερα θα βοηθήσουν να διαμορφωθεί ο οδικός χάρτης για τη σειρά γυαλιών AR για καταναλωτές στο μέλλον. Οι ομάδες μας θα συνεχίσουν να επαναλαμβάνουν και να δημιουργούν νέες καθηλωτικές κοινωνικές εμπειρίες, μαζί με τους συνεργάτες μας προγραμματιστές, και ανυπομονούμε να μοιραστούμε αυτό που θα ακολουθήσει.

Ένα σκόπιμο πρωτότυπο προϊόντος

Παρόλο που το Orion δεν θα φτάσει στα χέρια των καταναλωτών, μην κάνετε κανένα λάθος: Αυτό είναι όχι ένα ερευνητικό πρωτότυπο. Είναι το πιο γυαλισμένο πρωτότυπο προϊόντος που έχουμε αναπτύξει ποτέ - και είναι πραγματικά αντιπροσωπευτικό για κάτι που θα μπορούσε να στέλνουν στους καταναλωτές. Αντί να βιαστούμε να το βγάλουμε στα ράφια, αποφασίσαμε να επικεντρωθούμε πρώτα στην εσωτερική ανάπτυξη, πράγμα που σημαίνει ότι μπορούμε να συνεχίσουμε να χτίζουμε γρήγορα και να συνεχίσουμε να διευρύνουμε τα όρια της τεχνολογίας και των εμπειριών.

Και αυτό σημαίνει ότι θα φτάσουμε σε ένα ακόμη καλύτερο καταναλωτικό προϊόν πιο γρήγορα.

Τι θα ακολουθήσει

Δύο σημαντικά εμπόδια στέκονται εδώ και καιρό στο δρόμο για τα κύρια καταναλωτικά γυαλιά AR: οι τεχνολογικές ανακαλύψεις που είναι απαραίτητες για την παροχή μιας μεγάλης οθόνης σε έναν συμπαγή τύπο γυαλιών και η ανάγκη για χρήσιμες και συναρπαστικές εμπειρίες AR που μπορούν να τρέξουν σε αυτά τα γυαλιά. Το Orion αποτελεί ένα τεράστιο ορόσημο, παρέχοντας για πρώτη φορά πραγματικές εμπειρίες AR που τρέχουν σε λογικά κομψό υλικό.

Τώρα που μοιραστήκαμε τον Orion με τον κόσμο, επικεντρωνόμαστε σε μερικά πράγματα:

  • Ρύθμιση της ποιότητας της οθόνης AR για να γίνει η εικόνα ακόμα πιο ευκρινής
  • Βελτιστοποίηση όπου μπορούμε για να κάνουμε τον παράγοντα μορφής ακόμα μικρότερο
  • Οικοδόμηση σε κλίμακα για να γίνουν πιο προσιτές

Τα επόμενα χρόνια, μπορείτε να περιμένετε να δείτε νέες συσκευές από εμάς που θα βασίζονται στις προσπάθειες Ε&Α που καταβάλλουμε. Και ορισμένες από τις καινοτομίες της Orion έχουν επεκταθεί στα σημερινά καταναλωτικά προϊόντα μας σήμερα, καθώς και στον μελλοντικό χάρτη πορείας των προϊόντων μας. Έχουμε βελτιστοποιήσει ορισμένους από τους αλγορίθμους μας για τη χωρική αντίληψη, οι οποίοι εκτελούνται τόσο σε Meta Quest 3S και τον Ωρίωνα. Αν και το σύστημα οπτικής και διακριτικής χειρονομιακής εισόδου σχεδιάστηκε αρχικά για το Orion, σκοπεύουμε να το χρησιμοποιήσουμε και σε μελλοντικά προϊόντα. Επίσης, διερευνούμε τη χρήση των βραχιολιών EMG σε μελλοντικά καταναλωτικά προϊόντα.

Ο Orion δεν είναι απλώς ένα παράθυρο στο μέλλον - είναι μια ματιά στις πολύ πραγματικές δυνατότητες που είναι εφικτές σήμερα. Το δημιουργήσαμε επιδιώκοντας αυτό που κάνουμε καλύτερα: να βοηθάμε τους ανθρώπους να συνδέονται. Από τα γυαλιά Ray-Ban Meta μέχρι το Orion, έχουμε δει το καλό που μπορεί να προκύψει από το να αφήνουμε τους ανθρώπους να παραμένουν πιο παρόντες και ενδυναμωμένοι στον φυσικό κόσμο, ακόμη και όταν αξιοποιούν όλο τον πρόσθετο πλούτο που έχει να προσφέρει ο ψηφιακός κόσμος.

Πιστεύουμε ότι δεν θα πρέπει να χρειάζεται να επιλέξετε ανάμεσα στα δύο. Και με την επόμενη υπολογιστική πλατφόρμα, δεν θα χρειαστεί να το κάνετε.


Για περισσότερες πληροφορίες σχετικά με τον Orion, ανατρέξτε σε αυτές τις αναρτήσεις ιστολογίου:

Δημοσιεύθηκε την - Σχολιάστε

EgoMimic: Georgia Tech χρησιμοποιεί τα ερευνητικά γυαλιά Project Aria για να βοηθήσει στην εκπαίδευση ανθρωποειδών ρομπότ

Today, we’re highlighting new research from Georgia Tech that helps train robots to perform basic everyday tasks using egocentric recordings from wearers of Meta’s Project Aria research glasses. Check out the video below, read the full story, or apply for your own Project Aria Research Kit.

Imagine having help completing everyday tasks in your home such as doing the laundry, washing dishes, and making repairs. We already use tools to help with these tasks, like washing machines, dishwashers, and electric drills. But what if you could have an even more powerful and flexible tool in the form of a humanoid robot that could learn from you and accelerate any number of physical projects on your to-do list?

Even if you had the available hardware system, teaching a robot to do everyday tasks can only be achieved through a slow and clunky data collection method called robot teleoperation. Until now. By using the Project Aria Research Kit, Professor Danfei Xu and the Robotic Learning and Reasoning Lab at Georgia Tech use the egocentric sensors on Aria glasses to create what they call “human data” for tasks that they want a humanoid robot to replicate. They use human data to dramatically reduce the amount of robot teleoperation data needed to train a robot’s policy—a breakthrough that could some day make humanoid robots capable of learning any number of tasks a human could demonstrate.

Kareer teleoperates the robot to capture co-training data for EgoMimic. Teleoperation can be difficult to scale and require significant human effort.

“Traditionally, collecting data for robotics means creating demonstration data,” says Simar Kareer, a PhD student in Georgia Tech’s School of Interactive Computing. “You operate the robot’s joints with a controller to move it and achieve the task you want, and you do this hundreds of times while recording sensor data, then train your models. This is slow and difficult. The only way to break that cycle is to detach the data collection from the robot itself.”

Today, robot policy models are trained with large amounts of targeted demonstration data specific to each narrow task at a high cost. Kareer hypothesizes that passively collected data from many researchers, like the data captured by Aria glasses, could instead be used to enable data creation for a much broader set of tasks to create more generally useful robots in the future.

Inspired by Project Aria και Ego-Exo4D which includes a massive egocentric dataset of over 3K hours of video recordings of daily-life activities, Kareer developed EgoMimic, a new algorithmic framework that utilizes human data and robot data for humanoid robot development.

“When I looked at Ego4D, I saw a dataset that’s the same as all the large robot datasets we’re trying to collect, except it’s with humans,” Kareer explains. “You just wear a pair of glasses, and you go do things. It doesn’t need to come from the robot. It should come from something more scalable and passively generated, which is us.” In Kareer’s research, Aria glasses were used to create human data for co-training the EgoMimic framework.

Kareer creates co-training human data by recording with Aria glasses while folding a t-shirt.

Aria glasses aren’t just used for human data collection in Georgia Tech’s research. They’re also used as an integral component of the robot’s real-time operation setup. Aria glasses are mounted to their humanoid robot platform just like a pair of eyes and serve as an integrated sensor package that enables the robot to perceive its environment in real time. The Aria Client SDK is utilized to stream Aria’s sensor data directly into the robot’s policy, running on an attached PC, which in turn controls the robot’s actuation. Using Aria glasses for both the data collection and the real-time perception pipeline minimizes the domain gap between the human demonstrator and the robot, paving the way for scaled human data generation for future robotics task training.

Aria glasses mounted to the top of the robot provide the system with sensor data that allows the robot to perceive and interact with the space.

Thanks to EgoMimic, Kareer achieved a 400% increase in his robot’s performance across various tasks vs previous methods with just 90 minutes of Aria recordings. The robot was also able to successfully perform these tasks in previously unseen environments.

In the future, humanoid robots could be trained at scale using egocentric data in order to perform a variety of tasks in the same way humans do.

“We look at Aria as an investment in the research community,” says James Fort, a Reality Labs Research Product Manager at Meta. “The more that the egocentric research community standardizes, the more researchers will be able to collaborate. It’s really through scaling with the community like this that we can start to solve bigger problems around how things are going to work in the future.”

Kareer will present his paper on EgoMimic at the 2025 IEEE Engineers’ International Conference on Robotics and Automation (ICRA) in Atlanta.

Δημοσιεύθηκε την - Σχολιάστε

Introducing Aria Gen 2: Unlocking New Research in Machine Perception, Contextual AI, Robotics, and More

Since its launch in 2020, Project Aria has enabled researchers across the world to advance the state of the art in machine perception and AI, through access to cutting-edge research hardware and open-source datasets, models, and tooling. Today, we’re excited to announce the next step in this journey: the introduction of Aria Gen 2 glasses. This next generation of hardware will unlock new possibilities across a wide range of research areas including machine perception, egocentric and contextual AI, and robotics.

0:00 / 0:00

For researchers looking to explore how AI systems can better understand the world from a human perspective, Aria Gen 2 glasses add a new set of capabilities to the Aria platform. They include a number of advances not found on any other device available today, and access to these breakthrough technologies will enable researchers to push the boundaries of what’s possible.

Compared to Aria Gen 1, Aria Gen 2’s unique value proposition includes:

  • State-of-the-art sensor suite: The upgraded sensor suite features an RGB camera, 6DOF SLAM cameras, eye tracking cameras, spatial microphones, IMUs, barometer, magnetometer, and GNSS. Compared to its predecessor, Aria Gen 1, the new generation introduces two innovative sensors embedded in the nosepad: a PPG sensor for measuring heart rate and a contact microphone to distinguish the wearer’s voice from that of bystanders.
  • Ultra low-power and on-device machine perception: SLAM, eye tracking, hand tracking, and speech recognition are all processed on-device using Meta’s custom silicon.
  • All-day usability: Aria Gen 2 glasses are capable of six to eight hours of continuous use, weigh about 75 grams, and have foldable arms for easy portability.
  • Interaction through audio: Users get audio feedback via best-in-class open-ear force-canceling speakers, enabling user-in-the-loop system prototyping.

Our decade-long journey to create the next computing platform has led to the development of these critical technologies. At Meta, teams at Reality Labs Research and the FAIR AI lab will use them to advance our long-term research vision. Making them available to academic and commercial research labs through Project Aria will further advance open research and public understanding of a key set of technologies that we believe will help shape the future of computing and AI.

The open research enabled by Project Aria since 2020 has already led to important work, including the creation of open-source tools in wide use across academia and industry. The Ego-Exo4D dataset, collected using the first generation of Aria glasses, has become a foundational tool across modern computer vision and the growing field of robotics. Researchers at Georgia Tech recently showed how the Aria Research Kit can help humanoid robots learn to assist people in the home, while teams at BMW used it to explore how to integrate augmented and virtual reality systems into smart vehicles.

And Aria is also enabling the development of new technologies for accessibility. The first-generation Aria glasses were utilized by Carnegie Mellon University in their NavCog project, which aimed to build technologies to assist blind and low-vision individuals with indoor navigation. Building on this foundation, the Aria Gen 2 glasses are now being leveraged by Envision, a company dedicated to creating solutions for people who are blind or have low vision. Envision is exploring the integration of its Ally AI assistant and spatial audio using the latest Aria Gen 2 glasses to enhance indoor navigation and accessibility experiences.

0:00 / 0:00

Envision used the on-device SLAM capabilities of Aria Gen 2, along with spatial audio features via onboard speakers, to assist blind and low-vision individuals seamlessly navigate indoor environments. This innovative use of the technologies, which is still in the exploratory and research phase, exemplifies how researchers can leverage Aria Gen 2 glasses for prototyping AI experiences based on egocentric observations. The advanced sensors and on-device machine perception capabilities, including SLAM, eye tracking, hand tracking, and audio interactions, also make them ideal for data collection for research and robotics applications.

Over the coming months, we’ll share more details about the timing of device availability to partners. Researchers interested in accessing Aria Gen 2 can sign up to receive updates. We’re excited to see how researchers will leverage Aria Gen 2 to pave the way for future innovations that will shape the next computing platform.

Δημοσιεύθηκε την - Σχολιάστε

Ray-Ban Meta - Στυλ και τεχνολογία σε ένα πλαίσιο

Ray-Ban has been an iconic name in eyewear fashion for decades. But in collaboration with Meta (formerly Facebook), they’ve launched a product that pushes boundaries – the Ray-Ban Meta smart glasses. This fusion of classic design with modern technology offers a unique experience for both fashion enthusiasts and tech lovers.

At First Glance: Classic with a Twist

At first look, they seem like classic Ray-Bans – elegant black frames, premium craftsmanship, and a stylish eco-leather case. But take a closer look and you’ll realize they hide more than just style – they’re glasses with a built-in camera, microphone, speakers, and smartphone connectivity.

What Can Ray-Ban Meta Do?

  • Video and photo capture: A discreet camera on the frame lets you capture the world from your point of view – hands-free.
  • Music and calls: With built-in directional speakers and microphones, you can take calls or listen to music without earbuds.
  • Sync with the Meta View app: Everything you record syncs automatically to the app, ready to be shared on your socials.
  • Voice control: Thanks to voice assistant support, you can control your glasses with simple voice commands – ideal for driving, sports, or on-the-go use.

Who Are They For?

Ray-Ban Meta glasses are perfect for content creators, influencers, travelers, or anyone who wants to capture moments without pulling out their phone. They’re also great for business use – ideal for quick documentation, live streams, or mobile video calls.

Final Verdict: Smart Elegance Without Compromise

If you’re looking for eyewear that blends classic fashion with top-tier technology, Ray-Ban Meta is the clear choice. They’re not just a stylish accessory – they’re smart glasses that redefine how we see and capture the world around us.

Δημοσιεύθηκε την - Σχολιάστε

Το Meta View είναι τώρα η εφαρμογή Meta AI: Τι είναι καινούργιο & τι παραμένει το ίδιο

Μια σημαντική ενημέρωση για Γυαλιά Ray-Ban Meta ιδιοκτήτες σήμερα: Η εφαρμογή Meta View είναι τώρα η εφαρμογή Meta AI στο iOS και Android. Μαζί με το νέο όνομα, η εφαρμογή AI glasses companion app αναβαθμίζεται, με νέα χαρακτηριστικά που θα κάνουν την εμπειρία σας πιο διασκεδαστική, χρήσιμη και προσωπική από ποτέ. Είμαστε εδώ για να σας ξεναγήσουμε στις αλλαγές. Αλλά να είστε σίγουροι ότι τα βασικά χαρακτηριστικά που έχετε γνωρίσει θα παραμείνουν τα ίδια.

Τα γυαλιά έχουν αναδειχθεί ως η πιο συναρπαστική νέα κατηγορία υλικού της εποχής της τεχνητής νοημοσύνης, με τα γυαλιά Ray-Ban Meta να πρωτοστατούν στον καθορισμό των δυνατοτήτων. Είμαστε ενθουσιασμένοι που φέρνουμε τις ίδιες φωνητικές εμπειρίες που έκαναν τα γυαλιά μας τόσο δημοφιλή σε περισσότερες επιφάνειες, όπως η εφαρμογή Meta AI.

Φιλικό & οικείο

Ενώ η εφαρμογή Meta AI έχει νέο όνομα και εμφάνιση, εξακολουθεί να είναι η συνοδευτική εφαρμογή για τα γυαλιά Ray-Ban Meta που γνωρίζετε και αγαπάτε. Οι υπάρχουσες φωτογραφίες και τα βίντεο που έχετε τραβήξει με τα γυαλιά σας, οι ρυθμίσεις της συσκευής και οι λειτουργίες που γνωρίζετε από το Meta View εξακολουθούν να είναι διαθέσιμες στη νέα εφαρμογή. Επίσης, μεταφέρουμε αυτόματα τα υπάρχοντα μέσα και τις ρυθμίσεις της συσκευής σας από το Meta View στην εφαρμογή Meta AI, ώστε να μη χάσετε τίποτα. Και όπως ακριβώς παρουσιάσαμε στην τελευταία μας ενημέρωση, μπορείτε να χρησιμοποιήσετε την εφαρμογή Meta AI για να αντιστοιχίσετε και να διαχειριστείτε έως και επτά ζευγάρια γυαλιών.

Μια συνοδευτική εφαρμογή "Όλα σε ένα

Νέα γυαλιά Ray-Ban Meta; Η εφαρμογή Meta AI είναι ο σύντροφός σας για να ρυθμίσετε και να διαχειριστείτε τη συσκευή σας. Μπορείτε να εισάγετε, να προβάλλετε και να μοιράζεστε τις φωτογραφίες και τα βίντεο που τραβήξατε με τα γυαλιά AI απευθείας από την εφαρμογή. Θα χρησιμοποιήσετε επίσης την εφαρμογή Meta AI για να διαμορφώσετε τις ρυθμίσεις σας, να ενημερώσετε το λογισμικό σας και να διαχειριστείτε τις επιλογές απορρήτου. Μπορείτε να ρυθμίσετε φωνητικές εντολές από την εφαρμογή, ώστε να μπορείτε να χρησιμοποιείτε τα γυαλιά σας hands-free, και να προσαρμόζετε ακόμη και τις ρυθμίσεις της κάμεράς σας.

Με την ενσωμάτωση του Meta AI και όλων όσων προσφέρει στην εφαρμογή συνοδευτικού προγράμματος, βελτιώνουμε την εμπειρία σας με τα γυαλιά Ray-Ban Meta. Μπορείτε να γίνετε δημιουργικοί με τις φωτογραφίες από τα γυαλιά σας απευθείας στην εφαρμογή Meta AI - αφού εισαγάγετε τις φωτογραφίες σας, ζητήστε από το Meta AI στην εφαρμογή να προσθέσει, να αφαιρέσει ή να αλλάξει μέρη της εικόνας.

Εξετάζετε μια νέα πόλη; Ζητήστε από το Meta AI να σας πει περισσότερα για ένα τοπικό αξιοθέατο. Μπορείτε να αποκτήσετε πρόσβαση και να διαχειριστείτε τις αποθηκευμένες αναμνήσεις για να βελτιώσετε τις εξατομικευμένες απαντήσεις από το Meta AI στην εφαρμογή και τα γυαλιά σας με την πάροδο του χρόνου. Μπορείτε επίσης να ξεκινήσετε μια συνομιλία με το Meta AI στα γυαλιά σας Ray-Ban Meta και, στη συνέχεια, να έχετε πρόσβαση στην καρτέλα ιστορικού σας από την εφαρμογή για να συνεχίσετε από εκεί που σταματήσατε.

Νέα και αξιοσημείωτα χαρακτηριστικά στην εφαρμογή

Η εφαρμογή Meta AI σχεδιάστηκε για να σας βοηθήσει να βρείτε έμπνευση και να αξιοποιήσετε στο έπακρο τα γυαλιά σας.

Το νέο Ανακαλύψτε την τροφοδοσία σας επιτρέπει να δείτε πώς άλλοι άνθρωποι χρησιμοποιούν την ΤΝ για να κάνουν πράγματα. Είναι ένας πολύ καλός τρόπος για να βρείτε νέες ιδέες. Ανακυκλώστε μια έξυπνη προτροπή ή αναμείξτε την για να την κάνετε δική σας. Και όπως πάντα, εσείς έχετε τον έλεγχο: Οι συνομιλίες σας με το Meta AI δεν είναι δημόσιες, εκτός αν επιλέξετε να τις μοιραστείτε στην τροφοδοσία.

Αν και το να μιλάτε με την τεχνητή νοημοσύνη χρησιμοποιώντας τη φωνή σας δεν είναι κάτι καινούργιο, χρησιμοποιούμε Λάμα 4 στην εφαρμογή Meta AI για να σας προσφέρει απαντήσεις που μοιάζουν πιο προσωπικές, σχετικές και διαλογικές. Η εμπειρία ενσωματώνεται με άλλες λειτουργίες, όπως η δημιουργία και η επεξεργασία εικόνων, οι οποίες μπορούν πλέον να γίνονται όλες μέσω ενός συνομιλία φωνής ή κειμένου με τον βοηθό τεχνητής νοημοσύνης στην εφαρμογή.

Έχουμε επίσης συμπεριλάβει ένα demo μιας φωνητικής εμπειρίας που δημιουργούμε και είναι τεχνολογία ομιλίας πλήρους διπλής όψης, την οποία μπορείτε να ενεργοποιήσετε και να απενεργοποιήσετε για να δοκιμάσετε στην εφαρμογή Meta AI. Αυτή η λειτουργία δεν έχει πρόσβαση σε πληροφορίες σε πραγματικό χρόνο, οπότε ενδέχεται να αντιμετωπίσετε τεχνικά ζητήματα ή ασυνέπειες. Θα συνεχίσουμε να συλλέγουμε σχόλια για να το βελτιώσουμε με την πάροδο του χρόνου.

Και για να διευκολύνετε το multitasking, μπορείτε επίσης να συνεχίσετε να χρησιμοποιείτε τις φωνητικές λειτουργίες του Meta AI ενώ κάνετε άλλα πράγματα στο τηλέφωνό σας, με ένα ορατό εικονίδιο που σας ενημερώνει όταν το μικρόφωνο είναι σε χρήση.

Οι φωνητικές συνομιλίες στην εφαρμογή Meta AI, συμπεριλαμβανομένης της επίδειξης πλήρους αμφίδρομης λειτουργίας, είναι διαθέσιμες στις ΗΠΑ, τον Καναδά, την Αυστραλία και τη Νέα Ζηλανδία για να ξεκινήσουν.* Για να μάθετε περισσότερα σχετικά με το πώς μπορείτε να διαχειριστείτε την εμπειρία σας στην εφαρμογή Meta AI και να εναλλάσσεστε μεταξύ των λειτουργιών, επισκεφθείτε την ιστοσελίδα μας. κέντρο βοήθειας.

Νοημοσύνη για εσάς

Η εφαρμογή Meta AI χρησιμοποιεί το Llama 4 για να σας βοηθήσει να λύσετε προβλήματα, να κινηθείτε ευκολότερα μέσα στην ημέρα σας και να κατανοήσετε καλύτερα τον κόσμο γύρω σας. Και με τη δυνατότητα αναζήτησης σε όλο τον ιστό, μπορεί να σας βοηθήσει να λάβετε συστάσεις, να εμβαθύνετε σε ένα θέμα και να παραμείνετε συνδεδεμένοι με τους φίλους και την οικογένειά σας.

Χρησιμοποιούμε την εμπειρία δεκαετιών μας εξατομίκευση των εμπειριών των ανθρώπων στις πλατφόρμες μας για να κάνουμε το Meta AI πιο προσωπικό. Μπορείτε να πείτε στο Meta AI να θυμάται συγκεκριμένες λεπτομέρειες για εσάς (όπως ότι σας αρέσουν τα ταξίδια και η εκμάθηση νέων γλωσσών), και μπορεί να εντοπίζει σημαντικές λεπτομέρειες από τις ενδείξεις του περιβάλλοντος. Το Meta AI παρέχει επίσης πιο σχετικές απαντήσεις στις ερωτήσεις σας, αντλώντας από πληροφορίες που έχετε ήδη επιλέξει να μοιραστείτε στο Facebook και το Instagram (αν έχουν προστεθεί στο ίδιο Κέντρο λογαριασμών), όπως τα στοιχεία του προφίλ και το περιεχόμενο που σας αρέσει ή με το οποίο συμμετέχετε. Οι εξατομικευμένες απαντήσεις είναι διαθέσιμες από σήμερα στις ΗΠΑ και τον Καναδά.

Μόλις αρχίσαμε

Αυτή είναι η πρώτη έκδοση της εφαρμογής Meta AI και σκοπεύουμε να την επαναλάβουμε και να τη βελτιώσουμε με την πάροδο του χρόνου. Η Meta AI έχει δημιουργηθεί για να σας γνωρίσει, ώστε οι απαντήσεις της να είναι πιο χρήσιμες. Είναι εύκολο να μιλήσετε μαζί του, ώστε να είναι πιο απρόσκοπτη και φυσική η αλληλεπίδραση μαζί του. Και είναι πιο συνδεδεμένη, ώστε να μπορεί να μοιράζεται πράγματα από τους ανθρώπους και τα μέρη που σας ενδιαφέρουν.

Δοκιμάστε το σήμερα στο iOS ή Android, και μάθετε περισσότερα για το νέο και βελτιωμένο Meta AI.

*Οι φωνητικές συνομιλίες στη Νέα Ζηλανδία είναι διαθέσιμες μόνο στην εφαρμογή, όχι στα γυαλιά Ray-Ban Meta.

Δημοσιεύθηκε την - Σχολιάστε

Fashion Forward: Amelia Gray εντοπίστηκε με γυαλιά Ray-Ban Meta στο κόκκινο χαλί του Met Gala

High couture took center stage last night on the first Monday in May. And you may have spotted some familiar fashion-forward tech on the proverbial red carpet. As part of her custom lookAmelia Gray sported a pair of Γυαλιά Ray-Ban Meta.

CREDIT: Getty Images Entertainment

The AI glasses—Shiny Black Skyler frames with Polarized Green sun lenses—were the perfect accessory to capture photos and videos throughout the day while also helping her get ready. From taking calls hands-free and listening to music or a podcast to getting answers from Meta AI on the fly, Ray-Ban Meta glasses make any pre-event routine anything but.

This isn’t the first time our AI glasses have gone high fashion. Earlier this year, Gray debuted our sold-out Ray-Ban Meta x Coperni Limited Edition frames on the runway at Paris Fashion Week. Ray-Ban Meta glasses are fashion’s most useful tech-accessory, gaining traction among editors, stylists, and models from the pages of magazines to the runway—and now on the red carpet of fashion’s biggest night of the year.

“I’m still radiating from the night!” said Amelia Gray. “And to know that I will be able to relive so many of those special moments from my own perspective is truly surreal. It’s an entirely new way to experience and share these once-in-a-lifetime moments, and I couldn’t be more excited to be part of Ray-Ban Meta’s Met Gala debut. ”

Inside the event, Gray was joined by Charli XCX, Jeff Goldblum, Jenna Ortega, Kim Kardashian, Nicki Minaj, Rosé, Shaboozey, and Taraji P. Henson as guests at Instagram’s table along with Adam Mosseri and Eva Chen.

Photographer: Quil Lemons

And off the carpet, Instagram και Threads hosted a number of icons who are driving the cultural conversation forward at The Mark Hotel for our 5th annual Watch Party. More than 50 creators and pop culture and fashion commentators gathered to watch the red carpet arrivals and share real-time looks on Instagram and Threads.

CREDIT: Huy Luong

Styles may come and go, but fashion is forever. And the future of AI glasses is looking bright.