Δημοσιεύθηκε την - Σχολιάστε

Μέσα στο Aria Gen 2: Εξερευνήστε την τεχνολογία αιχμής πίσω από τη συσκευή

Νωρίτερα φέτος, εμείς ανακοίνωσε το τα πιο πρόσφατα ερευνητικά μας γυαλιά, Aria Gen 2, που σηματοδοτούν τη συνέχιση της αποστολής του Project Aria να δώσει τη δυνατότητα σε ερευνητές σε όλο τον κόσμο να προωθήσουν το επίπεδο της τεχνολογίας στη μηχανική αντίληψη, τη συμφραζόμενη τεχνητή νοημοσύνη και τη ρομποτική μέσω της πρόσβασης σε ερευνητικό υλικό αιχμής και σύνολα δεδομένων, μοντέλα και εργαλεία ανοικτού κώδικα. Σήμερα, είμαστε ενθουσιασμένοι που μοιραζόμαστε περισσότερα για την τεχνολογία μέσα στο Aria Gen 2. Αυτό περιλαμβάνει μια λεπτομερή επισκόπηση του παράγοντα μορφής, των δυνατοτήτων ήχου, της διάρκειας ζωής της μπαταρίας, των αναβαθμισμένων καμερών και αισθητήρων, του υπολογισμού στη συσκευή και πολλά άλλα.

Τι είναι το Aria Gen 2;

Το Aria Gen 2 είναι μια φορητή συσκευή που συνδυάζει τις τελευταίες εξελίξεις στην όραση υπολογιστών, τη μηχανική μάθηση και την τεχνολογία αισθητήρων. Ο συμπαγής παράγοντας μορφής και ο ελαφρύς σχεδιασμός του Aria Gen 2 το καθιστούν ιδανική επιλογή για ερευνητές που πρέπει να συλλέξουν δεδομένα ή να κατασκευάσουν πρωτότυπα σε διάφορα περιβάλλοντα. Τα γυαλιά περιέχουν μια σειρά από βελτιώσεις σε σύγκριση με το Aria Gen 1, ο ερευνητικός προκάτοχός του, που ανακοινώθηκε το 2020.

Aria Gen 2: Εξελίξεις και χαρακτηριστικά

Η μετάβαση από το Aria Gen 1 στο Gen 2 σηματοδοτεί ένα σημαντικό άλμα στη φορητή τεχνολογία, προσφέροντας βελτιωμένα χαρακτηριστικά και δυνατότητες που ανταποκρίνονται σε ένα ευρύτερο φάσμα εφαρμογών και αναγκών των χρηστών. Παρακάτω, εξετάζουμε τις βασικές διαφορές και βελτιώσεις που εισήχθησαν στο Aria Gen 2.

1. Φορητότητα

Το Aria Gen 2 διαθέτει ανώτερη φορεσιμότητα, που χαρακτηρίζεται από βελτιωμένη άνεση και εφαρμογή, ενώ παράλληλα φιλοξενεί ένα ευρύτερο φάσμα μορφολογιών προσώπου και μια πλούσια σουίτα αισθητήρων για έρευνα. Τα γυαλιά διατηρούν έναν ελαφρύ σχεδιασμό (με βάρος 74 - 76 g, ανάλογα με το μέγεθος) και περιλαμβάνουν τώρα πτυσσόμενους βραχίονες για ευκολότερη αποθήκευση και μεταφορά για καθημερινή χρήση. Για να διασφαλίσουμε ότι κάθε χρήστης έχει τη βέλτιστη φυσική και λειτουργική εφαρμογή, έχουμε εισαγάγει οκτώ παραλλαγές μεγέθους της συσκευής - λαμβάνοντας υπόψη διάφορους ανθρώπινους παράγοντες, όπως το πλάτος του κεφαλιού και η παραλλαγή της γέφυρας της μύτης.

Οκτώ παραλλαγές μεγέθους των συσκευών Aria Gen 2.

2. Βελτιώσεις κάμερας Computer Vision (CV)

Υψηλό δυναμικό εύρος (HDR): Ο αισθητήρας κάμερας παγκόσμιου κλείστρου του Aria Gen 2 προσφέρει υψηλό δυναμικό εύρος 120 dB, σε σύγκριση με το εύρος 70 dB του Gen 1. Αυτό επιτρέπει ανώτερες εργασίες όρασης υπολογιστή σε διαφορετικές συνθήκες φωτισμού.

0:00 / 0:00

Το βίντεο δείχνει ότι η κάμερα CV είναι σε θέση να καταγράφει εξαιρετικά δυναμικές σκηνές με το νήμα ενός φωτός LED να διακρίνεται μαζί με τις υπόλοιπες λεπτομέρειες της σκηνής.

Ευρύ οπτικό πεδίο (FOV): Το Aria Gen 2 είναι εξοπλισμένο με τέσσερις κάμερες υπολογιστικής όρασης (CV), διπλασιάζοντας τον αριθμό των καμερών CV του Gen 1, ώστε να παρέχει ευρύτερο οπτικό πεδίο και να επιτρέπει την προηγμένη τρισδιάστατη παρακολούθηση χεριών και αντικειμένων.

Στερεοφωνική επικάλυψη: Η στερεοφωνική επικάλυψη στο Gen 2 αυξάνεται στις 80° από τις 35° του Gen 1, διευκολύνοντας τα στερεοφωνικά μοντέλα θεμελίωσης που ενισχύουν την αντίληψη του βάθους και τη χωρική αντίληψη.

0:00 / 0:00

Το παράδειγμα εδώ δείχνει πώς η αυξημένη στερεοφωνική επικάλυψη επιτρέπει σε μεθόδους όπως το FoundationStereo της NVIDIA να δημιουργούν χάρτες βάθους με βάση διορθωμένες στερεοφωνικές εικόνες. Οι χάρτες βάθους μπορούν να συγχωνευθούν για τη δημιουργία γεωμετρικών ανακατασκευών της σκηνής μόνο με τη χρήση των δεδομένων του στερεοζεύγους Aria Gen 2.

3. Νέες ενσωματώσεις αισθητήρων

Αισθητήρας φωτός περιβάλλοντος (ALS): Η Aria Gen 2 περιλαμβάνει ένα βαθμονομημένο ALS, που επιτρέπει καλύτερους αλγορίθμους ελέγχου έκθεσης και ξεκλειδώνει νέες δυνατότητες σε χαμηλούς ρυθμούς καρέ. Η υπεριώδης λειτουργία της ALS μπορεί να χρησιμοποιηθεί για τη διάκριση μεταξύ εσωτερικού και εξωτερικού φωτισμού, όπως απεικονίζεται στο βίντεο.

0:00 / 0:00

Μικρόφωνο επαφής: Το Aria Gen 2 περιλαμβάνει ένα μικρόφωνο επαφής ενσωματωμένο στο κάλυμμα της μύτης της συσκευής, βελτιώνοντας τη λήψη ήχου σε θορυβώδη περιβάλλοντα.

0:00 / 0:00

Στο βίντεο παρουσιάζεται ένας χρήστης σε μια σήραγγα ανέμου για να προσομοιωθεί ένα σενάριο με αέρα, όπου το μικρόφωνο επαφής είναι σε θέση να πιάσει τον ψίθυρο του χρήστη όταν τα ακουστικά μικρόφωνα δεν μπορούν.

Καρδιακός ρυθμός: Το Aria Gen 2 περιλαμβάνει έναν αισθητήρα φωτοπληθυσμογραφίας (PPG) ενσωματωμένο στο κάλυμμα της μύτης της συσκευής, ο οποίος επιτρέπει την εκτίμηση του καρδιακού ρυθμού του ατόμου που φοράει τη συσκευή.

4. Ευθυγράμμιση χρόνου συσκευής

Το Aria Gen 2 διαθέτει μια ενσωματωμένη λύση υλικού που χρησιμοποιεί την τεχνολογία ραδιοσυχνοτήτων Sub-GHz για τη μετάδοση πληροφοριών χρονομέτρησης, επιτρέποντας την ακριβή χρονική ευθυγράμμιση με άλλες συσκευές Aria Gen 2 ή συμβατές συσκευές που υποστηρίζουν ραδιοσυχνοτήτων Sub-GHz. Αυτή η τεχνολογία επιτυγχάνει χρονική ευθυγράμμιση με ακρίβεια κάτω του χιλιοστού του δευτερολέπτου, σηματοδοτώντας σημαντική βελτίωση σε σχέση με το ευθυγράμμιση με βάση το λογισμικό του Gen 1.

0:00 / 0:00

Το βίντεο δείχνει πώς το Aria Gen 2 χρησιμοποιεί τη χρονική ευθυγράμμιση των συσκευών για εργασίες όπως η εγγραφή από κατανεμημένες λήψεις από δύο συσκευές Aria Gen 2.

5. Σήματα μηχανικής αντίληψης (MP) σε πραγματικό χρόνο στη συσκευή

Το Aria Gen 2 διαθέτει προηγμένους αλγορίθμους αντίληψης μηχανής εντός της συσκευής που εκτελούνται στον ενεργειακά αποδοτικό προσαρμοσμένο συνεπεξεργαστή της Meta. Αυτές οι δυνατότητες αιχμής επιτρέπουν στη συσκευή να παράγει ακριβή και ακριβή δεδομένα, παρακολουθώντας τον τρόπο με τον οποίο αλληλεπιδρούμε με το περιβάλλον μας.

Οπτική αδρανειακή οδομετρία (VIO)

Ένα από τα βασικά χαρακτηριστικά του Aria Gen 2 είναι η ικανότητά του να παρακολουθεί τα γυαλιά σε έξι βαθμούς ελευθερίας (6DOF) σε ένα χωρικό πλαίσιο αναφοράς χρησιμοποιώντας οπτική αδρανειακή οδομετρία (VIO). Αυτό επιτρέπει την απρόσκοπτη πλοήγηση και χαρτογράφηση του περιβάλλοντος, ανοίγοντας νέες δυνατότητες για την έρευνα στην ΤΝ και τη ρομποτική με βάση το πλαίσιο.

Παρακολούθηση με τα μάτια

Το Aria Gen 2 διαθέτει επίσης ένα προηγμένο σύστημα παρακολούθησης των ματιών μέσω κάμερας που παρακολουθεί το βλέμμα του χρήστη με απαράμιλλη ακρίβεια. Αυτό το σύστημα παρέχει πληθώρα πληροφοριών, όπως: βλέμμα ανά μάτι, σημείο σύγκλισης, ανίχνευση βλεφαρίσματος, εκτίμηση κέντρου κόρης, διάμετρος κόρης, κέντρο κερατοειδούς κ.λπ.

Αυτά τα προηγμένα σήματα επιτρέπουν μια βαθύτερη κατανόηση της οπτικής προσοχής και των προθέσεων του χρήστη, ξεκλειδώνοντας νέες δυνατότητες για την αλληλεπίδραση ανθρώπου-υπολογιστή.

Παρακολούθηση χεριών

Το Aria Gen 2 διαθέτει επίσης μια λύση εντοπισμού χεριών που παρακολουθεί το χέρι του χρήστη σε τρισδιάστατο χώρο. Αυτό παράγει αρθρωτές πόζες των αρθρώσεων του χεριού στο πλαίσιο αναφοράς της συσκευής, διευκολύνοντας τις ακριβείς σημειώσεις του χεριού για σύνολα δεδομένων και επιτρέποντας εφαρμογές όπως ο επιδέξιος χειρισμός του χεριού από ρομπότ που απαιτούν υψηλή ακρίβεια.

0:00 / 0:00

Επίδειξη των αισθητήρων και των δυνατοτήτων μηχανικής αντίληψης του Aria Gen 2, καθώς και των αλγορίθμων εκτός συσκευής που βασίζονται σε αυτούς.

Το μέλλον της Aria είναι εδώ: Μείνετε ενήμεροι

Τα γυαλιά Aria Gen 2 ανοίγουν το δρόμο για μελλοντικές καινοτομίες που θα καθορίσουν την επόμενη υπολογιστική πλατφόρμα. Οι αιτήσεις για συνεργασία με το Aria Gen 2 θα ανοίξουν αργότερα φέτος, και οι ερευνητές που ενδιαφέρονται να ενημερώνονται μπορούν να ενταχθούν στην ομάδα Κατάλογος συμφερόντων Aria Gen 2. Εν τω μεταξύ, οι αιτήσεις για το Aria Research Kit με τα γυαλιά Aria Gen 1 εξακολουθούν να γίνονται δεκτές σε κυλιόμενη βάση-κάντε αίτηση τώρα για να ξεκινήσετε αμέσως.

Ελάτε μαζί μας στο CVPR 2025 στο Νάσβιλ του Τενεσί, αυτόν τον Ιούνιο, όπου η ομάδα θα παρουσιάσει τα γυαλιά Aria Gen 2 μέσω διαδραστικών επιδείξεων. Επισκεφθείτε το περίπτερο της Meta για να γνωρίσετε τις τελευταίες εξελίξεις και να μάθετε περισσότερα για τα καινοτόμα χαρακτηριστικά του Aria Gen 2.

Αφήστε μια απάντηση

Η ηλ. διεύθυνση σας δεν δημοσιεύεται. Τα υποχρεωτικά πεδία σημειώνονται με *