Por dentro do Aria Gen 2: Explore a tecnologia de ponta por detrás do dispositivo

No início deste ano, nós anunciado Os nossos mais recentes óculos de investigação, Aria Gen 2, marcam a continuação da missão do Projeto Aria de permitir que os investigadores de todo o mundo avancem o estado da arte na perceção de máquinas, IA contextual e robótica através do acesso a hardware de investigação de ponta e conjuntos de dados, modelos e ferramentas de código aberto. Hoje, estamos entusiasmados por partilhar mais sobre a tecnologia do Aria Gen 2. Isto inclui uma visão geral aprofundada do formato, capacidades de áudio, duração da bateria, câmaras e sensores actualizados, computação no dispositivo e muito mais.

O que é o Aria Gen 2?

O Aria Gen 2 é um dispositivo de vestir que combina os mais recentes avanços em visão computacional, aprendizagem automática e tecnologia de sensores. O formato compacto e o design leve do Aria Gen 2 fazem dele a escolha ideal para investigadores que precisam de recolher dados ou construir protótipos numa variedade de cenários. Os óculos contêm uma série de melhorias em comparação com Aria Gen 1, o seu antecessor de investigação, anunciado em 2020.

Aria Gen 2: Avanços e caraterísticas

A transição do Aria Gen 1 para o Gen 2 marca um salto significativo na tecnologia wearable, oferecendo funcionalidades e capacidades melhoradas que respondem a uma gama mais vasta de aplicações e necessidades dos utilizadores. De seguida, exploramos as principais diferenças e melhorias introduzidas no Aria Gen 2.

1. Usabilidade

O Aria Gen 2 apresenta uma capacidade de utilização superior, caracterizada por um conforto e ajuste melhorados, ao mesmo tempo que acomoda uma gama mais vasta de morfologias faciais e um conjunto de sensores rico para investigação. Os óculos mantêm um design leve (pesando entre 74 e 76 g, dependendo do tamanho) e incluem agora braços dobráveis para facilitar a arrumação e o transporte para uso quotidiano. Para garantir que cada utilizador tem um ajuste físico e funcional ideal, introduzimos oito variações de tamanho do dispositivo - tendo em conta uma série de factores humanos, incluindo a largura da cabeça e a variação da ponte do nariz.

Oito variações de tamanho dos nossos dispositivos Aria Gen 2.

2. Melhorias nas câmaras de visão por computador (CV)

Gama dinâmica elevada (HDR): O sensor de câmara com obturador global do Aria Gen 2 oferece uma gama dinâmica elevada de 120 dB, em comparação com a gama de 70 dB da Gen 1. Isto permite tarefas de visão por computador superiores em diversas condições de iluminação.

0:00 / 0:00

O vídeo ilustra que a câmara CV é capaz de captar cenas altamente dinâmicas com o filamento de uma luz LED a ser resolvido juntamente com o resto dos detalhes da cena.

Amplo campo de visão (FOV): A Aria Gen 2 está equipada com quatro câmaras de visão por computador (CV), duplicando o número de câmaras CV da Gen 1, para proporcionar um campo de visão mais amplo e permitir o seguimento avançado de mãos e objectos em 3D.

Sobreposição de estéreo: A sobreposição estéreo na Geração 2 é aumentada para 80° em relação aos 35° da Geração 1, facilitando modelos de base estéreo que melhoram a perceção de profundidade e a consciência espacial.

0:00 / 0:00

O exemplo aqui ilustra como a maior sobreposição estéreo permite que métodos como o FoundationStereo da NVIDIA gerem mapas de profundidade com base em imagens estéreo rectificadas. Os mapas de profundidade podem ser fundidos para gerar reconstruções geométricas da cena usando apenas os dados do par estéreo do Aria Gen 2.

3. Novas integrações de sensores

Sensor de luz ambiente (ALS): O Aria Gen 2 inclui um ALS calibrado, permitindo melhores algoritmos de controlo de exposição e desbloqueando novas capacidades a baixas taxas de fotogramas. O modo ultravioleta do ALS pode ser utilizado para distinguir entre iluminação interior e exterior, tal como ilustrado no vídeo.

0:00 / 0:00

Microfone de contacto: O Aria Gen 2 inclui um microfone de contacto incorporado na base do nariz do dispositivo, melhorando a captação de áudio em ambientes ruidosos.

0:00 / 0:00

O vídeo mostra um utilizador num túnel de vento para simular um cenário ventoso em que o microfone de contacto consegue captar o sussurro do utilizador quando os microfones acústicos não conseguem.

Frequência cardíaca: O Aria Gen 2 inclui um sensor de fotopletismografia (PPG) incorporado na almofada nasal do dispositivo, que permite estimar o ritmo cardíaco da pessoa que está a usar o dispositivo.

4. Alinhamento do tempo do dispositivo

O Aria Gen 2 tem uma solução de hardware integrada que utiliza a tecnologia de rádio Sub-GHz para transmitir informações de temporização, permitindo um alinhamento de tempo preciso com outros dispositivos Aria Gen 2 ou dispositivos compatíveis que suportem rádio Sub-GHz. Esta tecnologia alcança o alinhamento do tempo com uma precisão de sub-milissegundo, marcando uma melhoria significativa em relação ao alinhamento baseado em software da Geração 1.

0:00 / 0:00

O vídeo mostra como o Aria Gen 2 utiliza o alinhamento de tempo do dispositivo para tarefas como escrever a partir de capturas distribuídas de dois dispositivos Aria Gen 2.

5. Sinais de perceção mecânica (MP) em tempo real no dispositivo

O Aria Gen 2 inclui algoritmos avançados de perceção de máquina no dispositivo, executados no coprocessador personalizado e energeticamente eficiente da Meta. Estas capacidades de ponta permitem que o dispositivo gere dados precisos e exactos, acompanhando a forma como interagimos com o que nos rodeia.

Odometria Inercial Visual (VIO)

Uma das principais caraterísticas do Aria Gen 2 é a sua capacidade de seguir os óculos em seis graus de liberdade (6DOF) dentro de um quadro de referência espacial utilizando a Odometria Inercial Visual (VIO). Isto permite uma navegação e mapeamento perfeitos do ambiente, abrindo novas possibilidades de investigação em IA contextual e robótica.

Rastreio ocular

O Aria Gen 2 também possui um sistema avançado de seguimento ocular baseado numa câmara que segue o olhar do utilizador com uma precisão inigualável. Este sistema fornece uma grande quantidade de informações, incluindo: olhar por olho, ponto de vergência, deteção de pestanejo, estimativa do centro da pupila, diâmetro da pupila, centro da córnea, etc.

Estes sinais avançados permitem uma compreensão mais profunda da atenção visual e das intenções do utilizador, abrindo novas possibilidades de interação homem-computador.

Seguimento das mãos

O Aria Gen 2 também inclui uma solução de seguimento da mão que segue a mão do utilizador no espaço 3D. Isto produz poses articuladas das articulações da mão no quadro de referência do dispositivo, facilitando anotações exactas da mão para conjuntos de dados e permitindo aplicações como a manipulação da mão de robôs hábeis que requerem elevada precisão.

0:00 / 0:00

Demonstração dos sensores e das capacidades de perceção automática do Aria Gen 2, bem como dos algoritmos fora do dispositivo neles baseados.

O futuro do Aria está aqui: Mantenha-se informado

Os óculos Aria Gen 2 preparam o caminho para futuras inovações que definirão a próxima plataforma de computação. As candidaturas para trabalhar com o Aria Gen 2 serão abertas no final deste ano e os investigadores interessados em manter-se informados podem juntar-se à Lista de interesses do Aria Gen 2. Entretanto, as candidaturas para o Aria Research Kit com os óculos Aria Gen 1 continuam a ser aceites numa base contínua.candidatar-se agora para começar imediatamente.

Junte-se a nós em CVPR 2025 em Nashville, Tennessee, em junho, onde a equipa apresentará os óculos Aria Gen 2 através de demonstrações interactivas. Visite o stand da Meta para experimentar os últimos avanços e saber mais sobre as caraterísticas inovadoras do Aria Gen 2.