Exclusive: We tried Meta's AR glasses with Mark Zuckerberg

Summary

Orion, les premières lunettes AR de Meta, offrent un aperçu fascinant de l'avenir des technologies portables. Ce prototype, encore loin d'une commercialisation, combine des lunettes AR avec un bracelet neural pour un contrôle par mouvements de doigts. Avec une large zone de vision et des graphismes ancrés dans l'espace réel, Orion vise à révolutionner l'interaction numérique, intégrant même l'IA générative pour des tâches quotidiennes comme la création de recettes. Bien que la technologie impressionne, des défis subsistent, notamment en matière de compatibilité et de perfectionnement des interfaces. Meta continue de peaufiner son grand pari sur le métavers.

Takeaways

• 😀 Orion est la première paire de lunettes AR de Meta, mais ce n'est pas encore un produit commercialisé.
• 😀 Orion constitue un aperçu des futures lunettes AR de Meta, qui ne seront disponibles que dans quelques années.
• 😀 Le dispositif Orion se compose de lunettes AR, d'un bracelet neural pour le contrôle des gestes, et d'un appareil sans fil pour améliorer les performances et la durée de vie de la batterie.
• 😀 La navigation dans l'interface se fait grâce au suivi des yeux, des gestes des mains et de la voix, avec un accent particulier sur le bracelet neural.
• 😀 Le bracelet neural, de la taille d'un Fitbit, utilise l'électromyographie pour interpréter les signaux neuronaux et les transformer en commandes pour les lunettes.
• 😀 Les gestes principaux reconnus par le bracelet sont le pincement du pouce et de l'index pour sélectionner, le pincement du pouce et du majeur pour ouvrir le menu principal, et le balayage vers le haut ou le bas pour faire défiler.
• 😀 Orion offre un champ de vision de 70 degrés, bien plus large que celui des autres lunettes AR actuellement disponibles.
• 😀 Les graphiques AR projetés par Orion sont suffisamment nets pour lire du texte à distance, mais ne sont pas adaptés pour regarder des films en haute qualité.
• 😀 L'une des fonctionnalités les plus intéressantes est l'utilisation de l'IA de Meta pour identifier les ingrédients d'un smoothie et proposer une recette en fonction des ingrédients présents.
• 😀 Les lunettes Orion ne sont pas disponibles à la vente et ont été produites en quantité limitée pour des prototypes et des démonstrations internes, malgré leur niveau de développement impressionnant.

Q & A

Qu'est-ce que Orion, le produit de Meta ?

Orion est une paire de lunettes AR (réalité augmentée) développée par Meta. Bien qu'il ne soit pas destiné à la vente, il sert de prototype pour des futurs produits AR et donne un aperçu de la direction que Meta souhaite prendre dans l'évolution des lunettes intelligentes.

Pourquoi Orion n'est-il pas un produit que l'on peut acheter ?

Orion était initialement prévu pour être commercialisé, mais Meta a rencontré des difficultés de fabrication qui ont empêché la production à un prix élevé. Il a donc été limité à une petite quantité de prototypes pour des démonstrations internes.

Comment fonctionne la bande neuronale utilisée avec Orion ?

La bande neuronale utilise l'électromyographie pour interpréter les signaux nerveux et les traduire en gestes pour contrôler les lunettes. Elle reconnaît des gestes comme pincer les doigts pour sélectionner, effectuer un geste pour ouvrir le menu, et faire défiler avec le pouce contre la paume fermée.

Quelle est la principale différence de l'expérience de vision AR avec Orion par rapport aux autres lunettes AR ?

Orion offre un champ de vision de 70 degrés, ce qui est beaucoup plus large que d'autres lunettes AR disponibles actuellement. Cela permet une expérience plus immersive où les objets virtuels occupent plus d'espace dans le champ visuel.

Quelles technologies sont utilisées dans les lunettes Orion pour afficher des graphiques en réalité augmentée ?

Orion utilise des projecteurs ULED et des guides d'ondes dans les verres en carbure de silicium, qui projettent des graphiques devant l'utilisateur. Les lunettes sont également équipées de sept caméras et capteurs pour ancrer les objets virtuels dans l'espace réel.

Comment Orion gère-t-il les appels vidéo ?

Lors des appels vidéo, Orion utilise des caméras orientées vers l'intérieur pour scanner le visage de l'utilisateur et le représenter sous forme d'avatar Codec. Cela permet une communication vidéo où l'utilisateur apparaît dans une petite fenêtre flottante.

Que signifie l'interaction avec l'IA dans Orion, comme lors de la création d'une recette de smoothie ?

Orion intègre l'IA générative, comme l'exemple de l'identification des ingrédients d'un smoothie, pour offrir des informations contextuelles et des instructions pratiques. Cela montre comment l'IA peut améliorer l'expérience de réalité augmentée.

Quel est le principal défi qu'Orion a rencontré lors de la démonstration ?

Un des principaux défis a été un incident où une fenêtre virtuelle a couvert une personne pendant une conversation, ce qui a brisé l'immersion et a montré les limites actuelles des lunettes AR dans la gestion des objets virtuels et réels.

Pourquoi Meta continue-t-il de montrer Orion au public malgré son statut de prototype ?

Meta montre Orion comme une preuve de concept pour ses investissements dans le métavers. Bien qu'il ne soit pas prêt pour la vente, Orion sert à démontrer le potentiel futur de la technologie AR et le travail accompli par Meta pour développer des produits AR.

Quels sont les plans futurs pour les lunettes AR de Meta ?

Meta prévoit de perfectionner la technologie des lunettes AR et de rendre la bande neuronale plus sensible, permettant des gestes presque immobiles. L'objectif est de rendre les lunettes plus naturelles à utiliser et d'étendre leurs capacités au fil des années.