À une époque où les amateurs de gadgets du monde entier sont séduits par le Vision Pro, une startup courageuse tente de créer un espace pour son appareil de réalité augmentée qui présente un facteur de forme nettement différent de celui de l'appareil d'Apple.
Brilliant Labs, basé à Singapour, a annoncé son nouveau produit, Frame, une paire de lunettes AR légères alimentées par un assistant d'intelligence artificielle multimodal appelé Noa. Les lunettes ont attiré l'attention et l'investissement de John Hanke, PDG de Niantic, la plateforme de réalité augmentée derrière des jeux comme Pokémon Go, bien que le financement qu'il a reçu de Hanke n'ait pas été divulgué.
Dans une démonstration vidéo, l’une des fondatrices de Brilliant Labs a demandé vocalement à Noa de se présenter. Après environ trois secondes, l'agent générait et projetait une réponse textuelle sur les lentilles.
En plus des commandes vocales, Noa est capable de traitement visuel, de génération et de traduction d'images, grâce à la poignée de modèles d'IA qu'il a intégrés : le moteur de recherche conversationnel Perplexity AI ; Stabilité Modèle texte-image IA Diffusion stable ; Le dernier modèle de génération de texte d'OpenAI, GPT4 ; et le système de reconnaissance vocale Whisper. Les objectifs de la monture ont une résolution de 640 x 400 pour afficher des vidéos et des photos.
Grâce à ces fonctionnalités, un utilisateur faisant des achats dans un centre commercial peut demander à Noa de vérifier les prix en ligne d'une paire de chaussures qu'il regarde via Frame, par exemple.
"L'avenir de l'interaction homme-IA prendra vie dans de nouveaux appareils portables innovants, et je suis très heureux d'apporter le moteur de réponse en temps réel de Perplexity au cadre Brilliant Labs", a déclaré Aravind Srinivas, PDG et fondateur de Perplexity. déclaration.
La question est de savoir si Frame sera suffisamment réactif pour que l’une de ses réponses générées par l’IA soit utile. Les appareils Bluetooth de Brilliant Labs s'appuient sur un smartphone pour accéder aux différents modèles d'IA actuels. Cependant, au fil du temps, les fondateurs souhaitent éliminer l'hôte téléphonique et intégrer des modèles légers de apprentissage automatique directement sur les verres.
Frame a émergé après le premier produit de Brilliant Labs, Monocole, un appareil AR à objectif unique qui a attiré un public fidèle dans la communauté du matériel open source grâce à sa programmabilité et son prix abordable. Un groupe d'étudiants de Stanford a un jour transformé l'appareil en un assistant de rencontre qui faisait des suggestions en temps réel sur ce qu'il fallait dire à votre rendez-vous.
Frame restera open source comme son prédécesseur, ce qui signifie que les développeurs auront accès à des ressources telles que la documentation en direct, les bases de code open source et les schémas matériels. Ils pourront également ajuster les paramètres des modèles d’IA compatibles avec Noa.
Contrairement à l'encombrant Vision Pro, la monture est conçue pour être portée tous les jours et est livrée avec des verres correcteurs. Pesant 39 grammes et dotées d'une monture ronde épaisse en plastique nylon, les lunettes sont, comme le dit l'entreprise, un « hommage aux innovations et aux idées introduites par des personnages de l'histoire tels que John Lennon, Steve Jobs et Gandhi ».
Frame sera disponible en précommande à partir d'aujourd'hui et se vendra 349 $, au même prix que Monocle. Les appareils commenceront à être expédiés en avril.
Depuis sa création en 2019, Brilliant Labs a réussi à attirer un certain nombre d'investisseurs notables. En juin, il a obtenu un investissement de 3 millions de dollars de Brendan Iribe, co-fondateur d'Oculus ; Adam Cheyer, co-fondateur de Siri ; Eric Migicovsky, fondateur de Pebble et ancien partenaire de Y Combinator entre autres. La nouvelle injection de capital de Hanke porte le financement total de l'entreprise à 6 millions de dollars.
