in

VueBuds : intégrer une caméra à l’oreille sans effrayer

VueBuds

Oubliez les lunettes connectées ! Des chercheurs américains ont imaginé une alternative plutôt sympa. Il s’agit des VueBuds. Ce sont des écouteurs équipés de mini-caméras qui gardent un œil sur votre environnement. Ils vous décrivent en direct, au creux de l’oreille, tout ce qu’ils voient.

Les objets connectés font de plus en plus partie de notre quotidien, et on utilise déjà tous nos smartphones pour solliciter des IA. Le problème ? Pas grand monde n’a envie de porter des lunettes lourdes ou trop voyantes. C’est là que les VueBuds entrent en scène, un prototype discret.

VueBuds, l’intelligence visuelle incognito

Youtube video

L’Université de Washington est à l’origine des VueBuds. Les chercheurs Shyam Gollakota, Maruchi Kim et Rasya Fawwaz ont conçu ce matériel. Leurs travaux ont été partagés publiquement lors d’un grand événement international. Il s’agit de la conférence de l’Association for Computing Machinery sur les facteurs humains dans les systèmes informatiques.

Pour fabriquer ce modèle, les scientifiques ont utilisé des écouteurs sans fil ordinaires. Ils ont choisi de modifier un produit existant, les oreillettes Sony WF-1000XM3. À l’intérieur de ces oreillettes, ils ont placé des modules de capture visuelle discrets. Ces capteurs possèdent une taille comparable à celle d’un simple grain de riz. Grâce à cette petite taille, l’accessoire reste léger et confortable. Les utilisateurs portent déjà des écouteurs tout au long de la journée dans la rue. Ce support est donc plus naturel que des lunettes pour la majorité des gens.

Les VueBuds résolvent ainsi le problème du confort physique au quotidien. Les lunettes intelligentes souffrent souvent de leur poids excessif à cause des processeurs. Elles intègrent aussi de lourdes batteries sur les branches. Les gens refusent souvent de porter ces objets en dehors de la Silicon Valley. Avec les VueBuds, l’approche change en utilisant un support déjà adopté par des millions de personnes.

Comment les VueBuds réussissent à « voir » sans vider leur batterie

Pour fonctionner au quotidien, les VueBuds doivent relever un défi de taille : la gestion de l’énergie. Loger une batterie dans un si petit écouteur implique d’utiliser un composant dix fois plus réduit que sur des lunettes connectées. Impossible, donc, de filmer en continu sous peine de vider l’appareil ou de saturer la connexion sans fil. Les concepteurs ont trouvé la parade : le capteur prend uniquement des photos fixes en noir et blanc, et seulement à la demande. De plus, la résolution reste volontairement basse, limitée à 324 par 324 pixels.

Ces clichés en niveaux de gris sont envoyés par Bluetooth vers le smartphone de l’utilisateur. C’est là que le traitement s’opère. Le téléphone fait tourner un modèle d’intelligence artificielle visuelle de pointe, baptisé Qwen2.5-VL. Cette IA analyse instantanément l’image reçue pour en décoder le sens, puis traduit le résultat en une réponse vocale claire, diffusée directement au creux de l’oreille.

L’autre casse-tête concernait l’alignement visuel, puisque nos yeux et nos oreilles ne partagent pas le même axe. Pour éviter que les joues ne masquent le paysage, les scientifiques ont incliné les objectifs de 5 à 10 degrés vers l’extérieur. Cette astuce offre un champ de vision optimal de 98 à 108 degrés.

Côté logiciel, un algorithme assemble les deux clichés par stéréoscopie pour créer une vue panoramique unique. Cette méthode accélère grandement le calcul : l’appareil répond en une seconde seulement au lieu de deux, procurant une vraie sensation de direct. Il reste bien un petit angle mort pour les objets situés à moins de 20 centimètres, mais comme on rapproche rarement les éléments aussi près pour les observer, cette limite s’avère invisible au quotidien.

Pourquoi vos voisins n’auront pas peur des VueBuds

La sécurité des informations privées a guidé les choix de l’équipe de l’Université de Washington. Tout le calcul informatique se déroule localement sur le téléphone de l’usager. Aucune donnée personnelle n’est envoyée ou stockée sur des serveurs distants dans le cloud. Les systèmes connectés classiques sont souvent critiqués pour leur manque de transparence. Ici, les informations visuelles restent totalement sous le contrôle de l’utilisateur.

De plus, une petite lumière s’allume sur le matériel lors de la capture d’un cliché. Les personnes aux alentours sont ainsi informées qu’un enregistrement est en cours. Les usagers ont également le droit d’effacer immédiatement les images s’ils le souhaitent. Le déclenchement de l’appareil se fait uniquement par une commande vocale claire. Les passants entendent donc la question posée, ce qui évite l’espionnage discret. Les lunettes connectées peuvent au contraire filmer en secret avec un simple bouton.

Les écouteurs VueBuds proposent donc une architecture protectrice pour l’anonymat public. Le public accepte déjà la présence de microphones intégrés dans de nombreux objets quotidiens. Une relation de confiance s’est bâtie au fil du temps avec des marques comme Apple. Reste à savoir si la même acceptation aura lieu pour cette nouvelle forme d’intelligence visuelle.

Jusqu’à 93 % de réussite : les chiffres bluffants des VueBuds sur le terrain

Plusieurs vagues d’évaluation ont permis de mesurer l’efficacité de cette technologie portable. Les chercheurs ont d’abord réuni un groupe de 74 participants pour réaliser des comparatifs. Ces volontaires ont testé le prototype face aux lunettes Ray-Ban Meta. Les tests comprenaient un ensemble de 17 exercices visuels différents avec 90 utilisateurs au total. Les résultats montrent que les deux systèmes affichent des performances tout à fait équivalentes.

Pourtant, les lunettes de la marque Meta capturent des clichés en haute résolution traités sur Internet. Le projet de l’Université de Washington réussit à obtenir le même niveau de qualité avec de simples niveaux de gris. Les participants ont même préféré l’appareil auriculaire pour les besoins de traduction textuelle. En revanche, les lunettes se sont montrées un peu plus précises pour compter des éléments distincts. Cela prouve qu’un petit capteur monochrome suffit pour accomplir des tâches complexes d’analyse.

Une autre étude plus restreinte a impliqué 16 usagers en situation réelle. Ces personnes ont porté le matériel pour identifier des objets et traduire des écritures. Les taux de réussite enregistrés durant cette expérience sont élevés. L’appareil a atteint une justesse de 83 à 84 % pour la reconnaissance générale et la traduction. Ce score est monté à 93 % lorsqu’il fallait lire le titre et l’auteur d’un livre.

Pourquoi les VueBuds s’intègrent mieux dans nos vies que les smart glasses

Ces chiffres démontrent l’utilité concrète du système pour faciliter le quotidien. Un voyageur pourrait par exemple déchiffrer instantanément un emballage alimentaire rédigé en langue étrangère. Les démonstrations montrent un homme demandant la description de sa cuisine à l’intelligence artificielle. Le programme lui répond de façon naturelle en décrivant les bouteilles, la fenêtre et l’évier. Face à un disque des Beatles, l’outil reconnaît immédiatement la pochette de l’album Abbey Road.

Cette capacité ouvre de grands espoirs pour les personnes qui souffrent de troubles de la vue. L’audiodescription en direct peut transformer la vie des personnes aveugles ou malvoyantes. L’appareil devient un guide sonore discret qui chuchote des informations utiles à l’oreille. Il permet de lire un ouvrage ou de se déplacer avec plus d’assurance sans porter d’équipement lourd.

Les objets portables intelligents restent des choix très personnels selon les goûts de chacun. Certains préfèrent les montres, les bagues ou les lunettes traditionnelles. L’intégration de la vision dans les oreillettes ajoute simplement une option supplémentaire sur le marché. De plus, il existe déjà un code social clair avec les écouteurs sans fil. Lorsqu’on les range dans leur étui, on sait de source sûre qu’ils ne peuvent plus rien capturer. Les lunettes de vue doivent souvent rester sur le nez, ce qui maintient le doute sur l’enregistrement.

Pourquoi la navigation en temps réel devra encore attendre

Malgré ces points positifs, le prototype actuel rencontre plusieurs restrictions techniques évidentes. La caméra monochrome ne peut pas répondre aux interrogations qui concernent les couleurs d’une scène. Si un utilisateur demande la couleur d’un vêtement, l’intelligence artificielle sera incapable de l’aider. La navigation géographique en temps réel demande également une précision visuelle supérieure pour être totalement sécurisée.

L’équipe scientifique travaille déjà sur des améliorations pour les prochaines versions des VueBuds. Ils aimeraient ajouter un capteur couleur, même si cela demande plus de ressources électriques. Le doctorant Maruchi Kim cherche aussi à intégrer un système de compression d’image de type JPEG. Cet ajout technique réduirait la taille des fichiers envoyés par la connexion Bluetooth. Cela permettrait d’augmenter la netteté des images sans vider la batterie trop vite. Des modèles d’IA spécialisés seront aussi entraînés uniquement pour la traduction ou l’aide aux malvoyants.

Reconnaissance faciale de masse : le vrai risque des caméras invisibles

L’arrivée de caméras sur des objets si discrets suscite toutefois des interrogations légitimes sur la sécurité publique. Il y a quelques années, une entreprise avait imaginé une application capable de donner le nom d’un inconnu dans la rue. La réaction du public sur Internet avait été immédiate, affirmant que cela mettrait la vie des femmes en danger. Le risque de voir apparaître de la reconnaissance faciale de masse sans accord préalable est bien réel. Un simple voyant lumineux ne suffit pas toujours à rassurer les passants dans l’espace public. Les régulateurs devront donc encadrer strictement l’usage de ces technologies visuelles pour éviter les dérives.

Le secteur de la tech s’intéresse d’ailleurs de près à cette zone corporelle pour l’avenir. Des rumeurs indiquent que l’entreprise Apple conçoit de futurs AirPods équipés de capteurs infrarouges. Ces éléments serviraient à détecter les mouvements de la main et à améliorer l’audio spatialisé. Ce projet ne propose pas d’intelligence visuelle complète comme les VueBuds, mais il confirme l’intérêt pour ce format. Jusqu’à présent, les oreillettes se limitaient à la diffusion ou la capture de sons. L’arrivée d’une intelligence basée sur la vision transforme ce moyen de communication. Les VueBuds tracent ainsi une nouvelle voie pour les usages futurs de l’assistance vocale.

Restez à la pointe de l'information avec REALITE-VIRTUELLE.COM !

▶ Abonnez-vous à notre chaîne YouTube et Ajoutez-nous à vos favoris sur Google Actualités
Cliquez pour commenter

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *