Android Developer Challenge de Google : des applications ML-Powered préfigurent l'avenir des lunettes IA

Le 22 juin 2020, Google a annoncé les 10 lauréats de son Android Developer Challenge, une initiative conçue pour stimuler l'innovation dans les applications basées sur le machine learning. Le défi visait à encourager les développeurs à créer des applications exploitant les technologies ML embarquées de Google, les projets primés étant désormais accessibles au public.

Google Blog - Android XR rapporte que ces applications lauréates démontrent un large éventail de capacités, de la surveillance de la santé à l'assistance agricole. Le média note que ces applications ont été « créées par les développeurs individuellement et non par Google », soulignant l'innovation indépendante favorisée par le défi. Cette approche contraste avec les fonctionnalités ML intégrées de Google, telles que le texte prédictif dans Gmail ou la capacité de Google Lens à identifier les plats populaires dans les menus, qui, selon le blog, « vous aident à accomplir vos tâches plus rapidement et plus facilement tout au long de la journée ».

Parmi les lauréats remarquables figure « Pathfinder », une application conçue pour aider les personnes malvoyantes. Selon Google Blog - Android XR, elle aide les utilisateurs à « naviguer dans des situations complexes en identifiant et en calculant les trajectoires des objets en mouvement sur leur chemin ». Une autre entrée notable, « MixPose », est une plateforme de livestreaming permettant aux instructeurs de yoga de fournir des commentaires en temps réel et des corrections d'alignement aux étudiants grâce au suivi de pose embarqué.

La portée des applications lauréates s'étend à l'échelle mondiale, avec des projets comme « AgriFarm » et « AgroDoc » (respectivement du Balouchistan, Pakistan, et de Kochi, Inde) axés sur la détection et le traitement des maladies des plantes pour les agriculteurs. « Eskke », développé à Goma, en République démocratique du Congo, simplifie la gestion de l'argent mobile, tandis que « Leepi » de Bengaluru, Inde, aide les étudiants à apprendre les gestes de la langue des signes américaine.

D'autres applications impactantes incluent « Snore & Cough », qui identifie et analyse les sons du sommeil, et « Stila », conçue pour surveiller et gérer les niveaux de stress lorsqu'elle est associée à des wearables comme les Fitbits ou les appareils Wear OS. Pour les efforts environnementaux, « Trashly » utilise la détection d'objets pour classer les articles recyclables en pointant simplement une caméra sur eux, tandis que « UnoDogs » fournit aux propriétaires d'animaux des informations personnalisées sur le bien-être et des programmes de fitness.

Notre avis : bien que ces applications aient été initialement développées pour smartphones, les capacités d'apprentissage automatique embarqué démontrées par les lauréats de l'Android Developer Challenge sont directement pertinentes pour l'avenir des lunettes connectées. Des applications comme « Pathfinder » indiquent clairement comment les lunettes IA pourraient améliorer l'accessibilité en offrant une conscience environnementale en temps réel. De même, la reconnaissance d'objets de « Trashly » ou le suivi de pose de « MixPose » pourraient facilement se traduire par des interactions et une assistance fluides et mains libres dans un contexte de réalité augmentée. Ces développements soulignent le potentiel croissant de l'IA puissante et en périphérie pour piloter la prochaine génération d'utilité des lunettes connectées, allant au-delà des simples notifications vers une assistance véritablement intelligente et contextuelle.