Abdelilah Nossair

Ingénierie indépendante en IA, données, plateformes web et systèmes d’entreprise.

FERMER

LucidLink®

Perception multimodale de l'environnement et guidage en temps réel

  • Présentation

Type de projet

Projet de fin d’études

Année

2025

Rôle

Ingénieur produit et IA

Plateforme

Raspberry Pi 5 Portable

LucidLink est un système d'assistance porté sur la poitrine, conçu pour aider les utilisateurs malvoyants à comprendre leur environnement grâce à l'interaction vocale naturelle, la vision par ordinateur et un guidage vocal en temps réel.

Prototype du dispositif portable LucidLink
Gros plan du module caméra LucidLink
LucidLink porté en situation
  • Défi & Approche

Des tâches quotidiennes comme reconnaître un ami, retrouver un téléphone, lire une étiquette ou comprendre une pièce peuvent nécessiter l’aide d’une autre personne. Le défi consistait à réunir ces besoins dans un dispositif portable stable, mains libres, direct et fiable.

L'approche a combiné un Raspberry Pi 5, caméra, microphone, haut-parleur, et des services d'IA modulaires. Commandes vocales fournissent le point d'entrée, tandis que chaque service spécialisé gère la tâche visuelle pertinente et répond avec une parole claire.

  • Format monté sur la poitrine pour une caméra stable et mains libres
  • Mot d'activation « Hey Lucid » et demandes vocales naturelles
  • Services dédiés aux visages, aux textes, aux objets personnels et aux scènes
  • Réponses parlées conçues pour une interaction rapide et dirigée par l'utilisateur
Plan technique de LucidLink
  • La solution

LucidLink transforme une simple commande vocale en une perception utile de l'environnement. Le système traite l'image localement ou via des services spécialisés, puis utilise la synthèse vocale pour communiquer le résultat au porteur.

CAPACITÉS LUCIDES
  • Reconnaissance faciale des personnes familières et de leur position relative
  • Lecture et résumés de documents alimentés par PaddleOCR
  • Reconnaissance des objets personnels pour les enregistrer et les retrouver
  • Description de la scène pour comprendre les gens, les lieux et les activités
  • Service d'aide pour répondre aux questions contextuelles sur une vue capturée
  • Service d'heure pour l'information sur la date et l'heure mains libres
  • Interruption de service qui permet à une nouvelle demande de "Hey Lucid" de prendre la priorité à tout moment
LucidLink vue des produits portables
LucidLink vue détaillée
  • Résultat

LucidLink démontre une approche multimodale unifiée de la technologie d'assistance : un appareil portable, une interaction vocale et des services d'IA qui travaillent ensemble pour soutenir une plus grande autonomie dans les environnements quotidiens.

Prototype du dispositif portable LucidLink

« Dès que j’enfile LucidLink et que je dis “Hey Lucid”, j’ai l’impression d’avoir un guide de confiance à mes côtés. »