AvatarMediKi - Processus technique pour la prise de médicaments

Logique système en détail

• Déclenchement par retrait de gobelet :
  Le capteur intégré dans le distributeur de médicaments détecte le retrait d'un gobelet et déclenche le processus de surveillance.
• Activation de l'avatar :
  AvatarMediKi passe en mode d'attention (État : surveillance active).
• Détection de mouvement via YOLO :
  Une instance locale de YOLO analyse l'environnement pour détecter les mouvements pertinents. Objectif : détecter une personne effectuant un mouvement de la main vers la bouche.
• Filtrage et transmission d'images :
  Seuls les cadres avec une interaction main-bouche potentiellement pertinente sont envoyés à la Deep-AI.
• Analyse Deep-AI :
  La Deep-AI classe l'action comme « médicament pris » ou « non pris » et justifie cette évaluation.
• Invite auditive en cas d'ambiguïté :
  Si la Deep-AI ne peut pas reconnaître la prise de médicament, un dialogue audio est automatiquement déclenché : « Avez-vous pris votre médicament ? »
• Transmission des données au personnel soignant :
  Les résultats de l'analyse visuelle et du retour verbal sont transmis, y compris le timestamp, à la plateforme de soins.

Objectif

Surveillance robuste de la prise de médicaments assistée par IA avec une intervention minimale, optimisée pour une utilisation dans les établissements de soins, le logement assisté ou à domicile avec surveillance à distance.

Perspectives : Autres applications de la technologie AvatarMediKi

La combinaison de la détection d'événements assistée par capteur, de l'analyse visuelle par IA (YOLO, Deep-AI) et de l'interaction utilisateur adaptative (par ex. invites audio) offre un potentiel bien au-delà de la surveillance des médicaments. Les futurs domaines d'application pourraient inclure :

• Détection de chute et réaction d'urgence : L'analyse visuelle détecte les motifs de mouvement atypiques ou l'inactivité, réagit automatiquement et informe les secours.
• Surveillance de l'alimentation et des liquides : Capture automatisée de si les résidents boivent ou mangent – pertinent pour les soins et le contrôle nutritionnel.
• Support pour la démence : Systèmes de rappel qui reconnaissent si des actions quotidiennes importantes ont été effectuées, et interviennent amicalement si nécessaire.
• Réhabilitation et suivi thérapeutique : Capture des exécutions d'exercices ou des progrès dans le mouvement pour soutenir la physiothérapie.
• Sécurité d'accès ou d'objet : Contrôle si certains objets (par ex. produits de nettoyage, outils) sont utilisés correctement ou rangés en sécurité.