Zurück zur Übersicht

AvatarMediKi – Technischer Ablauf zur Medikamenteneinnahme

  • Trigger durch Becherentnahme:
    Der integrierte Sensor im Medikamentenspender erkennt die Entnahme eines Bechers und löst den Überwachungsprozess aus.
  • Aktivierung des Avatars:
    AvatarMediKi wechselt in den Aufmerksamkeitsmodus (State: active monitoring).
  • Bewegungserkennung via YOLO:
    Eine lokal laufende Instanz von YOLO analysiert die Umgebung auf relevante Bewegungen. Ziel: Erkennung einer Person mit gezielter Handbewegung Richtung Mund.
  • Bildfilterung & -weiterleitung:
    Nur Frames mit potentiell relevanter Hand-Mund-Interaktion werden an die Deep-AI gesendet.
  • Deep-AI Analyse:
    Die Deep-AI klassifiziert die Handlung als „Medikament eingenommen“ oder „nicht eingenommen“ und begründet diese Auswertung.
  • Auditiver Prompt bei Unklarheit:
    Falls die Deep-AI keine Einnahme erkennen kann, wird automatisch ein Audio-Dialog ausgelöst: „Haben Sie Ihr Medikament genommen?“
  • Datenweitergabe an Pflegepersonal:
    Ergebnisse der visuellen Analyse und der verbalen Rückmeldung werden inklusive Zeitstempel an die Pflegeplattform übermittelt.

Robuste, KI-gestützte Überwachung der Medikamenteneinnahme mit minimalem Eingriff, die optimiert für den Einsatz in Pflegeeinrichtungen, betreutem Wohnen oder zu Hause mit Remote-Monitoring ist.

Die Kombination aus sensorgestützter Ereigniserkennung, visueller KI-Analyse (YOLO, Deep-AI) und adaptiver Nutzerinteraktion (z. B. Audio-Prompts) bietet weit über die Medikamentenüberwachung hinaus Potenzial. Zukünftige Anwendungsfelder könnten unter anderem sein:

  • Sturzerkennung und Notfallreaktion: Visuelle Analyse erkennt atypische Bewegungsmuster oder Inaktivität, reagiert automatisiert und informiert Hilfe.
  • Essens- und Flüssigkeitsüberwachung: Automatisierte Erfassung, ob Bewohner trinken oder essen – relevant für Pflege und Ernährungskontrolle.
  • Demenzunterstützung: Erinnerungssysteme, die erkennen, ob wichtige Alltagshandlungen ausgeführt wurden, und bei Bedarf freundlich eingreifen.
  • Rehabilitation und Therapie-Monitoring: Erfassung von Übungsausführungen oder Fortschritten im Bewegungsablauf zur Unterstützung von Physiotherapie.
  • Zugangs- oder Objektsicherheit: Kontrolle, ob bestimmte Objekte (z. B. Reinigungsmittel, Werkzeuge) korrekt genutzt oder sicher verstaut werden.