AvatarMediKi – Technischer Ablauf zur Medikamenteneinnahme
Systemlogik im Detail
Trigger durch Becherentnahme: Der integrierte Sensor im Medikamentenspender erkennt die Entnahme eines Bechers und löst den Überwachungsprozess aus.
Aktivierung des Avatars: AvatarMediKi wechselt in den Aufmerksamkeitsmodus (State: active monitoring).
Bewegungserkennung via YOLO: Eine lokal laufende Instanz von YOLO analysiert die Umgebung auf relevante Bewegungen. Ziel: Erkennung einer Person mit gezielter Handbewegung Richtung Mund.
Bildfilterung & -weiterleitung: Nur Frames mit potentiell relevanter Hand-Mund-Interaktion werden an die Deep-AI gesendet.
Deep-AI Analyse: Die Deep-AI klassifiziert die Handlung als „Medikament eingenommen“ oder „nicht eingenommen“ und begründet diese Auswertung.
Auditiver Prompt bei Unklarheit: Falls die Deep-AI keine Einnahme erkennen kann, wird automatisch ein Audio-Dialog ausgelöst: „Haben Sie Ihr Medikament genommen?“
Datenweitergabe an Pflegepersonal: Ergebnisse der visuellen Analyse und der verbalen Rückmeldung werden inklusive Zeitstempel an die Pflegeplattform übermittelt.
Ziel
Robuste, KI-gestützte Überwachung der Medikamenteneinnahme mit minimalem Eingriff, die optimiert für den Einsatz in Pflegeeinrichtungen, betreutem Wohnen oder zu Hause mit Remote-Monitoring ist.
Ausblick: Weitere Einsatzmöglichkeiten der AvatarMediKi-Technologie
Die Kombination aus sensorgestützter Ereigniserkennung, visueller KI-Analyse (YOLO, Deep-AI) und adaptiver Nutzerinteraktion (z. B. Audio-Prompts) bietet weit über die Medikamentenüberwachung hinaus Potenzial. Zukünftige Anwendungsfelder könnten unter anderem sein:
Sturzerkennung und Notfallreaktion: Visuelle Analyse erkennt atypische Bewegungsmuster oder Inaktivität, reagiert automatisiert und informiert Hilfe.
Essens- und Flüssigkeitsüberwachung: Automatisierte Erfassung, ob Bewohner trinken oder essen – relevant für Pflege und Ernährungskontrolle.
Demenzunterstützung: Erinnerungssysteme, die erkennen, ob wichtige Alltagshandlungen ausgeführt wurden, und bei Bedarf freundlich eingreifen.
Rehabilitation und Therapie-Monitoring: Erfassung von Übungsausführungen oder Fortschritten im Bewegungsablauf zur Unterstützung von Physiotherapie.
Zugangs- oder Objektsicherheit: Kontrolle, ob bestimmte Objekte (z. B. Reinigungsmittel, Werkzeuge) korrekt genutzt oder sicher verstaut werden.
Robert Gühne
Robert est développeur de logiciels, designer et responsable de l'application et de l'infrastructure.