AvatarMediKi – Technischer Ablauf zur Medikamenteneinnahme
Systemlogik im Detail
Trigger durch Becherentnahme: Der integrierte Sensor im Medikamentenspender erkennt die Entnahme eines Bechers und löst den Überwachungsprozess aus.
Aktivierung des Avatars: AvatarMediKi wechselt in den Aufmerksamkeitsmodus (State: active monitoring).
Bewegungserkennung via YOLO: Eine lokal laufende Instanz von YOLO analysiert die Umgebung auf relevante Bewegungen. Ziel: Erkennung einer Person mit gezielter Handbewegung Richtung Mund.
Bildfilterung & -weiterleitung: Nur Frames mit potentiell relevanter Hand-Mund-Interaktion werden an die Deep-AI gesendet.
Deep-AI Analyse: Die Deep-AI klassifiziert die Handlung als „Medikament eingenommen“ oder „nicht eingenommen“ und begründet diese Auswertung.
Auditiver Prompt bei Unklarheit: Falls die Deep-AI keine Einnahme erkennen kann, wird automatisch ein Audio-Dialog ausgelöst: „Haben Sie Ihr Medikament genommen?“
Datenweitergabe an Pflegepersonal: Ergebnisse der visuellen Analyse und der verbalen Rückmeldung werden inklusive Zeitstempel an die Pflegeplattform übermittelt.
Ziel
Robuste, KI-gestützte Überwachung der Medikamenteneinnahme mit minimalem Eingriff, die optimiert für den Einsatz in Pflegeeinrichtungen, betreutem Wohnen oder zu Hause mit Remote-Monitoring ist.
Ausblick: Weitere Einsatzmöglichkeiten der AvatarMediKi-Technologie
Die Kombination aus sensorgestützter Ereigniserkennung, visueller KI-Analyse (YOLO, Deep-AI) und adaptiver Nutzerinteraktion (z. B. Audio-Prompts) bietet weit über die Medikamentenüberwachung hinaus Potenzial. Zukünftige Anwendungsfelder könnten unter anderem sein:
Sturzerkennung und Notfallreaktion: Visuelle Analyse erkennt atypische Bewegungsmuster oder Inaktivität, reagiert automatisiert und informiert Hilfe.
Essens- und Flüssigkeitsüberwachung: Automatisierte Erfassung, ob Bewohner trinken oder essen – relevant für Pflege und Ernährungskontrolle.
Demenzunterstützung: Erinnerungssysteme, die erkennen, ob wichtige Alltagshandlungen ausgeführt wurden, und bei Bedarf freundlich eingreifen.
Rehabilitation und Therapie-Monitoring: Erfassung von Übungsausführungen oder Fortschritten im Bewegungsablauf zur Unterstützung von Physiotherapie.
Zugangs- oder Objektsicherheit: Kontrolle, ob bestimmte Objekte (z. B. Reinigungsmittel, Werkzeuge) korrekt genutzt oder sicher verstaut werden.
Robert Gühne
Robert ist Softwareentwickler, Designer und für die App und Infrastruktur verantwortlich. Er entwickelt unter anderem bei paperlesspaper Open Source Hardware.