Trigger genom kopptagning: Den integrerade sensorn i medicindispensern känner av när en kopp tas och startar övervakningsprocessen.
Aktivering av avatar: AvatarMediKi går över till uppmärksamhetsläge (State: aktiv övervakning).
Rörelsedetektering via YOLO: En lokalt körd instans av YOLO analyserar omgivningen för relevanta rörelser. Mål: Att upptäcka en person som gör en riktad handrörelse mot munnen.
Bildfiltrering & -vidarebefordran: Endast bilder med potentiellt relevant hand-mun-interaktion skickas till Deep-AI.
Deep-AI analys: Deep-AI klassificerar handlingen som ”medicin intagen” eller ”inte intagen” och motiverar denna bedömning.
Auditiv uppmaning vid oklarhet: Om Deep-AI inte kan fastställa att medicin har tagits, utlöses automatiskt en ljud-dialog: ”Har du tagit ditt läkemedel?”
Dataöverföring till vårdpersonal: Resultaten av den visuella analysen och det verbala svaret överförs inklusive tidsstämpel till vårdplattformen.
Mål
Robust, AI-stödd övervakning av medicinintag med minimal inblandning, optimerad för användning i vårdinrättningar, stödboende eller hemma med fjärrövervakning.
Utsikter: Ytterligare användningsområden för AvatarMediKi-teknologin
Kombinationen av sensorbaserad händelseupptäckt, visuell AI-analys (YOLO, Deep-AI) och adaptiv användarinteraktion (t.ex. ljuduppmaningar) erbjuder potential långt utöver medicinövervakning. Framtida användningsområden kan inkludera:
Fallupptäckt och nödreaktion: Visuell analys upptäcker atypiska rörelsemönster eller inaktivitet, reagerar automatiskt och informerar hjälp.
Mat- och vätskeövervakning: Automatiserad registrering av om invånare dricker eller äter – relevant för vård och näringskontroll.
Stöd för demens: Påminnelsessystem som känner igen om viktiga vardagshandlingar har utförts, och vid behov ingriper vänligt.
Rehabilitering och terapimonitorering: Registrering av övningsutföranden eller framsteg i rörelsemönster för att stödja fysioterapi.
Tillträdes- eller objektsäkerhet: Kontroll om vissa objekt (t.ex. rengöringsmedel, verktyg) används korrekt eller förvaras säkert.
Robert Gühne
Robert är mjukvaruutvecklare, designer och ansvarig för appen och infrastrukturen.