KI-gestützte App erkennt frühe Anzeichen einer Krankheit nur mit einer Smartphone-Kamera
„Wir wollen für Diagnosezwecke so viele Funktionen wie möglich aus den Smartphones herausholen, ohne dass zusätzliche Hardware erforderlich ist“, sagt Remi Koscielny, Mitbegründer und CEO von MX Labs.
Das Startup Shen.AI freut sich, seine Entwicklung einer Überwachung der Vitalparameter bekannt zu geben, bei der ausschließlich Echtzeitvideos von einer Smartphone-Kamera verwendet werden, sodass fortschrittliches Gesundheitsmanagement jederzeit und überall für jedermann verfügbar ist. Mithilfe künstlicher Intelligenz kann die Anwendung subtile Krankheitszeichen mit mathematischer Präzision erkennen und nutzt allgegenwärtige Technologien, um das Gesundheitswesen zu demokratisieren.
„Mobiltelefone mit Kamera sind die am weitesten verbreiteten, aber am wenigsten genutzten Tools zur Gesundheitsanalyse“, sagt Remi Koscielny, Mitbegründer und CEO von Shen AI. „Wir wollen für Diagnosezwecke so viele Funktionen wie möglich aus den Smartphones herausholen, ohne dass zusätzliche Hardware erforderlich ist.“
Während weltweit über fünf Milliarden Menschen Mobiltelefone nutzen, berichten die Weltbank und die Weltgesundheitsorganisation, dass mindestens die Hälfte der Weltbevölkerung keinen Zugang zu grundlegenden Gesundheitsdiensten hat.
„Dreiundsechzig Prozent der Menschen auf der Welt haben Mobiltelefone“, sagt Przemek Jaworski, Mitbegründer und CTO von Shen AI, „und 2,87 Milliarden von ihnen haben ein Smartphone, das mit einer Kamera ausgestattet ist. Stellen Sie sich vor, jedes Smartphone in ein Gerät zur Gesundheitsbewertung zu verwandeln. Das ist unsere Mission.“
Die Gesundheitsüberwachung von Shen AI beginnt mit einem kurzen Video des Gesichts des Probanden. Die App stabilisiert die Echtzeitbilder und ordnet sie einem maßgeschneiderten dreidimensionalen Netz mit Gesichtsgeometrie zu. Computer-Vision-Techniken extrahieren dann Datenmuster von Gesichtshaut, Augen und anderen Merkmalen wie winzigen Bewegungen des Kopfes und der Muskeln. Um die Herzaktivität zu analysieren und Vitalwerte zu extrahieren, verwendet das Gerät die ferngesteuerte Photoplethysmographie (rPPG), eine Technik, bei der Blutpulsationen in den Hautgefäßen berührungslos aufgezeichnet werden.
Basierend auf fortschrittlicher Datentechnik und den neuesten Forschungsergebnissen kann die Technologie von Shen.AI verschiedene kardiovaskuläre Parameter (Blutdruck, Herzfrequenz und Herzfrequenzvariabilität) messen, visuelles Biofeedback geben, den Hautzustand beurteilen und eine vorläufige Diagnose mit empfohlenen nächsten Schritten stellen. Für die Technologie mit dem Namen Shen AI ist nur ein Smartphone, Tablet oder Computer mit Kamera erforderlich. Es werden keine anderen Geräte benötigt. Die Shen AI-Plattform wird als Software Development Kit (SDK) für App-Entwickler und Hardwarehersteller verfügbar sein.
Shen AI will eine Familie von mobilen Apps entwickeln, beginnend mit Heart Monitor, der bereits kostenlos im App Store von Apple und bei Google Play erhältlich ist. Der Herzmonitor wurde als unterstützende Lösung zur Überwachung der kardiovaskulären Gesundheit und zur Erkennung von Bluthochdruck konzipiert. Dies könnte den Zugang zur Früherkennung von Bluthochdruck, einem der wichtigsten vermeidbaren Risikofaktoren für Herz-Kreislauf-Erkrankungen, erheblich verbessern.
More blog posts
Sagittis et eu at elementum, quis in. Proin praesent volutpat egestas sociis sit lorem nunc nunc sit.
How to choose a vendor for vital signs monitoring
Choosing a vital signs monitoring provider can be tricky. This guide breaks down what truly matters — from accuracy and inclusivity to integration, user experience, and long-term scalability — so you can select a solution built for real-world performance.
Multimodal approach by Shen AI using remote photoplethysmography (rPPG) and ballistocardiography (rBCG) for heart rate and heart rate variability prediction
Shen AI’s multimodal rPPG+rBCG system delivers high-accuracy, equitable heart rate and HRV monitoring across 5,000+ participants, improving SDNN by up to 18% in darker skin tones.
Facial video photoplethysmography for measuring average and quasi-instantaneous heart rate
Facial vPPG matched ECG with up to 1-bpm precision - even for 4-second, quasi-instantaneous heart rate readings - showcasing the potential of accurate, contactless monitoring.