Multimodale Sensorik

Shen AI verwendet den Videoeingang einer Kamera, um das Gesicht zu erkennen und physiologische Vitalfunktionen zu extrahieren. Dies geschieht durch die Analyse subtiler Pulsationssignale der Haut, die durch ferngesteuerte Photoplethysmografie (rPPG) erfasst wurden. Faktoren wie Beleuchtung, Hautton und Bewegung können jedoch die Signalqualität beeinflussen, was eine gleichbleibende Genauigkeit zu einer Herausforderung macht.

‍

Um diesem Problem zu begegnen, integriert Shen AI multimodale Sensorik und kombiniert rPPG mit ferngesteuerter Ballistokardiographie (rBCG). Dieser Ansatz erhöht die Genauigkeit, indem Signale fusioniert werden: Wenn der rPPG-Wert begrenzt ist, trägt RbCG zur Aufrechterhaltung zuverlässiger Messungen bei. Die multimodale Sensorik stellt außerdem sicher, dass die künstliche Intelligenz von Shen bei einer Vielzahl von Lichtverhältnissen und Hauttönen funktioniert. Dadurch wird die gerätefreie Gesundheitsüberwachung genauer, umfassender und zugänglicher.