Umut verici demodan güvenilir ölçüm altyapısına

Şeffaf bir doğrulama yol haritası, teknolojinin tüm koşullarda doğru olduğuna dair belirsiz bir iddiadan genellikle daha fazla güven yaratır. İşte ne test ettiğimiz, nasıl test ettiğimiz ve ne raporladığımız.

Dört doğrulama ilkesi

Gösterdiğimizi doğruluyoruz

İddia edilen her yetenek tanımlı bir doğrulama çalışmasına sahiptir. Test edilmemiş sonuçları sunmayız.

Hata modlarını raporluyoruz

Doğrulama raporları reddetme oranlarını, uç durum hatalarını ve doğruluğun düştüğü koşulları içerir.

Ölçüleni hesaplanandan ayırıyoruz

Kamera ile ölçülen değerler (HR, RR), hesaplanan referanslardan (BMI, REE) ayrı doğrulanır.

Tüm koşullarda iddia etmiyoruz

Doğrulama kapsamı açıktır. Test edilen koşulların dışındaki sonuçlar iddia edilmez.

Sentetikten gerçek dünyaya yapılandırılmış ilerleme

P1
Faz 1Aktif

Sentetik sinyal testleri

Bilinen frekanslı sentetik sinyaller pipeline'a enjekte edilir. rPPG algoritmasının ideal koşullarda doğru frekansı çıkardığını doğrular.

40–120 bpm'de enjekte edilen HR sinyalleri
8–30 /min'de enjekte edilen RR sinyalleri
Ortalama mutlak hata ölçüldü
Uç durumlar: çok düşük ve çok yüksek HR
Sonuç:İdeal koşullarda temel algoritma doğruluğu
P2
Faz 2Aktif

Kontrollü kayıt testleri

Bilinen referans değerleri olan, stabil laboratuvar koşullarında kaydedilmiş önceden kaydedilmiş videolar. Gerçek dünya değişkenlerini karıştırmadan pipeline'ı gerçek kamera verilerine karşı test eder.

Çeşitli ten tonları, yaşlar, yüz boyutları
Farklı aydınlatma sıcaklıkları
ECG referansından bilinen HR
Birden fazla kamera çözünürlüğü
Sonuç:Demografik ve donanım varyasyonuna göre performans
P3
Faz 3Yakında

Referans cihaz karşılaştırması

Eşzamanlı Camera Vital Check taraması ve doğrulanmış referans cihaz ölçümü. HR ve RR değerlerinin doğrudan karşılaştırması.

HR referansı için nabız oksimetresi veya ECG
RR referansı için kapnografi veya göğüs kemeri
Bland-Altman analizi
Korelasyon katsayıları raporlanır
Sonuç:Doğrulanmış referans cihazlarla nicel uyum
P4
Faz 4Yakında

Gerçek dünya kullanılabilirlik çalışması

Gerçek kullanıcılar, gerçek donanım, gerçek ortamlar. Geçerli tarama oranı, reddedilen tarama oranı ve yeniden tarama kalıplarını ölçer.

Geçerli tarama oranı
Reddedilen tarama oranı ve neden dağılımı
Geçerli taramaya ortalama süre
Kullanıcı memnuniyet puanı
Sonuç:Gerçek dünya güvenilirlik ve kullanılabilirlik metrikleri
P5
Faz 5Yakında

Adillik ve sağlamlık çalışması

Ten rengi, aydınlatma koşulları, cihazlar ve demografiye göre performans. Sistematik önyargı veya doğruluk varyasyonunu belirler.

Fitzpatrick ölçeği cilt tonu aralığı
Çeşitli aydınlatma: sıcak, soğuk, parlak, loş
Mobil, dizüstü ve masaüstü kameralar
Yaş aralığı: 18–65+
Sonuç:Belgelenmiş performans sınırları ve adillik metrikleri

Sonuçları nasıl raporluyoruz

Mean Absolute Error (MAE)
HR ve RR için birincil doğruluk metriği
Root Mean Square Error (RMSE)
Aykırı ölçümlere duyarlılık
Bland-Altman Limits of Agreement
CVC ile referans cihaz arasındaki uyum
Pearson / Spearman Correlation
CVC ile referans değerler arasındaki korelasyon
Geçerli tarama oranı
Geçerli sonuç döndüren taramaların yüzdesi
Reddedilen tarama oranı
Redlerin yüzde ve neden dağılımı
Orta kalite oranı
Kalite notuyla döndürülen taramalar
Koşula göre tabakalı sonuçlar
Aydınlatma, hareket, cilt tonuna göre ayrılmış doğruluk