Was „gegen PSG validiert“ Ihnen sagen sollte.

PSG — Polysomnographie — zeichnet mehrere physiologische Signale zur professionellen Interpretation auf. Die Aussage, ein Produkt sei mit PSG verglichen worden, ist unvollständig, wenn sie nicht auch Ausgabe, Referenzannotation, Studiendesign, Datensatz, Kennzahl und Grenzen nennt.

Hier ist eine praktische Checkliste zum Lesen der SomniSense-Evidenz und anderer veröffentlichter Vergleiche.

Das entscheidende Wort: „gepaart“

Ein starkes Vergleichsdesign kann Daten aus gepaarten Nächten verwenden: Gerät und PSG zeichnen dieselbe Person, in derselben Nacht, zur selben Zeit auf. Die Bewertungsfrage muss weiterhin zur behaupteten Ausgabe passen. Der veröffentlichte Produktionsbenchmark von SomniSense umfasst die Klassifikation markierter 200-Sekunden-Fenster, nicht die Bestätigung jedes klinischen Ereignisses.

Ein Vergleich unabhängiger Gruppenmittelwerte beantwortet nicht dieselbe Frage wie gleichzeitige gepaarte Aufzeichnungen. Kohortengröße, Umgebung, Einschlusskriterien und unterrepräsentierte Gruppen sind ebenfalls wichtig; diese Angaben sollten neben dem Ergebnis stehen.

Referenzbewertung und Verblindung

Jemand muss die PSG prüfen und klinische Referenzannotationen erstellen — das ist die „Bewertung“ durch geschulte Fachkräfte. Die Frage lautet: Wusste die bewertende Person bereits, was die App angezeigt hatte?

Eine verblindete Bewertung hilft, das Risiko zu senken, dass die Kenntnis der App-Ausgabe die Referenzannotationen beeinflusst. Ein nützlicher Bericht nennt, ob die Bewertung verblindet war und wie die Referenzkennzeichnungen erzeugt wurden.

„Übereinstimmung“ ist ein Spektrum, kein Kontrollkästchen

Selbst bei gepaarten Nächten und verblindeter Bewertung ist „Übereinstimmung“ keine Ja-oder-Nein-Eigenschaft. Die richtige Analyse hängt davon ab, ob es um Segmentklassifikation, Fensterklassifikation, Ereigniserkennung oder Messübereinstimmung geht.

Für SomniSense ist der hier berichtete öffentliche Produktionsbenchmark Klassifikationsgenauigkeit und F1 bei markierten 200-Sekunden-Atemfenstern. Er ist keine Bland–Altman-Aussage und darf nicht als Validierung jeder Ereignisgrenze, jedes nächtlichen BRI oder einer Übereinstimmung mit klinischem AHI dargestellt werden.

So wurde unsere Studie tatsächlich durchgeführt

Kurz, damit Sie sie an der obigen Checkliste messen können: 80 gepaarte Nächte von 40 Teilnehmenden — einige im Labor, die meisten zu Hause mit einem tragbaren Schlafstudiengerät — Erwachsene mit und ohne bekannte schlafbezogene Atemprobleme, bewertet von AASM-geschulten Fachkräften, die die SomniSense-Ausgabe nicht kannten. Das vollständige Design, die von uns nicht gut repräsentierte Kohorte und die Preprints finden Sie auf der Forschungsseite; die Einzelergebnisse stehen auf der Genauigkeitsseite.