Quelle est vraiment la précision d’un téléphone pour cela ?

Il est raisonnable d’être sceptique. Une étude clinique du sommeil utilise plusieurs capteurs, par exemple le débit d’air, l’oxygène, les mouvements thoraciques et les ondes cérébrales. SomniSense utilise un seul microphone de téléphone posé sur la table de chevet, à environ 1.5–3 pieds (50–90 cm) de votre tête, conformément aux consignes de placement prises en charge. Lorsque quelqu’un me demande « quelle précision cela peut-il vraiment avoir ? », je pense que c’est la bonne question.

La réponse honnête dépend de la tâche. Un modèle utilisant le microphone peut être évalué pour une tâche de classification acoustique définie, tandis que la PSG mesure des signaux physiologiques à des fins d’interprétation clinique. Les tâches sont différentes : un seul nombre ne peut pas décrire tout le produit.

Pourquoi une valeur de précision doit nommer sa tâche

Un pourcentage élevé reste incomplet s’il ne dit pas précis pour quoi. Classer un segment de ronflement de 1 seconde, une fenêtre respiratoire étiquetée de 200 secondes et produire un résumé produit de la nuit entière sont des tâches différentes. Les preuves de l’une ne doivent pas être transférées à l’autre.

Les deux valeurs réellement importantes évoluent dans des directions opposées :

• Sensibilité — parmi les annotations de référence du jeu d’évaluation, combien le modèle en a-t-il détecté ?
• Précision — parmi les détections du modèle dans ce jeu, combien correspondaient à une annotation de référence ?

La sensibilité et la précision peuvent évoluer dans des directions différentes. Publier les deux aide à comprendre le compromis, sans traiter une seule métrique combinée comme une description complète.

Nos valeurs réelles

En clair : pour la détection d’événements de ronflement de 1 seconde, les moyennes sur cinq graines sont de 91.67% de sensibilité et 89.01% de précision. Pour les fenêtres d’événements respiratoires de 200 secondes, le modèle compressé affiche 88.49% d’exactitude et un F1 de 88.06%. Ce sont des références de classification issues d’une cohorte de recherche, pas une garantie de précision personnelle pour votre SRI ou BRI de ce soir.

Je ne détaille volontairement pas toutes ces valeurs ici : cela demande une lecture plus longue et rigoureuse, que je préfère vous proposer intégralement plutôt que dans un résumé de blog. La version valeur par valeur se trouve sur la page de précision, et le plan d’étude ainsi que le modèle — comment un téléphone arrive à ces résultats — sur la page de recherche.

La partie honnête : ses points faibles

Les performances en production peuvent varier selon la position du téléphone, le bruit ambiant, le microphone, les sons du partenaire et les motifs proches d’une limite de décision. La référence publiée sur les fenêtres de 200 secondes n’offre pas de garantie unilatérale pour le BRI d’une personne.

Le bruit, une autre personne qui dort, un ventilateur près du microphone et les âges non pris en charge peuvent modifier l’adéquation entre une référence et une nuit personnelle. La cohorte publiée était adulte ; SomniSense n’est pas destiné aux moins de 18 ans.