S'abonner

Measurement of level of consciousness by AVPU scale assessment system based on automated video and speech recognition technology - 20/11/23

Doi : 10.1016/j.ajem.2023.09.044 
Dong Hyun Choi, MD a, g, Ki Jeong Hong, MD, PhD b, g, h, l, , Sang Do Shin, MD, PhD b, g, h, l, Sungwan Kim, PhD a, i, j , Minhwa Chung, PhD c , Ki Hong Kim, MD b, g, h, Kyoung Jun Song, MD, PhD d, g, h, l, Minwoo Cho, PhD e, j, k, Dan Yoon f, j, Jooyoung Lee c
a Department of Biomedical Engineering, Seoul National University College of Medicine, Seoul, South Korea 
b Department of Emergency Medicine, Seoul National University Hospital, Seoul, South Korea 
c Department of Linguistics, Seoul National University College of Humanities, Seoul, South Korea 
d Department of Emergency Medicine, Seoul National University Boramae Medical Center, Seoul, South Korea 
e Transdisciplinary Department of Medicine and Advanced Technology, Seoul National University Hospital, Seoul, South Korea 
f Interdisciplinary Program in Bioengineering, Seoul National University Graduate School, Seoul, South Korea 
g Laboratory of Emergency Medical Services, Seoul National University Hospital Biomedical Research Institute, Seoul, South Korea 
h Department of Emergency Medicine, Seoul National University College of Medicine, Seoul, South Korea 
i Institute of Bioengineering, Seoul National University, Seoul, South Korea 
j Artificial Intelligence Institute, Seoul National University, Seoul, South Korea 
k Medical Big Data Research Center, Seoul National University College of Medicine, Seoul, South Korea 
l Disaster Medicine Research Center, Seoul National University Medical Research Center, Seoul, South Korea 

Corresponding author at: 101 Daehak-Ro, Jongno-Gu, Seoul 03080, South Korea.101 Daehak-Ro, Jongno-GuSeoul03080South Korea

Abstract

Objective

To develop an alert/verbal/painful/unresponsive (AVPU) scale assessment system based on automated video and speech recognition technology (AVPU-AVSR) that can automatically assess a patient's level of consciousness and evaluate its performance through clinical simulation.

Methods

We developed an AVPU-AVSR system with a whole-body camera, face camera, and microphone. The AVPU-AVSR system automatically extracted essential audiovisual features to assess the AVPU score from the recorded video files. Arm movement, pain stimulus, and eyes-open state were extracted using a rule-based approach using landmarks estimated from pre-trained pose and face estimation models. Verbal stimuli were extracted using a pre-trained speech-recognition model. Simulations of a physician examining the consciousness of 12 simulated patients for 16 simulation scenarios (4 for each of “Alert”, “Verbal”, “Painful”, and “Unresponsive”) were conducted under the AVPU-AVSR system. The accuracy, sensitivity, and specificity of the AVPU-AVSR system were assessed.

Results

A total of 192 cases with 12 simulated patients were assessed using the AVPU-AVSR system with a multi-class accuracy of 0.95 (95% confidence interval [CI] (0.92–0.98). The sensitivity and specificity (95% CIs) for detecting impaired consciousness were 1.00 (0.97–1.00) and 0.88 (0.75–0.95), respectively. The sensitivity and specificity of each extracted feature ranged from 0.88 to 1.00 and 0.98 to 1.00.

Conclusions

The AVPU-AVSR system showed good accuracy in assessing consciousness levels in a clinical simulation and has the potential to be implemented in clinical practice to automatically assess mental status.

Le texte complet de cet article est disponible en PDF.

Keywords : AVPU scale, Consciousness, Video recognition, Speech recognition, Simulation


Plan


© 2023  Elsevier Inc. Tous droits réservés.
Ajouter à ma bibliothèque Retirer de ma bibliothèque Imprimer
Export

    Export citations

  • Fichier

  • Contenu

Vol 74

P. 112-118 - décembre 2023 Retour au numéro
Article précédent Article précédent
  • HEART-score can be simplified without loss of discriminatory power in patients with chest pain – Introducing the HET-score
  • Henrik Löfmark, Josephine Muhrbeck, Kai M. Eggers, Rickard Linder, Lina Ljung, Arne Martinsson, Dina Melki, Nondita Sarkar, Per Svensson, Bertil Lindahl, Tomas Jernberg
| Article suivant Article suivant
  • Diagnostic performance of rapid antigen tests for SARS-CoV-2 transmission risk based on cycle threshold values in the emergency department
  • Sang Hwan Lee, Juncheol Lee, Yongil Cho, Tae Ho Lim, Hyunggoo Kang, Jaehoon Oh, Kyung Hun Yoo, Byuk Sung Ko

Bienvenue sur EM-consulte, la référence des professionnels de santé.
L’accès au texte intégral de cet article nécessite un abonnement.

Déjà abonné à cette revue ?

Mon compte


Plateformes Elsevier Masson

Déclaration CNIL

EM-CONSULTE.COM est déclaré à la CNIL, déclaration n° 1286925.

En application de la loi nº78-17 du 6 janvier 1978 relative à l'informatique, aux fichiers et aux libertés, vous disposez des droits d'opposition (art.26 de la loi), d'accès (art.34 à 38 de la loi), et de rectification (art.36 de la loi) des données vous concernant. Ainsi, vous pouvez exiger que soient rectifiées, complétées, clarifiées, mises à jour ou effacées les informations vous concernant qui sont inexactes, incomplètes, équivoques, périmées ou dont la collecte ou l'utilisation ou la conservation est interdite.
Les informations personnelles concernant les visiteurs de notre site, y compris leur identité, sont confidentielles.
Le responsable du site s'engage sur l'honneur à respecter les conditions légales de confidentialité applicables en France et à ne pas divulguer ces informations à des tiers.


Tout le contenu de ce site: Copyright © 2024 Elsevier, ses concédants de licence et ses contributeurs. Tout les droits sont réservés, y compris ceux relatifs à l'exploration de textes et de données, a la formation en IA et aux technologies similaires. Pour tout contenu en libre accès, les conditions de licence Creative Commons s'appliquent.