Volver al inicio

Cómo medimos la detección

Antes de instalar Te Tengo en una casa, probamos el clasificador de caídas con videos públicos. Aquí está cómo lo hicimos, qué resultó y qué no sabemos todavía.

Sensibilidad
81,2 %
Especificidad
81,1 %

Los datos

  • URFD (Kwolek y Kepski, 2014)

    30 caídas y 40 actividades cotidianas, de las cuales 16 terminan con la persona acostada en el suelo a propósito. Cámara a la altura del cuerpo.

  • CAUCAFall (Eraso Guerrero et al., 2022)

    10 personas, cada una con 5 caídas (hacia adelante, hacia atrás, a la izquierda, a la derecha y desde sentado) y 5 actividades (caminar, saltar, recoger un objeto, sentarse y arrodillarse): 100 videos. Cámara elevada en una esquina de una casa, con obstáculos y cambios de luz.

Ninguno de los dos incluye adultos mayores ni caídas reales.

Cómo lo probamos

  1. El mismo procesamiento que en la casa: cada video se reduce a 480p y 8 imágenes por segundo, se comprime en JPEG como lo hace Te Tengo Captura y pasa por MediaPipe Pose y el mismo clasificador cinemático. No se entrena ningún modelo.
  2. Un video de caída cuenta como acierto si el clasificador emite al menos una caída. Un video de actividad cotidiana cuenta como falsa alarma si emite alguna.
  3. Sensibilidad es la proporción de caídas detectadas; especificidad, la proporción de actividades cotidianas sin alarma.
  4. Dejando un grupo fuera: hay 11 grupos (cada persona de CAUCAFall y todo URFD). Cada grupo se evalúa con el umbral calibrado sin sus videos, para no medir con los mismos datos con los que se ajustó.

Resultados

Resultados a 8 imágenes por segundo, en JPEG, dejando un grupo fuera.
GrupoCaídasNo caídasSensibilidadEspecificidadExactitud
Total 80 90 81,2 % 81,1 % 81,2 %
URFD 30 40 76,7 % 77,5 % 77,1 %
CAUCAFall 50 50 84,0 % 84,0 % 84,0 %

Por tipo de actividad

CAUCAFall · caída hacia atrás
10 de 10 detectadas
CAUCAFall · caída a la izquierda
9 de 10
CAUCAFall · caída hacia adelante
8 de 10
CAUCAFall · caída a la derecha
8 de 10
CAUCAFall · caída desde sentado
7 de 10
CAUCAFall · saltar
0 de 10 falsas alarmas
CAUCAFall · caminar, sentarse
1 de 10 falsas alarmas cada una
CAUCAFall · arrodillarse, recoger un objeto
3 de 10 falsas alarmas cada una
URFD · caídas
23 de 30 detectadas
URFD · actividades cotidianas
9 de 40 falsas alarmas; 6 al acostarse en el suelo a propósito

Ninguna de las 30 caídas de URFD dio un falso aviso de recuperación. A 6 y a 10 imágenes por segundo, la sensibilidad fue de 76,2 % y 81,2 %, y la especificidad de 83,3 % y 84,4 %.

Lo que todavía no sabemos

  1. Acostarse en el suelo a propósito se confunde con una caída en 6 de 16 casos de URFD.
  2. Recoger un objeto y arrodillarse dan falsas alarmas en 3 de cada 10 casos con la cámara elevada.
  3. La calibración depende de dónde está la cámara: se repetirá con las grabaciones de la prueba piloto.
  4. No hay adultos mayores ni caídas reales en los datos. La tasa real de falsas alarmas se medirá en la casa.
  5. La validación es por video, no por instante: no mide cuánto tarda en llegar la alerta.

Referencias