Anotación de puntos clave del cuerpo humano
Shaip anotó 150,000 fotogramas de datos de imagen y vídeo con un esquema corporal completo de 36 puntos clave, combinando puntos de referencia faciales (cabeza, ojos, orejas, nariz, barbilla) con articulaciones del esqueleto (hombros, codos, muñecas, caderas, rodillas, tobillos), para potenciar la estimación de la postura, el análisis del movimiento, el seguimiento de la actividad física y la IA de movimiento aplicada a la atención médica.
Resumen del proyecto
A medida que la IA de estimación de postura y movimiento humano avanza hacia su implementación en producción, el cliente necesitaba un marco de anotación escalable para etiquetar 150,000 fotogramas de datos de imagen y vídeo con una cobertura de puntos clave de cuerpo completo anatómicamente precisa en diversas condiciones del mundo real.
Shaip diseñó el sistema integral de anotación, que abarca la colocación de puntos clave, el manejo de poses multiángulo, la gestión de oclusiones y el control de calidad estructurado, lo que permite la entrega de esquemas corporales de 36 puntos y la producción de conjuntos de datos listos para el modelo con un rendimiento diario constante.
Estado de la clave
Marcos anotados
150,000
Puntos clave / Cuerpo
36
Rendimiento diario
30 marcos
Plataforma
CVAT
Desafíos
- Escalando desde flujos de trabajo de muestras controladas hasta 150,000 marcos de anotación del esqueleto de cuerpo completo
- Mantener los precisión anatómica en diversas poses, ángulos de visión y condiciones de iluminación.
- Manejar oclusión parcial y superponer sujetos sin comprometer la precisión de los puntos clave
- Coordinador Puntos de referencia faciales + esqueleto corporal ubicación en un único esquema de 36 puntos
- Sosteniendo un 30 fotogramas por día por anotador Evaluación comparativa del rendimiento en todo el equipo
Solución
Estrategia de anotación
Shaip diseñó un esquema corporal de 36 puntos clave que abarca la anatomía completa: puntos de referencia faciales (cabeza, ojos, orejas, nariz, mentón) combinados con las articulaciones del esqueleto en hombros, brazos, torso, caderas y piernas. La plataforma CVAT se configuró con este esquema y se implementó en todo el equipo para garantizar un etiquetado uniforme.
Manejo de la postura y la diversidad
El conjunto de datos abarcaba deliberadamente una gran diversidad de sujetos, con diferentes posturas, ángulos de visión, condiciones de iluminación y tipos de vestimenta. Los anotadores siguieron directrices específicas para cada postura, manejando las posiciones de pie, sentado, agachado, acostado y en movimiento dinámico con el mismo nivel de precisión en los puntos clave.
Reglas de oclusión y casos límite
Se aplicaron reglas estrictas para el manejo de oclusiones parciales: puntos clave detrás de la ropa, partes del cuerpo ocultas por otras extremidades y sujetos parcialmente fuera del encuadre. Los puntos de referencia ocultos se marcaron con indicadores de visibilidad en lugar de aproximarse, lo que preservó la integridad del conjunto de datos para los modelos de estimación de pose posteriores.
Rendimiento y productividad (puntos de referencia)
El equipo mantuvo un promedio de 30 fotogramas anotados aprobados por anotador al día durante una jornada laboral de 8.5 horas. Este promedio se calibró con respecto a los objetivos de precisión, lo que garantizó que el rendimiento no comprometiera la calidad.
Flujo de trabajo de garantía de calidad
Cada fotograma anotado pasó por una revisión de control de calidad estructurada que abarcaba la precisión de la ubicación de los puntos clave, la corrección de los indicadores de visibilidad y la coherencia con el esquema de 36 puntos. Los fotogramas rechazados se devolvieron para su corrección con comentarios del anotador para impulsar la mejora continua.
Alcance del proyecto
| Tipo de conjunto de datos | Volumen | Puntos clave | Plataforma | Throughput | Cronograma |
|---|---|---|---|---|---|
| Esqueleto del cuerpo humano + anotación de puntos clave | 150,000 marcos | 36 por figura humana | CVAT | 30 fotogramas/día/anotador | Varios meses |
Resultados
- Estableció un Marco de anotación escalable de 36 puntos clave listo para la capacitación en producción de estimación de pose
- Estandarizado ubicación de puntos de referencia anatómicos en las regiones faciales y esqueléticas
- mantenimiento sencillo Rendimiento del anotador de 30 fotogramas por día Sin comprometer la precisión
- Entregó un conjunto de datos diverso y con múltiples condiciones abarcando poses, iluminación, ángulos y tipos de ropa.
- Habilitó al cliente Estimación de postura, análisis de movimiento, seguimiento de actividad física e IA de movimiento para el cuidado de la salud hoja de ruta
En resumen, Shaip ayudó a transformar un requisito de anotación de puntos clave de 150,000 fotogramas en un flujo de trabajo estructurado y listo para la producción, capaz de admitir aplicaciones de IA de postura humana, seguimiento de actividad física, diagnóstico de movimiento y movimiento en el ámbito de la salud con precisión y escalabilidad consistentes.
Shaip nos proporcionó la base para la anotación de puntos clave con la precisión que requerían nuestros modelos de estimación de pose. Su ejecución de esquemas de 36 puntos, el manejo de oclusiones y el rendimiento diario constante se tradujeron directamente en un mejor desempeño del modelo.
