Investigadores utilizan IA para crear una herramienta que convierte lenguaje de señas en texto

Investigadores utilizan IA para crear una herramienta que convierte lenguaje de señas en texto

Los investigadores utilizaron un modelo de aprendizaje automático similar al que se encuentra detrás de otras herramientas como ChatGPT

CIENCIA David Hernández 28 may. 2023 11:10h.

Investigadores del Barcelona Supercomputing Center y la Universidad Politécnica de Cataluña, han utilizado inteligencia artificial para crear una herramienta capaz de mejorar la traducción de lenguaje de signos. Gracias a la misma, se permitiría que las personas sordas o con problemas de audición interactúen con la tecnología alcanzando un mayor número de servicios digitales.

Básicamente, utilizaron un modelo de aprendizaje automático denominado Transformers. [...] Luego, el conjunto de datos de capacitación provino de How2Sign, un conjunto de datos a gran escala y de múltiples vistas disponible de forma pública que comprende 80 horas de vídeos instructivos en lenguaje de señas estadounidense. [...] Al procesar los datos utilizaron Inflated 3D Networks (I3D), un método de extracción de vídeo que aplica filtro 3D, lo que permite tomar información espacio temporal.

En términos generales, descubrieron que su modelo podía producir traducciones significativas, en todo caso, aún lo están mejorando, pero mostrando resultados prometedores.

Clic AQUÍ para seguir leyendo y ver las imágenes.