Compartir

La aplicación Aipoly está dirigida a personas ciegas y permite la descripción de una escena a partir de una foto capturada.

La aplicación Aipoly tiene Visión inteligente que identifica escenas. Este software tiene sus raíces en la inteligencia artificial para realizar el reconocimiento de objetos, que se dice que ofrece ciertas ventajas a las personas ciegas. Con esta idea en mente, fue desarrollado por sus creadores como un proyecto dentro de Singularity University, un centro académico en Silicon Valley patrocinado por la NASA y Google.

Marita Cheng y Alberto Rizzoli son dos de los matriculados en Singularity University y los patrocinadores de Aipoly. La idea fue inspirada por un amigo ciego de la familia Rizzoli. Para que las personas ciegas sepan un poco más de su entorno en un momento determinado, a veces una persona que las ve y está a su lado les describe cosas. Se trata de explicar qué está pasando o qué está más allá de los otros sentidos.

Aipoly hace precisamente eso: le permite tomar una foto de un objeto o una escena y el software dice en voz alta lo que aparece en la imagen. Es sobre automatizar el trabajo de una persona cuando una persona ciega pregunta qué hay a su alrededor o frente a él. La aplicación utiliza inteligencia artificial para llevar a cabo el proceso de reconocimiento, más precisamente visión artificial y aprendizaje automático.

Operación basada en datos e inteligencia artificial

Cuando un usuario toma una foto, se envía a los servidores de la aplicación. En ellos se realiza el procesamiento de la imagen y una vez identificados los objetos o la escena, La información se envía de vuelta en forma de texto, como un mensaje de voz. El procesamiento es lo más importante. Esta hecho por Redes neuronales convolucionales (CNN), que dividen la foto en varios puntos de interés y los asignan a objetos específicos.

Desde el momento en que el usuario toma la foto hasta que recibe la información hablada puede tardar entre 5 segundos –Con una conexión WiFi rápida– y 20, con conectividad móvil lenta o para imágenes que requieren un procesamiento tedioso.

Aipoly no solo puede identificar objetos, sino también las relaciones que tienen entre ellos en una imagen. Hoy, gracias al avance de la visión artificial, un sistema como el que usa la aplicación puede detectar que una persona está montando una bicicleta en una foto en lugar de simplemente describir que aparecen una persona y una bicicleta.

El equipo de Aipoly no utiliza actualmente sus propios algoritmos, pero está trabajando en su propia base de datos para entrenar el sistema. Hasta aquí la tecnología entrenado con alrededor de 300.000 imágenes y crece. Los creadores planean enfocarse en objetos que pueden ser útiles para los ciegos, como los letreros de las calles.

No hace falta decir que el sistema tiene sus debilidades. No distingue correctamente el género de una persona o expresiones faciales, a menos que sean muy pronunciadas.

Imágenes: lecercle

Dejar una respuesta

Please enter your comment!
Please enter your name here