Investigadores de NUS desarrollan un “ojo” impulsado por inteligencia artificial para que las personas con discapacidad visual “vean” objetos
Comprar comestibles es una actividad común para muchos de nosotros, pero para las personas con discapacidad visual, identificar los artículos comestibles puede resultar abrumador. Un equipo de investigadores de la School of Computing de la National University of Singapore (NUS Computing) presentó AiSee, “ojo” impulsado por IA, un dispositivo de asistencia portátil asequible que ayuda a las personas con discapacidad visual a “ver” los objetos que los rodean con la ayuda de inteligencia artificial (IA).
Las personas con discapacidad visual se enfrentan a obstáculos diarios, particularmente con la identificación de objetos, que es crucial para la toma de decisiones tanto simples como complejas. Si bien los avances en IA han mejorado drásticamente las capacidades de reconocimiento visual, la aplicación en el mundo real de estas tecnologías avanzadas sigue siendo desafiante y propensas a errores.
AiSee: “ojo” impulsado por IA
AiSee, que se desarrolló por primera vez en 2018 y se actualizó progresivamente a lo largo de cinco años, tiene como objetivo superar estas limitaciones aprovechando tecnologías de inteligencia artificial de última generación.
“Con AiSee, nuestro objetivo es brindar a los usuarios una interacción más natural. Siguiendo un proceso de diseño centrado en el ser humano, encontramos razones para cuestionar el enfoque típico de utilizar gafas aumentadas con una cámara. Las personas con discapacidad visual pueden mostrarse reacias a utilizar gafas para evitar la estigmatización. Por lo tanto, proponemos un hardware alternativo que incorpora unos auriculares de conducción ósea discretos”, dijo el investigador del Proyecto AiSee, profesor asociado Suranga Nanayakkara, del Departamento de Sistemas de Información y Análisis de NUS Computing.
El usuario simplemente necesita sostener un objeto y activar la cámara incorporada para capturar una imagen del objeto. Con la ayuda de la IA, AiSee identificará el objeto y también proporcionará más información cuando el usuario la solicite.
¿Cómo funciona AiSee?
AiSee consta de tres componentes clave:
#1 El ojo: software informático del motor de visión
AiSee incorpora una microcámara que capta el campo de visión del usuario. Esto forma el componente de software de AiSee, también conocido como “computadora con motor de visión”. El software es capaz de extraer características como texto, logotipos y etiquetas de la imagen capturada para su procesamiento.
#2 El cerebro: unidad de procesamiento de imágenes impulsadas por IA y sistema interactivo de preguntas y respuestas
Después de que el usuario toma una foto del objeto de interés, AiSee utiliza sofisticados algoritmos de inteligencia artificial basados en la nube para procesar y analizar las imágenes capturadas para identificar el objeto. El usuario también puede hacer una serie de preguntas para saber más sobre el objeto.
AiSee emplea tecnología avanzada de reconocimiento y procesamiento de texto a voz y de voz a texto para identificar objetos y comprender las consultas del usuario. Impulsado por un gran modelo de lenguaje, AiSee se destaca en los intercambios interactivos de preguntas y respuests, lo que permite que el sistema comprenda y responda con precisión las consultas del usuario de manera rápida e informativa.
En comparación con la mayoría de los dispositivos de asistencia portátiles que requieren emparejamiento con un teléfono inteligente, AiSee funciona como un sistema autónomo que puede funcionar de forma independiente sin necesidad de dispositivos adicionales.
#3 El orador: sistema de sonido de conducción ósea
Los auriculares de AiSee utilizan tecnología de conducción ósea, que permite la transmisión del sonido a través de los huesos del cráneo. Esto garantiza que las personas con discapacidad visual puedan recibir información auditiva de forma eficaz y al mismo tiempo tener acceso a sonidos externos, como conversaciones o ruido del tráfico. Esto es particularmente vital para las personas con discapacidad visual, ya que los sonidos ambientales proporcionan información esencial para la toma de decisiones, especialmente en situaciones que implican consideraciones de seguridad.
“En la actualidad, las personas con discapacidad visual en Singapur no tienen acceso a tecnología de inteligencia artificial de este nivel de sofisticación. Por lo tanto, creemos que AiSee tiene el potencial de capacitar a las personas con discapacidad visual para que realicen de forma independiente tareas que actualmente requieren asistencia. Nuestro siguiente paso es hacer que AiSee sea asequible y accesible para las masas. Para lograrlo, estamos realizando más mejoras, incluido un diseño más ergonómico y una unidad de procesamiento más rápida”, explicó el profesor asociado Nanayakkara.
Mark Myres, estudiante de NUS, que ayudó a probar AiSee como usuario con discapacidad visual, comentó: “Muchas veces, los dispositivos de asistencia parecen estar muy dirigidos a personas totalmente ciegas o con discapacidad visual. Creo que AiSee es un buen equilibrio. Tanto las personas ciegas como las personas con discapacidad visual podrían obtener muchos beneficios de esto”.
AiSee: “ojo” impulsado por IA para que las personas con discapacidad visual “vean” objetos
Comprar comestibles es una actividad común para muchos de nosotros, pero para las personas con discapacidad visual, identificar los artículos comestibles puede resultar abrumador. Un equipo de investigadores de la Escuela de Computación (NUS Computing) de la National University of Singapore presentó AiSee, un dispositivo de asistencia portátil asequible que ayuda a las personas con discapacidad visual a “ver” los objetos que los rodean con la ayuda de inteligencia artificial.
Pruebas de usuario y mejoras adicionales
El profesor asociado Nanayakkara y su equipo están actualmente en conversaciones con SG Enable en Singapur para realizar pruebas de usuario con personas con discapacidad visual. Los hallazgos ayudarán a refinar y mejorar las funciones y el rendimiento de AiSee. Además, B.P. De Silva Holdings Pte Ltd ha hecho una generosa donación de S$150.000 para apoyar el proyecto.
La decisión de BPH de contribuir al desarrollo de AiSee se basa en su compromiso con la responsabilidad social corporativa y un deseo genuino de generar un impacto positivo en la sociedad con una misión más amplia de fomentar la inclusión y la accesibilidad. Su esfuerzo filantrópico también refleja su creencia en el poder transformador de la tecnología para abordar los desafíos sociales y crear un mundo más equitativo e inclusivo.
La Sra. Ku Geok Boon, directora ejecutiva de SG Enable, dijo: “Las soluciones innovadoras habilitadas por tecnologías de asistencia pueden cambiar las vidas de las personas con discapacidad, ya sea ayudándolas a vivir de manera más independiente o reduciendo las barreras al empleo. Como agencia focal y facilitadora del sector para la discapacidad y la inclusión en Singapur, SG Enable se complace en trabajar con socios como NUS y B.P. De Silva Holdings Pte Ltd aprovechará la tecnología para empoderar a las personas con discapacidad”.
Más allá de este proyecto, SG Enable también busca colaborar con NUS para explorar cómo la inteligencia artificial, la interfaz hombre-computadora y la tecnología de asistencia pueden brindar a las personas con discapacidad más opciones tecnológicas.
Leído en: