Comprar comestibles es una actividad común para muchos de nosotros, pero para las personas con discapacidad visual, identificar los artículos comestibles puede resultar abrumador. Un equipo de investigadores de la Escuela de Computación de la Universidad Nacional de Singapur (NUS Computing) presentó AiSee, un dispositivo de asistencia portátil asequible que ayuda a las personas con discapacidad visual a «ver» los objetos que los rodean con la ayuda de inteligencia artificial (IA).
Las personas con discapacidad visual enfrentan obstáculos diarios, particularmente con la identificación de objetos, que es crucial para la toma de decisiones tanto simples como complejas. Si bien los avances en IA han mejorado drásticamente las capacidades de reconocimiento visual, la aplicación en el mundo real de estas tecnologías avanzadas sigue siendo desafiante y propensa a errores.
AiSee, que se desarrolló por primera vez en 2018 y se actualizó progresivamente a lo largo de cinco años, tiene como objetivo superar estas limitaciones aprovechando tecnologías de inteligencia artificial de última generación.
El investigador principal del Proyecto AiSee es el profesor asociado Suranga Nanayakkara, del Departamento de Sistemas de Información y Análisis de NUS Computing.
El usuario simplemente necesita sostener un objeto y activar la cámara incorporada para capturar una imagen del objeto. Con la ayuda de la IA, AiSee identificará el objeto y también proporcionará más información cuando el usuario la solicite.
AiSee consta de tres componentes clave:
(1) El ojo: el software informático del motor de visión
AiSee incorpora una microcámara que captura el campo de visión del usuario. Esto forma el componente de software de AiSee, también conocido como «computadora con motor de visión». El software es capaz de extraer características como texto, logotipos y etiquetas de la imagen capturada para su procesamiento.
(2) El cerebro: unidad de procesamiento de imágenes impulsada por IA y sistema interactivo de preguntas y respuestas.
Después de que el usuario toma una foto del objeto de interés, AiSee utiliza sofisticados algoritmos de IA basados en la nube para procesar y analizar las imágenes capturadas para identificar el objeto. El usuario también puede hacer una serie de preguntas para saber más sobre el objeto.
AiSee emplea tecnología avanzada de reconocimiento y procesamiento de texto a voz y de voz a texto para identificar objetos y comprender las consultas del usuario. Impulsado por un modelo de lenguaje de gran tamaño, AiSee se destaca en los intercambios interactivos de preguntas y respuestas, lo que permite que el sistema comprenda y responda con precisión las consultas del usuario de manera rápida e informativa.
En comparación con la mayoría de los dispositivos de asistencia portátiles que requieren emparejamiento con un teléfono inteligente, AiSee funciona como un sistema autónomo que puede funcionar de forma independiente sin necesidad de dispositivos adicionales.
(3) El altavoz: sistema de sonido de conducción ósea
Los auriculares de AiSee utilizan tecnología de conducción ósea, que permite la transmisión del sonido a través de los huesos del cráneo. Esto garantiza que las personas con discapacidad visual puedan recibir información auditiva de forma eficaz y al mismo tiempo tener acceso a sonidos externos, como conversaciones o ruido del tráfico. Esto es particularmente vital para las personas con discapacidad visual, ya que los sonidos ambientales proporcionan información esencial para la toma de decisiones, especialmente en situaciones que implican consideraciones de seguridad.
Assoc Prof Nanayakkara y su equipo están actualmente en conversaciones con SG Enable en Singapur para realizar pruebas de usuario con personas con discapacidad visual. Los hallazgos ayudarán a refinar y mejorar las funciones y el rendimiento de AiSee. Además, BP De Silva Holdings Pte Ltd ha hecho una generosa donación de 150.000 dólares singapurenses para apoyar el proyecto.
La decisión de BPH de contribuir al desarrollo de AiSee se basa en su compromiso con la responsabilidad social corporativa y un deseo genuino de generar un impacto positivo en la sociedad con una misión más amplia de fomentar la inclusión y la accesibilidad. Su esfuerzo filantrópico también refleja su creencia en el poder transformador de la tecnología para abordar los desafíos sociales y crear un mundo más equitativo e inclusivo.
Más allá de este proyecto, SG Enable también busca colaborar con NUS para explorar cómo la IA, la interfaz hombre-computadora y la tecnología de asistencia pueden brindar a las personas con discapacidad más opciones tecnológicas.
