La ELA es una enfermedad compleja y de difícil diagnóstico. Avanza de forma rápida y provoca múltiples limitaciones. Las personas enfermas de ELA dejan, progresivamente, de poder moverse, de poder hablar, de poder comer, hasta que dejan de poder respirar por si mismos.
Conscientes de esta realidad, en colaboración con Samsung y la Fundación Luzón, Irisbond ha desarrollado Tallk*, una aplicación gratuita de apoyo a la comunicación básica basada en su tecnología de seguimiento ocular.
Gracias a Tallk* ahora la mirada sirve para que las personas con movilidad reducida y dificultad en el habla puedan comunicarse, utilizando sus ojos para poder expresarse.
*App Tallk propiedad y operada por Irisbond. Actualmente solo disponible para idioma castellano y solo en España. Necesario descargar en una tableta Samsung compatible y autorizar uso de cámara.
Nuestros partners
La Fundación Francisco Luzón es una entidad sin ánimo de lucro que trabaja para mejorar las condiciones de vida de las personas enfermas de ELA y sus familiares. La Fundación Luzón busca, a través de proyectos innovadores, ser motor de cambio social para las personas afectadas por la ELA. Los proyectos de la Fundación Luzón buscan mejorar la autonomía y atención sociosanitaria de las personas enfermas de ELA; impulsar la investigación en la enfermedad; y sensibilizar a la sociedad española de las necesidades y circunstancias que viven las personas enfermas de ELA y su entorno.
Irisbond es una startup española especializada en soluciones de eye tracking, responsable del desarrollo de esta aplicación. Única y pionera empresa española en este ámbito, cuentan con el apoyo del MIT para el desarrollo de la tecnología. Han recibido diversos reconocimientos por su innovación, entre otros: el d-Lab del Mobile World Capital Barcelona (2017), el Premio Discapnet de la Fundación ONCE o el ITU Award de la Comisión Europea (2019). También han participado en varios proyectos de aceleración como son el proyecto de robótica colaborativa realizada con la multinacional ABB o el programa CIC Cambridge, en Massachusetts. La tecnología ha sido desarrollada para usos en diversas áreas: dispositivos móviles, automoción, robótica, salud e Industria 4.0.
Solución desarrollada
¿Cómo funciona? La tecnología de seguimiento ocular de Tallk* utiliza la cámara de la Tablet para localizar tus pupilas y ciertos puntos característicos de tu rostro. A través de una serie de algoritmos e Inteligencia Artificial, el software traduce el movimiento de los ojos en movimientos aproximados dentro de la pantalla para acceder a un teclado virtual predictivo y verbalizar el texto introducido por el usuario. Para realizar el seguimiento ocular es necesario identificar puntos característicos de la cara del usuario, por lo que el rostro, en su totalidad, debe ser visible para poder usar la aplicación. Además, te permite interactuar con el Asistente virtual Bixby para resolver distintas peticiones, así como controlar dispositivos del hogar conectados compatibles con Smarthings.
La aplicación solo está disponible en castellano para su descarga en territorio español.
Listado de tablets compatibles:
Galaxy Tab A (10.5", Wi-Fi: SM-T590 y 4G: SM-T595, 2018), Galaxy Tab A (8.0", Wi-Fi: SM-T290 y 4G: SM-T295, 2019), Galaxy Tab A (10.1", 32GB, Wi-Fi: SM-T510 y LTE: SM-T515, 2019), Galaxy Tab S3 (9.7", Wi-Fi: SM-T820 y LTE: SM-T825), Galaxy Tab S4 (10.5", Wi-Fi: SM-T830 y 4G: SM-T835), Galaxy Tab S5e (10.5", Wi-Fi: SM-T720 y 4G: SM-T725), Galaxy Tab S6 (10.5", Wi-Fi: SM-T860 y 4G: SM-T865), Galaxy Tab Active 2 (8", Wi-Fi: SM-T390 y 4G: SM-T395), Galaxy Tab Active Pro (10.1", Wi-Fi: SM-T540 y 4G: SM-T545), Galaxy Tab S6 Lite (10.4", Wi-Fi: SM-P610 y 4G: SM-P615), Galaxy Tab S7 (11”, WiFi: SM-T870 y 4G: SM-T875), Galaxy Tab S7+ (12.4”, WiFi: SM-T970 y 5G: SM-T976), Galaxy Tab S7 FE (12.4”, WiFi: SM-T730, SM-T733 y 5G: SM-T736), Galaxy Tab A7 (10.4”, WiFi: SM-T500 y 4G: SM-T505), Tab A9+ (11”, Wi-Fi: SM-X210 y 5G: SM-X216), Tab S9 FE (10.9”, Wi-Fi: SM-X510 y 5G: SM-X516), Tab S9 FE+ (12.4”, Wi-Fi: SM-X610 y 5G: SM-X616), Tab S9 (11”, Wi-Fi: SM-X710 y 5G: SM-X716), Tab S9 Ultra (14.6”, Wi-Fi: SM-X910 y 5G: SM-X916), Tab Active 4 Pro (10.1”, Wi-Fi: SM-T630 y 5G: SM-T636)
Antes de usar Tallk*: Necesitarás un soporte adaptado para el correcto posicionamiento ante la Tablet Samsung Galaxy compatible y uso de la aplicación Tallk*. La primera vez que utilices Tallk*, la aplicación te informará sobre las instrucciones de uso y su configuración.
Entra en la aplicación Tallk* y dale permiso para que utilice tu cámara. Será la cámara de tu Tablet la que detectará las pupilas y algunos rasgos de tu cara para poder seguir el movimiento de tus ojos.
Donde mires irá el cursor. Así ya estás al mando.
Una vez calibrado, podrás utilizar la aplicación con la mirada. Mueve con tus ojos el cursor por el teclado virtual predictivo y fíjalos en la tecla que quieres pulsar. Podrás escribir la frase que desees o utilizar tus frases guardadas. Una vez hayas escrito lo que quieras, fija la mirada en el cuadro de texto para que Tallk* lea lo que quieres expresar.
Para que todo sea más sencillo, Tallk*, te ofrece un banco de frases predefinidas.
Además, puedes guardar aquellas que más utilices y acceder a las mismas y verbalizarlas en cualquier momento de forma rápida y sencilla.
El teclado permite también interactuar con el Asistente virtual Bixby, para resolver distintas peticiones, así como controlar dispositivos del hogar conectados compatibles con Smarthings como el televisor, los electrodomésticos conectados o sensores del hogar.
Para los pacientes de ELA todas las palabras tienen mucho valor, hasta ahora muchos de ellos han dejado de poder pronunciarlas.
Pero, ¿cuáles son las palabras que más valoran los españoles?
