PEC 1. ¿Qué es la interacción tangible?

Pública

1. Clasificación, análisis y reflexión

Busqué todas las técnicas del temario del curso y fui pensando en algún ejemplo práctico que usara alguna. Después, fui comprobando que no estaban mencionadas en los ejemplos antes de indagar más sobre ellas en Google.
Para hacer su análisis, comparé las técnicas y elementos que usaba cada proyecto con el temario.

Face projection mapping

Wildbytes comenzó haciendo escaneos 3D de la modelo, capturando su imagen utilizando luz estructurada y fotogrametría. A partir de ahí, se imprimió en 3D un busto de su cara que usaron para las pruebas y el desarrollo de los efectos de mapeo en posición estática. Después de eso, el equipo necesitaba lanzarse a las imágenes coloridas y caleidoscópicas que se proyectarían.

Más adelante trabajaron en el mapeo en tiempo real con un potente motor de renderizado 3D y el trackeo de la cara de la modelo con el sistema de ftrack.

Me parece el proyecto menos relevante, porque no ayuda con ningún problema de usabilidad o accesibilidad, los temas donde me gustaría centrarme.

Sensor de temperatura (domótica)

Los sensores de temperatura están formados por mecanismos muy sencillos constituidos por dos materiales combinados mediante uniones llamadas unión fría y unión caliente. El grado de temperatura que detectan estas uniones, genera una diferencia de potencial que se transforma en una señal eléctrica.

Los sensores de humedad nos dirán el porcentaje de vapor de agua que se encuentra en el ambiente.

El sensor de temperatura analiza dos niveles de temperatura: uno por debajo de la temperatura que se requiere para calefacción y otro por encima que activa el aire acondicionado de la vivienda.

Existen varios tipos de sensores de humedad, como mecánicos o de sales higroscópicas, y de temperatura, como Termopares o RTD.

El modelo de Xiaomi se conecta a dispositivos inteligentes a través de la app “Mi Bluetooth Gateway”.

No me parece demasiado relevante porque no es algo muy novedoso. A día de hoy hay multitud de fabricantes de este tipo de sensores.

Asistente de Google

El asistente utiliza un modelo de aprendizaje automático que convierte lo que se tararea o silba en una secuencia numérica. Después se compara dicha secuencia numérica con las secuencias de canciones existentes y ya escaneadas. Cuanto más coincidan ambas secuencias, más probabilidad hay de que sea la canción que se busca.

Dicen que han entrenado al modelo de aprendizaje basándose en personas cantando, silbando y tarareando y no tiene en cuenta los instrumentos o la calidad vocal de cada usuario.

Me parece bastante interesante, sobretodo el cómo es capaz de analizar la melodías con sólo un tarareo.

2. Análisis del proyecto elegido

Tobii dynavox TD Pilot

TD Pilot es un dispositivo para iPadOS que te permite generar de voz y controlar tu iPad con seguimiento ocular. Está diseñado para personas con discapacidad y dificultades para comunicarse como personas con afecciones como ELA, lesión de la médula espinal o parálisis cerebral. TD Pilot ayuda a estas personas a comunicarse, usar sus aplicaciones de iPad
favoritas y les permite que su voz se escuche alto y claro.

El dispositivo viene precargado con aplicaciones de CAA: TD Talk para personas alfabetizados o TD Snap para aquellos que utilizan la comunicación basada en pictogramas.

Mecanismos de la interacción y su usabilidad

Visión artificial, eye tracking
El sistema de seguimiento ocular que usa es el Tobii IS5, compuesto por 4 sensores de 850nm (luz infraroja).
Tratamiento de datos
Usa como periférico de entrada los sensores electrónicos del eye tracking para mostrar un cursor en la pantalla del iPad con el que interactuar con los elementos de la GUI. Como periféricos de salida se encuentran los altavoces integrados en el TD Pilot para dictar el mensaje del usuario en forma de audio y la pantalla en la parte posterior para reproducirlo en formato texto.

Análisis y descripción del diseño de interacción

TD Pilot es un dispositivo que te permite controlar un iPad y escribir mensajes con seguimiento ocular. TD Pilot captura el movimiento ocular del usuario gracias a sus 4 sensores infrarrojos y lo plasma con un cursor en pantalla, lo que permite interactuar sin necesitad de usar las manos con cualquier aplicación de tu iPad.

Por otro lado, también viene con 2 aplicaciones, TD Talk y TD Snap, que permiten al usuario introducir textos mediante caracteres o pictogramas y generar un mensaje de voz o reproducir el texto en la parte trasera del TD Pilot.

Diagrama de flujo

Valoración de la usabilidad y facilidad de uso

TD Pilot está diseñado para que las personas con discapacidad o dificultades para comunicarse puedan acceder y usar con mucha más facilidad cualquier aplicación que se pueda instalar en un iPad. Además, les ayuda a comunicarse con los demás pese a sus discapacidades.

Para ayudar a aprender a usar esta herramienta, tobii ha hecho una serie de vídeos guía y elpaquete viene con unas instrucciones detalladas. También tienen la app de TD CoPilot para ayudar con la calibración. Una vez configurado, iniciar el trackeo es bastante sencillo, sólo hay que encender el dispositivo.

El dispositivo se adapta a las necesidades de cada persona, por ejemplo, usando la entrada de texto de TD Talk o con pictogramas con TD Snap. Estas aplicaciones también se pueden utilizar con los dedos.

Opinión personal y aportaciones creativas

Personalmente me parece un producto fantástico y muy flexible, que se puede adaptar apersonas con distintas discapacidades o dificultades y les brinda una mayor calidad de vida.
Lo único que veo negativo es que sólo funciona con iPad, por lo que fuerza un poco a disponer de uno o tener que comprarlo.

3. Webgrafía y enlaces

4. Archivo PDF