Ingenieros de KAIST desarrollan un método visual para mostrar textura táctil en realidad virtual

DAEJEON, Corea del Sur — Investigadores del Korea Advanced Institute of Science and Technology han presentado una técnica de visualización de realidad virtual que convierte las sensaciones táctiles en señales visuales dinámicas, lo que permite a los usuarios percibir la rugosidad de superficies virtuales sin necesidad de utilizar dispositivos de retroalimentación táctil. Al alterar el contorno visual y la silueta del avatar de la mano digital de un usuario cuando entra en contacto con superficies digitales texturizadas, el sistema transmite la rugosidad estructural únicamente mediante la percepción visual. El avance ofrece una vía potencial para agilizar la colaboración multiusuario en espacios digitales compartidos, donde el coste prohibitivo, la complejidad mecánica y la latencia de los guantes hápticos convencionales han limitado históricamente el intercambio de datos táctiles entre los participantes.

## Key facts

- Ingenieros del Korea Advanced Institute of Science and Technology (KAIST) desarrollaron un sistema de renderizado visual que codifica la rugosidad física de objetos virtuales en variaciones dinámicas del contorno alrededor de la mano digital del usuario. - La metodología permite a los participantes en entornos de realidad virtual (VR) evaluar visualmente las propiedades de las superficies sin llevar guantes con actuadores táctiles ni aparatos electromecánicos de retroalimentación de fuerza. - El enfoque intermodal se basa en la sustitución sensorial visual-táctil, aprovechando la capacidad de la corteza visual humana para interpretar deformaciones estructurales como resistencia física o textura. - El marco está diseñado para facilitar tareas colaborativas en visores de VR comerciales estándar, eliminando la asimetría de hardware que se produce cuando algunos usuarios poseen equipos táctiles especializados y otros no. - Los dispositivos hápticos físicos para VR empresarial suelen costar entre cientos y miles de dólares por unidad y añaden peso físico, limitaciones de batería y riesgos de fallos mecánicos que este método a nivel de software evita.

## What happened

Según informó Tech Xplore, el equipo de investigación de KAIST diseñó un mecanismo de interfaz que traduce texturas superficiales microscópicas en modificaciones visuales macroscópicas en el avatar virtual del participante. Cuando un usuario extiende la mano para examinar un objeto digital en un entorno virtual, los sistemas estándar de seguimiento óptico o posicionales basados en controladores capturan las coordenadas espaciales de la mano respecto a la geometría poligonal del objeto.

En lugar de intentar estimular los mecanorreceptores de la yema del dedo humano mediante vibraciones físicas, cámaras neumáticas o estimulación eléctrica, el sistema de KAIST modifica el límite visual del propio modelo de la mano. A medida que el avatar recorre superficies con distintos grados de rugosidad, el contorno de los dedos y la palma virtuales experimenta perturbaciones geométricas localizadas en tiempo real. Las variaciones de contorno pronunciadas y de alta frecuencia indican texturas rugosas o abrasivas, mientras que los contornos más suaves y continuos reflejan superficies pulidas o sin fricción.

Esta transformación proporciona un indicador perceptual inmediato de la textura física. Dado que la retroalimentación se renderiza por completo a través del canal gráfico de la pantalla del visor, elude los cuellos de botella de los actuadores físicos. En configuraciones colaborativas multiusuario, el sistema crea una base perceptual compartida: cualquier participante que observe a otro usuario manipulando un objeto puede apreciar directamente las características táctiles con las que se interactúa, lo que genera un canal pasivo de comunicación sensorial no verbal que antes era inaccesible sin conjuntos idénticos de hardware táctil.

## Why it matters

Los sistemas de realidad virtual y aumentada han lidiado durante décadas con la "brecha táctil": la enorme distancia entre la inmersión visual y la interacción mecánica. Aunque las resoluciones de las pantallas comerciales han avanzado desde paneles de baja densidad hasta superar los 2.000 píxeles por ojo, los paradigmas de interacción tanto para consumidores como para empresas siguen estando limitados en gran medida a controladores de plástico rígidos que se sostienen con la mano, equipados con motores de vibración háptica básicos de masa rotatoria excéntrica o resonantes lineales. Estos motores básicos pueden señalar una colisión binaria o un temblor genérico, pero no pueden transmitir con precisión la rugosidad superficial, la conformidad o la fricción estructural.

Las alternativas de gama alta, como los guantes de exoesqueleto motorizados y las matrices táctiles microfluídicas, proporcionan una mayor fidelidad pero introducen importantes obstáculos logísticos. Dichos conjuntos de hardware son mecánicamente frágiles, difíciles de limpiar en entornos corporativos compartidos, complejos de calibrar para diferentes tamaños de mano y caros. Al trasladar la representación de la rugosidad táctil íntegramente a señales visuales, la metodología de KAIST elimina las barreras de entrada basadas en hardware para el modelado táctil avanzado.

Para diseñadores industriales, arquitectos y formadores médicos a distancia, este cambio reporta beneficios prácticos tangibles. Un equipo de diseño que evalúe prototipos virtuales de interiores de automóviles, tejidos textiles o materiales de construcción puede examinar y comunicar acabados superficiales en tiempo real sin enviar muestras físicas ni suministrar costoso hardware periférico a cada estación de trabajo remota. En telemedicina y formación quirúrgica, los estudiantes que observen el avatar de un instructor pueden registrar visualmente los límites de los tejidos o la resistencia del procedimiento a partir de las deformaciones del contorno, lo que mejora la claridad de la enseñanza. Además, al reducir el umbral informático y de hardware necesario para interpretar texturas superficiales, la técnica amplía la utilidad de los visores comerciales estándar en la educación, el diseño colaborativo y el software de consumo.

## The background

La percepción humana es intrínsecamente multisensorial, regida por una integración intermodal en la que el cerebro fusiona continuamente estímulos visuales, auditivos y somatosensoriales para construir una representación coherente de la realidad física. Cuando las modalidades sensoriales proporcionan información contradictoria o complementaria, el cerebro recurre con frecuencia a la dominancia visual, un fenómeno ampliamente documentado en la psicofísica en el que los estímulos visuales modifican o anulan las interpretaciones táctiles y propioceptivas. Experimentos perceptivos clásicos, como la ilusión de la mano de goma y las demostraciones de retroalimentación pseudoháptica iniciadas a finales de la década de 1990, demostraron que alterar la velocidad visual o el desplazamiento de un cursor en pantalla puede engañar al usuario haciéndole sentir resistencia física o peso al mover un ratón de ordenador estándar.

En la computación espacial inmersiva, los investigadores han aprovechado reiteradamente la pseudoháptica para simular propiedades físicas sin necesidad de maquinaria especializada. Experimentos previos han alterado la velocidad de la mano del avatar para simular viscosidad, han introducido temblor visual para simular fricción superficial o han mostrado pseudodeformaciones de geometrías digitales rígidas para simular suavidad mecánica. Sin embargo, simular microtexturas como la rugosidad ha planteado históricamente desafíos singulares. La percepción táctil de la rugosidad en la mano biológica depende de dos mecanismos fisiológicos diferenciados: la codificación espacial mediante mecanorreceptores de tipo I de adaptación lenta para texturas gruesas (características de más de aproximadamente 200 micrómetros) y la codificación temporal a través de corpúsculos de Pacini de adaptación rápida para texturas finas (características menores de 200 micrómetros) detectadas mediante vibración dinámica durante el movimiento.

Replicar ambos regímenes mediante actuadores mecánicos requiere una respuesta de frecuencia de banda ancha, baja latencia y alta resolución espacial, especificaciones que el hardware háptico moderno difícilmente puede ofrecer en formatos ligeros. KAIST, con sede en Daejeon y ampliamente reconocida como una de las principales instituciones científicas de Corea del Sur, lleva años examinando la interacción persona-ordenador, las interfaces de computación espacial y la ingeniería perceptual. Este último proyecto se basa en la literatura establecida sobre sustitución sensorial visual —la práctica de mapear datos de un sentido no disponible en un canal sensorial activo— al demostrar que la modulación dinámica del límite del avatar proporciona una alternativa fiable para la discriminación táctil sin inducir fatiga visual ni romper la inmersión espacial.

## Reaction

Aunque los ecosistemas de desarrolladores comerciales aún no han emitido respuestas formales desde la industria, se prevé que los investigadores en interacción persona-ordenador y los ingenieros de computación espacial evalúen la metodología de KAIST en próximas conferencias académicas internacionales como el ACM Symposium on User Interface Software and Technology (UIST) y la IEEE Conference on Virtual Reality and 3D User Interfaces (IEEE VR).

Los diseñadores de interfaces en el ámbito de la VR empresarial han subrayado reiteradamente la necesidad de soluciones sensoriales basadas en software que eviten la fragmentación del hardware. Los proveedores de software independientes que desarrollan espacios de trabajo colaborativos han evitado históricamente diseñar interacciones con gran carga táctil debido a la escasa penetración de mercado de los guantes hápticos. En consecuencia, se espera que las comunidades de desarrolladores analicen con qué facilidad puede integrarse el algoritmo de deformación de contornos de KAIST en motores de juegos estándar, en concreto Unity y Unreal Engine de Epic Games, que impulsan la gran mayoría de las aplicaciones comerciales de VR para empresas.

Al mismo tiempo, es probable que los investigadores en percepción espacial examinen minuciosamente la carga cognitiva asociada a las deformaciones visuales de la mano. En entornos de simulación profesional, la fidelidad del avatar resulta crítica para la comodidad y la sensación de control del usuario. Algunos especialistas en factores humanos podrían cuestionar si las fluctuaciones continuas y artificiales de los bordes podrían inducir distracciones visuales, alterar la inmersión del usuario o desencadenar leves efectos de valle inquietante si el avatar de la mano se distorsiona de forma demasiado agresiva durante tareas de precisión.

## What we don't know yet

El resumen tecnológico publicado por Tech Xplore omite varios parámetros técnicos cruciales que definen el marco operativo del sistema. El equipo de investigación aún no ha detallado la relación algorítmica precisa entre las mediciones de rugosidad superficial del mundo real (como la rugosidad media Ra o la rugosidad media cuadrática Rq) y la modulación de frecuencia, amplitud o color del contorno visual del avatar. Aún no se ha verificado si el sistema está calibrado para reflejar métricas de superficie industriales estandarizadas o si utiliza escalas visuales heurísticas y cualitativas.

Además, la información disponible no revela la carga computacional que impone el cálculo y renderizado de las deformaciones dinámicas del contorno en tiempo real en arquitecturas móviles de sistema en chip (SoC), como las plataformas Qualcomm Snapdragon XR2 utilizadas en visores autónomos como la serie Meta Quest o HTC Vive Focus. Los visores independientes operan bajo estrictas restricciones térmicas y de batería, lo que significa que cualquier sombreador de vértices complejo o proceso de posprocesamiento de contornos debe ser ligero para evitar caídas en la tasa de fotogramas por debajo de los umbrales estándar de 72 a 90 fotogramas por segundo necesarios para prevenir el mareo cinético.

Tampoco está claro cómo se comporta el sistema en diversos grupos de usuarios. Factores como la agudeza visual, la edad, la familiaridad con los avatares digitales y el entrenamiento táctil previo pueden influir de forma significativa en la eficacia con la que una persona traduce las distorsiones visuales en una comprensión táctil intuitiva. Los ensayos psicofísicos exhaustivos que comparen las valoraciones subjetivas de rugosidad de los usuarios con referencias de muestras físicas aún no se han detallado por completo en la documentación pública.

## What to watch

La trayectoria de la interfaz visual-táctil de KAIST dependerá de varios hitos técnicos y divulgaciones institucionales que tendrán lugar próximamente:

- Publicación de conjuntos de datos experimentales completos y revisados por pares: Habrá que seguir de cerca la aparición formal del artículo de investigación en una revista académica o actas de conferencias acreditadas, lo que revelará el tamaño de las cohortes de participantes, las tasas de error, la significación estadística y las metodologías psicofísicas precisas. - Disponibilidad de kits de desarrollo de software: Seguir si el equipo de KAIST o una empresa derivada tecnológica afiliada publica complementos de código abierto o kits de desarrollo para Unity o Unreal Engine, lo que permitiría a desarrolladores externos probar el proceso de deformación de contornos en hardware de consumo. - Estudios de integración intermodal: Observar si futuras iteraciones del software combinan las alteraciones visuales del contorno de la mano con retroalimentación de audio espacializado —como sonidos dinámicos de raspado o deslizamiento—, lo que históricamente ha demostrado amplificar las ilusiones pseudohápticas sin requerir hardware táctil mecánico. - Ensayos empresariales y programas piloto: Buscar posibles alianzas de evaluación con empresas industriales de creación de prototipos virtuales, casas de moda digital o departamentos de diseño automotriz que busquen comparar la técnica visual con colecciones de muestras físicas. - Adopción por parte de fabricantes de hardware: Seguir de cerca las actualizaciones en las plataformas para desarrolladores de fabricantes de hardware de computación espacial como Meta, Apple y Sony, para ver si los marcos nativos de seguimiento de manos a nivel de sistema operativo incorporan estados de contacto visual inspirados en el enfoque de KAIST.

Este artículo incorpora información publicada originalmente por Tech Xplore en la que se detallan las investigaciones llevadas a cabo por el Korea Advanced Institute of Science and Technology.