La realidad extendida abarca la realidad virtual, que sustituye el mundo por uno generado, y la realidad aumentada, que añade objetos generados al mundo real. Ambas deben seguir dónde están tu cabeza y tus manos y redibujar con rapidez suficiente para que tu cuerpo lo crea. La comodidad es un límite técnico duro, no un detalle.
Conceptos clave
- Seguimiento: hallar la pose de la cabeza y de los controles a partir de sensores inerciales, cámaras y marcadores.
- Renderizado estereoscópico: una imagen por ojo, con la distorsión de las lentes corregida, a una tasa de cuadros alta y estable.
- Latencia: el retraso entre un movimiento y la imagen que responde; demasiada causa malestar.
- Mapeo espacial: entender las superficies y la profundidad de la habitación real para que los objetos virtuales se apoyen en ellas y queden ocultos tras ellas.
- Interacción: manos, mirada, controles y voz, en tres dimensiones y a escala real.
Vocabulario
- 6DoF: seis grados de libertad, tres de posición y tres de rotación.
- SLAM: construir un mapa mientras se sigue la posición dentro de él.
- Reproyección: deformar el último cuadro hacia la pose más reciente de la cabeza para ocultar retrasos pequeños.
- OpenXR: la API abierta estándar entre las aplicaciones de XR y los dispositivos.
Qué estudiar, en orden
- Rotaciones: ángulos de Euler, matrices de rotación y cuaterniones, y por qué ocurre el bloqueo de cardán.
- Renderiza una escena en estéreo en una pantalla, con una cámara que siga el ratón.
- Construye una app pequeña con OpenXR o con el soporte de XR de un motor de juegos, y lee los tiempos de cuadro.
- Mide el tiempo de cuadro y aprende cómo se sienten los cuadros perdidos; presupuéstalo.
- Diseña una interacción en 3D y pruébala con personas por su comodidad, no solo por su función.