Los sistemas multimedia capturan, comprimen, almacenan, envían y reproducen sonido, imágenes y video. El material sin comprimir es enorme, así que casi todo descansa en códecs que descartan lo que las personas apenas notan, y en tuberías que mantienen el audio y el video sincronizados. La transmisión añade el problema de entregarlo con fluidez por una red poco fiable.
Conceptos clave
- Muestreo y cuantización: convertir el sonido y la luz continuos en números; la frecuencia de muestreo y la profundidad de bits fijan la calidad.
- Compresión: los métodos sin pérdida conservan cada bit; los códecs con pérdida usan transformadas y percepción para reducir mucho los datos.
- Contenedores y códecs: el códec codifica el flujo; el contenedor empaqueta audio, video y subtítulos con marcas de tiempo.
- Sincronización: los relojes y las marcas de tiempo mantienen alineados el sonido y la imagen.
- Transmisión: almacenamiento en búfer, tasa de bits adaptativa y manejo de pérdidas para reproducción en vivo y bajo demanda.
Vocabulario
- Tasa de bits: cuántos bits por segundo usa el flujo.
- Tipos de cuadro: los cuadros clave son independientes; los demás guardan solo los cambios respecto a sus vecinos.
- Latencia y jitter: el retraso, y su variación, entre el envío y la reproducción.
- Transcodificación: convertir de un formato o tamaño a otro.
Qué estudiar, en orden
- Teoría del muestreo: por qué el doble de la frecuencia máxima, y cómo suena el aliasing.
- Escribe a mano un archivo WAV con un tono generado y reprodúcelo.
- Implementa un compresor de imágenes con pérdida sencillo con una DCT y cuantización, y observa los artefactos.
- Usa una herramienta estándar de línea de órdenes para inspeccionar flujos, convertir formatos y cambiar tasas de bits.
- Monta una pequeña transmisión y observa qué hacen la pérdida y el jitter con la reproducción.
Etiquetas relacionadas
#signal-processing #information-theory #computer-graphics #speech