Esta es la tercera parte de una serie de blogs de cuatro partes que analizará más de cerca el flujo de trabajo de efectos visuales (VFX). En nuestras publicaciones anteriores, cubrimos el componentes del flujo de trabajo de VFX, Así como la proceso de renderizado. Hoy hablamos de los desafíos comunes relacionados con los datos que los estudios y los artistas enfrentan con los flujos de trabajo de VFX.
Flujos de trabajo de efectos visuales complejos, datos no estructurados y almacenamiento heredado: lo que los estudios de efectos visuales deben saber
A efectos visuales (VFX) La tubería de producción es compleja, con muchos procesos.
Uno de los mayores desafíos es administrar el gran volumen de datos necesarios para producir imágenes fotorrealistas. Una sola criatura digital puede estar compuesta por cientos, si no miles, de activos digitales. A menudo es necesario ensamblar terabytes de datos que deben renderizarse y/o componerse.
Los datos volumétricos, que son esenciales para muchos efectos básicos, incluidas las nubes, el polvo, el agua, el fuego y los fluidos, son otro ejemplo de extrema complejidad. Los datos son un desafío tanto por su gran tamaño como porque a menudo requieren conversión a otros formatos antes de que puedan ser utilizados por otras herramientas.
En general, el impulsor detrás del crecimiento de VFX es el hecho de que la tecnología ha mejorado, es más barata y más rápida. Esto significa que animación y los efectos especiales se han vuelto cada vez más ambiciosos. Además, los efectos visuales y la animación se han vuelto críticos durante el COVID para completar programas, comerciales y películas que, de otro modo, se habrían filmado en el set con película.
Estos efectos complejos requieren mucha gestión de datos no estructurados y una moderna plataforma de datos de archivos que está diseñada para manejar miles de millones de archivos. El énfasis está en "archivo", porque VFX es un flujo de trabajo basado en archivos; Los archivos son el medio de intercambio entre aplicaciones que no necesariamente fueron escritas por la misma empresa. Los flujos de trabajo deben integrarse en todas las aplicaciones, y la gestión eficiente de datos no estructurados es la forma de hacerlo.
Lo que los estudios de VFX necesitan saber: Las soluciones heredadas de escalamiento horizontal y vertical no se diseñaron para manejar los volúmenes de datos, los tipos de archivos, las aplicaciones y las cargas de trabajo actuales. Los datos no son los mismos que hace 10 años. Por esta razón, los estudios de VFX no deben conformarse con tecnología de almacenamiento obsoleta. Los sistemas de almacenamiento heredados no pueden proporcionar la visibilidad, el control y la escala que necesita para administrar sus datos. (Eso es por qué qumulo construyó una mejor plataforma de datos de archivos).
Dolores de almacenamiento heredados: rendimiento, escalabilidad, adaptabilidad y visibilidad
Las organizaciones que dependen tanto de las plataformas de gestión de datos no estructurados como los estudios de efectos visuales suelen ser sensibles a una variedad de dolores de almacenamiento de datos. Estos incluyen rendimiento, escalabilidad, visibilidad y flexibilidad.
A medida que más estudios cambien a 8K y resoluciones más altas, el rendimiento será cada vez más crítico. Los sistemas de almacenamiento que son demasiado lentos pueden privar a la granja de renderizado o impedir que los artistas trabajen mientras se realiza el renderizado.
Escalar es otro desafío. La cantidad cada vez mayor de datos que generan las tiendas de VFX puede llenar fácilmente su sistema de almacenamiento de datos.
Los problemas como la escalabilidad y el rendimiento, que usted esperaría de cualquier organización que tenga que lidiar con un número cada vez mayor de archivos, se exacerban para los estudios VFX porque no pueden tolerar demoras en su programación para agregar más recursos.
Según el tipo de sistema de almacenamiento de datos que utilicen, la demanda de más capacidad puede significar que el estudio deba reemplazar todo el sistema o comprar nuevos controladores de metadatos y carcasas de almacenamiento. Con plazos ajustados, por lo general no hay tiempo para construir la infraestructura física.
La visibilidad es otra limitación de los sistemas de almacenamiento de archivos heredados. La mayoría de las tiendas de VFX utilizan un script/programa Treewalk para administrar sus datos de archivo. Los Treewalks son extremadamente lentos cuando los sistemas de archivos son grandes. Los administradores pueden esperar literalmente días para obtener respuestas. Para entonces, es demasiado tarde para que usen los datos de cualquier manera que sea importante.
Aquí hay un escenario común: Una pequeña tienda de VFX podría, cuando comienza por primera vez, usar un sistema de almacenamiento que el equipo ha creado ellos mismos. A medida que crezca su negocio, será necesario reemplazar ese sistema. Los artistas necesitarán un sistema que sea lo suficientemente rápido para poder trabajar mientras se procesan los fotogramas. Tendrán que pasar a una plataforma de datos de archivos comercial y escalable con características empresariales que les ayudarán a asumir más proyectos y crear efectos más sofisticados.
Los desafíos del renderizado en la nube
La capacidad de aprovechar la nube es un gran beneficio para los estudios de VFX, pero representación en la nube no está exenta de su propio conjunto de desafíos.
Muchas de las mismas consideraciones para el renderizado local se aplican al renderizado en la nube, pero hay algunos problemas específicos que deben tenerse en cuenta.
Desafortunadamente, mientras que los recursos de computación de alto rendimiento (HPC) en la nube están fácilmente disponibles, las soluciones de almacenamiento tradicionales basadas en archivos a menudo son inadecuadas o son versiones de almacenamiento de archivos heredadas con algunos parches aplicados para que estén "listas para la nube". Los problemas incluyen falta de soporte de protocolo, limitaciones de rendimiento y capacidad, y complejidad en la configuración del clúster. (RELACIONADO: Almacenamiento de bloques, almacenamiento de objetos y almacenamiento de archivos: ¿cuál es la diferencia?)
Es importante que los estudios igualen el rendimiento de su granja de procesamiento local en la nube. Deben poder escalar el rendimiento y la capacidad por separado, para aprovechar los recursos flexibles que ofrece la nube pública. Los estudios también necesitan la capacidad de transferir archivos desde el clúster local a la instancia en la nube y luego devolver los resultados al clúster local. (RELACIONADO: Cómo copiar objetos entre depósitos y clústeres de S3.)
La mayoría de los sistemas en la nube basados en archivos no pueden abordar todos estos requisitos. Nube Qumulo Q fue diseñado para resolver todos los dolores descritos anteriormente.
- Rendimiento: El rendimiento ultrarrápido maneja archivos masivos con facilidad.
- Escalabilidad: Diseño modular sencillo. Simplemente agregue nodos para escalar a niveles de petabytes. Obtenga rendimiento y capacidad en minutos. Sin interrupciones ni tiempo de inactividad.
- Flexibilidad : se ejecuta en las instalaciones y/o en la nube.
- Visibilidad: Supervise el rendimiento, la capacidad y el uso de análisis integrados en tiempo real.
Más información
Qumulo tiene varios recursos útiles para aprender más sobre VFX y cómo nuestra plataforma de datos de archivos ayuda a acelerar los flujos de producción de VFX. Consulte nuestros recursos adicionales y hojas de datos en VFX, Animación, Medios de comunicación y entretenimiento para saber cómo hemos ayudado a empresas como FuseFX y Estudios Cinesite para llevar las películas y la programación de animación al público más rápido.
En la parte 4, la última de esta serie, compartiremos ejemplos de cómo los estudios de VFX están innovando más rápido con la plataforma de datos de archivos de Qumulo.
Serie VFX 101
- Parte 1: La historia de VFX y sus flujos de trabajo para la producción moderna de cine y animación
- Parte 2: ¿Qué es el renderizado y por qué son importantes las granjas de renderizado?
- Parte 3: Desafíos de datos comunes para VFX (y cómo resolverlos)
- Parte 4: Renderizado de efectos visuales en la nube con Qumulo
Un agradecimiento especial a Matt Ashton y Kristi Whitman por sus contribuciones a esta serie de blogs.
