Il s'agit de la troisième partie d'une série de blogs en quatre parties qui examinera de plus près le flux de travail des effets visuels (VFX). Dans nos articles précédents, nous avons couvert le composants du flux de travail VFX, ainsi quedes processus de rendu. Aujourd'hui, nous discutons des défis communs liés aux données auxquels les studios et les artistes sont confrontés avec les flux de travail VFX.
Workflows VFX complexes, données non structurées et stockage hérité : ce que les studios VFX doivent savoir
A effets visuels (VFX) pipeline de production est complexe, avec de nombreux processus.
L'un des plus grands défis consiste à gérer le volume considérable de données nécessaires pour produire des images photoréalistes. Une seule créature numérique peut être composée de centaines, voire de milliers, d'actifs numériques. Il est souvent nécessaire d'assembler des téraoctets de données qui doivent être rendues et/ou composées.
Les données volumétriques, qui sont essentielles à de nombreux effets de pain et de beurre, y compris les nuages, la poussière, l'eau, le feu et les fluides, sont un autre exemple d'une extrême complexité. Les données sont difficiles à la fois en raison de leur grande empreinte et parce qu'elles nécessitent souvent une conversion vers d'autres formats avant de pouvoir être utilisées par d'autres outils.
En général, le moteur de la croissance des effets visuels est le fait que la technologie s'est améliorée, moins chère et plus rapide. Cela signifie que animation et les effets spéciaux sont devenus de plus en plus ambitieux. De plus, les effets visuels et l'animation sont devenus essentiels pendant COVID pour compléter des émissions, des publicités et des films qui, autrement, auraient été tournés sur le plateau avec un film.
Ces effets complexes nécessitent beaucoup de gestion des données non structurées et une plate-forme de données de fichiers moderne conçue pour gérer des milliards de fichiers. L'accent est mis sur le « fichier », car VFX est un flux de travail basé sur des fichiers ; les fichiers sont le support d'échange entre des applications qui n'ont pas nécessairement été écrites par la même entreprise. Les flux de travail doivent s'intégrer à toutes les applications, et une gestion efficace des données non structurées est le moyen d'y parvenir.
Ce que les studios VFX doivent savoir : Les anciennes solutions scale-out et scale-up n'ont pas été conçues pour gérer les volumes de données, les types de fichiers, les applications et les charges de travail d'aujourd'hui. Les données ne sont plus les mêmes qu'il y a 10 ans. Pour cette raison, les studios VFX ne doivent pas se contenter d'une technologie de stockage obsolète. Les systèmes de stockage hérités ne peuvent pas fournir la visibilité, le contrôle et l'évolutivité dont vous avez besoin pour gérer vos données. (C'est pourquoi Qumulo construit une meilleure plate-forme de données de fichiers.)
Problèmes de stockage hérités : performances, évolutivité, adaptabilité et visibilité
Les organisations qui s'appuient sur des plates-formes de gestion de données non structurées aussi fortement que les studios VFX sont généralement sensibles à un variété de problèmes de stockage de données. Ceux-ci incluent les performances, l'évolutivité, la visibilité et la flexibilité.
À mesure que de plus en plus de studios passeront aux résolutions 8K et supérieures, les performances deviendront de plus en plus critiques. Les systèmes de stockage trop lents peuvent affamer la ferme de rendu ou empêcher les artistes de travailler pendant le rendu.
La mise à l'échelle est un autre défi. La quantité toujours croissante de données générées par les magasins VFX peut facilement remplir leur système de stockage de données.
Des problèmes tels que l'évolutivité et les performances, auxquels vous pouvez vous attendre de toute entreprise confrontée à un nombre croissant de fichiers, sont exacerbés pour les studios VFX car ils ne peuvent tolérer des délais dans leur planning pour ajouter des ressources.
Selon le type de système de stockage de données qu'ils utilisent, les demandes de plus de capacité peuvent signifier que le studio doit remplacer l'ensemble du système ou acheter de nouveaux contrôleurs de métadonnées et des coquilles de stockage. Avec des délais serrés, il n'y a généralement pas le temps de construire l'infrastructure physique.
La visibilité est une autre limitation des systèmes de stockage de fichiers hérités. La plupart des magasins VFX utilisent un script/programme treewalk pour gérer leurs données de fichiers. Les arborescences sont extrêmement lentes lorsque les systèmes de fichiers sont volumineux. Les administrateurs peuvent littéralement attendre des jours pour obtenir des réponses. À ce moment-là, il est trop tard pour qu'ils puissent utiliser les données d'une manière qui compte.
Voici un scénario courant : Un petit magasin d'effets visuels peut, lors de son démarrage, utiliser un système de stockage que l'équipe a elle-même mis en place. À mesure que leur entreprise grandit, ce système devra être remplacé. Les artistes auront besoin d'un système suffisamment rapide pour pouvoir travailler pendant le rendu des images. Ils devront passer à une plate-forme de données de fichiers commerciale évolutive avec des fonctionnalités d'entreprise qui les aideront à entreprendre plus de projets et à créer des effets plus sophistiqués.
Les défis du rendu dans le cloud
La capacité à tirer parti du cloud est un avantage majeur pour les studios VFX, mais rendu de nuage n'est pas sans ses propres défis.
Bon nombre des mêmes considérations pour le rendu sur site s'appliquent au rendu dans le cloud, mais certains problèmes spécifiques doivent être pris en compte.
Malheureusement, alors que les ressources de calcul haute performance (HPC) dans le cloud sont facilement disponibles, les solutions de stockage traditionnelles basées sur des fichiers sont souvent inadéquates ou sont des versions du stockage de fichiers hérité avec certains correctifs appliqués pour les rendre « prêts pour le cloud ». Les problèmes incluent le manque de prise en charge des protocoles, les limitations de performances et de capacité, et la complexité de la configuration du cluster. (EN RELATION: Stockage de blocs vs stockage d'objets vs stockage de fichiers : quelle est la différence ?)
Il est important que les studios correspondent aux performances de leur ferme de rendu sur site dans le cloud. Ils doivent pouvoir faire évoluer les performances et la capacité séparément, pour tirer parti des ressources flexibles offertes par le cloud public. Les studios doivent également pouvoir transférer des fichiers du cluster sur site vers l'instance dans le cloud, puis renvoyer les résultats au cluster sur site. (EN RELATION: Comment copier des objets entre des compartiments et des clusters S3.)
La plupart des systèmes cloud basés sur des fichiers ne peuvent pas répondre à toutes ces exigences. Nuage Qumulo Q a été conçu pour résoudre toutes les douleurs décrites ci-dessus.
- Performance: Des performances ultra-rapides gèrent facilement des fichiers volumineux.
- Évolutivité: Conception modulaire simple. Ajoutez simplement des nœuds à l'échelle des niveaux de pétaoctets. Gagnez en performances et en capacité en quelques minutes. Aucune interruption ou temps d'arrêt.
- Flexibilité: s'exécute sur site et/ou dans le cloud.
- Visibilité: surveillez les performances, la capacité et l'utilisation des analyses en temps réel intégrées.
Apprendre encore plus
Qumulo a plusieurs ressources utiles pour en savoir plus sur les effets visuels et comment notre plate-forme de données de fichiers aide à accélérer les pipelines de production VFX. Consultez nos ressources supplémentaires et nos fiches techniques sur VFX, Animation, Médias et divertissement pour savoir comment nous avons aidé des entreprises comme FuseFX et Studios Cinesite pour proposer plus rapidement des films et des programmes d'animation au public!
Dans la partie 4, la dernière de cette série, nous partagerons des exemples de la façon dont les studios VFX innovent plus rapidement avec la plate-forme de données de fichiers de Qumulo.
Série VFX 101
- 1 partie: L'histoire des effets visuels et de ses flux de travail pour la production de films et d'animations modernes
- 2 partie: Qu'est-ce que le rendu et pourquoi les fermes de rendu sont-elles importantes ?
- 3 partie: Défis de données courants pour VFX (et comment les résoudre)
- 4 partie: Rendu VFX dans le cloud avec Qumulo
Un merci spécial à Matt Ashton et Kristi Whitman pour leurs contributions à cette série de blogs.
