Le marché du calcul haute performance (HPC) est peut-être le secteur à la croissance la plus rapide dans le monde informatique aujourd'hui. Recherche Hyperion prévoit que le marché total du calcul haute performance atteindra 44B $ par 2023, les investissements liés au stockage représentant 7.8B $.
Les points clés de la recherche de Hyperion sont les suivants:
- Les systèmes de stockage deviendront de plus en plus critiques ;
- Le cloud computing pour les charges de travail HPC connaîtra une croissance rapide ;
- L'intelligence artificielle (IA) se développera plus vite que tout le reste.
L'intelligence artificielle (IA) se développe rapidement
Comme mentionné ci-dessus, l'IA se développe rapidement. Basé sur un rapport de Grand View Research, le marché de l'intelligence artificielle croîtra à un TCAC de 57.2 % de 2017 à 2025 (atteignant 35.8 milliards de dollars). Le cabinet d'analystes déclare :
"L'intelligence artificielle (IA) est considérée comme le prochain développement technologique prodigieux, à l'instar des développements passés tels que la révolution des industries, l'ère informatique et l'émergence de la technologie des smartphones." Grand View note également que l'Amérique du Nord, en particulier, devrait dominer les déploiements d'IA en raison de "la disponibilité d'un financement gouvernemental élevé, de la présence d'acteurs de premier plan et d'une solide base technologique".
Le marché HPC couvre de nombreux domaines de recherche, y compris les sciences de la vie et la médecine, la recherche sur le climat, la détection des tremblements de terre et la tectonique, la conduite automatisée, la physique et l'astrophysique, l'agriculture et l'énergie.
Les meilleurs solutions de stockage de données d'entreprise pour les données non structurées sont des systèmes de fichiers distribués qui ont la capacité de traiter d'énormes quantités de données pour les charges de travail HPC, souvent constituées de centaines de millions ou de milliards de points de données de petite taille, pour extrapoler des informations de recherche clés. De plus, les innovations de l'Internet des objets (IoT) aident à capturer ces points de données à des niveaux records. Les capteurs utilisés aujourd'hui couvrent une vaste gamme d'appareils électroniques - de véhicules autonomes et les villes intelligentes, à la fabrication industrielle et à la chaîne d'approvisionnement - diffusent d'énormes quantités de données en temps réel vers des systèmes centralisés pour analyse.
Avec la croissance continue de technologies telles que l'IA, l'apprentissage automatique (ML) et l'imagerie 3D, la taille et la quantité de données que les organisations doivent gérer et stocker continueront d'exploser à l'échelle du pétaoctet (et au-delà).
Lors du développement de son NAS scale-out de nouvelle génération, Qumulo avait plusieurs objectifs clés en tête pour répondre aux exigences spécifiques au HPC
Les systèmes de stockage deviennent de plus en plus critiques car les entreprises doivent suivre le rythme de la croissance et de l'expansion rapides des données, en évoluant facilement, sans interruption, quand et où elles sont nécessaires. Le système de fichiers distribué de Qumulo — Qumulo Core — tire parti d'une architecture basée sur des nœuds, qui permet aux organisations d'adapter à la fois les performances et la capacité — et dans les environnements sur site et cloud. L'architecture de stockage définie par logiciel de Qumulo utilise des grappes de nœuds constitués de matériel Qumulo ou de matériel standard préqualifié de l'industrie de HPE or Fujitsu, offrant plusieurs options de plate-forme, y compris entièrement NVMe, archive active et cloud, et plus encore.
Dans un environnement HPC où la fourniture d'analyses et de résultats critiques est primordiale, les charges de travail HPC dépendent énormément de leur système de stockage
Pour répondre aux exigences de performances des charges de travail HPC, la plate-forme entièrement NVMe de Qumulo fournit des IOPS de pointe avec une latence extrêmement faible, ce qui est particulièrement utile dans les environnements HPC. La latence est tout aussi importante que les IOPS pour les environnements HPC, afin que le système puisse traiter rapidement un grand nombre de transactions.
Le système de fichiers de Qumulo a été conçu pour gérer les petits fichiers aussi efficacement que les gros fichiers. Cela supprime les limitations de taille « Block » appliquées avec d'autres solutions NAS évolutives. Pour améliorer les performances, de nombreux systèmes de fichiers utilisent des tailles de blocs plus grandes, ce qui est bien pour les gros fichiers, mais très inefficace pour les petits fichiers, car chaque bloc ne peut contenir qu'un seul fichier. Cela conduit potentiellement à un énorme gaspillage de capacité… pas un problème pour Qumulo !
Comme indiqué ci-dessus, options pour le cloud computing deviennent de plus en plus importants. En raison de la taille croissante des ensembles de données et du caractère intensif de l'IA et du ML en termes de calcul, les entreprises tirent parti du cloud. En utilisant la plate-forme unique de Qumulo, les entreprises peuvent adapter de manière transparente les charges de travail, en fonction des besoins, aux environnements cloud AWS ou GCP, pour le traitement des performances de calcul, la collaboration améliorée et le stockage des données.
L'importance de la protection des données dans les environnements HPC
La protection et la disponibilité des données sont également importantes dans ce secteur. Offres Qumulo protection des données à la pointe de l'industrie en utilisant le codage d'effacement. Les données sont distribuées efficacement sur plusieurs nœuds pour se protéger contre les pannes de disque. En cas de panne de disque, contrairement aux solutions RAID traditionnelles, les performances ne sont pas affectées lors des reconstructions. Codage d'effacement nécessite également moins de capacité (généralement 33 % d'espace en moins) pour la résilience que RAID.
En outre, le logiciel Qumulo comprend analyse en temps réel pour éliminer la cécité des données, offrant une visibilité instantanée sur des milliards de fichiers. Grâce à cette technologie précieuse, les entreprises contrôlent l’ensemble du système de stockage grâce à des informations en temps réel leur permettant de prévoir les tendances en matière d’utilisation et de capacité et de gérer de manière plus proactive les besoins de stockage actuels et futurs.
Le logiciel de système de fichiers distribué de Qumulo a été conçu dès le départ pour répondre aux exigences d'évolutivité d'aujourd'hui, offrant le système de stockage de fichiers le plus performant pour les centres de données et le cloud public.
Les données ont changé. Alors pourquoi continuer à utiliser une technologie de stockage conçue il y a vingt ans, alors qu'il existe aujourd'hui une technologie moderne de stockage de fichiers parfaitement conçue pour les exigences élevées du HPC ? Qumulo est le seul NAS évolutif basé sur des fichiers conçu pour offrir des capacités robustes sur site et dans le cloud - et le moyen radicalement simple de gérer des données non structurées dans n'importe quel environnement.
Courant Clients Qumulo dans l'industrie HPC, dont beaucoup opèrent dans les secteurs des sciences de la vie et de la recherche scientifique, comprennent : Laboratoire national des énergies renouvelables (NREL), Institut Carnegie pour la science, recherche CID, division Channing du réseau de médecine de l'hôpital Brigham and Women's, DarwinHealth, Inc., Georgia Cancer Center de l'Université Augusta, Institut de métrologie et d'évaluation de la santé (IHME) de l'Université de Washington, Johns Hopkins Genomics à l’Université Johns Hopkins, Progenity, Inc., UConn Health, à l’Institut du calcul scientifique et de l’imagerie (SCI) de l’Université de l’Utah… et de nombreux autres utilisateurs qui utilisent Qumulo pour accélérer leurs processus de travail intensifs en données et découvrir de nouvelles percées scientifiques et médicales.
