Comment puis-je budgétiser une stratégie de données performante ? apparu à l'origine sur Quora, l'endroit où acquérir et partager des connaissances, permettant aux gens d'apprendre des autres et de mieux comprendre le monde.
Bienvenue dans notre premier Qumulo sur Quora tour d'horizon des idées !
La Experts Quora dans l'espace technologique est un lieu où les leaders d'opinion dans le domaine de la technologie collaborent pour répondre à vos questions les plus urgentes. En octobre 2021, Quora a accueilli Ben Gitenstein, vice-président de la gestion des produits chez Qumulo, en tant que l'un des plus récents experts en technologie de Quora à rejoindre la communauté des leaders d'opinion partageant leurs connaissances, leurs expériences, leurs mesures concrètes et leurs conseils. Et il est impatient de répondre à vos questions les plus urgentes !
Qumulo sur Quora
Aujourd'hui, nous lançons une nouvelle série sur la course à pied sur notre blog — Qumulo sur Quora – dans lequel nous partagerons les idées de Ben avec quelques étapes et analyses supplémentaires pour aider nos lecteurs à réussir leurs propres parcours technologiques.
Notre première histoire couvre une question à laquelle Ben a répondu sur la façon de budgétiser une stratégie de données performante. Nous allons approfondir sa réponse avec quelques informations et analyses supplémentaires.
Cependant, avant d'arriver à la réponse à cette question, il est important que nos lecteurs comprennent que le contrôle des coûts doit commencer par un budget de stockage de données basé sur des dépenses prévisibles - et cela peut être difficile sans une architecture de données efficace. Analysons cela plus avant.
L'efficacité du stockage doit être intégrée à l'architecture de base des données
L'efficacité du stockage ne peut pas être boulonné à votre système de fichiers, à la place, il doit être intégré dans l'architecture logicielle de base pour permettre le stockage de fichiers volumineux et petits. Par exemple, le système de fichiers de Qumulo prend en charge une très grande capacité de stockage avec une faible surcharge de calcul et une capacité utilisable à 100 %.
Ces attributs d'un stockage efficace comprennent un haute performance système qui consomme moins d'énergie, ce qui entraîne des économies d'énergie. Avancée, logiciel durable–des performances plus élevées avec une consommation d'énergie réduite–commence par une architecture logicielle efficace qui stocke plus dans moins d'espace.
Le rôle de la densité de stockage dans l'efficacité à grande échelle
La densité de stockage joue un rôle important dans l'efficacité à grande échelle. Qumulo défini par logiciel l'approche du stockage des données de fichiers permet flexibilité matérielle et prend en charge les médias les plus denses des fabricants et des équipementiers dès qu'ils sont disponibles.
Qumulo Core offre la possibilité d'évoluer de manière dynamique, de sorte que vous pouvez ajouter de nouveaux types de nœuds aux clusters existants pour tirer parti d'une densité accrue. Par example:
- Les nœuds plus denses offrent plus de capacité dans la même enveloppe énergétique (ou souvent plus petite), ce qui permet une efficacité et des économies d'énergie
- Les ratios DRAM et SSD/HDD généreux dans les hybrides réduisent davantage la consommation d'énergie grâce à la mise en cache intelligente de l'apprentissage automatique (ML)
"En fin de compte, il s'agissait d'une consolidation", a affirmé Valérie Plante. Jim Mercurio, vice-président exécutif et directeur général du Levi's Stadium, pour les 49ers. « Nous roulions environ 44 To par jour. C'était juste maladroit. […] Qumulo nous a permis de tout consolider et a rendu les choses beaucoup plus simples.
Comment puis-je budgétiser une stratégie de données performante ?
Lorsque les entreprises gèrent des quantités massives de données non structurées avec des exigences de haute performance, l'un des plus grands défis pour la plupart des organisations modernes est la facilité avec laquelle il peut être d'accumuler une facture. Les données continuent de croître, mais, d'une manière générale, votre budget n'augmente pas avec elles. "Vous pourriez tomber dans le piège de surpayer un fournisseur - et pire encore, vous pourriez être enfermé dans ce fournisseur pendant des années", a noté Ben sur Quora.
Son conseil? Ben a suggéré ce qui suit :
Vous pouvez réduire les coûts en créant une stratégie qui optimise l'efficacité et rationalise vos pratiques en matière de données. Cela nécessite de décomposer les silos de données et de les consolider en une seule plate-forme de données afin que chaque scientifique, chercheur, développeur et artiste ait accès aux données dont il a besoin pour créer des produits et répondre aux questions. Du point de vue du stockage, cela signifie que vous devez rechercher des produits capables de créer des espaces de noms massivement évolutifs sans limite de capacité ou de performances, et un modèle d'identité convergé unique afin que vos utilisateurs puissent accéder à toutes les données, quelles que soient les applications clientes. qui ont servi à l'écrire.
Enfin, veillez à utiliser analyse en temps réel pour aider à comprendre où votre organisation utilise la bande passante et pour surveiller les performances de votre infrastructure en termes de capacité et de performances. Vous ne pouvez pas budgétiser si vous n'avez pas de visibilité.
En fin de compte, les solutions les plus rentables devraient vous permettre d'adapter vos charges de travail à des milliards de fichiers, petits et grands, sans vous surcharger pour des fonctionnalités que vous n'utilisez pas.
Histoire connexe: Éléments à prendre en compte lors de l'évaluation des solutions de stockage de données d'entreprise
Examinons maintenant sa réponse avec quelques informations et analyses supplémentaires, en commençant par équilibrer le budget de votre stratégie de données pour plus que la capacité de stockage.
Budget pour plus que la capacité de stockage
Le budget de votre stratégie de données doit couvrir le coût de la main-d'œuvre pour gérer et exécuter vos charges de travail de données jusqu'au coût de la capacité matérielle et de la maintenance pour le stocker. Cependant, ne négligez pas les dollars par partout, les dollars par IOPS, le coût de démarrage ou la dette technique qui s'accumule avec un centre de données en constante expansion.
Pour connaître les stratégies de gestion du budget de stockage des données dans le cadre de votre stratégie de données hautes performances, lisez : Comment résoudre les problèmes de stockage des logiciels hérités, de la disponibilité et du budget.
Optimisez vos ressources de calcul avec une architecture de système de fichiers cloud hybride
Un cloud hybride architecture du système de fichiers vous aide à réduire les coûts mentionnés ci-dessus liés à la « prolifération » du centre de données tout en tirant parti de l'efficacité de l'échelle du cloud pour les charges de travail hautes performances. S'il est logique d'exécuter certaines charges de travail sur site, d'autres nécessitent la capacité du cloud. Les entreprises peuvent basculer vers le cloud ou simplement y déplacer un sous-ensemble de leurs données pour tirer parti des services, des applications et du stockage natifs du cloud.
"Notre équipe a pu maintenir une mise à l'échelle en rafale à un taux de 1.3 million d'IOPS pendant plus de 5 heures d'affilée, avec des pics pouvant atteindre 2 millions d'IOPS", a déclaré Jeremy Brousseau, responsable informatique, Cinésite Vancouver. "C'est un niveau sans précédent dans le passé, et cela montre à quel point Qumulo nous a aidés à condenser nos délais de production lorsque cela était nécessaire et à permettre aux artistes d'avoir plus d'itérations en moins de temps, ce qui se traduit globalement par un travail final de meilleure qualité."
Un meilleur partage des ressources grâce au cloud computing peut vous aider à réduire vos dépenses et à fonctionner plus efficacement. En plus de rationaliser les coûts, cela vous aidera à réduire votre empreinte carbone. Pour soutenir un stratégie de cloud hybride vos données doivent être stockées dans un espace de noms unique avec un accès multiprotocole aux fichiers depuis l'infrastructure sur site et dans les clouds publics. Cela permet à différents groupes d'utilisateurs de collaborer sur les mêmes ensembles de données, qu'ils utilisent des applications Linux, Windows ou Mac.
Le système de fichiers de Qumulo a été conçu pour les environnements de cloud hybride afin de réduire les coûts d'achat et de maintenance du matériel dans votre propre centre de données tout en vous permettant de :
- Migrez vers le cloud sans avoir besoin de refactoriser les applications ou workflows
- Mobiliser les données vers et depuis Amazon S3 en utilisant les services de données intégrés qui sont standard dans la plate-forme de données de fichiers Qumulo Core
- Charges de travail cloud de taille appropriée pour des performances élevées avec la possibilité d'ajouter capacité de stockage si nécessaire, par rapport au provisionnement pour le pic
- Utilisez Qumulo sur Azure en tant que SaaS entièrement géré pour contrôler les dépenses et ne payer que ce que vous utilisez
Contrôlez l'accès et l'utilisation des données en temps réel via la visualisation des données
La capacité à budgétiser efficacement dépend de la connaissance de ce qui se passe avec vos données, afin que vous puissiez les gérer et les contrôler de manière proactive. Par exemple, la visualisation des données des analyses en temps réel vous aide à comprendre où vous utilisez la bande passante pour éviter les goulots d'étranglement et les dépassements. Il vous permet de surveiller la capacité et les performances de votre infrastructure pour repérer les tendances et vous ajuster en conséquence.
La visualisation des données est particulièrement utile lorsque vous travaillez dans le cloud. Par exemple, dans le cloud ou sur site, le tableau de bord d'analyse en temps réel de Qumulo vous permet de voir combien de clients sont connectés, qui utilise le plus de bande passante et où le système se développe rapidement.
Augmentez le rendement du matériel grâce à l'optimisation logicielle
Revenons au principe d'origine selon lequel l'efficacité doit être « intégrée » plutôt que « boulonnée », Qumulo Core le logiciel est optimisé pour réduire le surprovisionnement inutile. Pour offrir plus de performances dans la même enveloppe de puissance, notre logiciel lit de gros morceaux à partir du disque dur et de petits morceaux à partir du SSD (et encore plus petits à partir de la RAM). Le fait d'être défini par logiciel (sans dépendre des ventes de matériel) signifie que nos clients tirent le meilleur parti de leurs cycles de vie d'immobilisations avec 100 % des modèles de matériel toujours pris en charge.
Rejoignez la discussion avec des leaders d'opinion en technologie
Rendez-vous sur le Experts Quora dans l'espace technologique où vous pouvez participer à votre propre discussion réfléchie, poser des questions et lire davantage de réponses d'experts de Ben Gitenstein sur les tendances en matière de stratégie de données et les forces dynamiques qui façonnent l'industrie de la gestion et du stockage des données aujourd'hui.
Et, bien sûr, gardez un œil sur nos prochains Qumulo sur Quora rafle !
