Système de fichiers parallèle à haute vitesse
Gestion des données selon des stratégies
Catalogue global unifié
Silos de stockage regroupés
Évolutivité transparente
Aucune emprise d'un fournisseur ni taxe sur les données
L'innovation gourmande en données exige davantage qu'une simple puissance de calcul. Que vous exécutiez des simulations complexes, entraîniez des modèles de Deep Learning ou traitiez des données haute résolution, les performances dépendent de la rapidité et de l'efficacité avec lesquelles les données peuvent se déplacer.
Les environnements HPC et IA sont conçus pour la vitesse, mais les architectures de stockage classiques représentent souvent un goulet d'étranglement. Alors que les CPU et les GPU deviennent de plus en plus rapides, les infrastructures de données existantes reposent sur des niveaux fragmentés et gérés manuellement, qui ne sont tout simplement pas capables d'alimenter le calcul assez vite. Résultat ? Des pipelines ralentis, des ressources sous-utilisées et une perte de temps.
L'espace de stockage scratch se remplit de fichiers non gérés. Les données sont dispersées dans des silos, difficiles à trouver et restent sur un stockage rapide et coûteux.
Sans automatisation, les équipes sont contraintes de rechercher les fichiers, de rappeler manuellement des ensembles de données et d'intervenir constamment en urgence pour maintenir les performances à la hauteur.
- Vos GPU restent inactifs en attendant le chargement des données ?
- Votre espace de stockage scratch se remplit de fichiers qui ne bougent jamais ?
- Vous effectuez manuellement la mise en préproduction ou le rappel des données entre les différents niveaux ?
- Votre équipe a du mal à gérer les ensembles de données répartis sur plusieurs systèmes ou sites ?
- Les coûts ne cessent d'augmenter, car les données froides restent sur des systèmes de stockage hautes performances ?
- Utilisez-vous le cloud bursting ou est-il trop complexe à intégrer ?
Éliminez les goulots d'étranglement grâce au stockage « scratch » Tier-0 à haute vitesse
Dans les workflows de calcul haute performance (HPC) et d'intelligence artificielle (IA), le stockage temporaire de niveau 0 est l'endroit où les données circulent le plus rapidement – ou du moins, c'est ce qui devrait être le cas. Mais trop souvent, il devient un goulot d'étranglement en termes de performances, ralenti par l'encombrement des fichiers, les contraintes de capacité ou I/O .
DataCore Nexus propose un système de fichiers parallèle haute performance, défini par logiciel, spécialement conçu pour les environnements HPC et IA exigeants. Conçu pour s'adapter au rythme de l'informatique moderne, il offre une latence ultra-faible et un débit constant, même à grande échelle et même à 99 % de sa capacité.
Avec des performances de lecture pouvant atteindre 180 Go/s dans un format compact 4U, Nexus alimente en continu les GPU et les CPU, élimine les blocages de tâches et garantit que l'espace de travail est toujours prêt pour la suite.
Nexus s'appuie sur une infrastructure NVMe et prend en charge les accès POSIX, NVMe-oF, NFS et SMB pour fournir des I/O à très faible latence dans votre pipeline de calcul. Il est conçu pour les environnements à l'échelle du pétaoctet et fonctionne sans verrouillage propriétaire ni taxe de format, vous offrant ainsi des performances sans compromis.
Automatisez le cycle de vie des données grâce à l'orchestration pilotée par des stratégies
Dans les environnements hautement performants, les données ne restent pas au même endroit. Elles circulent : du stockage Tier-0 aux répertoires personnels, des ensembles de données actifs aux archives profondes, des systèmes sur site au cloud. Mais la gestion manuelle de ce cycle de vie ralentit l'ensemble du processus.
Nexus automatise ce processus grâce à une orchestration intelligente, pilotée par des stratégies. Les fichiers passent d'un niveau à l'autre en fonction de l'utilisation en temps réel, des besoins du projet ou des déclencheurs de workflow : sans intervention manuelle, sans scripts personnalisés, sans surprise.
Vous avez besoin de dégager automatiquement les données obsolètes du stockage scratch ? De mettre en préproduction des fichiers d'entrée pour une tâche programmée ? De rappeler de manière transparente des ensembles de données archivées dès qu'on y accède ? Nexus fait en sorte que les données soient toujours au bon endroit, au bon moment, sans perturber vos workflows.
Résultat : une infrastructure allégée, un espace de stockage scratch plus propre, moins de problèmes opérationnels et plus de temps consacré à la recherche, au développement et aux résultats.
Simplifiez la collaboration grâce à un catalogue global unifié
Lorsque les ensembles de données sont répartis entre différents systèmes, sites ou types de stockage, cela ralentit la collaboration. Les chercheurs, les ingénieurs et les analystes perdent du temps à essayer de retrouver les fichiers, à attendre les transferts ou à dupliquer les données d'une équipe à l'autre, et tout cela peut entraîner des risques de conflits de versions et de résultats incohérents.
Nexus élimine ces obstacles grâce à un catalogue global unifié qui regroupe toutes vos données non structurées, quel que soit l'endroit où elles sont stockées : sur site, dans le cloud ou dans des environnements hybrides. Les utilisateurs et les applications disposent d'une vue unique et cohérente des données dont ils ont besoin, avec des contrôles d'accès sécurisés qui respectent la structure de votre organisation.
Que vous souteniez un projet de recherche global, un workflow d'entraînement d'IA distribué ou des opérations HPC multi-sites, Nexus garantit que les données sont consultables, accessibles et cohérentes de n'importe où, sans nécessiter de réplication ni de reformatage et sans complexité.
Évoluez de manière plus intelligente, pas plus difficile
À mesure que les workloads HPC et IA augmentent, votre stockage doit évoluer en termes de performances et de flexibilité. DataCore Nexus s'étend pour prendre en charge des pétaoctets et des milliards de fichiers sans perturber les workflows ni ralentir le calcul.
Il s'intègre également de manière transparente au stockage objet, aux bandes et cloud, vous permettant ainsi de gérer l'ensemble de votre écosystème de données – tous niveaux et emplacements confondus – au sein d'un environnement unique et intégré. Et lorsque la demande augmente, Nexus prend en charge cloud , fournissant les données à la demande aux cloud sans nécessiter de préparation manuelle ni de duplication. Vous pouvez augmenter votre capacité lorsque cela est nécessaire et la réduire une fois que vous n'en avez plus besoin, tout en conservant le contrôle et la visibilité.
Principaux avantages
- Optimiser l'utilisation du GPU et du CPU en assurant un approvisionnement continu des pipelines de données
- Accélérez l'obtention de résultats grâce à un démarrage plus rapide des tâches, à la mise en place de points de contrôle et à une sortie plus rapide
- Assurez la propreté et la rapidité du stockage de niveau 0 grâce au transfert automatisé des données
- Éliminez les transferts manuels de données grâce à une orchestration basée sur des règles
- Favorisez une collaboration fluide grâce à un accès unifié entre les différents sites et équipes
- Faites évoluer librement votre infrastructure et votre stockage sans interruption ni refonte de l'architecture
- Support des flux de travailSupport et cloud sans créer de silos de données