Aujourd’hui, Microsoft annonce la préversion publique de Lustre géré par Azureun nouvel ajout aux offres de stockage de notre answer Azure HPC + AI. Lustre est un système de fichiers parallèle open supply réputé pour le calcul haute efficiency (HPC) et est adepte du calcul en cluster à grande échelle. Azure Managed Lustre fournit le stockage hautes performances de Lustre avec le contrôle et la cohérence du cloud de Microsoft. En conséquence, les shoppers peuvent se concentrer sur leurs objectifs commerciaux, qu’il s’agisse de créer un système de détection des fraudes basé sur l’analyse SAS, de décoder le génome humain pour créer la prochaine percée en médecine, d’ouvrir les frontières de l’exploration énergétique avec le traitement des données sismiques et une answer énergétique sturdy. , ou prédire les modèles climatiques et météorologiques ayant un influence sur la vie humaine sur la planète Terre.
Lustre en tant que service géré Azure
Avec Lustre en tant que service géré, les utilisateurs peuvent désormais se concentrer sur la création et l’exécution de leurs purposes HPC et AI sans gérer un système de fichiers parallèle avancé. Les expenses de travail HPC et AI peuvent migrer de manière transparente vers le cloud, en conservant leur compatibilité avec Lustre et en protégeant les investissements d’automatisation et de plate-forme existants développés lorsqu’ils étaient précédemment exécutés sur website. Azure Managed Lustre permet un déploiement rapide à la demande de clusters desservant des régions du monde, ce qui facilite la planification préalable tout en respectant les exigences de conformité et de résidence des données. Avec une palette d’choices de performances, Azure Managed Lustre offre une answer élastique où les utilisateurs peuvent déployer des clusters indépendants et exclusifs avec des performances prévisibles éliminant le problème de voisinage bruyant couramment rencontré dans les infrastructures partagées sur website.
La préversion publique comprend deux références SKU durables basées sur SSD qui offrent un choix d’choices de performances pour les expenses de travail critiques : 125 Mo/s et 250 Mo/s pour chaque Tio de capacité provisionné. Pendant l’aperçu, vous pouvez créer des tailles de cluster allant jusqu’à 128 Tio par défaut, avec une possibility permettant d’évoluer jusqu’à 768 Tio sur demande. Azure Managed Lustre est construit sur le très sturdy Disques managés Azure avec un stockage localement redondant composé de 3 répliques, même si une ou deux répliques rencontrent des problèmes, vous avez toujours une tolérance contre les pannes. Azure Managed Lustre fournit Lustre model 2.15 (LTS) conforme à POSIX, qui offre plusieurs améliorations de performances. Nous nous sommes concentrés sur les fonctionnalités qui permettent aux utilisateurs d’utiliser facilement Azure Managed Lustre sans se soucier de la manière de créer et de déployer les shoppers Lustre sur leurs machines virtuelles de calcul et leurs conteneurs. Avec la préversion Azure Managed Lustre, les shoppers peuvent choisir parmi :
- Utiliser des pictures Azure HPC prédéfinies avec les packages consumer Lustre pour Ubuntu 18.04 et 20.04 (ou)
- Téléchargez les packages consumer Lustre à partir de packages.microsoft.com pour les distributions Linux – Ubuntu 18.04, 20.04 et 22.04 ; RHEL 7.8 et RHEL 8.0
La hiérarchisation des données à l’aide de la gestion hiérarchique du stockage permet aux utilisateurs d’importer et d’exporter des données entre Azure Managed Lustre et Blob azur. Cette fonctionnalité permet aux utilisateurs de définir l’archivage, la conservation et la safety des données en fonction de politiques prédéfinies. Les utilisateurs de grands ensembles de données peuvent importer les données qui sont chaudes et pertinentes pour leur traitement de données actif dans les clusters Azure Managed Lustre et archiver/conserver le reste dans Azure Blob. Cela leur permet de maintenir leurs coûts d’exécution à un faible niveau. De plus, la hiérarchisation des données vers Azure Blob permet aux utilisateurs de tirer parti de sa présence et de sa disponibilité mondiales pour instancier des clusters Azure Managed Lustre dans plusieurs régions à la demande. L’intégration avec Azure Blob facilite en outre l’accès aux données multiprotocoles by way of NFS, HDFS et REST. Les purposes conteneurisées modernes d’IA/apprentissage automatique (ML) et d’analyse peuvent désormais s’exécuter sur Service Azure Kubernetes en tirant parti du pilote CSI pour Azure Managed Lustre. Par exemple, les purposes d’analyse construites sur SAS Viya peuvent exploiter de manière transparente les performances de stockage élevées par cœur dont elles ont besoin en s’intégrant au pilote Azure Managed Lustre CSI.
Spécialement conçu pour les expenses de travail HPC et IA
Nous sommes reconnaissants à nos shoppers de prévisualisation privés qui nous ont aidés à construire et à perfectionner le produit tout en répondant à leurs besoins clés. Nous nous engageons à créer et à prendre en cost Azure Managed Lustre, automotive il vous aide dans votre parcours d’exécution de vos purposes hautes performances dans Azure.
« Nous travaillons avec des shoppers qui ont de nombreux varieties de expenses de travail HPC différents et nous rencontrons fréquemment des contraintes de performances de stockage automotive leurs projets peuvent impliquer des milliers à des dizaines de milliers de fichiers, qui doivent tous être lus et écrits en parallèle. Lorsque nous rencontrons des goulots d’étranglement de stockage ou des erreurs de limitation sur nos plateformes HPC, nous savons qu’il est temps de se tourner vers Azure Managed Lustre. Avec Azure Managed Lustre, nous pouvons ajouter un stockage extrêmement performant qui peut facilement suivre le calcul HPC et synchroniser automatiquement les données d’entrée et de résultats avec le stockage d’objets blob persistants. Parce qu’il peut être démarré et arrêté à la demande, en quelques minutes, Azure Managed Lustre est assez rentable et se rentabilise en nous donnant la possibilité d’augmenter ou de réduire notre calcul HPC, générant des résultats beaucoup plus rapidement.. » Felipe Ayora, directeur de la recherche et de l’informatique avancée, BizData.
« Le nouveau système de fichiers Azure Managed Lustre change vraiment la donne. Il accélère le déploiement HPC de nos logiciels et élimine le besoin d’exécuter des serveurs de stockage persistants. La configuration est easy et les performances d’E/S parallèles sont suffisamment rapides pour prendre en cost des expenses de travail à très haut débit.”—Invoice Shea, PDG Sharp Reflections.
Prochaines étapes
Pour tester gratuitement Azure Managed Lustre, complétez le formulaire d’inscription. Découvrez remark utiliser Azure Managed Lustre et ses différentes fonctionnalités prises en cost dans notre Documentation.
En savoir plus sur les options HPC et IA
