Azure Managed Lustre arrive pour les charges de travail HPC et AI

Microsoft a annoncé la disponibilité d’Azure Managed Lustre pour les charges de travail de calcul haute performance et d’IA. Lustre est un système de fichiers alternatif (comme NTFS ou FAT) qui est populaire sur les superordinateurs, y compris Frontier .

Selon Microsoft, Azure Managed Lustre apporte le système de fichiers Lustre aux clients en tant que service géré de première partie sur Azure. Ça disait:

« Les utilisateurs de longue date de Lustre sur site peuvent désormais tirer parti des avantages d’une solution HPC complète, comprenant le calcul et le stockage hautes performances, fournie sur Azure. Les utilisateurs bénéficient des capacités de débit et de performances élevées de Lustre en tant qu’expérience gérée transparente et peuvent désormais se concentrer sur leurs impératifs commerciaux.

Le système de fichiers Lustre est déjà très populaire sur les meilleurs supercalculateurs du monde, mais grâce à l’arrivée de l’IA générative, Lustre suscite un regain d’intérêt. Décrivant les avantages d’Azure Managed Lustre, Microsoft énumère :

• Une expérience PaaS gérée pour un déploiement et une utilisation sans souci du système de fichiers Lustre.
• Coût total de possession réduit grâce à une tarification à l’utilisation.
• Options de débit à différents niveaux de tarification pour différentes charges de travail.
• Déploiement facile de clusters indépendants avec des performances prévisibles, éliminant le problème de voisinage bruyant couramment rencontré dans les déploiements Lustre sur site.
• Déploiement rapide en quelques minutes, réduisant la nécessité de planifier des mois ou des années à l’avance et répondant aux exigences de conformité et de résidence des données.
• Région de choix pour les déploiements dans de nombreuses régions Azure, prenant en charge les exigences de conformité et de résidence des données.
• Évolutivité jusqu’à des centaines de pétaoctets (Po), avec les avantages associés en termes de durabilité, de disponibilité et de coût de la hiérarchisation vers le stockage Azure Blob.
• Intégration transparente avec les services de calcul Azure existants, notamment les services Azure HPC, Azure Machine Learning et le service Azure Kubernetes.
• Protection des investissements pour l’automatisation et le développement de plates-formes existants des clients lors de la migration à partir de déploiements Lustre sur site.

À partir d’aujourd’hui, Microsoft dispose de deux instances durables persistantes que les clients peuvent utiliser. Ce sont AMLFS Standard (125 Mo/s) et AMLFS Premium (250 Mo/s).

Les packages client Lustre peuvent être téléchargés à partir de packages.microsoft.com pour diverses distributions Linux et versions de noyau. Microsoft indique qu’il prendra en charge les images HPC pré-construites avec les packages client Lustre pour Ubuntu 18.04 , 20.04 et 22.04 ainsi qu’Alma 8.7.

Vous pouvez en savoir plus sur la page produit Azure Managed Lustre .