Arriva Azure Managed Lustre per i carichi di lavoro HPC e AI

Microsoft ha annunciato la disponibilità di Azure Managed Lustre per l’elaborazione ad alte prestazioni e i carichi di lavoro IA. Lustre è un filesystem alternativo (come NTFS o FAT) popolare sui supercomputer, incluso Frontier .

Secondo Microsoft, Azure Managed Lustre porta il file system Lustre ai clienti come servizio gestito di prima parte su Azure. Ha detto:

“Gli utenti di lunga data di Lustre on-premise possono ora sfruttare i vantaggi di una soluzione HPC completa, che include elaborazione e archiviazione ad alte prestazioni, fornita su Azure. Gli utenti beneficiano dell’elevato throughput e delle capacità prestazionali di Lustre come un’esperienza gestita senza soluzione di continuità e possono ora concentrarsi sui propri imperativi aziendali”.

Il filesystem Lustre è già molto popolare sui migliori supercomputer del mondo, ma grazie all’arrivo dell’IA generativa c’è un rinnovato interesse per Lustre. Delineando i vantaggi di Azure Managed Lustre, Microsoft elenca:

• Un’esperienza PaaS gestita per l’implementazione e l’utilizzo senza preoccupazioni del file system Lustre.
• TCO ridotto con prezzi con pagamento in base al consumo.
• Opzioni di throughput a diversi livelli di prezzo per diversi carichi di lavoro.
• Facile implementazione di cluster indipendenti con prestazioni prevedibili, eliminando il problema dei vicini rumorosi comunemente riscontrato nelle distribuzioni Lustre on-premise.
• Implementazione rapida in pochi minuti, eliminando la necessità di pianificare con mesi o anni di anticipo e soddisfacendo i requisiti di conformità e residenza dei dati.
• Regione scelta per le distribuzioni in molte aree di Azure, che supportano i requisiti di conformità e residenza dei dati.
• Scalabilità fino a centinaia di petabyte (PB), con la durabilità, la disponibilità e i vantaggi in termini di costi associati del tiering all’archiviazione BLOB di Azure.
• Integrazione perfetta con i servizi di calcolo di Azure esistenti, inclusi i servizi Azure HPC, Azure Machine Learning e il servizio Azure Kubernetes.
• Protezione dell’investimento per l’automazione esistente dei clienti e lo sviluppo della piattaforma durante la migrazione da distribuzioni Lustre locali.

A partire da oggi, Microsoft dispone di due istanze durevoli persistenti che i clienti possono usare. Sono AMLFS Standard (125 MB/s) e AMLFS Premium (250 MB/s).

I pacchetti client Lustre possono essere scaricati da packages.microsoft.com per varie distribuzioni Linux e versioni del kernel. Microsoft afferma che avrà il supporto per le immagini HPC pre-costruite con i pacchetti client Lustre per Ubuntu 18.04 , 20.04 e 22.04 , nonché Alma 8.7.

Puoi saperne di più nella pagina del prodotto Azure Managed Lustre .