HPC 및 AI 워크로드를 위한 Azure Managed Lustre 출시

Microsoft는 고성능 컴퓨팅 및 AI 워크로드를 위한 Azure Managed Lustre의 가용성을 발표했습니다 . Lustre는 Frontier를 포함하여 슈퍼컴퓨터에서 널리 사용되는 대체 파일 시스템(예: NTFS 또는 FAT)입니다 .

Microsoft에 따르면 Azure Managed Lustre는 Lustre 파일 시스템을 Azure의 자사 관리 서비스로 고객에게 제공합니다. 다음과 같이 말했습니다.

“Luster 온프레미스의 오랜 사용자는 이제 Azure에서 제공되는 컴퓨팅 및 고성능 스토리지를 포함하여 완전한 HPC 솔루션의 이점을 활용할 수 있습니다. 사용자는 Lustre의 높은 처리량 및 성능 기능을 원활하게 관리되는 경험으로 활용하고 이제 비즈니스 과제에 집중할 수 있습니다.”

Lustre 파일 시스템은 이미 세계 최고의 슈퍼컴퓨터에서 매우 인기가 있지만 생성 AI의 등장으로 Lustre에 대한 관심이 다시 높아지고 있습니다. Microsoft는 Azure Managed Lustre의 이점을 요약하여 다음과 같이 나열합니다.

• 걱정 없이 Lustre 파일 시스템을 배포하고 사용할 수 있는 관리형 PaaS 환경입니다.
• 종량제 가격으로 TCO 절감.
• 다양한 워크로드에 대해 다양한 가격 수준의 처리량 옵션.
• 예측 가능한 성능으로 독립 클러스터를 쉽게 배포하여 온프레미스 Lustre 배포에서 일반적으로 발생하는 잡음이 많은 이웃 문제를 제거합니다.
• 몇 분 안에 신속하게 배포하여 몇 달 또는 몇 년 전에 미리 계획해야 할 필요성을 줄이고 규정 준수 및 데이터 상주 요구 사항을 충족합니다.
• 규정 준수 및 데이터 상주 요구 사항을 지원하는 여러 Azure 지역에 걸친 배포를 위한 선택 지역입니다.
• 수백 페타바이트(PB)까지의 확장성과 Azure Blob 스토리지 계층화의 관련 내구성, 가용성 및 비용 이점.
• Azure HPC 서비스, Azure Machine Learning 및 Azure Kubernetes 서비스를 포함한 기존 Azure 컴퓨팅 서비스와 원활하게 통합됩니다.
• 온프레미스 Lustre 배포에서 마이그레이션할 때 고객의 기존 자동화 및 플랫폼 개발에 대한 투자 보호.

오늘부터 Microsoft는 고객이 사용할 수 있는 두 개의 지속적이고 내구성 있는 인스턴스를 제공합니다. AMLFS Standard(125MB/s) 및 AMLFS Premium(250MB/s)입니다.

Lustre 클라이언트 패키지는 packages.microsoft.com에서 다양한 Linux 배포 및 커널 버전용으로 다운로드할 수 있습니다. Microsoft는 Alma 8.7뿐만 아니라 Ubuntu 18.04 , 20.04 및 22.04 용 Lustre 클라이언트 패키지로 사전 구축된 HPC 이미지를 지원할 것이라고 밝혔습니다 .

Azure Managed Lustre 제품 페이지 에서 자세히 알아볼 수 있습니다 .