화웨이(Huawei)가 4월 29일 독일 뮌헨에서 열린 제4회 '화웨이 혁신 데이터 인프라(Huawei Innovative Data Infrastructure, IDI) 포럼'에서 산업 전반의 인공지능(AI) 도입을 가속하기 위한 'AI 데이터 레이크 솔루션(AI Data Lake Solution)'을 공개했다. 화웨이 부사장인 피터 저우(Peter Zhou) 데이터 스토리지 제품 라인 사장은 '데이터의 진화: AI 대응형 인프라로 인텔리전스 가속화(Data Awakening, Accelerating Intelligence with AI-Ready Data Infrastructure)'를 주제로 한 기조연설을 통해 해당 솔루션을 소개했다.
수십 년에 걸친 디지털 전환은 광범위한 변화를 이끌어왔지만, 변하지 않는 핵심은 바로 데이터의 중요성이다. 이러한 점은 연설에서도 강조됐다. 저우 화웨이 부사장은 "AI를 준비하려면 먼저 데이터 준비를 마쳐야 한다"며 "산업 디지털화가 심화된다는 것은 곧 데이터를 정보와 지식으로 전환하는 과정"이라고 밝혔다.
데이터 스토리지, 데이터 관리, 리소스 관리, AI 툴체인을 통합한 AI 데이터 레이크 솔루션은 고품질 AI 코퍼스를 제공하고, 모델 훈련 및 추론 속도를 향상해 기업의 AI 도입을 촉진한다.
저우 부사장은 연설에서 데이터 레이크 솔루션에 포함된 주요 제품 및 기술에 대해 상세히 설명했다:
● 데이터 스토리지: 성능, 용량, 안정성 측면에서 지속적인 혁신
- AI 모델 학습 및 추론 가속화: 화웨이의 고성능 AI 스토리지 OceanStor A 시리즈는 뛰어난 성능을 제공한다. 대표적으로 AI 기술 개발 기업 아이플라이텍(iFLYTEK) 등의 클러스터 학습 효율을 크게 향상시켰다. 또한 고도화된 추론 가속 기술을 통해 추론 성능을 강화하고 지연 시간을 줄이며, 애플리케이션 사용자 경험을 향상한다. 이로써 실제 환경에서의 대규모 AI 모델 추론 적용이 한층 수월해진다.
- 대규모 AI 데이터의 효율적인 저장: OceanStor Pacific 올플래시 스케일아웃 스토리지는 4PB/2U의 고집적도와 0.25W/TB의 초저전력 소비를 자랑한다. 엑사바이트급 데이터를 손쉽게 관리할 수 있도록 설계되어 교육, 과학 연구, 의료 영상, 미디어 등 데이터 집약적 워크로드에 최적화됐다.
- AI 코퍼스 및 벡터 데이터베이스 백업: 화웨이 OceanProtect 백업 스토리지는 주요 경쟁 제품 대비 10배 빠른 백업 성능, 99.99%의 랜섬웨어 탐지 정확도를 제공한다. 이를 통해 석유•가스 산업과 MSP 등의 분야에서 사용되는 코퍼스 및 벡터 데이터베이스의 핵심 데이터를 안전하게 보호할 수 있다.
● 데이터 관리: 지역 간 데이터 흐름의 가시성, 관리 용이성, 이동성 강화
화웨이 DME는 옴니데이터버스(Omni-Dataverse)를 통합한 데이터 관리 플랫폼으로, 지리적으로 분산된 데이터 센터 간 데이터 사일로 문제를 해소할 수 있도록 설계됐다. 또한 1000억 개 이상의 파일에서 몇 초 만에 데이터를 검색하는 기능을 갖춰, 고객이 데이터를 더욱 효율적으로 처리하고 데이터가 가진 가치를 최대한 활용할 수 있도록 지원한다.
● 리소스 관리: 다양한 xPU 통합 및 AI 리소스 지능형 스케줄링
가상화 및 컨테이너 기술을 기반으로 하는 DCS 플랫폼은 xPU 리소스를 효율적으로 통합하고, 지능형 스케줄링을 통해 리소스 활용률을 높인다. 또한 DME의 DataMaster는 AI 코파일럿 기반의 전방위 AI 운영 및 관리(O&M)를 지원하며, 지능형 질의응답, O&M 어시스턴트, 검사 전문가 등 다양한 AI 애플리케이션을 제공해 탁월한 O&M 경험을 구현한다.
