Cloudera가 VAST Data와 전략적 파트너십을 체결했다고 밝혔다. 양사는 Cloudera의 차세대 레이크하우스 데이터 서비스와 VAST AI 운영체제를 NVIDIA AI 데이터 플랫폼 레퍼런스 설계 기반으로 결합해 통합 AI 팩토리를 구축한다. 이를 통해 기업의 GPU 기아 현상을 줄이고, 온프레미스와 클라우드 전반에서 AI 도입과 운영을 가속화한다.
Cloudera and VAST Data have formed a strategic partnership to build a unified AI factory that combines Cloudera’s lakehouse data services with the VAST AI Operating System on the NVIDIA AI Data Platform reference design.
어떤 데이터 환경에서도 AI를 구현하는 기업 Cloudera가 AI 운영체제 전문기업 VAST Data와 전략적 파트너십을 체결했다고 밝혔다.
양사는 데이터를 지속적으로 수집, 정제, 관리하고 AI 모델 학습과 추론에 제공하는 확장형 운영 환경인 통합 AI 팩토리를 구축한다. 해당 인프라는 온프레미스와 퍼블릭 클라우드 전반에서 운영되는 기업 환경을 지원하도록 설계됐다. 기업은 일관된 AI 운영 체계를 유지하면서 성능, 규제 준수, 비용 요건에 맞는 환경에서 AI 서비스를 운영할 수 있다.
협력의 핵심은 Cloudera의 차세대 컨테이너 기반 데이터 서비스와 VAST AI 운영체제를 결합하는 데 있다. VAST AI 운영체제는 고성능 스토리지, 데이터베이스, 글로벌 네임스페이스 기능을 하나의 플랫폼으로 통합해 대규모 AI와 데이터 분석, 미션 크리티컬 데이터 워크로드를 지원한다.
데이터 플랫폼 계층은 NVIDIA AI 데이터 플랫폼 레퍼런스 설계를 기반으로 구축된다. 이를 통해 기업 내부에 축적돼 있지만 충분히 활용되지 못하던 데이터를 AI가 즉시 활용할 수 있는 형태로 전환하고, AI 팩토리 운영의 기반을 제공한다.
생성형 AI와 에이전틱 AI 도입이 빨라지면서 기업은 기존 IT 아키텍처의 한계를 체감하고 있다. 많은 환경이 데이터 준비부터 모델 학습, 추론, 데이터 분석까지 이어지는 연속적인 AI 파이프라인을 지원하도록 설계되지 않았기 때문이다.
대표적인 문제가 GPU 기아 현상이다. 고가의 GPU 클러스터가 데이터를 기다리느라 유휴 상태에 머무는 상황을 의미한다. Cloudera와 VAST Data의 공동 솔루션은 AI 개발 전 과정에서 데이터를 효율적으로 이동시키고, GPU에 고대역폭·저지연 데이터를 지속적으로 공급해 이러한 문제를 줄인다. 이를 통해 GPU 활용률과 시스템 성능, 투자수익률을 높일 수 있도록 지원한다.
Cloudera의 레이크하우스 아키텍처는 데이터 엔지니어링, 데이터 스트리밍, 분석, 머신러닝, AI를 포함한 컨테이너 기반 데이터 서비스를 제공한다. 해당 서비스는 하이브리드 및 멀티클라우드 환경 전반에 일관된 방식으로 배포할 수 있다.
VAST의 분리형 공유 아키텍처는 VAST AI 운영체제의 기반 기술이다. 엑사바이트급 데이터 인프라를 제공하면서 NVIDIA cuVS를 활용한 GPU 가속 벡터 인덱싱과 검색 기능을 갖춘 벡터 데이터베이스 서비스를 통합한다. 최신 GPU 클러스터와 AI 워크로드에 맞춘 고성능 스토리지도 지원한다.
양사는 NVIDIA AI 데이터 플랫폼 레퍼런스 설계와 NVIDIA 가속 컴퓨팅을 기반으로 하는 VAST AI 운영체제를 통해 기업 내 데이터를 AI가 즉시 사용할 수 있는 자산으로 전환한다. 그 위에서 Cloudera는 데이터 엔지니어링, 데이터 분석, 거버넌스, AI 서비스를 제공하는 구조를 구현했다.
공동 솔루션은 원시 데이터 수집부터 AI 모델 배포까지 아우르는 통합 AI 팩토리 아키텍처를 제공한다. 데이터센터, 프라이빗 클라우드, 퍼블릭 클라우드 전반에서 일관된 운영 환경을 지원하며, 초고대역폭·저지연 데이터 파이프라인을 통해 GPU 기아 현상을 줄인다.
정형·비정형·멀티모달 데이터를 모두 지원하는 대규모 고성능 스토리지도 제공된다. 기업 수준의 데이터 거버넌스와 규제 준수를 지원하는 안전한 프라이빗 AI 환경을 갖춰 금융, 공공, 의료 등 규제가 엄격한 산업에서도 활용할 수 있다.
이 아키텍처를 통해 기업은 개별 AI 실험 단계를 넘어 상용 수준의 AI 시스템을 구축할 수 있다. 기업 데이터를 지속적으로 실행 가능한 인사이트로 전환하고, 이를 모델 학습과 추론, 데이터 분석, 에이전틱 AI 애플리케이션에 활용할 수 있는 기반이다.
프라이빗 AI 팩토리 구축을 위한 솔루션도 강화된다. NVIDIA AI 인프라와 NVIDIA AI Enterprise 소프트웨어, VAST AI 운영체제를 기반 데이터 플랫폼으로 결합하고, Cloudera의 데이터 및 AI 서비스를 통합해 프라이빗 AI와 소버린 AI 환경에 최적화된 구조를 제공한다.
대표 솔루션인 Cloudera AI Inference Service는 NVIDIA NIM 마이크로서비스를 활용해 AI 추론을 가속화한다. 기업은 최신 NVIDIA Nemotron 오픈 모델을 포함한 다양한 AI 모델을 데이터가 있는 환경에서 직접 배포하고 확장할 수 있다.
Apache Spark 워크로드 가속도 지원한다. 고객은 NVIDIA cuDF를 활용해 Spark 작업을 GPU 가속 처리하고, VAST의 고성능 데이터 서비스를 기반으로 Cloudera Data Engineering 환경을 더 효율적으로 운영할 수 있다. 이를 통해 AI 워크로드 최적화 수준도 높일 수 있다.
Cloudera와 VAST Data는 이번 파트너십이 고객이 관리하는 60엑사바이트 규모의 데이터를 기반으로 양사와 고객 모두에게 새로운 사업 기회를 제공할 것으로 기대했다. 프라이빗 AI 인프라에 대한 기업 수요가 빠르게 늘면서 신규 프로젝트와 매출 확대 가능성도 커질 것으로 전망했다.
아브하스 리키 Cloudera 최고사업책임자 겸 응용 AI 사업 총괄은 “기업들은 GPU에 수십억달러를 투자하고 있지만, 데이터 병목 현상 때문에 GPU를 충분히 활용하지 못하는 경우가 많다”며 “VAST와의 협력을 통해 GPU 기아 현상을 해소하고, 데이터가 수집부터 인사이트 도출까지 끊김 없이 흐르는 진정한 AI 팩토리를 구축할 수 있도록 지원할 것”이라고 말했다.
제프 덴워스 VAST Data 공동창업자는 “대부분의 기업은 이미 AI에 필요한 데이터를 보유하고 있으며, 과제는 그 데이터의 가치를 끌어내 지속적인 AI 추론과 모델 미세조정, 데이터 분석 파이프라인을 구축해 차세대 지능형 애플리케이션을 만드는 것”이라며 “Cloudera와 VAST는 고객이 데이터와 AI, 인프라를 하나의 운영 플랫폼으로 통합하는 AI 팩토리를 구축해 하이브리드 환경 전반에서 AI를 활용할 수 있도록 지원하고 있다”고 말했다.
양사가 공동 개발한 Cloudera-VAST AI 팩토리 솔루션은 즉시 이용할 수 있으며, 양사의 엔터프라이즈 영업 조직과 파트너 네트워크를 통해 제공된다. 참조 아키텍처와 검증된 구축 방식, 산업별 특화 솔루션은 2026년 동안 지속적으로 확대될 예정이다.