인더뉴스 이종현 기자ㅣSK텔레콤[017670]은 AI(인공지능) 인프라 자원을 최적화하고 개발 환경을 통합 관리할 수 있는 AI 기반 B2B 솔루션 ‘SKT 엔터프라이즈 AI 클라우드 매니저’를 출시했다고 8일 밝혔습니다.
‘AI클라우드 매니저’는 SKT 가 보유한 대규모 GPU(그래픽처리장치) 자원에 대한 관리 및 운영 노하우를 상용화한 제품으로, AI 잡(Job) 스케줄러 기반의 GPU 클러스터 특화 솔루션입니다. 기업 고객이 보유한 수많은 GPU 자원을 마치 한 대의 컴퓨터처럼 관리해 GPU 성능을 극대화하고, AI 개발을 위한 학습 소요 시간을 단축할 수 있습니다.
이 제품은 SK텔레콤이 지난달 하나금융티아이와 구축한 대규모 GPU 클러스터에서 GPU 효율 극대화에 활용됐습니다.
SKT는 대규모 데이터 학습에 GPU 자원이 많이 소모되기 때문에 AI 자원 최적화는 AI 클라우드 솔루션에 꼭 필요한 기능이라고 설명했습니다. AI 자원 최적화는 프로젝트마다 GPU 사용량 및 성능을 실시간으로 모니터링하고, 사용하지 않는 GPU를 감지해 다른 프로젝트에 재분배하는 역할을 합니다. 또 처리 우선 순위가 높은 프로젝트에 클라우드 자원을 먼저 할당하는 등 자원 효율성도 높입니다.
‘AI 클라우드 매니저’는 개발 과정에서 고객이 활용하기 쉬운 기능을 제공하고, 모든 과정이 유기적으로 연계될 수 있는 환경을 제공합니다. 모델 학습 과정에서는 대규모 데이터를 다수의 컴퓨터에 분산 처리하는 대규모 병렬 학습 환경을 제공해 학습 속도를 높인다고 회사 측은 설명했습니다.
소프트웨어를 설치할 필요 없이 ‘웹 브라우저(Web UI)’ 기반으로 사용할 수 있고, 다수의 개발자가 동시에 같은 AI 개발 프로젝트에 접근할 수 있는 협업 환경을 갖췄습니다.
또 AI 추론에서는 프로젝트나 비용에 최적화된 GPU 종류와 추론 엔진 조합을 사용자가 선택할 수 있도록 하고, 검색 증강 생성(RAG) 기술로 과거 자료를 최신 정보처럼 인식하며 나타나는 ‘환각 현상(할루시네이션)’을 최소화했습니다.
김명국 SKT Cloud CO0담당은 ”이번 제품 출시로 AI 서비스 도입을 준비하는 기업들이 GPU 자원의 성능을 극대화하고 AI 서비스를 효과적으로 개발할 수 있게 됐다”며 “향후 AI 데이터센터와 GPU 서버를 안정적으로 공급하고 이를 관리하는 필수 솔루션들도 함께 제공해 AI 데이터센터 솔루션 사업 분야를 선도할 것이다”고 말했습니다.
