디시인사이드 갤러리

갤러리 이슈박스, 최근방문 갤러리

갤러리 본문 영역

KT클라우드, 엔비디아 GPU 기반 학습 서비스 'AI Train' 출시

IT동아갤로그로 이동합니다. 2024.05.30 12:05:10
조회 143 추천 0 댓글 0
[IT동아 남시현 기자] KT클라우드가 엔비디아 GPU를 적용한 AI 트레이닝(학습) 전용 인프라 서비스, ‘AI Train’을 출시했다. 인공지능(AI) 개발은 데이터를 수집해 가공한 뒤, 모델의 형태로 최적화 과정을 교육시키는 학습(Training)과 학습을 통해 완성된 모델을 사용해 새로운 데이터에 대한 예측을 수행하는 ‘추론(Inference)’ 과정 두 가지로 나뉜다. 이번에 KT클라우드가 공개한 AI Train은 모델을 개발하는 ‘학습’에 대응하는 서비스다.


KT클라우드가 엔비디아 H100, A100, V100 기반의 AI 모델 학습 서비스인 AI Train을 출시했다 / 출처=KT클라우드



AI 학습은 가능한 많고, 성능이 높은 GPU를 사용할수록 빠르게 모델을 학습시킬 수 있어서, 전 세계적으로 AI 모델 구축을 위한 GPU 확보 경쟁이 치열한 상황이다. 이번에 출시된 AI Train을 통해 KT클라우드 이용자는 클라우드 상에서 AI 학습에 필요한 대용량, 고사양의 GPU 자산을 활용할 수 있다.

또한 KT클라우드가 22년 선보인 HAC(Hyperscale AI Computing)과 동일하게 대량의 GPU를 하나로 연결해 거대한 연산 자원으로 활용하는 대규모 GPU 노드 클러스터링과, 필요에 따라 컴퓨팅 자원을 실시간으로 할당 및 조정하는 동적 할당제어 기능을 지원한다. 여기에 AI Train은 애플리케이션 실행에 필요한 독립 패키지 ‘컨테이너’ 방식으로 클러스터 구성을 할 수 있다.


엔비디아 A100 기반으로 구동되고 있는 예시 이미지 / 출처=KT클라우드



하드웨어는 엔비디아 호퍼 아키텍처 기반의 H100을 제공하며, 엔비디아 A100 및 V100도 사용할 수 있다. 사용자는 자원 할당 기능을 활용해 처리에 필요한 CPU, 메모리, GPU 등의 자원량을 템플릿 형태로 저장하고 쓸 수 있다. 또한 GPU를 사용한 시간만큼만 요금이 부과되고, GPU가 유휴 상태일 때는 컨테이너를 자동 반납하는 구조로 비용 효율성을 높였다.

AI Train은 지난 2023년 진행된 NIPA 고성능 컴퓨팅 사업∙AI 바우처 사업에서 사용 편의성을 검증했으며, 오는 6월 중에는 리벨리온과 협력해 공공 및 기업 고객 대상의 추론 전용 NPU(Neural Processing Unit, 신경망처리장치) 상품인 ‘AI SERV NPU’도 출시한다. 해당 서비스는 리벨리온이 올해 출시할 ‘ATOM Plus’ 칩 출시와 발맞춰 성능을 높일 예정이고, 추후 라마(Llama)-3 등의 sLLM(소형거대언어모델) 같은 AI 연구용 언어 모델을 지원할 예정이다.

한편 KT클라우드는 작년 10월, 슬라이싱 기술을 활용한 엔비디아 GPU 기반의 AI 추론 전용 서비스 ‘AI SERV’를 선보이며 고객 활용도를 높여왔다. 슬라이싱 기술은 GPU 자원을 여러 개의 작은 단위로 나눠 사용자가 필요한 만큼 자원을 쓸 수 있도록 하는 기술로, 자원을 더 효율적으로 쓸 수 있도록 한다. 반려견 생체인식 플랫폼 기업 ‘아지랑랑이랑’ 관계자는 “초기 GPU 투자 진행을 고민하다 KT클라우드의 AI SERV를 쓰게 됐다. 자사 연구 환경에 맞춰 GPU 사용량을 최적화하고, AI 연구 비용을 약 70% 이상 절감했다”라고 언급했다.

남충범 KT클라우드 본부장은 “KT클라우드는 지속적으로 확대되는 시장 내 인프라 수요에 적극 대응하고, 차별화된 AI 인프라를 제공하기 위해 AI Train을 선보이게 됐다”라면서, “다양한 파트너들과 협업하며 AI 클라우드 분야를 선도하고, 고객 사용성에 맞춘 AI 인프라 환경을 구현해 나갈 것”이라고 말했다.

글 / IT동아 남시현 (sh@itdonga.com)

사용자 중심의 IT 저널 - IT동아 (it.donga.com)



▶ AI 구심점으로 떠오른 '컴퓨텍스', 올해 주목할만한 기업 별 소식은?▶ ‘천비디아’ 달성한 엔비디아, 독주할까? 반도체주와 함께할까?▶ 6월 인공지능ㆍ반도체 시장 엔비디아 손에 달렸다



추천 비추천

0

고정닉 0

0

댓글 영역

전체 댓글 0
등록순정렬 기준선택
본문 보기

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

갤러리 리스트
번호 제목 글쓴이 작성일 조회 추천
설문 축의금 적게 내면 눈치 줄 것 같은 스타는? 운영자 24/11/11 - -
3883 전기차 캐즘에도 정면 돌파 택한 ‘현대차그룹’ IT동아갤로그로 이동합니다. 06.04 159 0
3882 "AI PC 시대, 피처폰에서 스마트폰 전환만큼 혁명적 도약" [1] IT동아갤로그로 이동합니다. 06.03 733 1
3881 韓 자동차 등대공장 0개...제조공정 혁신 시급 IT동아갤로그로 이동합니다. 06.03 183 0
3880 3세대 라이젠 AIㆍ라이젠 9000 시리즈, AMD 새 CPU 제품군 대거 공개 [7] IT동아갤로그로 이동합니다. 06.03 751 1
3879 6월부터 달라진 통신3사 요금·혜택 살펴보니 [1] IT동아갤로그로 이동합니다. 06.03 1497 0
3878 [정구태의 디지털자산 리터러시] 1. 지금 당신이 디지털자산에 관심을 가져야할 이유 IT동아갤로그로 이동합니다. 06.03 156 0
3877 [주간투자동향] 벤디트, 80억 원 규모 프리 시리즈A 투자 유치 IT동아갤로그로 이동합니다. 06.03 795 2
3876 여름철 필수품 '선풍기', 용도·기능에 맞춰 고르는 법! [이럴땐 이렇게!] IT동아갤로그로 이동합니다. 06.03 194 0
3875 블랙웰 다음 루빈, 엔비디아 차기 인공지능 가속 플랫폼 공개 [2] IT동아갤로그로 이동합니다. 06.03 2087 1
3874 베일에 싸였던 구글의 '검색 알고리즘'…유출 문건으로 실체 드러나 IT동아갤로그로 이동합니다. 05.31 238 0
3873 가비아, 한국마사회에 클라우드 PC ‘가비아 DaaS’ 공급 IT동아갤로그로 이동합니다. 05.31 190 0
3872 차트분석 도구 ‘트레이딩뷰’ 파고들기 - 13 IT동아갤로그로 이동합니다. 05.31 197 0
3871 외산 솔루션 가격 인상, 국산 가상화 시장 훈풍 기대 IT동아갤로그로 이동합니다. 05.31 182 0
3870 [리뷰] 게이밍-홈시네마 넘나드는 전천후 빔프로젝터, 뷰소닉 LX700-4K IT동아갤로그로 이동합니다. 05.31 1220 1
3869 [생성 AI 길라잡이] 1분 만에 영상·이미지 제작 ‘브이캣’ [2] IT동아갤로그로 이동합니다. 05.31 5300 5
3868 [농업이 IT(잇)다] 실내 수직형 스마트팜으로 생산량 극대화하는 ‘플랜티팜’ [1] IT동아갤로그로 이동합니다. 05.31 561 0
3867 페라리 DNA 담은 12기통 2인승 '12 칠린드리'…아시아 최초 공개 IT동아갤로그로 이동합니다. 05.30 220 0
3866 블랙웰에 FOPLP 조기 도입 고려 중인 엔비디아, 미세공정 넘어 생산 경쟁 유도하나? IT동아갤로그로 이동합니다. 05.30 256 0
3865 북블라 “창업의 꿈, 가천대 코코네스쿨에서 이뤄” IT동아갤로그로 이동합니다. 05.30 208 0
3864 스페이스앤빈 “뉴스페이스로의 전환, 상용 부품 적용 물꼬부터 터야” IT동아갤로그로 이동합니다. 05.30 157 0
3863 [리뷰] AFMF로 가성비 게이밍 환경 구축, AMD 라데온 RX 7700 XT [8] IT동아갤로그로 이동합니다. 05.30 5813 5
3862 [스타트업 첫걸음] 스타트업, 창업 아이디어는 어떻게 시작할까 IT동아갤로그로 이동합니다. 05.30 160 0
KT클라우드, 엔비디아 GPU 기반 학습 서비스 'AI Train' 출시 IT동아갤로그로 이동합니다. 05.30 143 0
3860 캐딜락, 브랜드 최초 순수 전기 SUV ‘리릭’ 출시 [2] IT동아갤로그로 이동합니다. 05.30 560 1
3859 SBA 유망 스타트업의 면모 확인, ‘2024 연합 데모데이’ 이모저모 IT동아갤로그로 이동합니다. 05.29 134 0
3858 AI 구심점으로 떠오른 '컴퓨텍스', 올해 주목할만한 기업 별 소식은? [2] IT동아갤로그로 이동합니다. 05.29 531 0
3857 [IT애정남] 로봇청소기 고를 때 고려할 점은? IT동아갤로그로 이동합니다. 05.29 929 0
3856 두루·무의 “모두의1층이니셔티브로 장애 인식·접근성 개선” IT동아갤로그로 이동합니다. 05.29 126 0
3855 [자동차와 法] 음주운전 시 위드마크 공식 적용의 문제점에 대하여 IT동아갤로그로 이동합니다. 05.28 926 0
3854 [신차공개] 기아 'EV3'·벤틀리 '더 뉴 컨티넨탈 GT' 론칭 예고 IT동아갤로그로 이동합니다. 05.28 161 0
3853 [뉴스줌인] 내연기관차 이어 전기차 찍은 LG전자 웹OS, 다음 목표는? IT동아갤로그로 이동합니다. 05.28 230 0
3852 글로벌 가상자산 정책 동향 ‘제도 틀 안에서 규제 공백 보완’ IT동아갤로그로 이동합니다. 05.28 140 0
3851 샥즈, 오픈스윔 프로·오픈핏 에어 출시···오픈형 이어폰 1위 입지 굳힌다 IT동아갤로그로 이동합니다. 05.28 290 0
3850 서울과기대의 제조창업 지원, '밀도있는 심화 과정'으로 민다 IT동아갤로그로 이동합니다. 05.28 154 0
3849 아직도 안 찾고 쌓이는 숨은 보험금, 이 기회에 찾아볼까? [1] IT동아갤로그로 이동합니다. 05.27 1092 0
3848 자동차 에어컨 필터 고를 땐 이렇게! [이럴땐 이렇게!] IT동아갤로그로 이동합니다. 05.27 1009 0
3847 차트분석 도구 ‘트레이딩뷰’ 파고들기 - 12 IT동아갤로그로 이동합니다. 05.26 212 0
3846 [자동차 디자人] 英 오프로더 SUV ‘그레나디어’ 디자이너 ‘토비 이큐어’ IT동아갤로그로 이동합니다. 05.24 253 0
3845 가상자산 시장 ‘거래량·수익 상승, 원화·코인 마켓 격차 뚜렷’ IT동아갤로그로 이동합니다. 05.24 231 0
3844 [농업이 IT(잇)다] 전통주로 과거ㆍ현재ㆍ미래를 잇는 나루 되겠다, 한강주조 고성용 대표 IT동아갤로그로 이동합니다. 05.24 236 1
3843 [IT하는법] 잘 사용하지 않는 MS 원드라이브, 사용 해제하는 방법 [4] IT동아갤로그로 이동합니다. 05.24 4642 1
3842 ‘천비디아’ 달성한 엔비디아, 독주할까? 반도체주와 함께할까? IT동아갤로그로 이동합니다. 05.24 221 0
3841 SEC, 이더리움 현물 ETF 승인 “증권거래법 요건 충족” IT동아갤로그로 이동합니다. 05.24 242 0
3840 벤처 투자 80%가 수도권 편중··· '투자 해결사'로 나선 부산창경 IT동아갤로그로 이동합니다. 05.24 234 0
3839 국내 통신3사 모두 "이제 우리는 AI 기업" [16] IT동아갤로그로 이동합니다. 05.23 2329 1
3838 [IT애정남] 갤럭시 '생성형 편집', 어떻게 해야 잘 될까요? IT동아갤로그로 이동합니다. 05.23 424 0
3837 즉석 카메라로 이런 ‘손맛’이? ‘인스탁스 미니 99’ 출시 IT동아갤로그로 이동합니다. 05.23 298 0
3836 스타트업 해외 진출 시 알아야 할 정보 공유 ‘라이징 스타트업 콘서트4’ IT동아갤로그로 이동합니다. 05.23 326 0
3835 [IT애정남] 해외 구매폰에 국내 유심 쓰는데 음성 통화 안되면? [1] IT동아갤로그로 이동합니다. 05.23 1182 3
3834 퀄컴, 코파일럿+ PC 등장에 'AI 허브 및 개발 도구'로 지원 사격 IT동아갤로그로 이동합니다. 05.23 245 0
갤러리 내부 검색
제목+내용게시물 정렬 옵션

오른쪽 컨텐츠 영역

실시간 베스트

1/8

뉴스

디시미디어

디시이슈

1/2