‘하드웨어+소프트웨어’ 플랫폼으로 인공지능 생태계 장악 노리는 엔비디아의 속내는?

IT동아 · 2024.03.19 21:12:27

엔비디아 추론 마이크로서비스에 대해 설명하는 젠슨 황 엔비디아 CEO. / 출처=엔비디아

[IT동아 강형석 기자] 2024년 3월 18일, 세너제이 SAP 센터(미국 캘리포니아 소재)에서 GTC 2024가 개최됐다. 3월 21일까지 진행되는 행사에서는 인공지능부터 로보틱스, 디지털 트윈, 헬스케어, 자율주행, 사이버 보안 등 산업 분야에서 다양한 기술이 언급될 예정이다.

이날 기조연설에 나선 젠슨 황 엔비디아 CEO는 “다양한 데이터 모델은 획기적이지만 기업이 사용하기 어렵다. 어떻게 작업 흐름(워크플로우)에 적용하고 통합할 것인가? 각 요소에 대한 최적화를 수행하고 연산 구조를 구축해야 된다. 우리는 새로운 방법을 제안하고자 한다. 이것은 기본적으로 우리가 컨테이너라 부르는 디지털 상자 안에 들어 있다”고 말하며 엔비디아 추론 마이크로서비스(NVIDIA Inference Microservice)를 소개했다.

엔비디아는 기본적으로 잘 알려져 있는 컴퓨팅 연산 관련 명령어 외에 쿠다(CUDA – Computed Unified Device Architecture) 생태계를 어느 정도 구축해 왔다. 쿠다는 엔비디아 하드웨어와 자연스레 녹아 있어 최적의 성능을 이끌어낼 수 있고 쉽게 설치해 쓰는 이점으로 인해 관련 분야 종사자들이 선호하는 도구가 되었다. 꾸준히 업데이트하며 알려진 문제와 기능을 추가하기도 한다. 이는 경쟁사가 쉬이 구현할 수 있는 부분이 아니다.

이미 자사 하드웨어와 연계되어 있는 도구는 쿠다 뿐만이 아니다. 인공지능 엔터프라이즈 플랫폼, 데이터 과학, 대규모 언어 모델을 위한 니모(NeMo) 프레임워크, 옴니버스 플랫폼 등 자체 구축한 데이터센터를 기반으로 다양한 지원 생태계를 구축해 놓은 상태다. 하지만 엔비디아는 그 이상을 바라보고 있다. 엔비디아 추론 마이크로서비스와 아이작(Issac) 로보틱스 플랫폼 등은 엔비디아 인공지능 생태계 확장의 시발점이라 하겠다.

하드웨어 완성도 + 소프트웨어 생태계 = 수익 확대

GTC 2024 기조연설에 나선 젠슨 황 엔비디아 CEO는 차세대 인공지능 가속처리장치, 블랙웰(Blackwell)을 공개하며 “블랙웰은 칩이 아니고 플랫폼 이름이다. 사람들은 우리가 GPU를 만든다고 생각하고 실제로 만들고 있지만, 이제 GPU를 과거처럼 보지 않는다”라고 말했다.

엔비디아는 블랙웰을 공개하며 다양한 형태의 하드웨어 솔루션을 제안했다. 기본적으로 2개의 블랙웰 가속장치와 그레이스(Grace) 중앙처리장치를 연결한 GB200을 시작으로 GB200을 36대 배치한 GB200 NVL 72가 있다. 이 외에도 x86 기반 중앙처리장치에서 쓸 수 있는 서버 보드 HGX B200이 있다. B200 장치 8개를 장착할 수 있다. 이후 인공지능 가속장치만으로 구성된 B100 혹은 B200이 합류할 가능성이 있다.

블랙웰 기반 처리장치로 다양한 하드웨어 솔루션을 제안한 엔비디아. / 출처=엔비디아

성능은 기존 호퍼 기반 시스템 대비 큰 폭의 향상을 이뤄냈다. 젠슨 황 CEO는 GPT-MoE-1.8T 모델을 90일간 학습하는 환경에서 호퍼는 8,000개의 처리장치와 15메가와트(MW)의 전력을 필요로 하지만, 블랙웰은 2,000개 처리장치와 4메가와트 전력만 있으면 된다고 설명했다. 단순히 같은 공간에 블랙웰 연산 시스템을 구축할 경우 호퍼와 동일한 전력소모로 4배 이상 빠른 처리가 가능함을 말한다.

탄탄한 하드웨어 기틀 위에 엔비디아는 소프트웨어 생태계를 더했다. 엔비디아 추론 마이크로서비스는 엔비디아의 또 다른 시도가 될 전망이다. 우선 사전 훈련된 일부 오픈소스 인공지능 모델을 패키지로 제공되는데 이를 사용하는 라이브러리에 더해 쓸 수 있다. 랭체인(Langchain), 라마인덱스(LlamaIndex) 등 다양한 거대 언어 모델 프로그래밍에 대응한다.

완전 무료는 아니다. 1,000개의 추론 크레딧이 무료로 제공되어 사전 제작에 사용 가능하고 모두 사용하면 인공지능 엔터프라이즈 라이선스를 구매해 쓰는 식이다.

엔비디아 인공지능 플랫폼 생태계는 산업 전반에 걸쳐 있다. / 출처=엔비디아

아이작 로보틱스 플랫폼은 조금 다르다. 엔비디아 젯슨 토르(Jetson Thor) 칩과 연동하는 시뮬레이션, 인공지능 작업흐름 인프라를 위한 도구다. 이 칩 역시 블랙웰 설계 기반으로 대규모 연산을 지원한다. 여기에 아이작 연구소(Issac Lab)로 강화 학습을, 오즈모(OSMO)로 컴퓨팅 조정을 지원한다. 엔비디아는 사전 훈련된 로봇 모델과 라이브러리 등이 포함된 아이작 조종자(Iaasc Manipulator), 아이작 인식자(Preceptor) 등도 공개했다.

하드웨어와 소프트웨어 생태계를 동시에 구축하는 이유는 간단하다. 자사 플랫폼을 사용하는 고객에게 최상의 도구를 쥐어 주고 계속 사용하도록 유도하는 전략이라고 봐도 무방하다. 엔비디아는 지금까지 구축한 생태계를 바탕으로 하드웨어와 소프트웨어 기반 고객을 유지 또는 확장함으로써 수익을 유지할 수 있다. 단기적으로 드러나지 않더라도 장기적인 관점에서 봤을 때 엔비디아의 하드웨어 점유율이 높아지면 생태계는 강력한 무기가 된다.

후발주자, 경쟁력 갖추기 위해 노력해야

엔비디아가 인공지능 하드웨어 시장에서 크게 앞서가는 분위기 속에 긴장해야 될 곳은 후발주자들이다. 하드웨어 성능 못지않게 소프트웨어 생태계 구축을 하지 못하면 대체재 이미지를 벗기 어려울 수 있다. 특히 엔비디아 차세대 인공지능 가속장치가 초기 수요를 따라가지 못할 가능성이 높은 현재 상황이 기회다.

경쟁사의 소프트웨어, 라이브러리 확보는 현재진행형이다. AMD는 인공지능 처리 도구와 모델, 라이브러리 등을 모은 ROCm으로 생태계 구축에 힘을 쏟는 중이다. 그 외 인공지능 가속장치 개발사도 허깅페이스(인공지능 라이브러리 플랫폼)와의 협업이나 전용 라이브러리 생태계 확보에 나서는 모습이다.

젠슨 황 CEO는 생성형 인공지능에 의해 탄생한 새로운 산업이 100조 달러(원화 환산 약 13경 3,890조 상당)에 달한다고 강조했다. 산업 성장에 따라 인공지능 하드웨어에 대한 수요 역시 폭발적으로 증가할 것으로 예상된다. 하드웨어 기업의 경쟁도 가속화될 것이다. 동시에 시장에 다양한 선택지와 기술 발전을 위한 후발주자의 노력 또한 필요한 시점이다.

글 / IT동아 강형석 (redbk@itdonga.com)

사용자 중심의 IT 저널 - IT동아 (it.donga.com)

번호	제목	글쓴이	작성일	조회	추천
설문	축의금 적게 내면 눈치 줄 것 같은 스타는?	운영자	24/11/11	-	-
3833	네카오, 글로벌 공략 갈 길 바쁜데…일단 멈춤	IT동아	05.23	198	0
3832	2025년 상반기 탄생할 주식 대체거래소(ATS), 이렇게 달라진다	IT동아	05.23	345	0
3831	AMD, 에픽·MI300X 투트랙으로 AI 산업 주도권 확보 나서	IT동아	05.22	206	0
3830	'직장인 3명 중 1명, 데이터 도출 어려워'··· AI 기반 자동화가 해답될까?	IT동아	05.22	273	0
3829	산행 보조부터 산불 진화까지...'입는 로봇' 활용처 확대 [1]	IT동아	05.22	5192	1
3828	대거 출시 예고한 Arm CPU 기반 윈도우 PC, 뭐가 다를까?	IT동아	05.22	300	0
3827	비트코인 피자데이, 업비트·빗썸 “피자 2024판 쏜다” [17]	IT동아	05.22	7306	4
3826	[생성 AI 길라잡이] 음성과 이미지만 있으면 영상을 만든다 ‘런웨이ML’	IT동아	05.21	2252	0
3825	가속 페달 밟은 검색광고 시장 경쟁, 보라웨어 ‘AI 검색광고 관리 솔루션에 주목해야 되는 이유	IT동아	05.21	212	0
3824	부르면 달려오는 '이동형 전기차 충전기' 시장 기지개 [14]	IT동아	05.21	2138	0
3823	MS, '코파일럿 플러스 PC' 발표…AI 시대의 새로운 PC 제시	IT동아	05.21	265	0
3822	업비트·빗썸, 1분기 실적 개선···투자자 보호·서비스 개선에 주력한다	IT동아	05.21	191	0
3821	GPT4o와 GPT4 비교해 보니··· '사람 대 AI의 근본적인 접근 방식 바꿔' [6]	IT동아	05.21	1541	3
3820	삼성전자, '비스포크 AI 콤보' 에센셜 화이트 색상 출시…색상 라인업 강화	IT동아	05.20	248	0
3819	채팅창 넘어 일상으로…'만능 AI 비서' 시대 온다	IT동아	05.20	623	0
3818	오늘부터 시끄러운 불법 튜닝 오토바이 집중 단속 [6]	IT동아	05.20	787	6
3817	AWS 서밋 행사장에서 펼쳐진 훈훈한 ‘프리킥’	IT동아	05.20	222	0
3816	[주간투자동향] 라피치, 60억 원 규모 투자 유치	IT동아	05.20	193	0
3815	키보드의 윈도 키, 최대한 활용하려면 이렇게![이럴땐 이렇게!] [5]	IT동아	05.20	1674	16
3814	인포플라 “대답만 하던 기존 AI의 한계, VLM 기반 자동화로 극복” [4]	IT동아	05.18	7239	3
3813	6월 인공지능ㆍ반도체 시장 엔비디아 손에 달렸다	IT동아	05.17	281	0
3812	[시승기] 시대를 초월한 디자인 DNA…’포르쉐 911 카레라 쿠페’	IT동아	05.17	354	0
3811	[IT신상공개] 입맛대로 고르는 저음, 소니 얼트 파워 사운드	IT동아	05.17	523	1
3810	"코바코의 대국민 AI 광고 제작 서비스, 네이버가 함께합니다"	IT동아	05.17	267	0
3809	[생성 AI 길라잡이] 더 사람 같아진 AI, 'GPT-4o'는 어떻게 다를까? [2]	IT동아	05.17	1431	1
3808	차트분석 도구 ‘트레이딩뷰’ 파고들기 - 11	IT동아	05.16	385	0
3807	[뉴스줌인] PC 2대 연결해 하나처럼? 인텔 ‘썬더볼트 쉐어’ 기술 이모저모 [5]	IT동아	05.16	2359	0
3806	스틸시리즈 코리아 “편의성 강화한 ‘아크티스 노바5’로 가파른 성장세 이어갈 것”	IT동아	05.16	387	0
3805	[스타트업 첫걸음] 기고를 시작하며	IT동아	05.16	256	0
3804	[월간자동차] 24년 4월, 신차 등록 감소…기아 ’쏘렌토’ 4개월 연속 판매 1위 [1]	IT동아	05.16	1034	0
3803	10년 차 맞은 AWS 서밋 서울··· '국내 최대 IT·클라우드 행사로 자리매김'	IT동아	05.16	305	0
3802	[자동차와 法] 딜레마존 구간에서 운전자 주의의무에 대하여	IT동아	05.14	319	0
3801	대기업부터 스타트업까지, K-우주산업 ‘성큼’	IT동아	05.14	316	0
3800	벤츠, 소비자가 외면한 전기차 디자인 손본다 [47]	IT동아	05.14	8536	2
3799	우주방사선 차폐로 초소형위성 수명 늘린다	IT동아	05.14	295	0
3798	국내 기업 열에 일곱은 "이제 AI 활용 못 하는 직원은 고용 안 해" [37]	IT동아	05.14	7624	9
3797	NHN두레이 기반의 협업 환경, KDI 국제정책대학원의 ‘저력’ 높인다	IT동아	05.14	237	0
3796	[IT강의실] 가상자산 맡기고 추가 수익 실현 ‘스테이킹’	IT동아	05.14	414	0
3795	화제의 K-패스 카드, 발급부터 활용까지 이렇게! [이럴땐 이렇게!] [1]	IT동아	05.14	3544	2
3794	도로 위 시한폭탄 ‘맨홀 단차’ 빠르게 보수할 제품 실증 [4]	IT동아	05.13	816	1
3793	와탭랩스, "옵저버빌리티 기업 정체성 확립··· 美·日·동남아 시장 성과낼 것"	IT동아	05.13	224	0
3792	빗썸 “대학생 서포터즈 썸즈업이 제안한 개선안 적극 검토할 것” [3]	IT동아	05.13	1105	0
3791	차트분석 도구 ‘트레이딩뷰’ 파고들기 - 10 [8]	IT동아	05.11	8251	3
3790	[뉴스줌인] 캐논, 비정품 토너보다 심각한 ‘위조’ 토너에 골머리 [19]	IT동아	05.11	12551	6
3789	[리뷰] ‘시간 흘렀어도 64코어는 여전히 강력하다’ AMD 라이젠 스레드리퍼 7980X	IT동아	05.10	544	1
3788	정부, 라인야후 사태 '유감' 표명…네이버는 지분매각 가능성 공식화	IT동아	05.10	344	0
3787	[시승기] 48인치 스크린이 연출하는 매혹적인 실내…‘링컨 노틸러스’	IT동아	05.10	455	0
3786	공공기관 ‘테스트베드’ 사업, 중소기업과 동반성장 성과	IT동아	05.10	244	0
3785	[리뷰] 언제 어디서나 안전하고 빠른 근무 환경, ‘가비아 DaaS’	IT동아	05.10	247	0
3784	빗썸 “이벤트 참여자 과세 400억 원, 전액 지원할 것” [6]	IT동아	05.10	2975	1

최근 방문

즐겨찾기

즐겨찾기 갤러리

갤러리 이슈박스, 최근방문 갤러리

연관 갤러리

개념글 리스트

차단하기

[IT동아 갤러리]

갤러리 본문 영역

하드웨어 완성도 + 소프트웨어 생태계 = 수익 확대

후발주자, 경쟁력 갖추기 위해 노력해야

▶ 엔비디아 GTC 2024 개최, ‘블랙웰’과 ‘NIMS’로 인공지능 생태계 강화 나선다▶ AI 혁신의 중심 된 '엔비디아 GTC 2024', 국내 주요 참여 스타트업은?▶ ‘엔비디아ㆍAMD’ 인공지능 생태계 경쟁, 이제 시작이다

추천 비추천

댓글 영역

① NFT 발행

② NFT 구매

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

페이지 이동

오른쪽 컨텐츠 영역

알림 설정

알림

디시콘 리스트

디시콘

디시콘 검색결과(0)

인기 디시콘

지갑 연결

▶ 엔비디아 GTC 2024 개최, ‘블랙웰’과 ‘NIMS’로 인공지능 생태계 강화 나선다 ▶ AI 혁신의 중심 된 '엔비디아 GTC 2024', 국내 주요 참여 스타트업은?▶ ‘엔비디아ㆍAMD’ 인공지능 생태계 경쟁, 이제 시작이다