‘하드웨어+소프트웨어’ 플랫폼으로 인공지능 생태계 장악 노리는 엔비디아의 속내는?

IT동아 · 2024.03.19 21:12:27

엔비디아 추론 마이크로서비스에 대해 설명하는 젠슨 황 엔비디아 CEO. / 출처=엔비디아

[IT동아 강형석 기자] 2024년 3월 18일, 세너제이 SAP 센터(미국 캘리포니아 소재)에서 GTC 2024가 개최됐다. 3월 21일까지 진행되는 행사에서는 인공지능부터 로보틱스, 디지털 트윈, 헬스케어, 자율주행, 사이버 보안 등 산업 분야에서 다양한 기술이 언급될 예정이다.

이날 기조연설에 나선 젠슨 황 엔비디아 CEO는 “다양한 데이터 모델은 획기적이지만 기업이 사용하기 어렵다. 어떻게 작업 흐름(워크플로우)에 적용하고 통합할 것인가? 각 요소에 대한 최적화를 수행하고 연산 구조를 구축해야 된다. 우리는 새로운 방법을 제안하고자 한다. 이것은 기본적으로 우리가 컨테이너라 부르는 디지털 상자 안에 들어 있다”고 말하며 엔비디아 추론 마이크로서비스(NVIDIA Inference Microservice)를 소개했다.

엔비디아는 기본적으로 잘 알려져 있는 컴퓨팅 연산 관련 명령어 외에 쿠다(CUDA – Computed Unified Device Architecture) 생태계를 어느 정도 구축해 왔다. 쿠다는 엔비디아 하드웨어와 자연스레 녹아 있어 최적의 성능을 이끌어낼 수 있고 쉽게 설치해 쓰는 이점으로 인해 관련 분야 종사자들이 선호하는 도구가 되었다. 꾸준히 업데이트하며 알려진 문제와 기능을 추가하기도 한다. 이는 경쟁사가 쉬이 구현할 수 있는 부분이 아니다.

이미 자사 하드웨어와 연계되어 있는 도구는 쿠다 뿐만이 아니다. 인공지능 엔터프라이즈 플랫폼, 데이터 과학, 대규모 언어 모델을 위한 니모(NeMo) 프레임워크, 옴니버스 플랫폼 등 자체 구축한 데이터센터를 기반으로 다양한 지원 생태계를 구축해 놓은 상태다. 하지만 엔비디아는 그 이상을 바라보고 있다. 엔비디아 추론 마이크로서비스와 아이작(Issac) 로보틱스 플랫폼 등은 엔비디아 인공지능 생태계 확장의 시발점이라 하겠다.

하드웨어 완성도 + 소프트웨어 생태계 = 수익 확대

GTC 2024 기조연설에 나선 젠슨 황 엔비디아 CEO는 차세대 인공지능 가속처리장치, 블랙웰(Blackwell)을 공개하며 “블랙웰은 칩이 아니고 플랫폼 이름이다. 사람들은 우리가 GPU를 만든다고 생각하고 실제로 만들고 있지만, 이제 GPU를 과거처럼 보지 않는다”라고 말했다.

엔비디아는 블랙웰을 공개하며 다양한 형태의 하드웨어 솔루션을 제안했다. 기본적으로 2개의 블랙웰 가속장치와 그레이스(Grace) 중앙처리장치를 연결한 GB200을 시작으로 GB200을 36대 배치한 GB200 NVL 72가 있다. 이 외에도 x86 기반 중앙처리장치에서 쓸 수 있는 서버 보드 HGX B200이 있다. B200 장치 8개를 장착할 수 있다. 이후 인공지능 가속장치만으로 구성된 B100 혹은 B200이 합류할 가능성이 있다.

블랙웰 기반 처리장치로 다양한 하드웨어 솔루션을 제안한 엔비디아. / 출처=엔비디아

성능은 기존 호퍼 기반 시스템 대비 큰 폭의 향상을 이뤄냈다. 젠슨 황 CEO는 GPT-MoE-1.8T 모델을 90일간 학습하는 환경에서 호퍼는 8,000개의 처리장치와 15메가와트(MW)의 전력을 필요로 하지만, 블랙웰은 2,000개 처리장치와 4메가와트 전력만 있으면 된다고 설명했다. 단순히 같은 공간에 블랙웰 연산 시스템을 구축할 경우 호퍼와 동일한 전력소모로 4배 이상 빠른 처리가 가능함을 말한다.

탄탄한 하드웨어 기틀 위에 엔비디아는 소프트웨어 생태계를 더했다. 엔비디아 추론 마이크로서비스는 엔비디아의 또 다른 시도가 될 전망이다. 우선 사전 훈련된 일부 오픈소스 인공지능 모델을 패키지로 제공되는데 이를 사용하는 라이브러리에 더해 쓸 수 있다. 랭체인(Langchain), 라마인덱스(LlamaIndex) 등 다양한 거대 언어 모델 프로그래밍에 대응한다.

완전 무료는 아니다. 1,000개의 추론 크레딧이 무료로 제공되어 사전 제작에 사용 가능하고 모두 사용하면 인공지능 엔터프라이즈 라이선스를 구매해 쓰는 식이다.

엔비디아 인공지능 플랫폼 생태계는 산업 전반에 걸쳐 있다. / 출처=엔비디아

아이작 로보틱스 플랫폼은 조금 다르다. 엔비디아 젯슨 토르(Jetson Thor) 칩과 연동하는 시뮬레이션, 인공지능 작업흐름 인프라를 위한 도구다. 이 칩 역시 블랙웰 설계 기반으로 대규모 연산을 지원한다. 여기에 아이작 연구소(Issac Lab)로 강화 학습을, 오즈모(OSMO)로 컴퓨팅 조정을 지원한다. 엔비디아는 사전 훈련된 로봇 모델과 라이브러리 등이 포함된 아이작 조종자(Iaasc Manipulator), 아이작 인식자(Preceptor) 등도 공개했다.

하드웨어와 소프트웨어 생태계를 동시에 구축하는 이유는 간단하다. 자사 플랫폼을 사용하는 고객에게 최상의 도구를 쥐어 주고 계속 사용하도록 유도하는 전략이라고 봐도 무방하다. 엔비디아는 지금까지 구축한 생태계를 바탕으로 하드웨어와 소프트웨어 기반 고객을 유지 또는 확장함으로써 수익을 유지할 수 있다. 단기적으로 드러나지 않더라도 장기적인 관점에서 봤을 때 엔비디아의 하드웨어 점유율이 높아지면 생태계는 강력한 무기가 된다.

후발주자, 경쟁력 갖추기 위해 노력해야

엔비디아가 인공지능 하드웨어 시장에서 크게 앞서가는 분위기 속에 긴장해야 될 곳은 후발주자들이다. 하드웨어 성능 못지않게 소프트웨어 생태계 구축을 하지 못하면 대체재 이미지를 벗기 어려울 수 있다. 특히 엔비디아 차세대 인공지능 가속장치가 초기 수요를 따라가지 못할 가능성이 높은 현재 상황이 기회다.

경쟁사의 소프트웨어, 라이브러리 확보는 현재진행형이다. AMD는 인공지능 처리 도구와 모델, 라이브러리 등을 모은 ROCm으로 생태계 구축에 힘을 쏟는 중이다. 그 외 인공지능 가속장치 개발사도 허깅페이스(인공지능 라이브러리 플랫폼)와의 협업이나 전용 라이브러리 생태계 확보에 나서는 모습이다.

젠슨 황 CEO는 생성형 인공지능에 의해 탄생한 새로운 산업이 100조 달러(원화 환산 약 13경 3,890조 상당)에 달한다고 강조했다. 산업 성장에 따라 인공지능 하드웨어에 대한 수요 역시 폭발적으로 증가할 것으로 예상된다. 하드웨어 기업의 경쟁도 가속화될 것이다. 동시에 시장에 다양한 선택지와 기술 발전을 위한 후발주자의 노력 또한 필요한 시점이다.

글 / IT동아 강형석 (redbk@itdonga.com)

사용자 중심의 IT 저널 - IT동아 (it.donga.com)

번호	제목	글쓴이	작성일	조회	추천
설문	SNS로 싸우면 절대 안 질 것 같은 고집 있는 스타는?	운영자	24/05/06	-	-
3624	[KESIA 시드팁스] 전기화학 기반 이산화탄소 포집 기술 개발하는 ‘비욘드캡처’	IT동아	03.28	131	0
3623	비트코인 상승세에 가상자산 사기 기승, 주의 사항은?	IT동아	03.28	694	0
3622	인텔, AI PC 가속화 프로그램 확대··· '하드웨어 지원도 추가' [1]	IT동아	03.28	578	0
3621	수리비 비싸서, 모델 적어서…국내 폴더블폰 시장 ‘주춤’ [7]	IT동아	03.27	1109	3
3620	[IT애정남] 오래된 디지털 카메라, 제대로 된 제품 고르는 방법은?	IT동아	03.27	360	0
3619	벤틀리와 한국 현대미술의 만남…‘컨티넨탈 GT 코리아 에디션’	IT동아	03.27	209	0
3618	레노버, 인텔·MS와 손잡고 AI PC 시대 연다 [3]	IT동아	03.27	983	4
3617	‘NPU가 핵심’ 인텔ㆍAMD, 온-디바이스 AI 경쟁 본격화	IT동아	03.27	127	0
3616	레노버, 96 코어 품은 워크스테이션, ‘씽크스테이션 P8’ 출시	IT동아	03.26	141	0
3615	[EV 시대] 사용자 중심으로 진화하는 모빌리티	IT동아	03.26	123	0
3614	반독점법 피소된 애플... 왜 美 정부는 애플을 때릴까? [6]	IT동아	03.26	429	1
3612	[KESIA 시드팁스] 기술로 부동산 투자 대중화 꿈꾸는 스타트업 ‘원컵’	IT동아	03.26	128	0
3611	[2024 고려대 초창패] 마이허브 “마이링크를 이용하면 의료 AI 솔루션 도입이 수월합니다” [1]	IT동아	03.26	858	1
3610	인공지능 PC의 완성은 그래픽카드? ‘전원공급장치’도 신중히 골라야 [7]	IT동아	03.26	588	1
3609	삼성전자, 필터 값 안 드는 공기청정기 출시, 성능과 디자인은 그대로?	IT동아	03.25	213	0
3608	"지금 내 혈당은 얼마?"…카카오가 만든 AI 혈당 관리 앱 써보니 [1]	IT동아	03.25	259	0
3607	NHN클라우드, 2.0 전략으로 'AI 주권' 발판 마련한다	IT동아	03.25	112	0
3606	[리뷰] 청소 설정과 급수·배수까지 자동, 나르왈 프레오 X 울트라	IT동아	03.25	103	0
3605	[스타트업 법률실무] 기고를 마치며	IT동아	03.25	113	0
3604	[주간투자동향] 알고케어, 150억 원 규모 시리즈A 투자 유치	IT동아	03.25	181	0
3603	스마트폰으로 봄 꽃 사진 잘 찍으려면? [이럴땐 이렇게!]	IT동아	03.25	954	8
3602	[생성 AI 길라잡이] 갤럭시 AI 활용하기 - '노트 어시스트' [5]	IT동아	03.23	5929	6
3601	[2024 고려대 초창패] 이민우 퀀텀유니버스 대표 “확장형 콘텐츠를 넘어 새로운 가치를 만들 것”	IT동아	03.22	120	0
3600	차트분석 도구 ‘트레이딩뷰’ 파고들기 - 3	IT동아	03.22	137	0
3599	[농업이 IT(잇)다] '드론·자동농약배합기'로 농작물 관리 효율 높이는 ‘아쎄따’	IT동아	03.22	124	0
3598	[뉴스줌인] 미니 각 티슈 크기의 ‘LG 시네빔 큐브’ 프로젝터, 쓸 만할까?	IT동아	03.22	131	0
3597	[2024 고려대 초창패] 아이젠텍 “40분 만에 결과 나오는 PCR 검사, 국내 기술로 가능합니다”	IT동아	03.22	983	0
3596	클라우드 입지 구축한 오라클, 다음은 목표는 AI	IT동아	03.21	122	0
3595	‘기존 제품의 특징을 다듬어 확대했다’ 한미마이크로닉스 2024년 신제품 발표	IT동아	03.21	133	0
3594	[자동차 디자人] 폭스바겐 브랜드 디자인 총괄 ‘안드레아스 민트’ [1]	IT동아	03.21	578	1
3593	스마트 상권으로 거듭나는 춘천 원도심, ‘봄나들거리 축제’ 눈길	IT동아	03.21	115	0
3592	[리뷰] 13세대 코어 i5-1340P와 비교한 '인텔 코어 울트라 5 125H'	IT동아	03.21	274	0
3591	[스타트업-ing] 클레온 “AWS 인퍼런시아로 GPU 서버 비용 50% 줄였어요”	IT동아	03.21	127	0
3590	식량위기 극복할 대체식품 산업, 지자체와 푸드테크 기업이 손잡고 키운다 [7]	IT동아	03.21	1045	0
3589	‘어디서든 인공지능 가속 지원’ AMD 코리아, 인공지능 시장 청사진 제시	IT동아	03.20	118	0
3588	카카오벤처스 "비만 치료제 열풍, 스타트업에 새로운 기회" [1]	IT동아	03.20	455	0
3587	스타트업 혁신 지원하는 AWS ’AWS 유니콘데이’	IT동아	03.20	111	0
3586	[월간자동차] 24년 2월, 판매 1위 모델 국산 ‘쏘렌토’·수입 ‘BMW 5시리즈’	IT동아	03.20	874	2
3585	"AI로 고객 응대하고, 광고 문구 쓰세요"…SKT, AI 기반 B2B 사업 확대 박차	IT동아	03.20	106	0
3584	퀄컴, 경제성·효율 높인 '스냅드래곤 8s 3세대' 출시	IT동아	03.20	137	0
3583	[자동차와 法] 교통사고 과실비율에 대한 고찰	IT동아	03.19	106	0
	‘하드웨어+소프트웨어’ 플랫폼으로 인공지능 생태계 장악 노리는 엔비디아의 속내는? [1]	IT동아	03.19	454	0
3581	엔비디아 GTC 2024 개최, ‘블랙웰’과 ‘NIMS’로 인공지능 생태계 강화 나선다	IT동아	03.19	97	0
3580	'맞춤형 지원 패키지와 함께하는 창업' 엠디글로벌넷, 경기 신사업창업사관학교 참가자 모집	IT동아	03.19	95	0
3579	[2024 고려대 초창패] 번거로운 매출·배달 관리를 하나로 ‘올인원 포스’	IT동아	03.19	94	0
3578	[뉴스줌인] 최신 보급형폰, 6년 전 고급형폰, 뭐가 더 좋을까? [10]	IT동아	03.19	958	2
3577	[IT신상공개] 거리 맞춰 온도 조절하는 '다이슨 슈퍼소닉 뉴럴 헤어드라이어'	IT동아	03.19	215	0
3576	[IT강의실] 실물 자산을 가상자산으로 ‘RWA’ [2]	IT동아	03.19	795	0
3575	[KESIA 시드팁스] "멀지만 가까운 왕진, 똑똑의사로 모두가 누리게 할 것" [1]	IT동아	03.19	160	0
3574	가격대별 출시 예정 전기 SUV 살펴보니	IT동아	03.18	108	0

최근 방문

즐겨찾기

즐겨찾기 갤러리

갤러리 이슈박스, 최근방문 갤러리

연관 갤러리

개념글 리스트

차단하기

[IT동아 갤러리]

갤러리 본문 영역

하드웨어 완성도 + 소프트웨어 생태계 = 수익 확대

후발주자, 경쟁력 갖추기 위해 노력해야

▶ 엔비디아 GTC 2024 개최, ‘블랙웰’과 ‘NIMS’로 인공지능 생태계 강화 나선다▶ AI 혁신의 중심 된 '엔비디아 GTC 2024', 국내 주요 참여 스타트업은?▶ ‘엔비디아ㆍAMD’ 인공지능 생태계 경쟁, 이제 시작이다

추천 비추천

댓글 영역

① NFT 발행

② NFT 구매

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

페이지 이동

오른쪽 컨텐츠 영역

알림 설정

알림

디시콘 리스트

디시콘

디시콘 검색결과(0)

인기 디시콘

지갑 연결

▶ 엔비디아 GTC 2024 개최, ‘블랙웰’과 ‘NIMS’로 인공지능 생태계 강화 나선다 ▶ AI 혁신의 중심 된 '엔비디아 GTC 2024', 국내 주요 참여 스타트업은?▶ ‘엔비디아ㆍAMD’ 인공지능 생태계 경쟁, 이제 시작이다