AMD, 인스팅트 MI325X·5세대 에픽 정식 출시··· 'AI 슈퍼사이클 잡는다'

IT동아 · 2024.10.11 06:08:27

[IT동아=샌프란시스코]

“우리는 고성능 컴퓨팅이 전 세계를 구성하는 기본 요소라고 믿으며, 클라우드, 의료, 산업, 자동차, 통신, PC, 게임 등 세계에서 가장 중요한 과제를 해결하기 위해 기술을 사용하고 있다. 오늘날 매일 수십억 명의 사람들이 AMD 제품을 사용하며, 그중 가장 흥미로운 응용 분야는 AI다. 앞으로도 이 분야에 더 많은 컴퓨팅이 필요해진다”

리사 수 AMD 최고경영자가 샌프란시스코 모스콘 센터에서 열린 ‘어드밴싱 AI’ 행사의 기조연설을 진행 중이다 / 출처=IT동아

글로벌 반도체 설계 기업 AMD가 현지시간으로 10월 10일, 미국 캘리포니아주 샌프란시스코 모스콘 센터에서 ‘어드밴싱 AI’ 행사를 열고 새로운 인스팅트 AI 가속기 및 서버용 에픽 프로세서, 네트워킹 장비, 기업용 프로세서 등을 공개했다. 이번에 출시된 AMD 인스팅트 MI325 AI 가속기는 인스팅트 MI300의 후속으로, 256GB의 HBM3E 메모리로 엔비디아 H200과 경쟁한다.

5세대 에픽(EPYC) 프로세서는 앞서 대만 컴퓨텍스 2024에서 주요 정보가 사전에 공개된 바 있으며, 이번 행사를 통해 공식 출시하고 올 하반기 판매를 시작한다. AMD의 기업용 제품군인 라이젠 프로 AI 300 프로세서 제품군, 데이터센터용 AMD 펜산도 폴라라 400 네트워킹 인터페이스 카드, 펜산도 셀리나 400 데이터 처리 장치(DPU)도 함께 공개됐다.

AMD MI325X AI 가속기 출시, 엔비디아 H200과 경쟁

AMD는 지난해 12월, 데이터서버용 AI 가속기인 인스팅트 MI300 시리즈를 공식 출시했다. 이후 5월부터 제품 인도가 시작됐고, 현재 마이크로소프트, 오픈AI, 메타에서 활용 중이며, 코히어, 스태빌리티AI, 에센셜AI를 비롯한 25개 주요 파트너사에서 운용 중이다.

AMD의 새로운 AI 가속기, AMD 인스팅트 MI325X가 공식 출시됐다 / 출처=IT동아

이번에 출시되는 인스팅트 MI325X는 고성능 버전인 MI300X의 후속으로, 전작의 192GB HBM3에서 더 상향된 256GB HBM3E 메모리를 갖추며, 메모리 대역폭도 초당 5.3TB에서 6TB로 늘었다. 8개를 연결한 구성에서는 초당 896GB의 인피티니 패브릭 대역폭으로 연결되며, 2TB의 HBM3E 메모리와 48TB의 대역폭을 갖춘다. 성능은 FP8 기준 20.8PF(페타플롭스), FP16 기준 10.4PF를 제공한다.

인스팅트 MI325X는 엔비디아 H100 및 H200의 대체제로 나선다 / 출처=IT동아

엔비디아의 고성능 AI 가속기인 H200과 비교해도 1.3배 높은 FP16 및 FP8 성능과 1.8배 높은 메모리 용량, 1.3배 높은 메모리 대역폭을 갖춘다. 추론 성능은 H200 HGX 시스템과 비교해 라마 3.1 405B 모델을 1.4배 더 빨리 처리하며, 라마 3.1 70B 모델은 1.2배 빨리 처리한다. 훈련 기능도 크게 강화돼 엔비디아 H200과 인스팅트 MI325X를 단일 비교했을 때 라마 2 7B 모델을 1.1배, 8개 구성에서는 라마 2 70B 모델과 동등한 처리 성능을 제공한다.

2025년 출시 예정인 인스팅트 MI350 시리즈도 첫선

차세대 AI 가속기인 MI350 시리즈의 MI355X에 대한 자료도 일부 공개됐다 / 출처=IT동아

아울러 2025년 출시 예정인 차세대 제품인 인스팅트 MI350 시리즈에 대한 주요 정보도 공개됐다. MI350 시리즈는 3nm 공정 기반에 CDNA4 아키텍처를 활용하며, 288GB의 HBM3E 메모리와 FP4 및 FP6 처리를 새롭게 지원한다. 8대를 구성한 구성에서는 최대 2.3TB의 HBM3E 메모리와 64TB의 메모리 대역폭을 갖추며, 이를 통해 18.5PF(페타플롭스)의 FP16, 37P FP8, 새로 지원하는 FP6 및 FP4도 각각 74PF의 처리 성능을 지원한다.

세부 모델인 인스팅트 MI355X는 MI325X와 비교해 1.8배 빠른 FP16, FP8 처리 성능을 제공한다. 3세대 이전 제품인 MI300과 비교하면 7.4배 향상된 AI 플롭스 처리 성능, 처리 가능한 모델 크기는 6배나 커졌다. AMD는 올해 4분기 중 인스팅트 MI325X 생산을 시작하고, 내년 1분기 중 델 테크놀로지스, 에비덴, 기가바이트, HPE 등 주요 파트너사에서 판매를 시작한다. AMD는 2025년 중 MI350을 출시하고, 26년에는 MI400 시리즈를 낼 예정이다.

밤시 보파나 AMD AI 부문 선임 부사장이 ROCm 6.2 버전에 대한 성능 향상을 소개하고 있다 / 출처=IT동아

한편 AMD 개발 생태계를 확대하기 위한 ROCm 관련 소식도 덧붙였다. AMD ROCm 6.2 버전은 6.0과 비교해 LLM 처리 성능을 최소 1.9배에서 2.8배까지 끌어올렸고, 훈련 성능 역시 평균 1.8배 향상됐다. AMD는 ROCm 호환성 향상을 위해 올해 7월 인수한 AI 스타트업 사일로AI를 투입한다. AMD 사일로 AI 조직은 약 200여 개의 유럽 언어 기반 LLM 작업을 수행한 바 있다.

5세대 에픽 최대 192코어 384스레드··· 서버 점유율 30% 노린다

AMD는 4세대 에픽 프로세서를 통해 시장 점유율을 27%까지 끌어올렸으며, 현재 350개의 OEM 플랫폼과 950여 개의 클라우드 인스턴스로 제공된다. AMD는 5세대 에픽 프로세서를 통해 30% 이상 점유율 확보를 목표로 하며, 서버 CPU 시장 주도와 전력 효율성 확보, AI 기능 강화를 핵심 목표로 설정했다.

128코어 제품은 16개의 4nm 칩을 칩렛으로 엮었고, 192코어 버전은 12개의 3nm 칩을 칩렛으로 엮었다 / 출처=IT동아

프로세서는 3/4나노미터 젠5, 젠5C 아키텍처가 혼용된다. 젠5 아키텍처는 최대 128코어 256스레드까지 있고, 젠5C 아키텍처가 최대 192코어 384스레드로 구성된다. SP5 소켓은 그대로 유지되며, 5GHz의 동작 속도와 AVX-512 명령어를 512b 데이터 패스를 최대 지원한다. 소비전력은 최소 8코어 155W에서 최대 192코어 500W로 설정된다. 메모리는 12채널 DDR5-6400을 지원하고, 소켓당 최대 6TB의 메모리를 인식한다. PCIe 5.0는 128레인에 암호화를 지원하고, CXL 2.0 규격 저장장치도 호환된다. 보안 측면에서는 트러스티드 I/O를 처음 지원한다.

1세대 에픽과 비교해 코어 수는 6배, 성능은 11배가 늘었다 / 출처=IT동아

성능 측면에서는 사이클당 명령어 처리 횟수가 기업용 클라우드 환경에서 최대 17% 향상됐고, 고성능 컴퓨팅 및 AI 처리는 37% 향상된다. SPECrate_2017_Int_처리속도는 5세대 인텔 코어 8592+ 64코어 모델을 1로 설정할 때, 192코어 에픽 9965 모델이 2.7배 빠르다. 작업 속도도 비디오 전환 속도 4배, 작업용 앱 2.3배, 오픈 소스 데이터베이스 처리 속도 4배, 이미지 렌더링 속도는 3배 늘었다. 시뮬레이션 시각화 속도는 64코어 기준 1.6배, 고성능 컴퓨팅 환경에서 모델링 및 시뮬레이션 처리는 3.9배까지 빨라졌다.

AI CPU 성능은 경쟁사 제품 대비 최대 3.8배 늘었다는 설명이다 / 출처=IT동아

AI 처리 성능 면에서는 5세대 인텔 8592+와 비교해 XG부스트 머신러닝 속도는 3배, 엔드투엔드 AI 성능 및 유사성 검색은 3.8배, LLM 성능은 1.9배 늘었다. 인스팅스 MI300을 최대로 연결했을 때 인텔 8592+ 대비 추론 성능은 8%, 학습 성능은 20% 더 늘어난다. 엔비디아 H100과 연결 시에는 GPU 추론 성능은 20%, 학습 성능은 15% 앞선다.

인텔 제온 플래티넘 8280 1000대로 구성된 서버를 에픽 9965 131개만으로 대체할 수 있다 / 출처=IT동아

공간 및 효율 측면에서는 인텔 제온 플래티넘 8280 1000개로 구성된 서버를 에픽 9965 131개만으로 대체할 수 있으며, 이때 공간 효율은 7배 정도 줄어든다. 소비전력도 68% 줄어들고, 3년 간 총 소유비용도 67% 줄인다. 가격은 8코어 제품인 9015가 최소 527달러(70만 원대)부터 시작하며, 128코어 9755가 1만 2984달러(약 1745만 원), 젠5C 아키텍처 기반의 192코어 9965가 1만 4813달러(약 1990만 원)로 설정된다.

AI PRO 300 시리즈, 네트워크 프로그래밍 지원 DPU도 출시

기업용 노트북 프로세서인 AMD 라이젠 AI 프로 300 시리즈도 공개됐다 / 출처=IT동아

AMD의 기업용 프로세서인 라이젠 프로 제품군도 AI 300 시리즈과 마찬가지로 리브랜딩 됐다. 새로운 라이젠 AI 프로 300 시리즈는 마이크로소프트 코파일럿을 지원하며, RDNA 3.5 기반의 16개 GPU 코어와 2세대 XDNA NPU를 탑재해 최대 55TOPS(초당 55조 회 연산) 성능을 낸다. 프로세서 구성은 라이젠 AI 9 HX PRO 375 및 370이 12코어 24스레드, 라이젠 AI 7 프로 360이 8코어 16스레드다.

기업용 제품인 만큼 데이터 무결성 등을 검증하는 보안 프로세서와 제어 흐름 공격 방지 기능, 보안 부팅 등을 기본 지원하고, 클라우드 베어메탈 복구와 서플라이 체인 시큐리티, 와치독 타이머가 새로운 기능으로 추가됐다.

포레스트 노로드 데이터센터 솔루션 비즈니스 유닛 수석 부사장이 AMD 3세대 P4 엔진과 이를 기반으로 한 펜산도 셀리나 400, 폴라라 400 카드를 각각 공개했다 / 출처=IT동아

AMD는 데이터서버의 프론트앤드용으로 AMD 펜산도 셀리나 DPU를, 백엔드 환경에서는 업계 최초로 울트라 이더넷 컨소시엄(UEC) 규격을 지원하는 AMD 펜산도 폴라라 400 네트워킹 인터페이스 카드(NIC)를 각각 출시한다. 셀리나 DPU는 이전 세대에 비해 2배 성능 및 대역폭을 제공하며, 최대 400GB의 처리량을 지원한다. 두 제품은 모두 샘플링 단계에 있고, 올해 4분기 중 고객을 확보한 뒤 내년 상반기에 출시된다.

올해로 재임 10년 차 맞은 리사 수, AI로 새로운 도약 간다

AMD에게 있어서 올해는 대전환의 해다. 실적이나 프로덕트 측면에서도 이상적인 상황이다 / 출처=IT동아

리사 수 AMD 최고경영자는 지난 9월 열린 골드만삭스 커뮤나코피아 & 테크놀로지 콘퍼런스에서 “AMD는 1년 주기로 AI 로드맵을 가속화하고 있다”라며, “AI 슈퍼사이클은 이제 시작”이라고 말한 바 있다. 이번에 출시된 AMD 인스팅트 MI325는 앞서 밝힌 제품 로드맵에 맞춰 출시된 첫 제품이며, 이에 대한 시장의 기대는 상당하다.

지난 7월 열린 2분기 실적 발표에서 리사 수 최고경영자는 “AI칩에 대한 수요가 급증해 올해 매출 예상치를 40억 달러에서 45억 달러로 상향했다”라고 말했고, 2분기 매출과 순이익 모두 전년 대비 9%, 19%씩 증가했다. 특히나 경쟁사인 엔비디아가 차세대 칩인 ‘블랙웰’ 출시를 약 3개월가량 늦춘 상황에서, AMD 인스팅트 MI325X는 예정대로 출시돼 AMD가 AI 시장의 수요를 조금 더 먼저 받아낼 수 있게 됐다.

리사 수 AMD 최고경영자는 “이번 주가 AMD에서 일한 지 10주년이 되는 해다. 우리의 일은 너무나 중요하고, 이 산업에 함께하게 된 점은 행운이라 생각한다. AMD는 고성능 컴퓨팅과 AI의 한계를 계속 넓히고 있다. 이것은 이제 시작이다”라고 덧붙였다.

글 / IT동아 남시현 (sh@itdonga.com)

사용자 중심의 IT 저널 - IT동아 (it.donga.com)

번호	제목	글쓴이	작성일	조회	추천
설문	오픈 마인드로 이성을 만날 것 같은 스타는?	운영자	24/12/02	-	-
4618	수목 병해충 발생 예측부터 방제약 처방까지 돕는 ‘애프터레인’	IT동아	12.03	21	0
4617	KIAT, 차세대 배터리 산업 지원 위해 팔 걷어	IT동아	12.03	16	0
4616	단말기에서 스팸 문자 AI 필터링 가능해진다 [1]	IT동아	12.03	391	1
4615	[부산창경 BEF 2024] 아이쿠카 “자녀와 부모가 함께하는 디지털 생활 플랫폼 꿈꾼다”	IT동아	12.03	17	0
4614	‘ai.kr, it.kr’ 등 신규 도메인, 오늘부터 선점 가능?	IT동아	12.03	16	0
4613	[자동차와 法] 편리함 이면에 잠재된 위험과 법적 책임 ‘전동킥보드’ [4]	IT동아	12.03	1388	0
4612	[부산창경 BEF 2024] 기술 활용해 일상 속 탄소 저감 돕는 ‘글루리’	IT동아	12.02	45	0
4611	[KIDP 울산] 아워즈팜 “스마트팜에서 재배한 딸기, 포장 디자인 혁신으로 친근하게”	IT동아	12.02	41	0
4610	[스타트업-ing] 세종 백경증류소 "와인, 위스키에 필적할 우리 전통주를 만들겠습니다!"	IT동아	12.02	494	2
4609	겨울철 온열기기 에너지 사용량 읽는 법 [이럴땐 이렇게!]	IT동아	12.02	55	0
4608	[주간투자동향] 에이아이스페라, 120억 원 후속 투자 유치 外	IT동아	12.02	45	0
4607	[투자를IT다] 2024년 11월 4주차 IT기업 주요 소식과 주가 흐름	IT동아	11.30	118	0
4606	디지포레, 충남 중소 제조기업과 손잡고 중소제조업 DX 가속화	IT동아	11.29	123	0
4605	[신차공개] 현대차 ‘아이오닉 9’ 최초 공개·포드 ‘더 뉴 익스플로러’ 출시	IT동아	11.29	125	0
4604	고려대학교 “LLM, RAG 등 유망 AI 기술사업화에 매진”	IT동아	11.29	122	0
4603	퓨리오사AI, 日 AI 엑스포서 2세대 반도체 선봬··· '다각적 판로 개척에 집중'	IT동아	11.29	108	0
4602	[생성 AI 길라잡이] 텍스트만 넣으면 영상, 음성, 자막까지 완성 ‘브루’ [1]	IT동아	11.29	672	0
4601	맞춤형 5G특화망 ‘이음5G’, 어디에 쓰이고 있나	IT동아	11.29	538	0
4600	[리뷰] 누구나 쉽게 고음질 콘텐츠 녹음, DJI 마이크 미니	IT동아	11.29	138	0
4599	[부산창경 BEF 2024] 그리니쉬, "퍼티맥스, 임신 꿈꾸는 모든 이들을 위한 제품"	IT동아	11.29	94	0
4598	[스케일업] 보라웨어 [3] 정진우 대표 “검색ㆍ쇼핑 광고 관리 솔루션으로 광고주와 함께 성장할 것”	IT동아	11.29	96	0
4597	[AI와 미래] AI 창작 콘텐츠, 법적·윤리적 도전과 해결 과제	IT동아	11.29	93	0
4596	[부산창경 BEF 2024] 히어로웍스 “숙박 시설의 업무 자동화에 기여합니다”	IT동아	11.29	275	0
4595	메디플렉서스 “의료데이터 수요·공급 연결, 분석과 활용 활성화”	IT동아	11.29	88	0
4594	SBA, 임팩트다이브 2024 개최…“오픈 이노베이션 생태계 발판 마련”	IT동아	11.28	195	0
4593	[시승기] 새로운 디자인·세단 같은 승차감 앞세운 ‘BMW 뉴 X3’	IT동아	11.28	109	0
4592	세계 최고 권위 반도체 학회 'ISSCC' 두 달 앞으로··· '韓 반도체 산업 입지는?'	IT동아	11.28	190	0
4591	서울과기대 창업연합 협의체, '서울 동북권 넘어 전국 단위 연계 나선다'	IT동아	11.28	108	0
4590	[부산창경 BEF 2024] 불편하고 폐쇄적인 국내 주류 유통시장을 디지털 전환한 스타트업 '링크업'	IT동아	11.28	107	0
4589	삼성전자, 실속형 스마트폰 '갤럭시 A16 LTE' 29일 출시	IT동아	11.28	161	0
4588	누비랩 x 도토리소풍 넥슨 “AI 푸드 스캐너, 영유아 식습관 건강 도우미”	IT동아	11.28	106	0
4587	[ENSL 2024] 영앤 “뇌건강놀이터로 어르신들 건강과 행복 책임지는 기업될 것”	IT동아	11.28	104	0
4586	[생활 속 IT] 방장이 관리하는 ‘카카오톡 팀채팅’, 유용하게 쓰기	IT동아	11.27	627	0
4585	[창업도약+경북대] 아쿠아웍스 “차세대 수처리 기술로 환경문제 극복할 것”	IT동아	11.27	127	0
4584	LG전자, 자체 개발 車반도체 국제 안전표준 인증	IT동아	11.27	124	0
4583	[주간스타트업동향] '신성바이오팜, 커스토젠' TIPS 선정 外	IT동아	11.27	125	0
4582	도시와 산업, 인공지능에 대한 고찰 ‘2024 울산 디자인혁신 포럼’	IT동아	11.27	127	0
4581	[ENSL 2024] 자동차 검사 및 정비 편의성 강화한 O2O 플랫폼 ‘카약’	IT동아	11.27	121	0
4580	[기고] 초고령사회를 위한 의료데이터 정보화: 소프트인프라 구축과 맞춤형 서비스 제공	IT동아	11.27	113	0
4579	[스케일업] 비투랩 [3] 김병규 병천치과의원장 “레이저 표면처리, 임플란트 기본 높일 것”	IT동아	11.27	117	0
4578	[부산창경 BEF 2024] 인더라스 "고속도로 2차 교통사고, 레그널이 예방합니다"	IT동아	11.27	4569	0
4577	[부산창경 BEF 2024] 보라공사 "리모델링/인테리어 공사에 대한 불신과 불안을 줄여드립니다"	IT동아	11.27	107	0
4576	로웨인 “로봇 수직농장 경제성 입증한 첫 사례 만든다”	IT동아	11.27	125	0
4575	[창업도약+경북대] 디엠테크컨설팅 “스마트공장장으로 제조업 디지털 전환과 상생 이룰 것”	IT동아	11.27	108	0
4574	[고려대 미래내일] 청년 일경험 우수 팀 “연구 구체화, 실무 경험 값진 시간”	IT동아	11.27	129	0
4573	[생활 속 IT] PC 화면 캡처 및 편집은 어떻게?	IT동아	11.26	1900	1
4572	SBA, 혁신경영 성과 앞세워 대통령 포장 포함 수상 12개 석권	IT동아	11.26	123	0
4571	[부산창경 BEF 2024] 전력 절감장치에 블록체인 기술 더해 ESG 실천 돕는 ‘딥브레인’	IT동아	11.26	117	0
4570	[ENSL 2024] 헬퍼로보틱스 “F&B 불편 해결할 조리 로봇 선도”	IT동아	11.26	127	0
4569	[부산창경 BEF 2024] 마리나체인 “국제 환경 규제 대응 원스톱 솔루션, 마리나넷” [6]	IT동아	11.26	4543	0
뉴스	“원작 팬도 만족할 것”…‘조명가게’, 디플 최고 흥행작 갈아치울까 [종합]	디시트렌드	12.03

최근 방문

즐겨찾기

즐겨찾기 갤러리

갤러리 이슈박스, 최근방문 갤러리

연관 갤러리

개념글 리스트

차단하기

[IT동아 갤러리]

갤러리 본문 영역

AMD MI325X AI 가속기 출시, 엔비디아 H200과 경쟁

2025년 출시 예정인 인스팅트 MI350 시리즈도 첫선

5세대 에픽 최대 192코어 384스레드··· 서버 점유율 30% 노린다

AI PRO 300 시리즈, 네트워크 프로그래밍 지원 DPU도 출시

올해로 재임 10년 차 맞은 리사 수, AI로 새로운 도약 간다

▶ AMD 인스팅트로 분주해진 서버 파트너사, 주요 신제품은?▶ RTX 40 시리즈 단종 초읽기, 앞으로의 그래픽 카드 선택지는?▶ [투자를IT다] 2024년 10월 1주차 IT기업 주요 소식과 주가 흐름

추천 비추천

댓글 영역

① NFT 발행

② NFT 구매

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

페이지 이동

오른쪽 컨텐츠 영역

알림 설정

알림

디시콘 리스트

디시콘

디시콘 검색결과(0)

인기 디시콘

지갑 연결