- RTX AI PC·DGX 스파크로 LLM 미세 조정과 맞춤형 AI 어시스턴트 구축 지원

- 엔비디아 네모트론 나노 3, 슈퍼, 울트라 공개하이브리드 MoE 아키텍처 기반 설계

- 언슬로스, 엔비디아 GPU에서 허깅페이스 트랜스포머 라이브러리 성능 2.5배 향상

 

 

엔비디아, 네모트론 3 오픈 모델 제품군 공개… 언슬로스 기반 LLM 미세 조정 가속화.jpg

 

엔비디아가 네모트론 3(Nemotron 3) 오픈 모델 제품군을 공개하며, 언슬로스(Unsloth) 프레임워크를 통해 거대 언어 모델(LLM) 미세 조정을 가속화한다. 이를 통해 RTX AI PCDGX 스파크 환경에서 학습·업무·창작 전반에 활용 가능한 맞춤형 AI 어시스턴트 구축을 지원한다.

 

PC 환경에서도 생성형 AI와 에이전틱 AI 활용이 빠르게 확산되고 있다. 제품 지원 문의를 처리하는 챗봇이나 개인 일정 관리 비서와 같은 활용 사례가 늘고 있지만, 소형 언어 모델은 복잡한 에이전틱 작업에서 정확도와 일관성을 유지하는 데 한계가 있다. 엔비디아는 이러한 과제를 해결하기 위한 핵심 수단으로 미세 조정을 제시했다.

 

언슬로스 기반 LLM 미세 조정 가속

언슬로스는 LLM 미세 조정을 위한 대표적인 오픈소스 프레임워크로, 엔비디아 GPU 환경에 최적화된 효율적인 훈련 방식을 제공한다. GPU 메모리 사용량을 최소화하면서도 높은 성능을 유지하도록 설계돼 지포스 RTX 데스크톱·노트북부터 RTX PRO 워크스테이션, DGX 스파크까지 폭넓게 활용할 수 있다. 특히 엔비디아 GPU에서 허깅페이스 트랜스포머 라이브러리 성능을 최대 2.5배까지 향상시켜, 메모리와 연산 집약적인 LLM 미세 조정 작업을 보다 빠르게 수행할 수 있도록 지원한다.

 언슬로스 미세 조정 요구 사항.jpg

네모트론 3 오픈 모델 제품군 공개

엔비디아는 미세 조정을 위한 핵심 모델 기반으로 네모트론 3 오픈 모델 제품군을 함께 공개했다. 네모트론 3은 나노, 슈퍼, 울트라 모델로 구성되며, 하이브리드 MoE(Mixture of Experts) 아키텍처를 기반으로 설계됐다. 오픈 모델과 함께 데이터, 라이브러리까지 포함해 에이전틱 AI 워크로드에 최적화된 성능과 효율성을 동시에 제공한다.

 DGX 스파크의 라마 제품군 미세 조정 성능.jpg

미세 조정 방식별 선택지

미세 조정은 AI 모델에 특정 목적에 맞는 학습을 집중적으로 수행해 정확도를 높이는 과정이다. 파라미터 효율적 미세 조정은 모델의 일부만 업데이트해 빠르고 비용 효율적인 훈련을 가능하게 한다. 완전 미세 조정은 모델 전체를 조정해 특정 형식과 가드레일을 유지해야 하는 AI 에이전트와 챗봇 개발에 적합하다. 강화 학습은 피드백 신호를 활용해 모델 행동을 지속적으로 개선하는 방식으로, 고급 자율 에이전틱 AI 구현에 활용된다. 각 방식은 데이터 규모와 VRAM 요구 사항이 달라 개발 환경에 맞는 선택이 필요하다.

 

엔비디아 GPU 최적화로 성능·효율 동시 확보

LLM 미세 조정은 대규모 행렬 연산을 반복 수행하는 고난도 작업으로, GPU의 병렬 처리 성능이 필수적이다. 언슬로스는 복잡한 연산을 맞춤형 GPU 커널로 최적화해 훈련 속도와 효율을 동시에 높인다. 엔비디아 하드웨어에 맞춰 설계된 이 프레임워크는 VRAM 사용량을 줄이면서도 높은 성능을 유지해, 연구자와 개발자가 미세 조정을 보다 쉽게 활용할 수 있도록 지원한다. 또한 다양한 LLM 구성과 하이퍼파라미터 설정을 위한 가이드와 단계별 워크플로우를 함께 제공한다.

 

#엔비디아 #NVIDIA #네모트론3 #Nemotron #언슬로스 #Unsloth #LLM미세조정 #RTXAIPC #DGXSpark #에이전틱AI

 

 
?

List of Articles
번호 분류 제목 글쓴이 날짜 조회 수
2131 코헤시티, 구글 클라우드와 다년간 전략적 파트너십…사이버 레질리언스·엔터프라이즈 AI 가속 - 데이터 보안·주권을 전제로 AI 도입을 운영 단계로 확장하는 통합 전략 AI 기반 데이터 보안 선도 기업 코헤시티가 구글 클라우드와 다년간 전략적 파트너십을 ... file newsit 2025.12.23 158
2130 슈나이더 일렉트릭 코리아, GRC와 손잡고 액침 냉각 기반 데이터센터 테스트 인프라 구축 - 액침 냉각 설비 구축 전 과정 아우르는 토탈 솔루션 제공 - 웨어플루, 고효율·저전력 기반 HPC 테스트 환경 확보 슈나이더 일렉트릭 코리아가 글로벌 액침 냉각... file newsit 2025.12.23 143
2129 알리바바 클라우드, 가트너 클라우드 DBMS 6년 연속 리더…실행 역량·비전 완성도 높게 평가 알리바바 클라우드는 2025년 가트너 매직 쿼드런트 클라우드 DBMS 부문에서 6년 연속 리더로 선정됐다고 밝혔다. 가트너 보고서는 클라우드 DBMS를 데이터 저장과... file newsit 2025.12.22 140
2128 레드햇, 2026년 엔터프라이즈 IT 전망 제시…AI 에이전트·IT 주권·추론 환경이 핵심 변수 - AI 에이전트 확산과 소버린 클라우드 수요, 가상화 시장 변동성 속에서 IT 리더의 전략적 선택 요구 레드햇(Red Hat)이 2026년 엔터프라이즈 IT 환경을 전망하... file newsit 2025.12.22 105
2127 티유브이슈드, 인덕과학기술고와 고전압 전기차 안전교육 협력…미래 모빌리티 인재 양성 - 독일 규격 기반 실무 교육으로 미래 모빌리티 인재 양성 강화 글로벌 시험·인증 기관 티유브이슈드(TÜV SÜD)는 인덕과학기술고등학교와 ‘고전압 전기차 안전교... file newsit 2025.12.22 101
2126 딥엘, “2026년, AI는 도구가 아니라 인프라가 된다” - 에이전트 AI 확산으로 기업 워크플로우와 운영 구조 전면 재편 글로벌 AI 언어 기술 기업 딥엘(DeepL)은 2026년을 기점으로 AI가 ‘활용 기술’에서 ‘기업 인프라... file newsit 2025.12.22 110
2125 매스로보틱스, AWS·엔비디아와 피지컬 AI 펠로우십 확대…2026년 코호트 모집 - 로보틱스·피지컬 AI 스타트업 대상 8주 가상 프로그램으로 기술·확장 지원 강화 매스로보틱스가 아마존웹서비스(AWS), 엔비디아 인셉션과 함께 피지컬 AI 펠로... file newsit 2025.12.19 102
2124 코헤시티, AWS와 전략적 협력 계약 체결…AI 기반 사이버 레질리언스 강화 - 대규모 데이터 보호·복구 고도화 및 백업 데이터를 AI 활용 자산으로 전환 코헤시티가 아마존웹서비스(AWS)와 전략적 협력 계약(SCA)을 체결하며, 대규모 AI 기... file newsit 2025.12.19 95
2123 사이냅소프트, 'HWP 원본 분석'으로 공공 문서 AI 데이터화 해법 제시 - 공문서 AI 학습 과정서 지적되는 PDF 재변환 비효율, 원본 분석으로 해소 정부가 AI 학습을 위한 공공 데이터 개방을 본격 추진하는 가운데, 공문서를 PDF로 변... file newsit 2025.12.19 90
2122 슈나이더 일렉트릭, AI·HPC 전용 CDU 2종 출시 - 고밀도 가속 컴퓨팅 환경 대응 위한 리퀴드쿨링 라인업 확대 슈나이더 일렉트릭이 고성능 컴퓨팅(HPC)과 인공지능(AI) 워크로드 확산으로 증가하는 데이터센터 ... file newsit 2025.12.19 108
목록
Board Pagination Prev 1 ... 4 5 6 7 8 9 10 11 12 13 ... 222 Next
/ 222
CLOSE