- RTX AI PC·DGX 스파크로 LLM 미세 조정과 맞춤형 AI 어시스턴트 구축 지원

- 엔비디아 네모트론 나노 3, 슈퍼, 울트라 공개하이브리드 MoE 아키텍처 기반 설계

- 언슬로스, 엔비디아 GPU에서 허깅페이스 트랜스포머 라이브러리 성능 2.5배 향상

 

 

엔비디아, 네모트론 3 오픈 모델 제품군 공개… 언슬로스 기반 LLM 미세 조정 가속화.jpg

 

엔비디아가 네모트론 3(Nemotron 3) 오픈 모델 제품군을 공개하며, 언슬로스(Unsloth) 프레임워크를 통해 거대 언어 모델(LLM) 미세 조정을 가속화한다. 이를 통해 RTX AI PCDGX 스파크 환경에서 학습·업무·창작 전반에 활용 가능한 맞춤형 AI 어시스턴트 구축을 지원한다.

 

PC 환경에서도 생성형 AI와 에이전틱 AI 활용이 빠르게 확산되고 있다. 제품 지원 문의를 처리하는 챗봇이나 개인 일정 관리 비서와 같은 활용 사례가 늘고 있지만, 소형 언어 모델은 복잡한 에이전틱 작업에서 정확도와 일관성을 유지하는 데 한계가 있다. 엔비디아는 이러한 과제를 해결하기 위한 핵심 수단으로 미세 조정을 제시했다.

 

언슬로스 기반 LLM 미세 조정 가속

언슬로스는 LLM 미세 조정을 위한 대표적인 오픈소스 프레임워크로, 엔비디아 GPU 환경에 최적화된 효율적인 훈련 방식을 제공한다. GPU 메모리 사용량을 최소화하면서도 높은 성능을 유지하도록 설계돼 지포스 RTX 데스크톱·노트북부터 RTX PRO 워크스테이션, DGX 스파크까지 폭넓게 활용할 수 있다. 특히 엔비디아 GPU에서 허깅페이스 트랜스포머 라이브러리 성능을 최대 2.5배까지 향상시켜, 메모리와 연산 집약적인 LLM 미세 조정 작업을 보다 빠르게 수행할 수 있도록 지원한다.

 언슬로스 미세 조정 요구 사항.jpg

네모트론 3 오픈 모델 제품군 공개

엔비디아는 미세 조정을 위한 핵심 모델 기반으로 네모트론 3 오픈 모델 제품군을 함께 공개했다. 네모트론 3은 나노, 슈퍼, 울트라 모델로 구성되며, 하이브리드 MoE(Mixture of Experts) 아키텍처를 기반으로 설계됐다. 오픈 모델과 함께 데이터, 라이브러리까지 포함해 에이전틱 AI 워크로드에 최적화된 성능과 효율성을 동시에 제공한다.

 DGX 스파크의 라마 제품군 미세 조정 성능.jpg

미세 조정 방식별 선택지

미세 조정은 AI 모델에 특정 목적에 맞는 학습을 집중적으로 수행해 정확도를 높이는 과정이다. 파라미터 효율적 미세 조정은 모델의 일부만 업데이트해 빠르고 비용 효율적인 훈련을 가능하게 한다. 완전 미세 조정은 모델 전체를 조정해 특정 형식과 가드레일을 유지해야 하는 AI 에이전트와 챗봇 개발에 적합하다. 강화 학습은 피드백 신호를 활용해 모델 행동을 지속적으로 개선하는 방식으로, 고급 자율 에이전틱 AI 구현에 활용된다. 각 방식은 데이터 규모와 VRAM 요구 사항이 달라 개발 환경에 맞는 선택이 필요하다.

 

엔비디아 GPU 최적화로 성능·효율 동시 확보

LLM 미세 조정은 대규모 행렬 연산을 반복 수행하는 고난도 작업으로, GPU의 병렬 처리 성능이 필수적이다. 언슬로스는 복잡한 연산을 맞춤형 GPU 커널로 최적화해 훈련 속도와 효율을 동시에 높인다. 엔비디아 하드웨어에 맞춰 설계된 이 프레임워크는 VRAM 사용량을 줄이면서도 높은 성능을 유지해, 연구자와 개발자가 미세 조정을 보다 쉽게 활용할 수 있도록 지원한다. 또한 다양한 LLM 구성과 하이퍼파라미터 설정을 위한 가이드와 단계별 워크플로우를 함께 제공한다.

 

#엔비디아 #NVIDIA #네모트론3 #Nemotron #언슬로스 #Unsloth #LLM미세조정 #RTXAIPC #DGXSpark #에이전틱AI

 

 
?

  1. ​​​​​​​HPE, DB생명 확장형 소버린 AI 파운데이션 구축 파트너 선정

    - 생성형 AI 코파일럿·그린레이크 플렉스 기반 LLMOps 플랫폼 구축 HPE가 DB생명의 인공지능(AI) 전환을 위한 확장형 소버린 AI 파운데이션 구축 파트너로 선정됐다. HPE는 생성형 AI 코파일럿과 그린레이크 플렉스 솔루션을 기반으로 DB생명의 고객 서비스 현...
    Date2026.01.22 Bynewsit Views182
    Read More
  2. 아비바-HD한국조선해양, 디지털 선박 설계 환경 고도화 협력

    - 통합 설계 솔루션 공급 계약 체결…HD현대 조선 3사 적용 확대 산업용 소프트웨어 기업 아비바가 HD한국조선해양과 협력을 강화하고 디지털 기반 선박 설계 환경 고도화에 나선다. 아비바는 HD한국조선해양과 함께 HD현대 조선 부문 3사에 통합 설계 솔루션을...
    Date2026.01.22 Bynewsit Views189
    Read More
  3. 서비스나우·오픈AI, 엔터프라이즈 AI 성과 가속 위한 전략적 협력 확대

    - 다년 계약 기반 최첨단 오픈AI 모델 역량 직접 활용 - STS·네이티브 음성 기술로 언어 장벽 제거 및 자연스러운 상호작용 구현 - 서비스나우 고객 대상 오픈AI 모델 우선 AI 지능 제공 서비스나우는 오픈AI와 에이전틱 AI 경험 강화를 위한 전략적 협력을 확...
    Date2026.01.21 Bynewsit Views170
    Read More
  4. 티맥스티베로, 근로복지공단 ‘고용·산재보험 토탈서비스’ 클라우드 네이티브 전환 성료

    - 대규모 트래픽 환경서 응답 속도 95% 개선 - 티베로 DBMS 기반 MSA 최적화로 무중단 운영 구현 공공 대국민 행정 시스템의 클라우드 네이티브 전환이 성능 개선 성과로 이어지고 있다. 데이터베이스 전문기업 티맥스티베로는 근로복지공단의 핵심 대국민 서...
    Date2026.01.21 Bynewsit Views169
    Read More
  5. 케이투스, 데이터센터 운영 플랫폼 KSManage 고도화…AI 인프라 가시성 강화

    - 부품부터 AI 작업까지 4단계 통합 가시성으로 안정성·운영 효율 동시 강화 엔드투엔드 AI 및 액체냉각 솔루션 전문기업 케이투스가 AI 데이터센터 운영·관리 플랫폼 ‘KSManage’를 업그레이드하며, AI 데이터센터 운영 가시성과 안정성 강화에 나섰다. 이번에...
    Date2026.01.20 Bynewsit Views169
    Read More
  6. 세일즈포스, WEF 2026서 AI 컨시어지 앱 ‘EVA’ 공개

    - 에이전트포스 360 기반 에이전틱 AI로 3,000여 명 참석자 일정·의사결정 지원 - 단순 챗봇 넘어 추론·행동 수행… WEF AX 가속화 사례 제시 세일즈포스가 56회 세계경제포럼(WEF) 연차총회에서 AI 컨시어지 애플리케이션 ‘EVA’를 공개했다. EVA는 에이전트포...
    Date2026.01.19 Bynewsit Views206
    Read More
  7. HS효성인포메이션시스템, AI 데이터 레이크 고도화로 스트라드비젼 학습·검증 효율 개선

    - 오브젝트 스토리지·올플래시 NAS 최적 설계로 GPU 활용률·데이터 처리 성능 동시 향상 - 단순 구축 넘어 AI 비즈니스 성장을 고려한 중장기 인프라 전략 지원 AI·데이터 인프라 솔루션 기업 HS효성인포메이션시스템이 자율주행 AI 비전 인식 기업 스트라드비...
    Date2026.01.19 Bynewsit Views177
    Read More
  8. 티맥스티베로, 삼성클라우드플랫폼 마켓플레이스에 이중화 기술 ‘TAC’ 등록

    - 공유 디스크 기반 액티브-액티브 이중화로 공공 클라우드 서비스 연속성 대응 - 공공 IT 장애 이후 확산되는 고가용 DB 수요에 대안 제시 데이터베이스 전문기업 티맥스티베로가 티베로 DBMS의 공유 디스크 기반 고가용성 클러스터링 솔루션 ‘티베로 TAC(Tib...
    Date2026.01.16 Bynewsit Views225
    Read More
  9. 알리바바, Qwen 앱 고도화… 커머스·결제·여행 잇는 에이전틱 AI 공개

    - 커머스·여행·결제·생활 서비스 아우르는 실행형 AI로 진화 알리바바그룹이 소비자 대상 AI 애플리케이션 Qwen 앱의 대규모 업데이트를 공개하며, ‘에이전틱 AI(Agentic AI)’ 전략을 본격화했다. 이번 업데이트는 고도화된 AI 역량을 일상 서비스 실행 단계까...
    Date2026.01.16 Bynewsit Views172
    Read More
  10. 티유브이슈드, 국립목포대·대만 TIWTC와 풍력 안전·기술 인재 양성 협약

    - 신안 GWO 교육센터 기반, 풍력산업 안전 및 기술 역량 고도화를 위한 3자 협력 글로벌 시험 인증기관 티유브이슈드(TUV SUD)는 국립목포대학교, 대만국제풍력교육공사(TIWTC)와 풍력산업 인력 양성 및 안전, 기술 교육 강화를 위한 업무협약(MOU)을 체결했다...
    Date2026.01.16 Bynewsit Views150
    Read More
목록
Board Pagination Prev 1 ... 12 13 14 15 16 17 18 19 20 21 ... 236 Next
/ 236
CLOSE