AMD가 라이젠 AI 프로세서에 탑재된 NPU에서 로컬 LLM을 실행하는 오픈소스 프로젝트인 GAIA 를 발표했습니다.
출처에 가면 설치 방법과 사용 방법을 소개하고 있습니다. 모든 시스템에서 쓸 수 있는 버전과 라이젠 AI 프로세서의 NPU와 내장 그래픽을 활용하는 하이브리드 인스톨러가 있습니다.
참고/링크 | https://www.amd.com/en/developer/resourc...en-ai.html |
---|
AMD가 라이젠 AI 프로세서에 탑재된 NPU에서 로컬 LLM을 실행하는 오픈소스 프로젝트인 GAIA 를 발표했습니다.
출처에 가면 설치 방법과 사용 방법을 소개하고 있습니다. 모든 시스템에서 쓸 수 있는 버전과 라이젠 AI 프로세서의 NPU와 내장 그래픽을 활용하는 하이브리드 인스톨러가 있습니다.
지금은 좀 아쉬운 성능이지만 그래도 장기적으로 보면 NPU를 유용하게 쓸 수 있는 장르라고 봐서 기대가 되네요.