AI서비스를 도입하려는 기업이나 기관들의 가장 큰 고민은 비용부담과 선택의 문제다. AI가 대세로 자리잡음에 따라 AI시스템 구축 필요성이 높아지고 있으나, 어떤 모델이 가장 적합한 지, 또 어떤 모델이 가성비가 높은지 구분하기 쉽지않다.
최근 AI 전환을 시도하는 기업들은 시장에서 서비스 중인 다양한 유형, 규모의 LLM 가운데 적합한 모델을 찾기 위해 많은 시간을 소비하고 있다.
이처럼 시중에 나와있는 각종 LLM이 얼마나 빠르고 정확하게 작업을 수행하는 지 비교 검사하는 AI 평가 모델이 국내 최초로 출시됐다. 이에 따라 사용자들이 각자 자신들의 서비스에 최적화한 모델을 채택하는 데 큰 효과를 볼 전망이다.
엔씨소프트는 AI 거대언어모델(LLM)의 성능과 수행 능력을 검증 및 비교 평가하는 '바르코 저지(VARCO Judge LLM)'을 출시했다고 23일 밝혔다.
'바르코 저지 LLM'은 AI 기반 서비스를 만드는 기업이나 기관들이 각종 LLM의 품질을 빠르게 비교·평가할 수 있는 게 특징이다.
연구개발 기업의 경우는 개발한 LLM의 성능 수준을 검증해 성능 우위를 입증하거나, 약점을 빠르게 파악해 보강할 수 있는 잇점이 있다.
모델 허브 사업자는 LLM을 선택, 최적화·배포하는 프로세스를 가속화함으로써 효과적으로 모델을 제공할 수도 있다.
엔씨소프트는 '바르코 저지 LLM'이 동급 모델 중에서 가장 높은 성능을 갖췄으며 이를 통해 자체 LLM '바르코'의 품질 향상에 박차를 가할 계획이라고 밝혔다.
자체 LLM을 개발한 엔씨는 게임 개발 과정과 사내 업무 효율화 전반에 AI기술을 적극 활용하고 있다. 이번 평가모델 출시를 통해 자체 LLM '바르코' 품질 향상과 함께 LLM 모델 평가 분야에서 선도적 위치를 확보한다는 계획이다.
이연수 엔씨소프트 리서치본부장은 "빠르게 진화하는 AI 시장에서 각자 산업에 맞는 최적의 모델을 선별하고 적용하는 서비스는 더욱 중요해졌다"며 "바르코는 기존 LLM 기반 서비스의 품질 향상을 넘어 AI사업에 없어서는 안 될 중요한 도구로 자리매김할 것"이라고 강조했다.
댓글
0