(사진=엔씨소프트) 엔씨소프트(공동대표 김택진, 박병무)는 국내 최초로 거대언어모델(LLM)의 성능과 수행능력을 검증하는 평가모델 ‘VARCO Judge LLM’을 출시했다고 23일 밝혔다. ‘VARCO Judge LLM’은 다른 LLM이 얼마나 빠르고 정확하게 작업을 수행하는지 검사하는 평가모델이다. 최근 기업들은 시장에서 서비스 중인 다양한 유형, 규모의 LLM 가운데 적합한 모델을 찾기 위해 많은 시간을 소비하고 있다. 이때 ‘VARCO Judge LLM’을 사용하면 보다 효과적으로 자사 AI 서비스에 적합한 LLM 모델을 검증할 수 있다는 것이 엔씨소프트의 설명이다. 엔씨는 올해 세계적인 권위를 갖는 NLP 학회 ‘EMNLP(Empirical Methods in Natural Language Processing)‘에 LLM 평가모델 논문을 게재하며 글로벌 무대에서도 기술력을 입증받은 바 있다. 국내 게임사 최초로 자체 언어모델을 개발한 엔씨는 게임 개발 과정과 사내 업무 효율화 전반에 AI 기술을 적극 활용하고 있다. 이번 평가모델 출시를 통해 자체 LLM ‘바르코(VARCO)’의 품질 향상과 함께 LLM 모델 평가 분야에서 선도적 위치를 확보한다는 계획이다. NC Research 이연수 본부장은 “빠르게 진화하는 AI 시장에서 각자 산업에 맞는 최적의 모델을 선별하고 적용하는 서비스가 더욱 중요해지고 있다”며 “VARCO Judge LLM은 기존 LLM 기반 서비스의 품질 향상을 넘어 AI 비즈니스에서 없어서는 안 될 중요한 도구로 자리매김할 것”이라고 말했다.

엔씨소프트, 국내 첫 LLM 성능 검증 ‘바르코 Judge LLM’ 출시

언어모델(LLM)의 성능과 수행능력을 검증하는 평가모델 공개

백민재 기자 승인 2024.09.23 11:13 의견 0
(사진=엔씨소프트)

엔씨소프트(공동대표 김택진, 박병무)는 국내 최초로 거대언어모델(LLM)의 성능과 수행능력을 검증하는 평가모델 ‘VARCO Judge LLM’을 출시했다고 23일 밝혔다.

‘VARCO Judge LLM’은 다른 LLM이 얼마나 빠르고 정확하게 작업을 수행하는지 검사하는 평가모델이다. 최근 기업들은 시장에서 서비스 중인 다양한 유형, 규모의 LLM 가운데 적합한 모델을 찾기 위해 많은 시간을 소비하고 있다. 이때 ‘VARCO Judge LLM’을 사용하면 보다 효과적으로 자사 AI 서비스에 적합한 LLM 모델을 검증할 수 있다는 것이 엔씨소프트의 설명이다.

엔씨는 올해 세계적인 권위를 갖는 NLP 학회 ‘EMNLP(Empirical Methods in Natural Language Processing)‘에 LLM 평가모델 논문을 게재하며 글로벌 무대에서도 기술력을 입증받은 바 있다.

국내 게임사 최초로 자체 언어모델을 개발한 엔씨는 게임 개발 과정과 사내 업무 효율화 전반에 AI 기술을 적극 활용하고 있다. 이번 평가모델 출시를 통해 자체 LLM ‘바르코(VARCO)’의 품질 향상과 함께 LLM 모델 평가 분야에서 선도적 위치를 확보한다는 계획이다.

NC Research 이연수 본부장은 “빠르게 진화하는 AI 시장에서 각자 산업에 맞는 최적의 모델을 선별하고 적용하는 서비스가 더욱 중요해지고 있다”며 “VARCO Judge LLM은 기존 LLM 기반 서비스의 품질 향상을 넘어 AI 비즈니스에서 없어서는 안 될 중요한 도구로 자리매김할 것”이라고 말했다.

저작권자 ⓒ뷰어스 무단전재 및 재배포 금지