야놀자·이든티앤에스, NIA·업스테이지 선정 '올해의 한국어 LLM'

박찬준 업스테이지 리더(왼쪽부터), 이든티앤에스 최승현 상무와 김연기 대표, 황종성 NIA 원장, 이준영 야놀자 대표, 신신애 NIA 본부장이 5일 NIA 서울사무소에서 열린 '올해의 LLM' 시상식에서 기념촬영을 하고 있다.2024.04.05./사진제공=한국지능정보사회진흥원(NIA)

야놀자와 이든티앤에스의 LLM(거대언어모델)이 한국어 LLM 리더보드 '오픈 Ko-LLM 리더보드'의 우수 모델로 선정됐다.

한국지능정보사회진흥원(NIA)과 업스테이지는 5일 NIA 서울사무소에서 '2023년 올해의 LLM' 시상식을 열고 사전학습 모델 부문에서 '야놀자', 파인튜닝 부문에서 '이든티앤에스'에게 NIA 원장상을 수여했다고 밝혔다.

우수 모델은 오픈 Ko-LLM 리더보드로 접수된 1134개 LLM을 대상으로 추론·상식·언어이해·환각방지·한국어상식생성 지표에 따라 성능을 측정했다.

NIA는 "리더보드의 목적은 한국어 LLM 평가 생태계 구축이며, 생태계의 핵심은 '표준화(Standardization)'"라며 "다양한 능력을 평가할 수 있는 평가지표를 추가하고, 평가방식 등을 지속적으로 개선해 나갈 계획"이라고 밝혔다.