[Pangyo Tech] 카카오엔터프라이즈, 자체 AI모델로 한국어 기계독해 평가 1위 석권

카카오엔터프라이즈는 자체 개발한 자연어처리 AI 모델이 한국어 기계독해 데이터셋 ‘코리안 퀘스천 앤서링 데이터셋 2.0(이하 KorQuAD 2.0)’ 성능 평가에서 1위를 차지했다고 밝혔다.

‘KorQuAD 2.0’은 대규모 한국어 질의응답 데이터셋으로 2018년 12월 ‘KorQuAD 1.0’이 오픈소스로 공개된 이후 현재 2.0은 △리스트, 표 등이 포함된 HTML 문서의 이해 △방대한 문서를 빠르게 처리하는 기술 등을 요구하며 한층 난도가 올라간 상태다. 평가는 데이터셋에서 추출한 내용을 질문으로 제시하고, 이에 대해 AI 모델이 정확한 답을 찾아내는 방식으로 이뤄진다.

카카오엔터프라이즈의 자연어처리 모델 ‘리틀버드-라지(LittleBird-large)’는 정확도 90.22점을 기록하며 1위에 올랐다. 정확도 뿐만 아니라 처리 속도 역시 기존 1위 모델 대비 약 1.7배 빠른 수치를 기록했다. 또한 모델 사이즈를 최적화해 추론 속도를 높이고 실용성을 제고하도록 함께 개발된 ‘리틀버드-베이스(LittleBird-base)’ 모델은 정확도 88.57점으로 6위를 기록하며 유사 성능의 타사 모델 대비 약 3.4배 빠른 속도로 데이터를 처리하는 성과를 거뒀다.

카카오엔터프라이즈는 해당 모델을 지속적으로 고도화해 검색, 챗봇을 비롯해 AI 컨택센터인 ‘카카오 i 커넥트 센터’에 적용할 예정이다. 예를 들어 ‘카카오 i 커넥트 센터’에 적용하면 AI 상담사가 해당 기계독해 모델을 적용한 지식 검색 시스템을 활용, 고객의 질의나 요청에 대해 한층 정확한 답변을 제공할 수 있게 된다.

지난 2019년에도 카카오의 자체 언어모델이 ‘KorQuAD 1.0’에서 1위에 오른 바 있다. 당시 카카오의 언어모델은 평가 주체인 인간의 문장 판별 및 독해 능력 수준(Human Performance)이라고 밝혀진 91.20점보다 0.65점 높은 91.85점을 받으며 AI가 인간보다 높은 점수를 기록한 최초의 사례로 기록됐다.

카카오엔터프라이즈 최동진 AI 랩 앤 서비스(Lab & Service)장은 “기계독해는 문서를 단순히 이해하는 것을 넘어 분석, 추론을 통해 최적화된 답을 제공하는 기술로, AI를 활용한 실서비스에 직접적인 영향을 끼친다”라며 “카카오엔터프라이즈는 앞으로 자연어처리는 물론 비전, 음성 등 다양한 영역에서 연구 역량을 강화해 나갈 것”이라고 밝혔다.

출처: 판교테크노밸리 공식 뉴스룸

→ ‘아시아 혁신 허브 판교테크노밸리 2021’ 뉴스 바로 가기