LG CNS(LG씨엔에스(064400))가 생성형 AI를 도입하려는 금융사들을 위한 맞춤형 AI 평가 도구를 개발했다고 24일 밝혔다. 이 평가도구는 미리 구축한 데이터셋으로 시중에 공개된 수십개의 개방형 거대언어모델(LLM)을 평가해 뱅킹, 보험, 증권 등 각 금융 서비스에 가장 적합한 AI 모델을 찾아주는 방식으로 작동한다.
개방형 LLM은 공개된 소스코드나 알고리즘으로 누구나 자유롭게 수정하고 활용할 수 있다. 대표적으로 LG AI연구원의 '엑사원 3.5', 메타의 '라마', 알리바바의 '큐원 2.5' 등이 있다. 오픈AI의 '챗GPT'나 구글의 '제미니'같은 폐쇄형 LLM은 내부 소스코드가 공개되지 않아, 기업이 자체 AI 모델로 구축해 활용할 수 없다.
LG CNS의 금융 특화 평가 도구는 29가지 평가지표와 약 1200개의 데이터셋으로 구성돼 있다. 주요 평가 항목은 △금융 지식을 기반으로 추론하는 능력 △수학적 추론 능력 △복잡한 질문 이해력 △문서요약 능력 △금융 용어 이해도 △AI 에이전트(Agentic Tool) 사용 능력 등이다. LG CNS는 특히 AI가 답변하기 어려워하는 금융 관련 추론 문제들을 29개 평가지표에 적용해 정확한 성능 검증이 가능하도록 했다.
LG CNS는 금융 전문가들과의 협업을 통해 데이터셋의 평가 데이터에 실제 금융 현장에서 사용하는 서비스 정보나 전문 지식 등이 정확히 반영됐는지 점검하며 완성도를 높였다. 앞으로 이 평가 도구를 통해 금융기업들이 AI를 도입할 때 최적의 LLM 선정부터 최적화, 안정적인 운영까지 금융권에 특화된 생성형 AI 도입 전 단계에서 차별화된 고객가치를 제공해 나갈 계획이다.
현신균 LG CNS 대표는 "금융 서비스에 생성형 AI를 도입하고자 하는 기업의 가장 큰 고민은 어떤 AI 모델이 서비스에 가장 적합할 지 파악하는 것"이라며 "LG CNS의 금융 특화 AI 평가 도구는 금융 기업들의 고민을 빠르게 해결할 수 있는 최적의 솔루션이 될 것"이라고 말했다.
< 저작권자 ⓒ 서울경제, 무단 전재 및 재배포 금지 >
ryupro@sedaily.com
