[아이뉴스24 최효경·안세준·서효빈 기자] 독자 인공지능(AI) 파운데이션 모델(독파모) 프로젝트 2차 단계평가에서 SK텔레콤 정예팀이 종합 70.6점으로 1위를 차지한 것으로 나타났다. 업스테이지와 LG AI연구원이 뒤를 이었으며, 글로벌 벤치마크 평가에서 1위를 기록한 모티프테크놀로지스는 전문가·사용자 평가에서 밀리며 최하위에 머물렀다.
과학기술정보통신부는 27일 독파모 프로젝트 2차 단계평가에 참여한 4개 정예팀의 항목별 점수와 종합 순위를 공개했다.
평가 결과 SK텔레콤이 70.6점으로 1위를 기록했다. 업스테이지가 69.9점으로 2위, LG AI연구원이 69.0점으로 3위에 올랐다. 2차 평가에서 탈락한 모티프테크놀로지스는 65.8점으로 4위였다.
이번 평가는 벤치마크 평가 40점, 전문가 평가 35점, 사용자 평가 25점 등 총 100점으로 진행됐다. 사용자 평가는 AI 전문 사용자 평가 15점과 일반 국민 평가 10점으로 나눠 실시했다.
SK텔레콤은 벤치마크 평가 22.2점, 전문가 평가 29.3점, 사용자 평가 19.1점을 받았다. 세부적으로 한국지능정보사회진흥원(NIA) 벤치마크에서 13.4점, AI 전문 사용자 평가에서 11.6점으로 각각 1위를 기록했다.
업스테이지는 벤치마크 평가 22.7점, 전문가 평가 29.1점, 사용자 평가 18.1점을 받아 총점 69.9점을 기록했다. 세부 평가에서 1위를 차지한 항목은 없었지만 전 영역에서 고른 점수를 받으며 종합 2위에 올랐다.
LG AI연구원은 벤치마크 평가 20.6점, 전문가 평가 29.5점, 사용자 평가 18.9점으로 총 69.0점을 받았다. 전문가 평가와 일반 국민 평가에서 각각 29.5점과 7.6점으로 최고점을 기록했다.
모티프테크놀로지스는 글로벌 AI 성능을 측정하는 AAII 벤치마크에서 11.9점을 받아 1위를 차지했다. NIA 평가를 합친 전체 벤치마크 점수도 24.6점으로 가장 높았다. 다만 전문가 평가에서 27.1점, 사용자 평가에서 14.1점을 받아 두 부문 모두 최하위를 기록했다.
과기정통부는 지난 18일 3차 단계에 진출한 SK텔레콤·업스테이지·LG AI연구원만 발표한 뒤, 20일 평가 항목별 1위 기업과 최고점수를 추가 공개했다. 이날 모티프테크놀로지스가 전체 세부 평가 결과 공개를 요청하고 다른 정예팀들도 이에 동의하면서 모든 팀의 항목별 점수와 종합 순위까지 공개했다.
과기정통부는 이번 2차 단계평가 기준과 방식은 정예팀들과 수차례 협의를 거쳐 마련했으며, 평가 전 최종안을 공식 안내했을 당시 정예팀의 이견은 없었다고 설명했다.
/공동=최효경 기자(hyomirror@inews24.com),안세준 기자(nocount-jun@inews24.com),서효빈 기자(x40805@inews24.com)