데이터품질 인증 첫 주인공 '셀렉트스타'

[아이뉴스24 안세준 기자] 한국정보통신기술협회(회장 손승현, TTA)는 셀렉트스타(대표 김세엽)가 개발한 'LLM 무해성 평가 데이터'에 데이터품질 인증(DQ 인증)을 국내 최초로 부여했다고 16일 밝혔다.

DQ 인증은 데이터 산업진흥 및 이용 촉진에 관한 기본법에 근거해 데이터 내용과 관리체계를 심사해 인증하는 제도다. TTA는 과학기술정보통신부로부터 데이터품질 인증기관으로 지정받아 정형 데이터, 비정형 데이터, 데이터 관리체계 등 3가지 영역에서 인증 서비스를 제공하고 있다.

DQ 인증을 받은 셀렉트스타의 LLM 무해성 평가 데이터는 대규모 언어 모델(LLM)이 생성하는 답변의 무해성을 평가하기 위한 벤치마크 데이터다. 편향성, 혐오, 위법성, 민감성 등 주요 4개 영역을 평가할 수 있도록 설계됐다.

TTA는 비정형 데이터 심사체계의 전체 24개 심사항목(필수 9개, 선택 15개) 중에서 LLM 무해성 평가 데이터가 LLM 무해성 관련 벤치마크 데이터로 적합한지를 평가할 수 있는 항목을 도출하고 심사했다. 심사 결과 인증 기준을 충족하는 것으로 평가했다.

TTA는 LLM의 편향성, 위법성 등의 평가에 사용될 질문 문장을 심사하는 과정에서 질문 문장의 명료성과 의미 전달성 등도 심사해 DQ 인증을 부여했다.

손승현 TTA 회장은 "대규모 언어 모델(LLM) 벤치마크 데이터의 품질은 AI 모델이 신뢰받고 안전하게 활용되기 위한 필수 요소"라며 "이번 인증은 LLM 평가 데이터의 품질을 확보함으로써 AI 산업 전반의 발전과 사용자 신뢰 확보에 중요한 역할을 할 것"이라고 말했다.