독파모 2차 평가 탈락 모티프, 과기정통부에 이의신청…"평가 세부 결과 공개해야"

모티프테크놀로지스가 27일 정부의 독자 인공지능(AI) 파운데이션 모델(독파모) 사업 2차 평가 결과에 대해 공식 이의 제기를 신청했다고 밝혔다. 모티프는 전체 평가 항목별 상세 점수 공개, 벤치마크 배점 산정 근거 제시, 전문가 평가 기준 공개, 사용자 평가 방법론과 블라인드 평가 적용 여부 공개 등을 요구했다.

모티프가 2차 평가에 제출한 '모티프 3' 모델은 글로벌 AI 종합 성능 지표인 AAII에서 47점을 받아 업스테이지(37점), SK텔레콤(35점), LG AI연구원(31점)보다 높은 점수를 기록했지만 최종 선정에서 탈락했다. 모티프는 "평가 결과 자체는 존중하고 받아들였지만, 언론을 통해 모티프3가 벤치마크 점수만 높았을 뿐 전문가·사용자 평가에서 문제가 있었다고 보도된 것에 대해 평가점수의 상세한 공개와 재심의를 정중히 요청한다"고 밝혔다.

모티프는 독파모 2차 평가가 벤치마크 평가 40점(AAII 25점·NIA 15점), 전문가 평가 35점, 사용자 평가 25점으로 구성된 점을 언급하며, 글로벌 최고 수준 모델의 AAII 점수 63점을 25점 만점으로 환산하면 15.75점에 그쳐 모델 간 실제 성능 차이가 충분히 반영되기 어렵다고 주장했다. 또 AAII 점수가 가장 낮은 LG AI연구원이 전문가 평가에서 1위를 차지한 결과에 대해 "구체적인 판단 근거를 이해하기 어렵다"고 지적했고, 사용자 평가와 관련해서도 블라인드 평가 적용 여부와 상세 결과 공개를 요청했다. 다만 모티프는 "이의 제기 결과와 관계없이 독파모 3차에는 참여하지 않겠다"고 밝혔다.

과기정통부 김경만 인공지능정책실장은 "이의신청은 평가 절차와 형식상의 부당함이 있었는지 검토하게 된다"며 "규정에 따라 15일 이내 검토를 거쳐 전담기관 등을 통해 최종 결정을 내릴 예정"이라고 밝혔다. 그는 점수 공개 요구에 대해 "1차 평가 발표 이후 탈락 기업이 겪은 낙인 효과와 부작용을 깊이 우려했다"며 "전체 공개 범위는 공정성과 생태계 파급력을 고려해 내부 검토 후 결정하겠다"고 전했다.

배경훈 부총리 겸 과기정통부 장관은 "1년 반 전 수립된 평가나 경쟁 방식이 3∼6개월 단위로 급변하는 AI 트렌드에 여전히 유효한지 근본적인 고민이 필요한 시점"이라며 "누구나 인정할 수 있는 세계적인 수준의 모델을 만들기 위해 정부 투자 집중 방식과 평가 제도의 보완을 검토하겠다"고 말했다.

· · · · · · · · · ·

▶ 모티프, 독파모 2차 평가 탈락에 이의 제기…"세부 점수 공개하라"

▶ [속보] '독파모 탈락' 모티프, 재심의·평가점수 상세 공개 요청

· · · · · · · · · ·