과학기술정보통신부에 따르면 ｢독자 AI 파운데이션 모델｣ 프로젝트(이하 독파모)의 2차 단계평가 결과를 상세히 공개한다고 밝혔다.

이번 발표는 2026년 8월 27일에 이루어졌으며, 독파모는 단순한 순위 경쟁이나 탈락 팀 선정을 목적으로 하지 않고, 국내 AI 생태계의 질적 성장과 확장을 견인하는 데 그 취지가 있다.

평가 결과 공개에 따른 일부 기업의 예기치 않은 직·간접적 피해를 최소화하고, 평가 과정·결과에 대한 공정성과 투명성의 가치를 균형 있게 고려하기 위해 결과 공개 범위에 신중을 기해 왔다.

그러나 8월 27일 모티프테크놀로지스(이하 모티프)가 세부 평가 결과 공개를 요청하였고, 다른 정예팀들도 이에 동의함에 따라 독파모 2차 단계평가 세부 점수를 공개하게 되었다.

독파모는 빠른 AI 기술 진화 상황 등을 고려하여 6개월마다 AI 모델 개발 목표를 변경하고 있으며, 이에 따라 단계평가 기준과 방식도 매차시마다 정예팀 협의를 통해 마련 중이다.

이번 2차 단계평가 기준과 방식 역시 정예팀들과 수차례 협의하여 마련하였으며, 평가 전 최종안을 공식 안내한 결과 정예팀 이견이 없었다.

지난 보도자료(8.18일)와 보도설명자료(8.20일)를 통해 상세 평가 기준과 주요 점수를 공개한 바 있으며, 이번에 상세 점수를 추가로 공개한다.

2차 단계평가는 ①벤치마크 평가(①-1AAII 벤치마크 평가, ①-2NIA 벤치마크 평가), ②전문가 평가, ③사용자 평가(③-1AI 전문 사용자진 평가, ③-2일반국민 평가)를 병행하였다.

①-1AAII(Artificial Analysis Intelligence Index, 이하 AAII) 벤치마크 평가는 AA에서 6월말 공표한 기준을 채택해 진행하였으며, AA가 직접 평가 결과를 도출해 제공하였다.

AAII 벤치마크 점수는 사전에 공지한 대로 25점 만점 스케일링해 최종 점수에 반영하였다. AAII 벤치마크 평가 점수는 모티프 정예팀이 11.9점으로 1위, 업스테이지 정예팀이 9.4점으로 2위, SKT 정예팀이 8.8점으로 3위, LG AI연구원이 7.8점으로 4위를 기록하였다.

①-2NIA(한국지능정보사회진흥원, 이하 NIA) 벤치마크는 7개 분야(수학, 지식, 장문이해, 안전성(사회적 안전성 포함), 신뢰성, 한국어, 지시이행) 벤치마크 데이터셋으로 NIA에서 평가 결과를 도출하고 15점 만점 스케일링해 최종 점수에 반영하였다.

NIA 벤치마크 평가 점수는 SKT 정예팀이 13.4점으로 1위, 업스테이지 정예팀이 13.3점으로 3위, LG AI연구원 정예팀이 12.8점으로 3위, 모티프 정예팀이 12.7점으로 4위를 기록하였다.

②전문가 평가는 외부 전문가(산업계 3명, 학계 5명, 연구계 2명)로 평가위원회를 구성해 추진하였으며, 정예팀이 제출한 평가서류 등을 바탕으로 약 5일 간의 서면평가와 QnA를 병행해 진행하였다.

전문가 평가 기준은 1)개발 전략 및 기술 10점, 2)개발 성과 및 계획 10점, 3)파급효과 및 기여계획 15점이며, 각 평가위원 별 점수는 이를 합산하여 산정하였다.

전문가 평가 점수는 LG AI연구원 정예팀이 29.5점으로 1위, SKT 정예팀이 29.3점으로 2위, 업스테이지 정예팀이 29.1점으로 3위, 모티프 정예팀이 27.1점으로 4위를 기록하였다.

③-1AI 전문 사용자진 평가는 AI에 대한 전문적인 식견·경험 등을 갖춘 AI 스타트업 대표들로서 이해충돌 확인 등을 거쳐 50명이 선정되어, 실제 49명이 평가에 참여하였다.

각 팀의 AI 사용 웹사이트를 기반으로 AI 사용성 등에 대한 평가를 진행해 최저 1점부터 최고 5점까지 점수를 부여하도록 하였고, 이를 합산해 15점 만점으로 스케일링하여 최종 점수를 산출하였다.

AI 전문 사용자진 평가는 SKT 정예팀이 11.6점으로 1위, LG AI연구원 정예팀이 11.3점으로 2위, 업스테이지 정예팀이 10.8점으로 3위, 모티프 정예팀이 8.4점으로 4위를 기록하였다.

③-2일반 국민 평가는 일반 국민에 대한 대표성 제고를 위해, 충분한 기간 동안 공모한 후, 국내 주민등록인구 통계 기준으로 성별·연령별 쿼터를 설정하고, 시스템을 통해 무작위로 200명이 선정되었고, 실제 185명이 평가에 참여하였다.

국민 평가단의 평가 역시 정예팀별 절대평가로 진행되어, 최저 1점부터 최고 5점까지 점수를 부여하도록 하였고, 이를 합산한 후 10점 만점으로 스케일링하여 최종 점수를 산출하였다.

이를 종합한 일반 국민 평가는 LG AI연구원이 7.6점으로 1위, SKT 정예팀이 7.5점으로 2위, 업스테이지 정예팀이 7.3점으로 3위, 모티프 정예팀이 5.7점으로 4위를 기록하였다.

앞선 평가 점수를 종합한 결과, SKT 정예팀이 70.6점으로 1위, 업스테이지 정예팀이 69.9점으로 2위, LG AI연구원 정예팀이 69.0점으로 3위, 모티프 정예팀이 65.8점으로 4위를 기록하였다.

이번 결과 공개 이후에도, 우리 기업들이 단순한 점수나 순위로 평가받기보다, 보유한 저력과 역량을 바탕으로 국내외 AI 생태계에 폭넓게 기여하고, 우리 AI 생태계가 새롭고 경쟁력 있는 AI 기업들이 끊임없이 도전하는 역동적인 생태계로 발전해 나가기를 기대한다고 밝혔다.

담당 부서는 인공지능정책실이며, 책임자는 양기성 과장(044-202-6560), 담당자는 이현우 사무관(044-202-6566)이다.