【드래곤 스포츠】 보증업체놀이터추천홍보 : 프로그램제작판매제작의뢰 : 스포츠분석 : 무료스포츠중계tv : 섹시bj움짤 : 뉴스 : 안구정화

로그인

글쓰기

[IT뉴스][AI프리즘] AI 벤치마크 전문업체 한국 공략…독파모 평가 관심

온카뱅크관리자

2026-08-07 06:37:29

<div id="layerTranslateNotice" style="display:none;"></div> 일부 참여사 협력 알려져…평가 방식에 관심 집중 정부 "외부 데이터 구매 가능"…전문가·국민평가 병행 
 <div class="article_view" data-translation-body="true" data-tiara-layer="article_body" data-tiara-action-name="본문이미지확대_클릭"> 
 <section dmcf-sid="7AJc3NjJY9">
 <figure class="figure_frm origin_fig" contents-hash="e453a0a2532adaa01e619336d48b04b60336354185ef4ff32afae505a33e8375" dmcf-pid="zTmy8SvmZK" dmcf-ptype="figure">
 <img alt="소버린 AI (PG) [김선영 제작] 일러스트" class="thumb_g_article" data-org-src="https://t1.daumcdn.net/news/202608/07/yonhap/20260807063456191flsv.jpg" data-org-width="1200" dmcf-mid="pKD2wbKpYf" dmcf-mtype="image" height="auto" src="https://img4.daumcdn.net/thumb/R658x0.q70/?fname=https://t1.daumcdn.net/news/202608/07/yonhap/20260807063456191flsv.jpg" width="658">
 <figcaption class="txt_caption default_figure">
 소버린 AI (PG) [김선영 제작] 일러스트
 </figcaption>
 </figure>
 (서울=연합뉴스) 권하영 기자 = 국가대표 인공지능(AI)을 선발하는 독자 AI 파운데이션 모델(독파모) 프로젝트의 2차 평가 결과 발표를 앞두고 벤치마크 평가의 신뢰성과 활용 범위를 둘러싼 논의가 이어지고 있다. 
 AI 벤치마크 성능 개선을 지원하는 해외 전문업체들이 국내 시장 공략에 나선 가운데 일부 독파모 참여사가 이들 업체와 협력하는 것으로 알려지면서, 이러한 협력이 독파모 취지와 평가 방식에 어떤 영향을 미칠지를 두고 업계 안팎의 관심이 커지고 있다.
 독파모 2차 평가 앞두고 벤치마크 활용 주목
 7일 AI 업계에 따르면 애프터쿼리, 스케일AI, 머코 등 미국 AI 학습 전문업체들이 최근 한국 시장 영업을 본격화하고 있다. 
 이들은 지난달 서울에서 열린 머신러닝 분야 최고 권위 학회 'ICML 2026'에 참석해 국내 주요 AI 모델 개발사들을 대상으로 사업을 제안한 것으로 전해졌다.
 업계에서는 일부 독파모 참여사가 이들 업체가 제공하는 데이터나 관련 서비스를 활용하는 방안을 협의하거나 협력한 사례가 있는 것으로 전해졌다. 다만 구체적인 계약 내용과 해당 데이터가 독파모 모델 개발에 실제 사용됐는지는 확인되지 않았다.
 이들 업체는 AI 모델의 사후학습용 데이터 제공과 성능 평가·개선 등을 지원한다. 업계에서는 벤치마크 취약 항목을 분석해 관련 성능을 집중적으로 높이는 방식을 '벤치맥싱(Benchmaxxing)'이라고 부르기도 한다.
 단순히 사전학습용 데이터 판매가 아니라 사후학습 과정에서 모델이 어떤 작업을 실패하는지 분석하고 '검증 가능한 보상을 통한 강화학습(RLVR)' 기법에 최적화된 데이터를 가공해 납품하는 식이다.
 RLVR은 정답이 명확한 문제를 AI에게 반복적으로 풀게 해 스스로 실력을 끌어올리는 학습법으로, AI 모델 성능에 큰 영향을 미친다.
 애프터쿼리는 엔비디아의 '네모트론 3 울트라' 학습 과정에 자사 데이터와 사후학습 방식이 활용된 결과, 실무 수행 능력 평가 지표인 GDPval 평가 점수가 35.3점에서 46.7점으로 상승했다고 홈페이지에서 소개하고 있다.
 <figure class="figure_frm origin_fig" contents-hash="a74a647d8ef3c99284efbae3f398fac9366ef46da9db215fac06fb0e71642df1" dmcf-pid="6b3KEqB3HF" dmcf-ptype="figure">
 <img alt="'독자 AI 파운데이션 모델' 1차 발표회 (서울=연합뉴스) 강민지 기자 = 배경훈 부총리 겸 과학기술정보통신부 장관, 임문영 국가인공지능전략위원회 부위원장, 하정우 AI미래기획수석비서관 등이 30일 오후 서울 강남구 코엑스에서 열린 '독자 AI 파운데이션 모델' 프로젝트 1차 발표회에서 기념촬영을 하고 있다. 2025.12.30 mjkang@yna.co.kr" class="thumb_g_article" data-org-src="https://t1.daumcdn.net/news/202608/07/yonhap/20260807063456380ytyx.jpg" data-org-width="1200" dmcf-mid="U6lMSPQ9tV" dmcf-mtype="image" height="auto" src="https://img2.daumcdn.net/thumb/R658x0.q70/?fname=https://t1.daumcdn.net/news/202608/07/yonhap/20260807063456380ytyx.jpg" width="658">
 <figcaption class="txt_caption default_figure">
 '독자 AI 파운데이션 모델' 1차 발표회 (서울=연합뉴스) 강민지 기자 = 배경훈 부총리 겸 과학기술정보통신부 장관, 임문영 국가인공지능전략위원회 부위원장, 하정우 AI미래기획수석비서관 등이 30일 오후 서울 강남구 코엑스에서 열린 '독자 AI 파운데이션 모델' 프로젝트 1차 발표회에서 기념촬영을 하고 있다. 2025.12.30 mjkang@yna.co.kr
 </figcaption>
 </figure>
 벤치마크 최적화, 독파모 평가 기준과 충돌 여부 관심
 그동안 벤치맥싱에 대한 우려는 AI 업계 안팎에서 꾸준히 제기돼 왔다.
 오픈AI 공동 창업자 출신인 안드레이 카파시 앤트로픽 AI 연구원은 지난해 연간 보고서를 통해 "벤치마크에 대한 신뢰를 잃었다"고 밝혔다. 
 RLVR 학습법이 벤치마크 취약점을 파고드는 데 효과적인 탓에 성능과 관계없이 점수만 끌어올리는 벤치맥싱이 업계에 일반화됐다는 지적도 나온다.
 국내 AI 업계 관계자도 "벤치마크 점수만 올린 모델이 실제 성능까지 담보하지는 않는다"고 말했다.
 이 같은 사업 협력이 독파모 규정과 충돌할 수 있다는 지적도 나온다.
 현행 독파모 공모안내서는 위탁용역 허용 범위를 "행사 대행, 운영 등의 일반업무"로 한정하면서 "용역사가 수행과제의 핵심 기술이나 서비스를 개발하는 것은 불가"라고 규정하고 있다.
 이에 따라 외부 업체의 역할이 기성 데이터 공급에 그치는지, 모델별 성능 분석과 맞춤형 데이터 설계까지 포함하는지에 따라 공모 기준 적용 여부가 달라질 수 있다는 의견이 나온다.
 이들 전문업체가 주로 공략하는 지표가 글로벌 벤치마크 평가 '아티피셜 애널리시스 인텔리전스 인덱스(AAII)'라는 점도 주목된다. 
 이번 독파모 2차 평가에서 벤치마크 평가 점수는 총 40점으로, 전문가 평가(35점)·사용자 평가(25점)보다 배점이 높다. 벤치마크 평가 40점 중에서는 AAII가 25점, 한국지능정보사회진흥원(NIA) 벤치마크 평가가 15점을 차지한다.
 <figure class="figure_frm origin_fig" contents-hash="2cf4903d50dc8037a4fea7bd42336c8a0cf9c6e3289a84a1dfeb0a1c2254da9d" dmcf-pid="5nPLHJiPGT" dmcf-ptype="figure">
 <img alt="과기부, 독자AI 파운데이션 모델 프로젝트 1차 단계평가 결과 발표 (서울=연합뉴스) 이정훈 기자 = 류제명 과학기술정보통신부 2차관이 15일 서울 종로구 정부서울청사에서 독자AI 파운데이션 모델 프로젝트 1차 단계평가 결과를 발표하고 있다. 2026.1.15 uwg806@yna.co.kr" class="thumb_g_article" data-org-src="https://t1.daumcdn.net/news/202608/07/yonhap/20260807063456566krfm.jpg" data-org-width="1200" dmcf-mid="uo74s2V7X2" dmcf-mtype="image" height="auto" src="https://img3.daumcdn.net/thumb/R658x0.q70/?fname=https://t1.daumcdn.net/news/202608/07/yonhap/20260807063456566krfm.jpg" width="658">
 <figcaption class="txt_caption default_figure">
 과기부, 독자AI 파운데이션 모델 프로젝트 1차 단계평가 결과 발표 (서울=연합뉴스) 이정훈 기자 = 류제명 과학기술정보통신부 2차관이 15일 서울 종로구 정부서울청사에서 독자AI 파운데이션 모델 프로젝트 1차 단계평가 결과를 발표하고 있다. 2026.1.15 uwg806@yna.co.kr
 </figcaption>
 </figure>
 일각에서는 국가 차원의 독자 AI 역량 확보 사업인 만큼 외부 데이터와 성능 개선 서비스의 활용 범위 및 평가 모델에 대한 기여도를 투명하게 공개할 필요가 있다는 의견도 나온다.
 정부 "외부 데이터 구매 가능…전문가·국민평가로 보완"
 다만 정부는 이 같은 우려에 선을 긋고 있다.
 과학기술정보통신부 관계자는 "외부 데이터 구매는 독자성 기준과 무관하며 용역을 금지한 핵심 기술·서비스 개발에도 해당하지 않는 것으로 보인다"며 "또한 전문가 평가와 이용자 평가를 병행하는 만큼 벤치마크 과적합 문제가 있더라도 충분히 보완될 수 있다"고 설명했다.
 정부는 이달 8일부터 11일까지 진행되는 국민 평가를 마지막으로 현재 독파모 프로젝트에 참여 중인 LG AI연구원, SK텔레콤, 업스테이지, 모티프테크놀로지스 등 4개 정예팀 중 3팀이 살아남는 2차 평가 결과를 조만간 발표할 예정이다.
 kwonhy@yna.co.kr
 ▶제보는 카톡 okjebo
 </section> 
 </div> 
 Copyright © 연합뉴스. 무단전재 -재배포, AI 학습 및 활용 금지

댓글 총 0개

이번주 포인트랭킹

매주 일요일 밤 0시에 랭킹을 초기화합니다.

14,000상품권
23,000상품권
32,000상품권

업체홍보/구인 더보기

놀이터홍보 더보기

지식/노하우 더보기

판매의뢰 더보기

포토 더보기