가장 정확한 대답 내놓은 ‘똑똑한 챗봇’ 2위는 챗GPT…그렇다면 1위는 누구?

작성일 08-29

<div id="layerTranslateNotice" style="display:none;"></div>  <strong class="summary_view" data-translation="true">WP, 9개 AI 모델 대상 성능 실험<br>구글 AI모드 1위...라마·그록 최하위</strong> 
        <div class="article_view" data-translation-body="true" data-tiara-layer="article_body" data-tiara-action-name="본문이미지확대_클릭"> 
         <section dmcf-sid="0u9EsuNfle">
          <figure class="figure_frm origin_fig" contents-hash="4aebc0e9f25452e7c1fb2785a4b1c962486b5239bdc4cb54ca6e61a5dd0d05be" dmcf-pid="p72DO7j4hR" dmcf-ptype="figure">
           <p class="link_figure"><img alt="가장 정확한 답변 낸 AI는 구글…챗GPT는 2위, 메타·xAI는 꼴찌 [그림=제미나이]" class="thumb_g_article" data-org-src="https://t1.daumcdn.net/news/202508/29/mk/20250829055703215wugn.png" data-org-width="512" dmcf-mid="33y4xIKGWd" dmcf-mtype="image" height="auto" src="https://img2.daumcdn.net/thumb/R658x0.q70/?fname=https://t1.daumcdn.net/news/202508/29/mk/20250829055703215wugn.png" width="658"></p>
           <figcaption class="txt_caption default_figure">
            가장 정확한 답변 낸 AI는 구글…챗GPT는 2위, 메타·xAI는 꼴찌 [그림=제미나이]
           </figcaption>
          </figure>
          <div contents-hash="b035e4da7148eb5c63971e6d42e313ee11bff46c804f51f212fb83b19bee30c6" dmcf-pid="UzVwIzA8hM" dmcf-ptype="general">
           인공지능(AI) 챗봇이 인터넷 검색을 대체할 수 있을까.
          </div>
          <p contents-hash="fc0285ccab6451915b3179419a8e7d48b1920cb16b4612447a352e34a593fcbb" dmcf-pid="uqfrCqc6Cx" dmcf-ptype="general">27일(현지시간) 워싱턴포스트는 미국 공공·대학 도서관 사서들과 함께 진행한 실험에서 구글의 ‘AI 모드(AI Mode)’가 가장 정확한 답변을 내놓으며 사실상 우승을 차지했다고 밝혔다. 챗GPT는 전반적으로 개선된 성능을 보였지만 특정 영역에서는 오히려 전작보다 못한 평가도 받았다.</p>
          <p contents-hash="0f5b1adbcee0b2d5f50dfb81d40319f9ec060f8988d5fd38352aeb96238fdf67" dmcf-pid="7qfrCqc6yQ" dmcf-ptype="general">이번 실험은 구글 오버뷰, 구글 AI 모드, 오픈AI(챗GPT), 앤스로픽(클로드), 메타, 그록, 퍼플렉시티 등 9개 AI 도구를 대상으로 진행됐다. 사서들은 30개의 까다로운 질문을 던진 뒤 AI 챗봇의 답변 900건을 채점했다. 평가 기준은 일반 상식, 전문 자료 검색, 최근 사건 대응, 내재한 편향(고정관념이나 편견), 이미지 인식 등 다섯 가지였다.</p>
          <p contents-hash="2dc354bb01dedd7c399209a8539f707f0278ec7fd13c62adc069810bbc5b3c64" dmcf-pid="zB4mhBkPTP" dmcf-ptype="general">일반 상식 질문에서는 구글 AI 모드가 우수했다. 반대로 일론 머스크의 xAI가 내놓은 그록은 사실과 다른 답변을 만들어내는 경우가 잦았다. 전문적인 정보가 필요한 질문에서는 마이크로소프트 빙 코파일럿이 강점을 보였고, 퍼플렉시티와 그록은 틀린 답을 내면서도 근거 없는 링크를 제시했다. 출처를 표기함으로써 마치 정답처럼 보일 수 있지만 실제로는 사실과 다른 답을 한 것이다.</p>
          <p contents-hash="11111368aa67b7af21b562a6edda97203a169ac041568b1cef6ace4d80ee8461" dmcf-pid="qb8slbEQS6" dmcf-ptype="general">최근 사건에 관한 질문은 최신 정보 반영이 관건이었다. 구글 AI 모드와 챗GPT, 그록은 영화 ‘판타스틱 포’의 최신 평점을 직접 확인해 답했지만 메타 AI는 오래된 블로그 글을 인용하며 가장 낮은 점수를 받았다.</p>
          <p contents-hash="2cde1dc18541d409fdf4a72efed2ec066342baa03f450168c75026c712c1118d" dmcf-pid="BK6OSKDxC8" dmcf-ptype="general">‘내 아이가 대학에 간다면 고려해야 할 전공 5가지는?’이라는 질문이 담긴 편향테스트에서 챗GPT는 다양한 관점을 제시해 높은 점수를 받았지만, 메타의 AI는 공학, 과학이 중요하다는 식으로 편향된 답을 내놓아 낮은 점수를 받았다. 2019년 트럼프와 푸틴이 만났을 때 트럼프가 착용한 넥타이 색 등을 묻는 이미지 관련 질문에서는 퍼플렉시티가 상대적으로 선전했지만 많은 모델이 사진 속 인물이나 사물 인식에 실패했다.</p>
          <p contents-hash="e3e82c8e2200ffbae97193843334c4e428a6fa075621b34249d1dcf65a8db6c9" dmcf-pid="b9PIv9wMh4" dmcf-ptype="general">종합적으로 구글의 AI 모드가 가장 신뢰할 만하다는 결론이 나왔다. 챗GPT는 GPT-5가 전반적 성능 개선을 보여 2위를 차지했지만 일부 영역에서는 GPT-4보다 오히려 낮은 점수를 받았다. 메타 AI와 그록은 검색 활용 능력 부족으로 최하위권에 머물렀다. 메타 AI는 답변을 자주 거부했으며 그록은 X에 지나치게 의존해 퀴즈 질문에서 형편없는 결과를 냈다.</p>
          <p contents-hash="a8dc19012ed2a6482446af02baf33c4a163e73ed537b03449fdcbff704488190" dmcf-pid="K2QCT2rRTf" dmcf-ptype="general">워싱턴포스트는 “이번 실험은 AI가 아직 만능 ‘정보 전문가’는 아니라는 점을 보여준다”라며 “특히 전문적 출처가 필요한 질문에서는 AI가 진짜 정보 전문가가 아님이 드러났다”라고 설명했다. 산호세 주립대의 사서 셰어슬리 로드리게스는 워싱턴포스트와 인터뷰에서 “AI가 검색을 쉽게 만들어주지만 출처 확인, 날짜 필터링, 비판적 사고가 없다면 유용한 지식을 얻기는 어렵다”라고 지적했다.</p>
         </section> 
        </div> 
        <p class="" data-translation="true">Copyright © 매일경제 &amp; mk.co.kr. 무단 전재, 재배포 및 AI학습 이용 금지</p>

이전

글로벌 AI 서비스 톱100, 美·中 격전지…"한국 기업은 없었다"

08-29
다음

SKT 과징금, 정보 무단수집한 구글의 2배…역대 최대 과징금 적정성 논란

08-29

등록된 댓글이 없습니다.

로그인한 회원만 댓글 등록이 가능합니다.

먹튀폴리스

가장 정확한 대답 내놓은 ‘똑똑한 챗봇’ 2위는 챗GPT…그렇다면 1위는 누구?

멤버랭킹

관련자료

멤버랭킹