* 워싱턴포스트 원문 기사 링크입니다.

We tested which AI gave the best answers without making stuff up. One beat ChatGPT.

https://www.washingtonpost.com/technology/2025/08/27/ai-search-best-answers-facts/

* 아래부터는 국내 매일경제 번역 기사 일부 인용

https://v.daum.net/v/20250828125700844

https://www.mk.co.kr/news/it/11404934

- 27일(현지시간) 워싱턴포스트는 미국 공공·대학 도서관 사서들과 함께 진행한 실험에서 구글의 ‘AI 모드(AI Mode)’가 가장 정확한 답변을 내놓으며 사실상 우승을 차지했다고 밝혔다. 챗GPT는 전반적으로 개선된 성능을 보였지만 특정 영역에서는 오히려 전작보다 못한 평가도 받았다.

- 이번 실험은 구글 오버뷰, 구글 AI 모드, 오픈AI(챗GPT), 앤스로픽(클로드), 메타, 그록, 퍼플렉시티 등 9개 AI 도구를 대상으로 진행됐다. 사서들은 30개의 까다로운 질문을 던진 뒤 AI 챗봇의 답변 900건을 채점했다. 평가 기준은 일반 상식, 전문 자료 검색, 최근 사건 대응, 내재한 편향(고정관념이나 편견), 이미지 인식 등 다섯 가지였다.

- 일반 상식 질문에서는 구글 AI 모드가 우수했다. 반대로 일론 머스크의 xAI가 내놓은 그록은 사실과 다른 답변을 만들어내는 경우가 잦았다. 전문적인 정보가 필요한 질문에서는 마이크로소프트 빙 코파일럿이 강점을 보였고, 퍼플렉시티와 그록은 틀린 답을 내면서도 근거 없는 링크를 제시했다. 출처를 표기함으로써 마치 정답처럼 보일 수 있지만 실제로는 사실과 다른 답을 한 것이다.

- 최근 사건에 관한 질문은 최신 정보 반영이 관건이었다. 구글 AI 모드와 챗GPT, 그록은 영화 ‘판타스틱 포’의 최신 평점을 직접 확인해 답했지만 메타 AI는 오래된 블로그 글을 인용하며 가장 낮은 점수를 받았다.

[나머지 내용 생략]

-----

* 옮긴이 주: 참고로 기사에서 말하는 구글 AI 모드는 한국에서 현재 영어로만 사용할 수 있습니다.

(제미나이 앱과 다릅니다)

https://www.google.com/aimode