* Ars Technica 기사 - “The king is dead”—Claude 3 surpasses GPT-4 on Chatbot Arena for the first time
https://arstechnica.com/information-technology/2024/03/the-king-is-dead-claude-3-surpasses-gpt-4-on-chatbot-arena-for-the-first-time/

(기사 일부 Claude 3 Opus 번역)

화요일, Anthropic의 Claude 3 Opus 대형 언어 모델(LLM)이 AI 연구자들이 AI 언어 모델의 상대적 능력을 평가하기 위해 사용하는 인기 크라우드소싱 리더보드 Chatbot Arena에서 처음으로 OpenAI의 GPT-4(ChatGPT 기반)를 능가했습니다.

소프트웨어 개발자 Nick Dobos는 GPT-4 Turbo와 Claude 3 Opus를 비교한 게시물에서 "왕은 죽었다"라고 트윗했으며, 소셜 미디어에서 화제가 되고 있습니다. "GPT-4에게 명복을 빕니다."

GPT-4가 2023년 5월 10일경(리더보드는 그해 5월 3일 출시) Chatbot Arena에 포함된 이후, 지금까지 GPT-4 변형들이 꾸준히 순위 상위권을 차지해 왔기 때문에, Arena에서 패배는 AI 언어 모델의 비교적 짧은 역사에서 주목할 만한 순간입니다. Anthropic의 작은 모델 중 하나인 Haiku 또한 리더보드에서 성능으로 관심을 끌고 있습니다.

"이번에 처음으로, 고급 작업에 특화된 Opus와 비용 대비 효율적인 Haiku 같은 최고 수준 모델들이 OpenAI가 아닌 업체에서 나왔습니다." 독립 AI 연구원 Simon Willison이 Ars Technica와 인터뷰에서 이같이 언급했습니다. "이것은 고무적인 일입니다. 모두가 이 분야에서 다양한 최고의 업체들로부터 혜택을 받습니다. 하지만 GPT-4는 지금 시점에서 1년 이상 된 모델이고, 다른 누군가가 따라잡는 데 1년이 걸렸습니다."

Chatbot Arena는 UC 버클리, UC 샌디에이고, 카네기 멜론 대학교의 학생들과 교수진 간 협력으로 운영되는 오픈 모델 연구에 전념하는 연구 기관인 대규모 모델 시스템 기구(LMSYS ORG)에서 운영합니다.

https://chat.lmsys.org/

[기사 본문 후략]

* 관련 X 글(트윗) 인용
https://twitter.com/NickADobos/status/1772764680639148285