7개 AI 모델에게 중국 대입시험 문제를 풀어보게 한 결과
던
던진도넛 (211.♡.96.206)
2024년 6월 20일 PM 02:08 · 수정됨(15:20)
조회 1,178 공감 0
상하이 AI 리서치 센터에서 발표한 내용으로, 중국 및 해외의 7개 AI 모델에게 중국 대입시험 문제를 풀게 한 결과입니다.
종합 점수 기준으로는 알리바바의 Tongyi Qianwen이 303점으로 1등을 차지했고,
GPT-4o가 296점으로 2등을 차지했습니다. (GPT-4o가 중국어도 꽤 잘 하는군요;)
전반적으로 AI들의 수학 문제풀이 실력은 형편없었는데, 가장 잘 푼 모델이 150점 만점에 75점으로 반타작을 했네요...
댓글 (11)
-
사사자바람연꽃
24.06.20 · 223.♡.195.149
gpt 대단하네요. - 바
바다가고싶다
24.06.20 · 172.♡.95.42
수학 몇개 돌려봤는데, 계산 문제, 기초적인 문제는 잘 풉니다.
그런데 키 포인트를 찾는게 핵심인 수능 문제 같은건 진짜 못 풀더라구요.
말도 안 되는 답을 뱉어냅니다 -o- -
무무심
24.06.20 · 106.♡.128.172
AI의 수학문제 풀이 능력이 저조하다는 건 의외네요.
수학문제의 문장을 이해해서 수식으로 만드는 과정에 문제가 있는 걸까요? -
칼칼쓰뎅
→ 무심 24.06.20 · 165.♡.7.41
생성형은 다 그렇습니다. 논리로 만드는게 아니고 가장 적당한 다음말을 찾아서 계속 생성해나가거든요.
수학은 그런게 아니죠. -
까까망꼬망
24.06.20 · 61.♡.86.109
ai면 당연히 만점나올줄 알았는데.... - 외
외국인노동자입니다
24.06.20 · 157.♡.92.86
AI도 중국문제는 싫은거죠 -
상상남자지
24.06.20 · 108.♡.50.58
중국에 살지만, 중국에서 진행한 리서치는 잘 믿음이 안갑니다. ^^ -
Wwithpeople
→ 상남자지 24.06.20 · 39.♡.24.190
Alibaba의 Qwen-2 같은 경우에는 해외에서 나온 평가도 좋습니다. 중국이 AI 쪽에서는 잘 하는게 맞는 것 같습니다. -
살살살타
24.06.20 · 61.♡.92.124
그럼, 실제로는
GPT-4o이 가장 우수하다고 봐야겠네요. ~ - 아
아르티어스
24.06.20 · 183.♡.66.9
중국의 자료는 안믿거나 믿어도 반만 믿어야...
댓글을 작성하려면 이 필요합니다.