식당 예약을 위해 급하게 참석 인원을 세야 할 일이 있었습니다

홍길동 1+1

임꺽정 3

신사임당 2+1

.

.

.

이런 식으로 이름과 기존 회원, 동석자 수를 막 적은 후에

제미나이(유료)에게 "아래 내용에 있는 숫자만 모두 더해줘"라고 했습니다.

52명을 말하더라구요.

계산 과정이 없이 답만 말하길래 챗지피티랑 클로드에게도 같은 내용을 올려서 어떻게 답을 하나 '호기심'으로 돌려보았습니다. 답이 다를 거라고는 상상도 안 했지요. 그런데...

챗지피티 : 49

클로드 : 50

엉? 답이 모두 다릅니다.

단순 더하기인데???

바쁜 와중에 직접 하나 하나 더했더니 제미나이가 말한 52가 맞더군요.

챗지피티와 클로드에게 "답이 틀렸다. 다시 해봐."라고 했더니 둘 다 미안하다면서 뭐뭐..가 누락되었다고 하더니

결론!!! 또 오답을 말합니다. ㅠㅠ

아니!! 그냥 단순 더하기잖아요.

그런데 연속으로 틀리는 걸 보고 얼마 전에 간단한 외부 활동 수입, 지출을 막 적은 후 정리해서 결산 내달라고 했던 것도 다시 검산을 시켜보았습니다.

헐.. 그것도 틀렸더군요.

지인들한테 "요즘 세상 좋다" 이러면서 그 자료를 공유했는데 ㅠㅠ

다행히 그냥 예의상 올린 거라 별 타격은 없었지만요.

저는 정말 충격 받았습니다.

아니 그 대단한 일들을 해내는 AI들이 단순 더하기를 틀리다니요.

왜 이런 일이 있었는지, 재발 방지법은 뭔지 물어봤습니다.

제미나이, 챗지피티, 클로드 모두가 같은 분석, 같은 대안을 제시하네요.

가) 이유

자신들은 '언어 모델'이라서 어떤 글자(또는 숫자) 뒤에 올 '뭔가'를 확률적으로 계산해서 그럴싸한 말을 만드는 것이기에 정확한 숫자 계산은 오히려 취약하다.

나) 대안

언어 모델에게 '계산기' 기능을 잠시 구현하도록 요구하면 된다면서 아래 두 개의 문장을 알려줬습니다.

"파이썬을 도구로 해서 다음의 숫자들을 더해줘."

"코드로 계산기를 만든 후 다음의 숫자들을 더해줘."

해보니 첫 번째 '파이썬'을 언급한 프롬프트는 또 오답!!

아래 '코드', '계산기'를 언급한 프롬프트는 정답!!

이번 기회로

AI에 대한 저의 엄청난 무지를 철저하게 깨닫게 되었다...는

급반성으로 뻘글 마칩니다

모두들 좋은 하루 되세요. ^^