LLM 모델 몇가지를 테스트해봤는데요...

한 플랫폼에서 모델 바꿔 끼어가며 테스트해볼

수 있는 사이트가 있어서, 프롬프트를 간단히 작성

해서 JSON 데이터를 넘겨주고 사람한테 설명

해달라고 요청했습니다...

LLaMA 3.2 모델은 한국어의 빈도가 낮은건지

한국어를 갓 공부하여 영어랑 한국어를 섞어쓰는

듯한 느낌이 있고요. (대충 쓸만하지 못하다는 소리.)

Qwen (Alibaba 계열에서 개발한) 모델은

곧잘 하는데, 가끔 한자를 섞어 내보내는 것 같아

두고 봐야 할 것 같습니다. (ㅈㅅ일보가 떠오릅니다)

최근에 나온 Gemini 1.5 Flash 8B 같은 경우에는

준수하게 뽑아내는군요. 애널리틱스에서 토큰 값을

보니 괜찮게 뽑아냅니다. (Approx. 0.0000149 $)

OpenAI 는 안봐도 거의 비슷하게 나올 것 같아서

패스했습니다.

결론은 한국어 쓸때는 대기업 벗어나면 안되겠군요.

리더보드랑 뭔가 괴리가 많은것 같습니다..