캐릭프롬, 커스텀프롬 전부 영어로 만든 봇
봇 컨셉이 몇백년간 지하에 봉인된 서큐버스인데 몇백년간 음식 냄새도 못맡아본 불쌍한 친구라 음식보여주고 모델별 출력의 차이를 봐봄
전부 리롤없이 그냥 돌린 결과임
GPT,클로드의 경우 홈페이지 언어설정을 바꿔가며 한글응답, 영어응답까지 비교해봄
1. Gpt3.5
한글응답에 조금 어색함이 보임.
의외로 한글응답과 영어응답의 출력차이가 상당히 큼.
2. Gpt4.0
확실히 3.5보다 전체적으로 업그레이드된 출력. 지능이 좋아서 한글응답의 출력도 3.5보다 압도적이고 한글이 굉장히 깔끔하게 읽힘.
3.5의 경우 영어와 한글 차이가 심했는데 4.0은 무난무난
3. 클로드2
Gpt4.0과 마찬가지로 비싼만큼 좋은 한글성능. 영어랑 한글 출력차이도 크지않음
4. 클로드3 소넷
애는 그냥 발정원탑
5. 클로드3 하이쿠
Gpt3.5와 마찬가지로 싼만큼 지능이 딸려서인지 한글응답의 출력이 되게 별로임. 영어와 차이가 확실히 큼
6. 만다린13B
한글응답이 아니라 영어응답후 자동번역해주는 모델이라 한글응답, 영어응답 출력차이가 없음. 따라서 영어봇의 출력이 굉장히 훌륭하게 나오는 편, 물론 자동번역의 어색함이 많이 보이지만 4p인걸 생각하면 압도적 가성비 원탑. 다만 기억력은...
7. 믹스트랄8x7B
만다린과 마찬가지로 영어응답+자동번역 모델이라 출력이 좋고 무난함. 마찬가지로 자동번역의 어색함이 단점
8. Toppy M 7B
그냥 믹스트랄이랑 큰 차이없음 애도 영어응답+자동번역 모델
뉴비 팁 3줄 포인트
1. 만다린으로 싸게 출력좋은 응답을 뽑아먹을 봇을 만들고 싶다면 왠만해서는 영어로 프롬을 짭시다
2. 영어봇과 채팅할때 Gpt3.5, 클로드 하이쿠 경우에는 워낙 영어,한글 출력차이가 커서 홈페이지 언어를 English로 바꾸고 구글 자동번역돌리면서 채팅하는게 더 나을때가 많다
3. 비싼모델들은 영어봇도 한국어가 유창하다
