요즘 ChatBot 대전이 심상치 않다.
굴지의 ChatGPT가 등장하고 Google Gemini(잼민이) 가 나오더니, Anthropic의 Claude 3가 나오면서 삼파전이 됐다. 요새는 Meta Llama 3가 공개되어 춘추전국시대로 가는 모양새다. 심지어 Llama 3는 오픈소스다. ㄷㄷㄷ 갓 메타
안그래도 치열하게 돌아가는 LLM ChatBot 판인데, 관련 커뮤니티인 LMSYS에 갑자기 이상한 녀석이 등장했다.
이름은 ‘gpt2-chatbot’
‘gpt2-chatbot’이 4월에 등장했다가 사라지고, ‘im-a-good-gpt2-chatbot’과 ‘im-also-a-good-gpt2-chatbot’이 등장했는데, 뒤로 갈수록 성능이 우수하다고 전해진다.
처음에는 OpenAI의 예전 모델인 GPT-2 변종인가 싶었는데, 이게 성능이 심상치 않았던 것이다.
국내외 it 커뮤니티 모두 GPT-4.5 모델이나 GPT-5 모델의 테스트버전인지 의심할 정도.
OpenAI 는 이에 대해 별도 언급을 하지 않았지만, OpenAI의 수장 Sam Altman은 X(구 트위터)에 의미심장한 포스팅을 자꾸 하는데.이 형 이래서 사서 욕먹더라
그래서 사람들은 OpenAI 에서 테스트하고 있는 모델일 것이라 믿고 있다고.
GPT-4보다 좋다는데, 너무 궁금한 것이지.
역시 테스트용인지라, 공짜로 써볼 수 있는 방법이 있었다.
함께 해보도록 하자. 매우 쉽다. 게다가 공짜다.
우선, [https://chat.lmsys.org/] 에 접속한다.
위 와 같이 두 가지 ChatBot 모델을 AB테스트 하는 창이 뜨는데, 지금은 Model A와 B가 어떤 모델인지 확인 할 수 없으니, 프롬프트 창에 ‘hi’를 넣고 ‘Send’를 눌러보자(빨간네모)
그럼 아래와 같이 각각의 Model이 답변을 주루룩 써내려간다.
그리고 “A is better” 또는 “B is better” 중 아무거나 선택하면 아래 처럼 Model A/B의 숨겨진 진짜 이름이 표시된다.
여기서 모델 이름이 ‘im-also-a-good-gpt2-chatbot’ 으로 뜨면 성공🎉
안뜬다면 ‘New Round’를 눌러 위의 과정을 반복하면 된다. 나올때까지
자. 열심히 테스트 해보자.
요놈이 스카이넷인지 아닌지😎
필자의 GPT2 사용기를 보고싶다면 👇
ChatGPT(GPT-4), Claude 3 Opus 와 비교해보기
https://wonderland.blogpro.so/gpt2-2references
24년 4월 말에 출시된 im a good gpt2 chatbot과 also a good gpt2 chatbot이 최근 성능이 좋다는 평가가 퍼지면서 이슈가 되었습니다. 웹사이트 LMSYS에 갑자기 등장한 GPT2 chatbot. 국내 커뮤니티와 해외 커뮤니티 모두 GPT-4.5 모델이 아닌지, GPT-5 공개전 리허설 테스트인지 의심하고 있는 상황입니다. 현재 오픈AI는 GPT2 모델에 대해 공식적인 입장을
https://news.aikoreacommunity.com/gpt2-model-review-and-testing-methods/
'비상소집' 포럼, 이제 유튜브에서 보실 수 있어요:)
https://maily.so/dailyprompt/posts/5647e21b