LM Arena 신뢰도 논란: 오픈모델 빠진 랭킹
한 줄 요약: LM Arena 오픈 모델 누락 논란은 특정 모델의 순위 싸움이라기보다, 벤치마크 플랫폼이 어떤 모델을 보여주고 어떤 모델을 비워두는지 설명하라는 요구에 가깝다. 리더보드는 전체 목록이 아니라 운영자가 골라 보여주는 비교 화면이다. 무슨 일이 있었나 r/LocalLLaMA에 올라온 Is LM Arena over?라는 글은 LM Arena를 보던 오픈 모델 사용자들의 피로감을 보여준다. 작성자는 새 오픈 모델이 나올 때마다 LM Arena에서 폐쇄형 모델과 어느 정도 맞붙는지 확인해 왔는데, 최근에는 새로 공개된 오픈 모델, 특히 큰 모델이 아닌 경우가 잘 보이지 않는다고 했다. ...