AI 성능 점수를 믿어도 되나?
지금까지의 답 · 근거 글 1편
벤치마크 1위 점수는 가장 비싼 설정에서 나오기도 하고 시험지 자체가 결함 판정을 받기도 하니, 설정과 시험지부터 확인해야 합니다.
- 1AI 성능 순위 1위, 같은 클로드가 58점도 54점도
벤치마크 1위 점수는 가장 비싼 설정에서 나오기도 하고 시험지 자체가 결함 판정을 받기도 하니, 설정과 시험지부터 확인해야 합니다.
이 질문 아래 작은 질문
- AI 성능 점수(벤치마크)는 실제 성능을 얼마나 잘 보여주나
발표하는 회사는 점수로 우위를 말하고, 검증 기관은 시험 문제 자체의 결함을 셉니다.
1편
P3T