P3T

AI 성능 점수를 믿어도 되나?

지금까지의 답 · 근거 글 1편

벤치마크 1위 점수는 가장 비싼 설정에서 나오기도 하고 시험지 자체가 결함 판정을 받기도 하니, 설정과 시험지부터 확인해야 합니다.

  1. 1AI 성능 순위 1위, 같은 클로드가 58점도 54점도

    벤치마크 1위 점수는 가장 비싼 설정에서 나오기도 하고 시험지 자체가 결함 판정을 받기도 하니, 설정과 시험지부터 확인해야 합니다.

이 질문 아래 작은 질문

  1. AI 성능 점수(벤치마크)는 실제 성능을 얼마나 잘 보여주나

    발표하는 회사는 점수로 우위를 말하고, 검증 기관은 시험 문제 자체의 결함을 셉니다.

    1편