· 톺아보기

독파모 벤치마크 결과가 떴네요, 1위는 모티프

예룰루랄라 · · 수정

조회 2,008 · 공감 0 · 댓글 9

https://www.asiae.co.kr/article/2026081312152199991

2026081312084479798_1786590524.jpeg

(참고로 저 인덱스 최고점이 클로드 오퍼스 5로 63점이고 GLM 5.2 max가 53점 정도입니다. 독파모 기업들이 꽤 잘하고 있는거죠)


과기부는 패자부활전으로 욕을 많이 먹었는데 면이 서게 생겼어요. 이렇게 똘똘한 스타트업이 등장해줬으니...

그런데 LG연구원은 무슨 일이 있었나요.


댓글 9

  1. 뒹굴뒹굴0 ·
    어 엑사원이 어쩌다가?
  2. 예룰루랄라 ·
    @뒹굴뒹굴0님 그러게말입니다
  3. 커스텀4 ·
    모티프가 300b 이하로 기억하는데 후발주자가 AA 47점이면 상당히 괜찮네요. 모티프가 오픈소스기반 파인튜닝이였던가요 자체데이터셋이였던가요?
  4. 예룰루랄라 ·
    @커스텀4님 독파모 참여 조건에 오픈웨이트가 걸려있는 걸로 압니다.
    기본적으로 독파모 사업자들이 공동 활용 가능하도록 정부가 지원하는 데이터셋이 있습니다. 그리고 컨소시엄 형태로 참여 업체가 같이 들어가는데 참여 업체에 데이터 업체, NPU, 서비스 업체, 대학교 등이 참여하니 컨소시엄을 통해 데이터도 수급 받을 거 같습니다.
  5. Disp1ay · · 공감 2
    이야...모티프3 대단하네요....
    오푸스5기준 75%정도 성능이라는건데 소버린 ai 탄력 붙긴 하겠네요 ㄷㄷㄷ
  6. Kang773 · · 공감 1
    다양한 것도 중요하지만
    Coding Agent Index 에도 올라갈 수 있으면 좋겠습니다.
  7. 주나파 · · 공감 2
    모티프 큰 기업이 아니었던거 같은데 대단하네요
  8. 예룰루랄라 ·
    @주나파님 독파모 참여 전에도 경량 모델 벤치마크가 꽤 좋았더라구요. 잘 되었으면 좋겠네요.
  9. mairoo · · 공감 2
    클로드 63점을 만점으로 놓고 53점 정도로 80% 정도 수준으로만 따라가줘도 고급 추론 능력까지는 아니더라도 잡무 수준의 일들은 거의 다 쳐낼 수 있을 거 같습니다. 이 정도 수준까지만이라도 꼭 국산화에 성공하길 바랍니다.

모두의공원 최근 글

모두의공원 목록 더 보기