AI 모델 평가
문항만 바꿔도 같은 모델의 순위가 몇 계단씩 움직입니다. 리더보드는 성적표가 아니라 출제자 시점에서 잘라낸 한 조각일 뿐입니다. 벤치마크 구성, 채점기 설계, 점수 부풀리기를 막는 방법을 다룹니다.
문항만 바꿔도 같은 모델의 순위가 몇 계단씩 움직입니다. 리더보드는 성적표가 아니라 출제자 시점에서 잘라낸 한 조각일 뿐입니다. 벤치마크 구성, 채점기 설계, 점수 부풀리기를 막는 방법을 다룹니다.
2026년 9월 22일, 텐센트는 압사라 컨퍼런스 개막과 같은 날 훈위안(混元) 이미지 모델의 새 버전 Hy Image 3.5 Preview(프리뷰)를 발표했다. 이는 통상적인 반복 업데이트가 아니다. 텐센트는 '멀티턴 대화형 편집'을 이번 업데이트의 핵심 판매 포인트...
2026년 9월 22일, Anthropic은 공식 Newsroom을 통해 Claude Opus 5.5를 발표했다. 새로운 5.5 시리즈의 첫 모델이다. 공식 설명에 따르면 대다수 작업에서 최상위 모델 Claude Fable 5.1 수준의 성능을 내면서, Opus 5 대...
2026년 9월 22일, 샤오미 MiMo 팀은 공식 채널을 통해 대규모 모델 MiMo-V2.6 시리즈를 정식 발표하고 오픈소스로 공개했다. 플래그십 모델 MiMo-V2.6-Pro와 고효율 추론 모델 MiMo-V2.6-Flash다. 두 모델 모두 네이티브 전모달 모델로 ...
2026년 9월 22일(미국 시간), Anthropic은 공식 claudeai 계정을 통해 Claude Opus 5.5를 발표했다. 완전히 새로운 Claude 5.5 시리즈의 첫 번째 모델이다. 공식 발표에 따르면 Opus 5.5는 대부분의 작업에서 Claude Fab...
2026년 9월 21일, 제3자 벤치마크 기관 Artificial Analysis가 Grok 4.7의 전체 평가를 공개했습니다. 결론은 분명합니다. 이번은 '에이전트 능력 우선'의 버전 업그레이드로, Grok 4.7은 Intelligence Index에서 46점(4.6...
2026년 9월 22일, AI 모델 API 통합 플랫폼 OpenRouter가 공식 블로그를 통해 Batch API 출시를 발표했습니다. 요청을 묶어 일괄 제출하면 공급자가 24시간 윈도우 안에서 실행 시간을 자유롭게 정하는 대신, 요금은 일반적으로 표준 토큰 단가의 5...
2026년 9월 22일, 차이나텔레콤 AI(TeleAI)는 공식 보도자료를 통해 Xing4.0-29B-A4B를 발표했다. 차세대 경량 에이전트 대형 모델이라는 포지셔닝이다. 핵심 스펙은 명료하다. 총 파라미터 290억, 토큰당 활성화는 40억에 불과. MoE 아키텍처를...
2026년 9월 22일, Hugging Face는 공식 블로그를 통해 transformers가 GGUF 양자화 모델을 직접 불러올 수 있게 되었다고 발표했다. from_pretrained에 gguf_file 인자만 넘기면 Hub의 GGUF 체크포인트를 익숙한 trans...