AI 모델 평가
문항만 바꿔도 같은 모델의 순위가 몇 계단씩 움직입니다. 리더보드는 성적표가 아니라 출제자 시점에서 잘라낸 한 조각일 뿐입니다. 벤치마크 구성, 채점기 설계, 점수 부풀리기를 막는 방법을 다룹니다.
문항만 바꿔도 같은 모델의 순위가 몇 계단씩 움직입니다. 리더보드는 성적표가 아니라 출제자 시점에서 잘라낸 한 조각일 뿐입니다. 벤치마크 구성, 채점기 설계, 점수 부풀리기를 막는 방법을 다룹니다.
싱가포르 AI 위험관리 지침은 2026년 10월 7일 싱가포르 통화청(MAS)이 Guidelines on Artificial Intelligence Risk Management라는 이름으로 정식 발표했다. 이 틀은 협의 문서 P017-2025로 2025년 11월 13일...
LangSmith는 2026년 10월 13일 LangChain 공식 블로그를 통해 AI Search 출시를 알렸습니다. 팀이 에이전트 운영을 되돌아볼 때 찾고 싶은 것은 키워드가 아니라 어떤 '행동'인 경우가 대부분입니다. 작업을 마쳤다고 말만 하고 실제로는 하지 않은...
MiniCPM-V 4.7이 2026년 10월 13일 면벽지능(ModelBest)에서 정식 발표되고 오픈소스로 공개됐다. 35B-A3B와 1B 두 가지 버전이 있으며, 앞의 모델은 이 시리즈 최초의 MoE 모델로 전체 매개변수 350억 개, 추론마다 활성화되는 부분은 약...
마이크로소프트 사장 브래드 스미스는 2026년 10월 12일 공개된 BBC 'Big Boss Interview'에서 AI 규제의 현실을 직설적으로 표현했다. 지금은 세탁기가 AI보다 더 많은 안전 규칙의 적용을 받고, 슈퍼마켓의 우유 한 팩도 안전 검사를 거치지만, 그...
GLM-Legal은 지푸 Z.ai가 2026년 10월 12일 공식 블로그를 통해 발표한 법률 분야 특화 모델이다. 범용 대형 모델과는 다른 길을 간다. 파라미터 규모를 좇는 대신 경량 모델인 GLM-5.3-Flash를 기반으로 삼아, 도메인 중간 훈련과 고효율 후훈련으...
Muse Wonder는 메타가 2026년 10월 12일 공개한 첫 프런티어 모델 시리즈다. 메타는 공식 발표에서 Muse Wonder와 Muse Wonder Full 두 모델을 함께 선보이며, 자사 역대 가장 강력한 모델로 개인 및 전문가 에이전트 작업에서 업계 최고 ...
AISI의 프론티어 모델 접근권이 돌아왔다. 로이터는 2026년 10월 11일 텔레그래프를 인용해, 트럼프 행정부가 OpenAI, Anthropic 등 개발자들에게 신형 모델을 출시 전에 영국 AI 안전연구소(AISI)와 공유하지 말라고 요청했던 결정을 철회했다고 보도...
Claude Opus 5.5 Max가 Arena 플랫폼이 2026년 10월 12일 발표한 41주차 랭킹(집계 기간 10월 5~11일)에서 에이전트 랭킹에 처음 오르자마자 1위를 차지했다. 순개선율은 15.53%, 작업 확인 성공률은 17.29%, 도구 환각률은 0.37...