실제 시나리오에 대한 질문에 대답하는 것이 합성 번역 질문에 대답하는 것보다 우수합니다.

OpenAI가 IndQA 벤치마크를 출시했습니다. 이는 인도 언어와 문화에 대한 "맥락 및 추론" 평가 세트입니다.

2025년 11월 3일, OpenAI는 인도 언어와 문화에 대한 AI 시스템의 이해와 추론 능력을 평가하는 새로운 벤치마크인 IndQA를 출시했습니다. 공식 성명에 따르면, 기존의 다국어 평가(예: MMMLU, MGSM)는 "점수가 높은 군집화" 경향이 있으며, 번역이...