메뉴

#AI약점

MR
MIT Tech Review • 31일 전
IMP 5

AI도 못 푸는 지능 테스트, 당신은 풀 수 있을까?

퍼즐과 게임은 AI 발전 초기부터 핵심 평가 도구였으며, 2024년 말 18%에 그쳤던 NYT 커넥션즈 퍼즐을 최신 모델들은 거의 완벽하게 풀 정도로 능력이 빠르게 향상되고 있습니다. 그러나 공간 추론(심적 회전)과 시각 퍼즐은 여전히 치명적 약점이며, 훈련 데이터에 등장한 고전 문제의 변형(기사와 악당 퍼즐 등)에서는 암기한 답을 내놓아 실수를 반복합니다. 인간과 AI의 인지 차이를 보여주는 이런 퍼즐은 AI의 강점과 약점을 이해하는 유용한 창이 됩니다.

평가벤치마크 LLM 추론능력