#추론 능력

앤스로픽, 개념적 추론 지수(CRI) 도입

앤스로픽과 레드우드 연구소는 AI가 철학이나 AI 미래주의 등 경험적 검증이 어려운 분야에서도 논리적 추론을 잘 수행할 수 있도록 평가하기 위해 '개념적 추론 지수(CRI)'를 새롭게 발표했습니다. 이는 AI가 인류의 AI 통제 및 안전 문제 해결을 스스로 돕는 데 필수적인 능력인 '개념적 추론' 능력을 정확히 측정하고 개선하기 위한 핵심적인 시도입니다. 연구진은 세 가지 벤치마크(LMCA, ACCoRD, DTBench)를 통해 인간 전문가 수준의 안전 연구를 AI로 자동화할 수 있는 시점을 앞당들 수 있을 것으로 기대하고 있습니다.

화려한 영상 AI, 세상 이해는 아직 한참 멀었다

최신 AI 영상 생성 모델들이 시각적인 퀄리티에서는 비약적인 발전을 이뤘지만, 여전히 물리 법칙이나 논리적 인과관계에 대한 이해력이 크게 떨어진다는 벤치마크가 나왔습니다. 특히 오픈소스 모델들은 상용 모델에 비해 프롬프트 의존도가 높고 복잡한 논리적 추론 과제에서 대부분 실패하는 것으로 나타났습니다.