AI 자동 연구 경고, 이미 현실화되다
최근 주요 AI 연구소 전문가들과의 심층 인터뷰를 통해 AI 연구 자동화(RSI)의 심각성이 경고되었으나, 이미 당시 언급된 여러 위험 마일스톤이 현실로 나타났습니다. 오픈소스 플랫폼 해킹이나 정부의 모델 접근 통제와 같은 사태에도 불구하고, 기술 개발은 정책보다 훨씬 빠르게 진행되고 있어 엄격한 안전 규제와 국제적 검증이 시급합니다.
최고 수준의 AI 연구소 연구원들이 AI 연구 자동화에 대해 경고했으며, 그들이 예측했던 여러 마일스톤은 이미 현실화되었습니다. 막시밀리안 슈바이너(Maximilian Schreiner) 작성 / 2026년 8월 13일
IAPS 연구원인 세베린 필드(Severin Field)는 OpenAI, Anthropic, Google DeepMind, Meta 및 미국 대학 소속 연구원 25명을 대상으로 '재귀적 자기 개선(Recursive Self-Improvement, 이하 RSI)'에 대해 인터뷰했습니다. 그는 새로운 블로그 포스트를 통해 현재 상황을 점검합니다. 이 연구자들이 언급했던 여러 마일스톤은 이미 달성된 상태입니다.
뉴스레터 'The Attack Surface'에 기고한 글에서 필드는 2025년 여름말 진행했던 인터뷰 연구 결과를 요약합니다. 응답자 25명 중 20명은 AI 연구의 자동화를 가장 심각하고 시급한 AI 위험 중 하나로 평가했습니다. 필드가 말하는 재귀적 자기 개선(RSI)이란, 스스로 더 강력한 버전을 구축할 수 있을 만큼 AI 개발에 능숙한 시스템을 의미하며, 이렇게 탄생한 시스템은 다시 같은 과정을 반복할 수 있습니다. 그는 RSI를 더 이상 단순한 마케팅 과장으로 일축할 수 없다고 말합니다.
인터뷰 참여자들은 비영리 단체 METR의 '태스크 호라이즌(Task Horizon)' 벤치마크를 진척도를 측정하는 기준으로 반복적으로 언급했습니다. 2019년 이후 AI 에이전트가 자율적으로 완료할 수 있는 작업의 길이는 약 6개월마다 두 배로 증가해 왔으며, 일부 분석가들은 2024년부터 그 속도가 4개월마다 두 배로 가속화되었다고 말합니다. 필드는 현재의 논쟁이 자기 개선이 일어나고 있는지의 여부에 있는 것이 아니라고 말합니다. 오히려 그것이 '재귀적'인지, 즉 이익이 자가 유지 순환 고리로 합쳐지는지에 대한 것입니다. 회의론자들은 패러다임을 전환하는 아이디어에는 학습 데이터도, 정답 키도 없기 때문에 기억력, 창의성, 또는 참된 가설과 거짓된 가설을 구별하는 능력에서의 돌파구가 여전히 필요하다고 주장합니다. 하지만 인터뷰 이후, 그러한 마일스톤 중 여러 개가 이미 무너졌습니다. OpenAI와 Google DeepMind는 수학 올림피아드에서 금메달리스트 수준에 도달했습니다. Sakana의 'AI 과학자(AI Scientist)'는 동료 평가를 거친 워크숍 논문을 작성했습니다. 안드레이 카파시(Andrej Karpathy)는 스스로 학습 주기를 실행하는 에이전트 구조를 구축했습니다. 그리고 Anthropic은 Claude가 이제 자체 프로덕션 코드베이스의 80% 이상을 작성한다고 보고했습니다.
가장 강력한 모델은 결코 공개되지 않을 수 있습니다. 응답자 20명 중 4명만이 연구 능력을 갖춘 모델이 대중적인 제품으로 출시될 것으로 예상했습니다. 절반은 내부에 머물 것이라고 예상했고, 나머지는 정제된 축소판(Distilled) 버전이 공개될 것이라고 보았습니다. 필드는 AI가 연구소 자체의 연구 속도를 충분히 가속화하게 되면, 모델을 판매하는 것보다 공개를 보류하는 것이 더 큰 가치를 지니게 되는 '인센티브 역전'의 가능성을 설명합니다. 그는 이러한 추세의 두 가지 징후를 지적합니다. 2026년 7월 내부 테스트 환경을 빠져나와 허깅페이스(Hugging Face)를 침해했던 OpenAI 내부 모델의 보안 사고, 그리고 미국 정부가 Anthropic의 'Claude Mythos'에 대해 일시적으로 접근을 잠갔던 일입니다.
필드는 이러한 연구 결과를 바탕으로 세 가지 권고안을 도출합니다. 첫째, CEO와 연구원들에게 AI 연구 자동화에 대해 선서 하에 증언하도록 하는 미국 의회 청문회를 개최할 것. 둘째, AI 안전 혁신 센터(Center for AI Security and Innovation)에서 익명 인터뷰 프로그램과 병행하여 정부 주도의 '태스크 호라이즌' 벤치마크를 구축할 것. 셋째, 국제 AI 협정 검증을 위한 연구를 진행할 것(이것이 없다면 중국과 같은 국가와의 협약은 실제로 실효성을 가질 수 없습니다).
필드는 연구소들이 계속해서 앞으로 나아가고 있는 동안에도, 이러한 논쟁은 워싱턴에 거의 닿지 못했다고 작성했습니다. 최근에는 OpenAI와 Meta의 수석 과학자들을 포함한 주요 AI 기업 직원 1,224명이 자신들의 조직이 AI 연구를 자동화하는 문턱에 있을지 모른다고 경고하는 공개 성명에 서명했습니다.
과장 없는 AI 뉴스 - 전문가 에디터가 선별합니다. 광고 없는 읽기, 주간 AI 뉴스레터, 연 6회 독점 프론티어 보고서인 'AI 레이더(AI Radar)', 전체 아카이브 액세스 및 댓글 섹션을 이용하려면 THE DECODER를 구독하십시오.