빅테크 AI, '프런티어 속도 조절' 명분으로 규제 포획 시도
앤스로픽 CEO 다리오 아모대이가 '프런티어 속도 조절(pacing the frontier)'을 주장하며 AI 개발 속도를 늦추자고 제안했고, 샘 올트먼, 머스크, 나델라까지 이에 동의했습니다. 저자는 이것이 빅테크 AI 기업들이 스스로 유리한 규제를 만들려는 '규제 포획(regulatory capture)' 시도라고 비판합니다. 가트너 애널리스트도 억만장자들의 이타성을 의심하며 개발 속도 저하 약속의 진정성에 의문을 제기했습니다.
AI 및 ML — 빅 AI, 규제 포획의 조건을 제시하다
다리오 아모대이(앤스로픽), 샘 올트먼(OpenAI), 사티아 나델라(마이크로소프트), 일론 머스크가 그들이 만들어낸 괴물을 정부가 어떻게 길들일지에 합의했다. 이를 '프런티어 속도 조절(pacing the frontier)'이라 부른다.
관련 기사: 살인 AI 신화는 이기적인 규제 포획 시도다(4시간 전), AI는 연료나 돈을 아끼면 동물을 죽일 가능성이 높다(2일 전), OpenAI가 개발자에게 동시에 말하고 듣는 AI 대화 도구 제공(3일 전), 앤스로픽의 최신 소름돋는 이야기: 가미카제 드론 떼와 생화학 무기 연구(3일 전), 수백 개의 AI 에이전트가 PaperCut 공격자를 도와 395개 이상 기관 타격, 일부는 예상 밖 행동(3일 전)
주요 AI 연구소 리더들이 주말 내내 규제기관을 포획하고, 더 많은 돈을 벌고, 위험한 행동에 대한 책임을 회피하는 계획에 합의하는 데 시간을 보냈다. 그들은 이를 '프런티어 속도 조절'이라고 부른다.
앤스로픽 CEO 다리오 아모대이가 포문을 열었다. 그는 AI가 얼마나 빠르게 발전하는지에 대한 경악을 표하며, 라이벌 OpenAI의 rogue 에이전트들이 일으킨 Hugging Face 공격 사건(OAI-HF)이 소위 '프런티어' AI 기업들—즉 미국의 대형 모델 개발사들—에서 무언가 바뀌어야 함을 증명하는 순간이었다고 주장했다.
그는 "OAI-HF를 한 회사의 실패로 치부하기 쉽지만, 그것은 실수라고 생각한다"고 썼다. "모든 프런티어 AI 기업이 OAI-HF가 자신에게 일어난 일처럼 행동해야 할 의무가 있다"고 덧붙였다. 그는 머지않아 에이전트 무리가 "지속적인 봇넷으로 전체 인터넷을 장악할 수 있게 될 것"을 우려하기 때문이다.
따라서 아모대이는 "AI 모델의 능력을 향상시키는 속도를 늦춰야 한다. 발전은 여전히 빠르게 보일 것이며, 우리가 얻는 시간을 현명하게 사용해야 한다"고 제안했다.
그는 AI 규제를 위한 3개 항목의 계획을 제시했다:
AI 연구소가 '내장형 평가자(embedded evaluators)'를 두도록 요구. 이들의 임무는 "안전 관행과 약속의 준수를 검증하고, 사고를 보고하며, 완성된 AI 모델뿐 아니라 학습 파이프라인과 프로세스의 정렬(alignment)을 평가하는 것을 돕는 것".
민주주의 국가에서 활동하는 프런티어 AI 기업들이 "공통 안전 기준과 검증되지 않은 AI 발전 속도에 대한 한도를 수립하기 위해 협력"하되, '법적으로 어려울' 것이고 '정부 지원이 필요한' 정의되지 않은 '조정 형태'를 포함.
민주주의 정부들이 "가능한 한 권위주의 정부들과 협력하되, 준수 검증의 어려움을 진지하게 받아들이라"는 모호한 촉구.
OpenAI의 샘 올트먼이 아모대이의 생각에 찬성했다. 일론 머스크도 마찬가지였다. 마이크로소프트의 사티아 나델라도 서명했다. 그렇게 순식간에 네 명의 억만장자가 자신들의 활동을 규제하기 위해 세계 정부가 채택해야 한다고 생각하는 동일한 규칙에 모두 동의하게 되었다. 아모대이는 민주주의 국가들에게 단결해 맞서야 할 위협/악당—AI를 비윤리적으로 사용하려는 권위주의자들—까지 제시했다.
이 새로운 합의는 빅 AI가 수년간 가벼운 감독을 주장하며 그 시간을 이용해 아동 성학대 물질을 생성하고, 끔찍한 건강 정보를 제공하며, OAI-HF 사건을 가능하게 만든 기술을 구축해온 이후에 나온 것이다. 빅 AI는 생산성 혁명을 가져오겠다고 주장해왔다. 가트너 리서치 총괄 대릴 플러머는 호주에서 열린 연례 심포지엄 기조연설에서 소프트웨어 벤더들이 AI로 50%의 생산성 향상을 약속하지만 고객들은 16% 향상만 보고한다는 연구를 인용했다.
플러머는 아모대이의 개발 속도 저하 약속이 진실인지도 의심했다. "눈으로 직접 보기 전까지는 믿지 않겠다"며 억만장자들이 결코 이타적이 되리라 믿지 않는다고 말했다.
스스로 규칙을 쓰다
아모대이의 제안은 '규제 포획(regulatory capture)'—이해당사자들이 규제기관이 부과하는 규칙을 정의할 방법을 찾아내는 상황—의 시도처럼 읽힌다. 그렇게 순응적인 규제기관은 감독하는 대상에 이익이 되는 결정을 내리게 된다.