메뉴
BL
Wired AI 12일 전

안스로픽, 미국 주정부에 더 강력한 AI 규제 촉구하는 이유

IMP
8/10
핵심 요약

AI 스타트업 안스로픽(Anthropic)은 기존의 단순한 투명성 및 자발적 보고 방식만으로는 고도화된 AI의 위험을 막을 수 없다며 미국 각 주정부에 제3자 감사 등 더 강력한 AI 안전 규제를 도입할 것을 촉구하고 있습니다. 일각에서는 이런 규제 지지가 소규모 스타트업의 진입을 막는 '규제 사냥(Regulatory capture)'이 아니냐는 비판도 제기하지만, 안스로픽은 규제 대상을 대형 AI 개발사로만 명확히 제한하고 있다고 반박하고 있습니다.

번역된 본문

지난해 안스로픽(Anthropic)은 미국 내 첫 번째 최첨단 AI(frontier AI) 안전법 초안을 전격 지지하며, 캘리포니아와 뉴욕에서 새로운 투명성 의무 조항을 확고히 했습니다. 실리콘밸리의 많은 기업들이 이런 법안이 AI 붐을 저해할 것이라며 반대했지만 말입니다. 하지만 안스로픽은 이러한 법들이 이미 시대에 뒤떨어졌을 수 있다며, 이제는 각 주정부가 훨씬 더 강력한 규제를 채택하도록 촉구하고 있습니다.

안스로픽의 미국 주 및 지방 정부 관계 총괄인 세사르 페르난데스(Cesar Fernandez)는 WIRED와의 인터뷰에서 "2025년의 투명성 중심 안전 법안은 매우 중요한 시작이었지만, AI 시스템의 능력이 계속해서 빠르게 발전함에 따라 정책적 대응도 이에 발맞춰야 한다"며 "우리는 가장 강력한 AI 시스템에 대해 투명성과 자발적 보고만으로는 더 이상 충분한 안전 조치가 될 수 없다고 생각한다"고 말했습니다.

거의 1조 달러(약 1,300조 원)의 가치를 지닌 스타트업에게서 친(親)규제적인 메시지가 나온다는 것은 다소 이례적인 일입니다. 하지만 안스로픽은 독특한 기업입니다. 이전에도 보도되었듯, 안스로픽의 리더들은 '변혁적인 AI로의 전환이 안전하게 이루어지도록 보장한다'는 창립 미션을 달성하기 위해 첨단 AI를 개발하고 접근성을 파는 대규모 비즈니스를 구축해야 한다고 믿습니다. 안스로픽이 성장함에 따라 회사는 최첨단 AI 기업에 대한 국가에서 가장 가혹한 규제안 중 일부를 지지하기 시작했습니다. 이러한 규칙들은 대부분 고도화된 모델이 금융 재난이나 대량 사망과 같은 파국적인 AI 위험을 초래할 가능성을 완화하도록 설계되었습니다.

캘리포니아와 뉴욕의 자발적 보고 법안 외에도 안스로픽은 AI 연구소가 제3자 감사 기관으로부터 안전 프로세스에 대한 평가를 받도록 의무화하는 일리노이주 법안을 지지했습니다. 최근에는 매사추세츠주 정책을 지지했는데, 이 정책 역시 AI 연구소에 대한 제3자 감사를 요구할 뿐만 아니라, 규정을 준수하지 않는 기업을 상대로 주 법무장관이 금전적 구제 조치를 구할 수 있도록 권한을 부여합니다.

이번 주 나는 페르난데스를 만나 회사의 AI 정책이 어디로 향하고 있는지 파악했습니다. 페르난데스는 이르 전 스포츠 베팅 거대 기업인 팬듀얼(FanDuel)의 미국 주정부 관계 총괄과 우버(Uber)의 공공 정책 시니어 부사장으로 재직하다가 올해 초 안스로픽에 합류했습니다. 그는 이 두 기업이 전국 각 주에서 정책적 논쟁에서 승리하도록 도왔습니다. 미국 의회가 AI 규제 법안 통과를 지속적으로 지연시키고 각 주정부가 주도권을 쥐고 있는 상황에서, 그의 전문성은 안스로픽에 매우 유용할 것으로 보입니다.

'의심스러운' 의도 안스로픽의 친규제 의제가 AI 안전 단체, 노동 조합 및 회사의 동맹들로부터 찬사를 받고 있지만, 일부 실리콘밸리 리더들은 이러한 정치적 노력을 더 악의적인 관점에서 해석합니다. 전 백악관 AI 책임자이자 현 도널드 트럼프 대통령의 기술 자문관인 데이비드 삭스(David Sacks)는 안스로픽이 본질적으로 소규모 AI 스타트업을 복잡한 규제에 옭아매어 스스로의 경쟁 우위를 굳히려 한다고 주장했습니다.

삭스는 작년 소셜 미디어 게시물에서 "안스로픽은 공포 마케팅을 기반으로 정교한 '규제 사냥(Regulatory capture)' 전략을 구사하고 있다"며 "이들은 스타트업 생태계를 훼손하는 주 정부 규제 열풍에 주범이다"라고 주장했습니다.

페르난데스는 이러한 비난을 정면으로 반박했습니다. 그는 안스로픽이 '대형 AI 모델 개발사'에만 적용되는 주 단위 AI 법안을 지지해 왔다고 강조했습니다. 이 용어는 모든 법안마다 다르게 정의되어 있지만, 일반적으로 AI 개발에 수억 달러를 지출했고 연간 수익이 5억 달러 이상인 기업을 의미합니다. 페르난데스는 "스타트업이 이러한 기준을 충족할 것이라고 상상하기는 어렵다"고 잘라 말했습니다.

하지만 경쟁력 있는 최첨단 AI 모델을 개발하기 위해 수십억 달러의 자본이 필요한 세상에서, 조만간 이러한 기준을 충족할 수 있는 유망한 스타트업은 얼마든지 있다고 볼 수 있습니다. 몇 가지 예를 들자면, 세이프 슈퍼인텔리전스(Safe Superintelligence), 씽킹 머신즈 랩(Thinking Machines Lab), 미스트랄(Mistral) 등이 있습니다.

원문 보기
원문 보기 (영어)
Comment Loader Save Story Save this story Comment Loader Save Story Save this story Anthropic threw its support behind the first wave of frontier AI safety laws in the United States last year, securing new transparency requirements in California and New York that much of Silicon Valley fought against, arguing they would stifle the AI boom . But Anthropic says those laws may already be outdated, and the company is now pushing states to adopt even tougher regulations. “The transparency-focused safety bills of 2025 were a really important start, but as the capabilities of AI systems continue to advance quickly—the policy responses need to match,” Cesar Fernandez, Anthropic’s head of US state and local government relations, told WIRED in an interview. “We think that transparency and self reporting are no longer sufficient safety measures for the most powerful AI systems.” Being so pro-regulation is an odd message to come from a startup that is now valued at nearly $1 trillion . But Anthropic is an odd company. As we’ve written before , Anthropic’s leaders believe it needs to build a massive business based on developing and selling access to advanced artificial intelligence to fulfill its founding mission : “to ensure that the world safely makes the transition through transformative AI.” As Anthropic has grown, it’s started endorsing some of the nation's harshest proposed regulations on frontier AI companies. Many of these rules are designed to mitigate catastrophic AI risks, including the possibility that advanced models could contribute to financial disasters or mass deaths. Beyond the self-reporting laws in California and New York , Anthropic has also supported an Illinois measure requiring AI labs to get their safety processes evaluated by third-party auditors. Most recently, the company endorsed a Massachusetts policy that would also require third-party auditing for AI labs—and empower the state's attorney general to seek injunctive relief from companies that don't comply. I sat down with Fernandez this week to understand where the company’s AI policies are heading. Fernandez joined Anthropic earlier this year, after previously serving as head of US state government relations for the sports betting giant FanDuel and as a senior public policy associate at Uber. He helped both companies win policy battles in states around the country. His expertise will likely prove valuable to Anthropic, as Congress continues to stall on passing AI regulation and states are taking the lead. “Dubious” Motives While Anthropic’s pro-regulation agenda has been praised by AI safety groups, labor unions, and other allies of the company, some Silicon Valley leaders interpret its political efforts through a more nefarious lens. David Sacks, the former White House AI czar and current technology adviser to President Donald Trump, has claimed that Anthropic is essentially trying to get cumbersome laws passed to trap smaller AI startups in red tape, thus securing its own position as a leader in the AI race. “Anthropic is running a sophisticated regulatory capture strategy based on fear-mongering,” Sacks wrote in a social media post last year. “It is principally responsible for the state regulatory frenzy that is damaging the startup ecosystem.” Fernandez outrightly denies the accusation, noting that Anthropic has only supported state AI bills that apply to “large AI model developers,” a term defined differently in every bill, but that generally refers to companies that have spent hundreds of millions of dollars on AI development and have more than $500 million in annual revenue. “It’s hard to imagine a startup meeting that threshold,” Fernandez says. But in a world where billions of dollars in capital is now required to develop a competitive frontier AI model, there’s arguably a handful of promising startups that could meet those thresholds soon enough. To name a few, Safe Superintelligence , Thinking Machines Lab , and Mistral have each raised billions of dollars from investors, though their revenue remains far lower than the likes of Anthropic or OpenAI. Of course, these aren’t your run-of-the-mill startups, but they are potential competitors of Anthropic. I think the more defensible version of Fernandez’ argument is that any company large enough to develop a powerful AI model should be subject to the same regulations, because the underlying risks of the technology are the same. Fernandez notes that part of Anthropic’s goal is to “inspire a race to the top developing the most safe and secure AI systems,” which the company thinks encompasses pushing for government legislation. “Our mission is to make sure that this transition to a world with advanced AI goes well for Americans and humanity,” says Fernandez. “If you're an AI model developer that's developing powerful AI systems, there are requirements to be transparent with people on what you're building, the model capabilities, and the risks associated with that model to critical infrastructure in states—all of that should be top priority.” Where Anthropic Draws the Line There are limits, however, to what Anthropic thinks states should do in the absence of federal regulation. In a policy document Anthropic published last month, the company recommends that governments should have a mechanism to block companies from deploying new AI models if it deems them unsafe. The suggestion is a bit ironic, given that the Trump administration recently told Anthropic to suspend access to its two most powerful AI models for foreign nationals, and the company wasn’t too big a fan of the move . Anthropic thinks the right to block unsafe AI model deployments should be reserved for the federal government, and not state lawmakers—though Fernandez notes it’s an evolving conversation. After the Trump administration sent an export control directive to Anthropic that led it to take its Mythos and Fable 5 models offline for everyone, the company wrote in a blog post that blocking AI model deployments should only happen through a fair, transparent evaluation process. Fernandez wouldn’t say much about Anthropic’s federal policy work, as it’s not his purview, but the company has been busy in that arena, too. Last month, it sent a letter to the US government accusing the Chinese tech giant Alibaba of a distillation attack—essentially extracting information from Anthropic’s models through systematic prompting to develop its own AI tools. Some AI researchers have dismissed the claims as regulatory capture by another means . They argue that Anthropic’s real goal is to persuade the US government to ban open-weight Chinese models, which could prompt thousands of American businesses that rely on them to turn to Anthropic’s enterprise offerings instead. Anthropic CEO Dario Amodei, notably, has warned Congress about the dangers of open source AI in the past. At the state level, Fernandez says that Anthropic hasn’t specifically targeted open source AI models in any of the legislation it’s endorsed. “It’s less of a question of the model construction and more of the model capabilities, and when they rise to a certain level, they should be captured in these state frameworks,” he explains. Whether or not you believe Anthropic’s efforts are sincere, the company is still playing a powerful role in shaping the future of AI policy. Its latest model releases brought the cybersecurity capabilities of advanced AI into the national spotlight. Before that, the company had already spent years warning lawmakers across the country about the catastrophic risks of advanced AI . The concerns about AI raised more often by American voters, such as potentially losing their jobs to the technology, the negative impacts of data centers arriving in their communities , and the effects of chatbots on children , have not inspired a comparable legislative campaign from frontier AI labs. Anthropic and several of its rivals have promised that ordinary taxpayers won’t