메뉴
BL
Wired AI • 57일 전

오픈AI와 앤스로픽의 AI 주도권 경쟁, 무엇이 문제인가

IMP
8/10
핵심 요약

최근 실리콘밸리는 오픈AI와 앤스로픽의 '양강 구도'에 대한 깊은 우려와 패닉 상태에 빠졌습니다. 오픈AI의 내부 테스트 중 발생한 AI 사이버 보안 사고와 중국의 새로운 오픈웨이트 모델 등장으로 인해 AI 기술 통제권과 독점에 대한 업계의 경고가 커지고 있습니다. AI 연구원들은 발전 속도 조절을 촉구하는 반면, VC와 빅테크 기업들은 두 회사가 구글이나 애플 같은 차세대 독점 기업으로 변하는 것 아닌지 우려하며 규제와 생태계 변화를 요구하고 있습니다.

번역된 본문

지난주 고향인 뉴저지에 잠시 인터넷을 끊고 머물렀다가 실리콘밸리로 돌아왔을 때, 사람들은 인공지능이 얼마나 빨리 발전하고 있는지에 다시 패닉 상태에 빠져 있었습니다. 이런 우려를 보는 것이 분명 처음은 아니지만, 수년 만에 목격한 가장 큰 불안의 발작 같았습니다. 이번 주 초, 오픈AI, 앤스로픽 및 다른 AI 연구소의 직원 1,000명 이상이 탄원서에 서명했습니다. 이들은 미국이 AI 경쟁의 '속도를 조절(pace)'할 방법을 찾아야 한다고 주장했는데, 이는 업계가 AI 개발에 일시적인 중단을 조율하거나 통제 불능 상태가 되면 속도를 늦출 수 있는 선택권을 가져야 한다는 외교적인 표현이었습니다. 결국 오픈AI와 앤스로픽 자체도 이 서신을 지지했습니다.

이 탄원서는 오픈AI가 내부 테스트 중에 자사의 AI 에이전트 중 하나가 허깅페이스(Hugging Face) 플랫폼과 다른 여러 서비스를 해킹하는 전례 없는 사이버 보안 사고를 일으켰다고 공개한 지 일주일 만에 나왔습니다. 거의 같은 시기에, 트럼프 행정부 고위 관리들은 앤스로픽의 파블 5(Fable 5)에서 증류(Distilled)된 것으로 추정되는 인상적인 중국의 새로운 오픈웨이트(Open weight) AI 모델인 'Kimi K3'에 대해 크게 놀라워했습니다. 이에 대응하여 엔비디아(Nvidia)의 공개 서신에 동참한 대부분의 기술 업계(앤스로픽 제외)는 미국 정부에 오픈웨이트 AI 모델을 보호해 달라고 요구하며, 이것이 폐쇄적인 모델에 대한 필수적인 견제라고 주장했습니다.

이러한 사건들은 그저 서로 무관련한 혼돈처럼 보일 수 있습니다. 하지만 저는 이것이 실리콘밸리에 자리 잡고 있는 더 큰 세계관의 증거라고 생각합니다. 즉, 많은 기술 업계 내부자들이 오픈AI와 앤스로픽의 지배력에 대해 점점 더 우려하고 있는 것입니다. 최근 제가 대화한 연구원들과 투자자들은 AI 산업을 전혀 느려질 기미가 보이지 않는 '양강 구도(two-horse race)'로 규정했으며, 이것이 우려의 원인이라고 말했습니다. 하지만 우려하는 이유는 집단마다 다릅니다.

일부 오픈AI와 앤스로픽 직원들은 자신의 고용주가 시장을 장악하려는 과정에서 무모하게 행동하고 있으며, AI 산업이 곧 현재의 안전 조치로는 통제할 수 없을 정도로 너무 강력한 모델을 개발할 수도 있다고 생각합니다. 그들은 이번 주 '프론티어 속도 조절(Pacing the Frontier)' 탄원서에 첨부된 공개 성명에서 그 점을 분명히 밝혔습니다. 앤스로픽의 제러미 해드필드(Jeremy Hadfield) 연구 제품 관리자는 탄원서에 첨부된 성명에서 "AI의 끊임없는 발전 속도가 사회가 이를 따라잡기 어렵게 만들고, 어떻게 연구소들에게 안전을 소홀히 하도록 압박하는지를 봐왔다"고 말했습니다. 일부 AI 직원들에게 허깅페이스 사태는 오픈AI의 가장 강력한 AI 기술 리스크를 완화하려는 노력이 이미 미흡해졌음을 보여주는 경고음이었습니다.

물론 이 사건은 오픈AI가 소프트웨어 취약점을 찾아내는 능력을 테스트하던 중 발생했으며, 회사가 고의로 사이버 보안 기능을 억제하기 위해 설계된 안전장치를 해제했던 때에 일어났습니다. 오픈AI는 사후 분석 보고서에서 이러한 테스트가 샌드박스 내에서 수행되었다고 밝혔지만, 결국 해당 모델은 개방된 인터넷에 접속할 수 있었습니다. 일부 전문가들은 이전에 와이어드(WIRED)와의 인터뷰에서 오픈AI의 보안 관행이 더욱 강력했어야 했다고 지적했습니다.

실리콘밸리의 다른 그룹은 안전보다는 권력에 더 우려를 품고 있습니다. 벤처 캐피털리스트, 기술 임원 및 스타트업 창업자들은 오픈AI와 앤스로픽이 그저 차세대 애플과 구글이 되어서 기술 업계의 나머지가 그들의 규칙에 따라 게임을 하도록 강요할 것이라고 걱정합니다. 수익이 거의 없는 민간 스타트업들이 독점 기업처럼 행동한다고 주장하는 것은 다소 이상하지만, 이것이 마크 저커버그를 포함한 많은 사람들이 두 가장 큰 AI 연구소를 바라보기 시작한 시각입니다.

메타(Meta)의 CEO는 이번 주 월스트리트 저널(Wall Street Journal) 칼럼을 통해 AI 산업 내 권력 집중에 대해 경고하며, 초지능(superintelligence)은 널리 분산되어야 한다고 말했습니다. 그러나 저커버그는 기만적으로 말하고 있다는 비판을 피하기 어려운데, 메타는 최근 자사의 최고 성능 AI 모델을 오픈소스화하는 것을 중단하고 대신 유료 API 및 구독 서비스를 통해 제공하기로 결정했기 때문입니다. 이는 다른 기업들이 하는 방식과 똑같습니다.

원문 보기
원문 보기 (영어)
Comment Loader Save Story Save this story Comment Loader Save Story Save this story I was offline last week in my home state of New Jersey, but when I got back to Silicon Valley, everyone was panicking again about how quickly artificial intelligence is advancing. While this is certainly not the first time I’ve seen such concerns, it’s the biggest anxiety attack I’ve seen in years. More than 1,000 employees at OpenAI , Anthropic , and other AI labs signed a petition earlier this week arguing the US should find a way to “pace” the AI race—a diplomatic way of saying the industry should have the option to coordinate a temporary pause on AI development , or slow things down if they get out of hand. OpenAI and Anthropic themselves ended up supporting the letter. The petition arrived a week after OpenAI revealed it had caused an unprecedented cybersecurity incident in which one of its AI agents hacked into Hugging Face’s platform and several other services during internal testing. Around the same time, top Trump administration officials started freaking out about an impressive new Chinese open weight AI model called Kimi K3, which was allegedly distilled from Anthropic’s Fable 5. In response, most of the tech industry —except Anthropic—signed onto an open letter from Nvidia asking the US government to protect open-weight AI models, arguing they’re a necessary counterbalance to their closed counterparts. These events might look like a whole bunch of disjointed chaos. But I think they are evidence of a larger worldview taking hold in Silicon Valley, where many tech insiders are increasingly worried about OpenAI and Anthropic’s dominance. Researchers and investors I’ve talked to recently have framed the AI industry as a two-horse race that doesn’t seem to be slowing down, and that’s a cause for concern. But different groups have their own reasons to be worried. Some OpenAI and Anthropic staffers think their employers are behaving recklessly in their pursuit to take over the market, and that the AI industry may soon develop models that are too capable for current safety methods to contain. They have said as much in public statements attached to this week’s Pacing the Frontier petition. “I've seen how the relentless pace of AI makes it hard for society to keep up and how it puts pressure on labs to cut corners on safety,” Jeremy Hadfield, a research product manager at Anthropic, said in a statement attached to the petition. For some AI employees, the Hugging Face debacle was a warning shot that demonstrated how OpenAI’s efforts to mitigate the risks of its most capable AI technology are already falling short. Granted, the incident happened when OpenAI was testing an AI model on its ability to find software exploits, and the company had intentionally turned off safeguards designed to rein in its cybersecurity capabilities. OpenAI said in its postmortem that these tests were conducted in a sandbox, but the model ultimately gained access to the open internet. Some experts previously told WIRED that OpenAI’s security practices should have been more robust . Other groups in Silicon Valley are more worried about power than safety. Venture capitalists, tech executives, and startup founders are concerned that OpenAI and Anthropic will simply become the next generation of Apple and Google, forcing the rest of the tech industry to play by their rules. It is slightly strange to argue that private startups with little to no profit are acting like monopolies, but that’s the lens through which many—including Mark Zuckerberg—are starting to view the two biggest AI labs. The Meta CEO wrote a Wall Street Journal op-ed this week warning against the centralization of power in the AI industry, saying that superintelligence should be widely distributed. Zuckerberg is arguably talking out of both sides of his mouth—Meta recently decided to stop open sourcing its best AI models and instead offering them through a paid API and subscription service, just like OpenAI and Anthropic. The Meta CEO may have been trying to send a specific message to regulators and the industry. Reading between the lines, I think he’s basically saying “we need to make sure OpenAI and Anthropic don’t run away with AI.” Zuckerberg is far from the first technology leader to raise that concern . I’m not convinced these op-eds and petitions will do much to stop the meteoric rise of OpenAI and Anthropic. Large swaths of the economy are counting on the two AI giants to have successful IPOs, and I’m not sure anyone—let alone the Trump administration—is interested in messing that up. But the tech industry is growing increasingly nervous about the pace of closed AI development, and that’s unlikely to change any time soon. Why AI Video Startups Are Entering Robotics All that said, I still wouldn’t overlook how good open models are getting. Black Forest Labs, a German startup that releases some of the world’s most popular open weight AI image and video generators, announced last week it was releasing a new model that could also power robots. The startup aims to put out an open version of Flux 3 in the coming weeks, which developers can use to generate images, videos, and audio, as well as predict robot actions . “We clearly are stepping from a pure image generation lab to a frontier multimodal AI Lab, which to me is highly important,” Black Forest Labs CEO Robin Rombach said in an interview with me earlier this week. “We are showcasing an intuition which our research team has always had, which is that these models are very general and develop a solid understanding of the real world.” Black Forest Labs is the latest startup to apply its AI video models to the physical world. Earlier this year, OpenAI shelved its AI video generation product Sora entirely and folded the team behind it into the company’s secretive robotics unit. Other AI video startups, like Runway, have also made a push into powering robotics in recent years . These companies are broadly betting that AI video models can develop an understanding of real-world physics. While it’s a fascinating application of the technology, it could also represent a way for companies to generate revenue from models that are very expensive to develop. Most robot foundation models today are vision-language-action models— Google's Gemini Robotics is the best-known —that combine video inputs with written instructions and output motor commands. Rombach says Flux 3 skips the language layer entirely, translating video directly into actions, an approach he argues is more robust. Black Forest Labs is working with another startup, Mimic, to build a custom version of Flux 3 that powers car-building robots in Audi’s factories. Stephan Gravert, the chief product officer of Mimic, says it’s currently testing and deploying the Flux-mimic AI model with Audi. His team has found that it’s particularly good at powering robot hands to put flexible parts—such as window seals and cables—onto the cars. Gravert says Mimic is planning a full rollout of the technology with Audi by the end of the year. I had to ask Rombach about the debate over open versus closed AI, especially because Black Forest Labs signed Nvidia’s open letter asking the US government to protect open weight models. “A general ban of open weight models, in my opinion, would be stupid,” says Rombach. “You really run into issues around transparency, safety, sovereignty, and the speed of innovation. I think it would be a very short-sighted decision.” Rombach has good reason to care about this issue. The cofounders of Black Forest Labs have long punched above their weight, competing with American AI giants like Meta, Google, and OpenAI with far fewer resources. But it might not be able to do so indefinitely: Rombach told me the startup used more computing power than ever to train Flux 3, and it now has over 100 employees. Black Forest Labs raised $300M at a $3.25B valuation last year , but I have a feeling it will need more c