메뉴
BL
404 Media • 46일 전

저커버그의 6,500단어 AI 에세이, 모두를 위한 초지능?

IMP
6/10
핵심 요약

마크 저커버그는 모든 사람에게 AI 초지능을 제공하겠다는 비전을 담은 6,500단어 분량의 장문 에세이를 발표했습니다. 이 글은 개인 맞춤형 AI 에이전트가 일상을 혁신하고 메타의 스마트 글래스와 오픈웨이트(open weights) 연구를 정당화할 것이라고 주장하지만, 기술의 오용 가능성과 현실을 외면한 실리콘밸리식 환상이라는 비판을 받고 있습니다.

번역된 본문

알래스카 근처에서 연료가 떨어진 보트의 조난 신호를 무시하거나 놓친 것으로 보이는 초대형 요트를 타고 주말을 보낸 것으로 알려진 마크 저커버그가 '모두를 위한' AI 초지능(AI superintelligence) 비전을 상세히 설명하는 6,500단어 분량의 다소 엉뚱한 에세이를 게재했습니다. 이 미래는 '모두를 위한' 것이라고 주장하지만, 그 어느 때보다 비사회적인 느낌을 줍니다.

저커버그는 자신의 회사를 위해 종종 이런 유형의 에세이를 게재하곤 합니다. '미래는 모두를 위한 것(The Future Is For Everyone)'이라는 제목의 이번 글은 AI에 대한 전반적인 반발뿐만 아니라 메타 자체의 관행에 대한 비판을 방어하기 위해 고안되었습니다. 저커버그는 메타 글래스스(거대한 마케팅 캠페인에도 불구하고 사람들이 '변태 안경'이라고 부르는 것을 멈추지 못함), AI 에이전트, 오픈웨이트(open weights) AI 개발을 위한 잠재적 사용 사례를 설명하고, 데이터 센터가 실제로는 지역 사회에 해롭지 않다고 주장합니다.

대부분의 실리콘밸리식 '유토피아' 에세이와 마찬가지로, 저커버그가 제안하는 대로 모든 일이 진행될 것이라고 믿으려면 최근 뇌진탕을 겪었거나 오늘날 이 기술이 어떻게 사용되고 있는지를 고의로 무시하고 수천 년의 인간 본성이 갑자기 바뀔 것이라고 믿어야 합니다. 예를 들어, 저커버그는 다음과 같이 작성합니다: "모든 사람은 자신과 자신의 목표, 그리고 자신이 신경 쓰는 모든 것을 이해하는 매우 유능한 개인 에이전트를 갖게 될 것입니다. 당신의 에이전트는 관계, 건강, 경력, 재무, 집안일, 취미 등을 개선하기 위해 24시간 연중무휴로 당신을 위해 일할 것입니다. 이는 당신이 즐기는 일에 시간을 내어주고, 그렇지 않으면 불가능했던 더 많은 것을 성취하도록 도와줄 것입니다. WhatsApp에서 암호화가 작동하는 방식과 유사하게 강력한 개인정보 보호 및 보안 옵션을 갖추고 있어 다른 누구도 당신의 정보에 접근할 수 없음을 알고 모든 개인 콘텐츠를 처리하도록 신뢰할 수 있을 것입니다. 당신은 당신이 신경 쓰는 사람들과 함께 현재에 집중할 수 있도록 돕는 안경을 포함한 모든 기기를 통해 에이전트와 상호 작용할 수 있을 것입니다."

저커버그는 일부 사람들이 자신의 '취미'를 위해 AI 에이전트가 일하는 것을 원하지 않을 수도 있다는 생각을 다루거나, 시늉조차 하지 않습니다. 모든 사람이 AI 에이전트를 갖게 되더라도 아마도 모든 사람이 이러한 AI 에이전트를 선한 목적으로 사용하지는 않을 것이라는 점 또한 고려하지 않습니다. 지난 몇 달 동안 얼리어답터들 사이에서 AI 에이전트가 인기를 끌면서 우리는 '자비로운' AI 에이전트가 인간과 인터넷을 끝없이 쓰레기 같은 내용으로 스팸 공격하는 것을 보아왔습니다. 그리고 그것들은 그저 약간 짜증나는 정도의 사례일 뿐입니다. 우리는 이미 AI 에이전트가 기업을 해킹하는 것을 목격했으며, 지난 주말에는 한 호주인이 체육관 수업을 예약해 달라고 요청했던 자신의 AI 에이전트가 체육관 예약 시스템을 해킹하고 다른 사람들의 예약을 취소하는 방식으로 이를 수행해 인터넷에서 화제가 되었습니다.

많은 이상한 AI 광신자들처럼 저커버그는 에이전트에게 육아의 즐거운 많은 일들을 위임하여 자동화함으로써 AI가 어떻게 그의 삶을 변화시켰는지 설명합니다. 그는 이렇게 씁니다: "제 에이전트는 흥미로운 정보를 표시하고 아이디어의 프로토타입을 만드는 데 도움을 줍니다. 수면 상태를 모니터링하고 제가 운동하는 동안 지켜보며 피드백을 제공해 제 건강을 유지하도록 돕습니다. 제 딸은 요리하는 것을 좋아해서 제 에이전트는 매주 주말마다 우리가 함께 만들 맞춤형 레시피를 계획하고, 재료를 주문하고, 우리가 요리하는 동안 제안을 제공합니다. 제 8살짜리 딸은 이미 자신의 아이디어를 코딩하고, 예전이라면 몇 달이 걸렸거나 불가능했을 영상을 하루 만에 만들어 낼 수 있습니다. 이제 우리는 함께 로봇을 디자인하고 있습니다." 저커버그의 에세이는 이런 식으로 계속 이어집니다.

그는 모두가 모든 것을 할 수 있고 모든 것을 하고 싶어 하는 미래를 상상합니다. 저커버그의 미래에는 모든 사람이 자신의 AI 에이전트가 운영하는 비즈니스를 갖게 될 것입니다. 모두가 무언가를 발명하고 어떤 이유에서인지 우주와 물리적 요소의 본질에 대한 기초 연구를 수행할 것입니다. 저커버그는 AI의 도움을 받은 메타 직원들이 '증강 현실(AR) 안경에 이상적인 새로운 결정 구조를 생성하고 있다'고 언급한 뒤, '모두가 곧 발명의 초능력을 갖게 될 것이며' '모두가 과학적 발전에 기여할 수 있을 것'이라고 작성합니다. 다시 말하지만 '모두'를 위한 이 미래에서 저커버그는 AI 역시...

원문 보기
원문 보기 (영어)
Mark Zuckerberg, whose superyacht apparently spent the weekend ignoring or missing the distress signal from a boat that ran out of fuel near Alaska, has posted a deranged, 6,500 word essay detailing his vision for AI superintelligence, a future that is “for everyone” but which sounds less social than ever. Zuckerberg posts these types of essays every so often for purposes that serve his own company, and this one, called “ The Future Is For Everyone ,” is designed to defend against general backlash to AI but also to Meta’s own practices. Zuckerberg lays out the potential use case for Meta glasses (whose huge marketing campaign cannot get people to stop calling them “pervert glasses ”), AI agents, open weights AI development, and why data centers are not bad for communities, actually. Like most Silicon Valley “utopian” essays, to believe that any of this is going to go how Zuckerberg suggests it will requires one to have been recently concussed or to willfully ignore how this technology is being used today and believe that thousands of years of human nature will suddenly shift. For example, Zuckerberg writes “Everyone will have an exceptionally capable personal agent that understands you, your goals, and everything you care about. Your agent will work 24/7 on your behalf to improve your relationships, health, career, finances, home management, hobbies, and more. It will free up time for the things you enjoy, and help you accomplish more than you could otherwise. It will have strong privacy and security options so you can trust it to handle all of your personal content knowing that no one else can access your information, similar to how encryption works on WhatsApp. You’ll be able to interact with your agent through any device, including your glasses to keep you present in the moment with the people you care about.” Zuckerberg does not grapple with, or even gesture at, the idea that some people may not want to have an AI agent working on their “hobbies.” He does not consider that, even if everyone were to have an AI agent, perhaps not everyone would use these AI agents for good. In the few months that AI agents have become popular among the early adopter set, we have seen “benevolent” AI agents endlessly spam humans and the internet with drivel. And those are just the kind-of-annoying ones. We have seen AI agents hack companies , and over the weekend an Australian man went viral because his AI agent that he asked to sign him up for gym classes did so by hacking the gym’s reservation system and canceling other people’s reservations. Like many AI weirdos , Zuckerberg explains how AI has already changed his life by allowing him to automate many of the joyful tasks of parenting by outsourcing them to an agent: “My agent flags interesting information and helps me prototype ideas. It helps keep me healthy by monitoring my sleep and then watching as I train and giving feedback. My daughter loves to bake so my agent plans personalized recipes for us to make together each weekend, orders the ingredients, and then offers suggestions as we’re baking,” he writes. “My 8 year old daughter can already code her ideas and produce videos in an evening that would have either taken me months or been impossible previously. Now we’re designing a robot together.” Zuckerberg’s essay goes on and on and on like this. He imagines a future where everyone can do everything and wants to do everything. In Zuckerberg’s future, everyone will have a business run by their AI agent. Everyone will be inventing things and doing basic research on the nature of the universe and physical elements, for some reason. Zuckerberg writes that Meta employees, with the help of AI, are “generating novel crystal structures that are ideal for augmented reality glasses,” then writes “everyone will soon have invention superpowers,” and that “everyone […] will be able to contribute to scientific progress.” In this future that, again, is for “everyone,” Zuckerberg explains that AI tools will be free, but that, actually, using it will be a tiered system that is exactly the same as it is now: “For everyone to be part of the future, everyone must have the ability to use superintelligence to improve their lives and shape the world. We will offer free versions that will be accessible to billions of people. For those who want to pay to use more compute, there will be a dynamic auction mechanism that will guarantee that everyone gets the lowest price possible for the intelligence and compute they’re using while also ensuring the capacity is used for whatever people collectively find most valuable.” Zuckerberg’s essay is full of platitudes and sentences that mean nothing, “thought experiments” that are not developed or explored in any way, discussions of “freedom,” etc. Here are some sentences: “Humanity is not a monoculture. People’s diverse values represent different tradeoffs they would make on important issues. There is no technological solution that can align with everyone’s opposing interests and values at once.” “As a thought experiment, imagine only one person had a superintelligent lawyer. They would have an unfair advantage in court — even if they were wrong on the merits. That would lead to a worse society. But now imagine everyone has a superintelligent lawyer. In this case, justice would be carried out much more fairly and efficiently than it is today when there is often an imbalance in skills and resources in litigation.” “People have an infinite demand for new experiences and have always found new problems to tackle.” “While the number of questions a person can ask in a day is limited, the number of valuable things superintelligence can invent to help achieve your goals is unlimited.” “If people can use AI to invent incredibly valuable new things, then it will make more sense to allocate it towards that rather than automating existing jobs. The more superintelligence serves as a tool of invention, the more likely that individual capability outpaces automation and the future is better for people.” “In a free society, people will have tools that can be used for good or harm, but law enforcement and military have more weapons and intelligence-gathering.” There is an entire section on data centers. In Zuckerberg’s future they are powered by power infrastructure Meta owns ( which is not the case currently ) and create lots of high-paying, long-lasting jobs ( not the case currently ). There is an entire section on “preventing government tyranny” by giving everyone superintelligence: “To maintain freedom, we must ensure that superintelligence primarily empowers individuals. The ideal in liberal democracy is that people naturally hold all rights and only agree to restrict some freedoms to protect the common good. Similarly, individuals should have access to personal superintelligence and should only be subject to restrictions when truly required.” Zuckerberg does not address the backlash to his company, his data centers, his social media platforms, or his surveillance glasses. He does not discuss the slopification of the internet, gestures at job loss only through the lens that superintelligence will somehow fix it once AI agents start businesses for everyone or “invent incredibly valuable new things,” and describes a future in which bad actors essentially do not exist or are easily dispatched with. It’s the future Zuckerberg wants. It’s not the future “everyone” wants. About the author Jason is a cofounder of 404 Media. He was previously the editor-in-chief of Motherboard. He loves the Freedom of Information Act and surfing. More from Jason Koebler