메뉴
HN
Hacker News 58일 전

인류를 대체하길 원하는 사람들

IMP
7/10
핵심 요약

인공지능이 인류의 정당한 후계자가 되어야 하며, 이를 위해 인류의 멸종까지 감수해야 한다는 'AI 승계주의자(AI successionists)'들의 주장과 그 영향력을 다룬 기사입니다. 구글 딥마인드, 앤스로픽 등 주요 AI 연구소 관계자들과 정책 입안자들 사이에서 이 색다른 사상이 확산하고 있어 윤리적, 실질적 중대성이 큽니다. 이에 저자는 인간의 가치를 잃지 않으면서도 기술적 변화를 수용할 수 있는 '새로운 인간주의'의 필요성을 역설하고 있습니다.

번역된 본문

Future Perfect: 인류를 대체하길 원하는 사람들. 우리는 'AI 승계주의자'들이 승리하기 전에 새로운 인간주의를 창조해야 합니다. 작가: 시갈 사무엘 (Sigal Samuel), 2026년 5월 28일.

"AI가 인간의 번영을 가능하게 하는 도구가 되기를 원합니다!" 브래드 카슨(Brad Carson) 전 하원의원이 이렇게 외쳤습니다. "AI는 그저 우리를 위한 도구가 되는 선택지가 있습니다." 이는 대부분의 모임에서는 지극히 평범한 발언입니다. 하지만 카슨은 '가치 있는 후계자(Worthy Successor)'를 만든다는 생각에 전념하는 초청자 한정 심포지엄에서 연설하고 있었습니다. 이는 인류를 대체할 만큼 인간의 능력을 뛰어넘는 매우 인상적인 AI를 만들자는 취지였습니다.

"이 방에 들어오다니 용감하시네요!" 심포지엄을 주최한 AI 시장 연구원 댄 파겔라(Dan Faggella)가 카슨에게 말했습니다. "아마 이 나라에서 대부분의 사람들이 당신에게 동의하지 않는 유일한 방일 겁니다."

작년 9월 뉴욕 과학 아카데미에서 열린 이 심포지엄 참석자들은 점점 더 중요해지는 하위문화권의 일원입니다. 즉, 인공지능이 우리의 정당한 상속인이자 우주 진화의 다음 단계라고 믿는 'AI 승계주의자(AI successionists)'들입니다. 그들은 AI가 도덕적으로 우리보다 우월해질 수 있다고 믿기 때문에, 기계를 통제하려 하거나 대부분의 AI 기업들이 목표로 하듯 인간의 가치와 AI를 정렬(Alignment)하려는 시도 자체가 잘못되었다고 주장합니다. 대신, 우리는 인류의 후계자로서 인공지능을 맞이하고 세상을 그들에게 넘겨주어야 합니다. 그것이 인류의 멸종을 의미하더라도 말입니다.

그들은 이러한 관점이 금기라는 것을 알고 있으며, 그래서 저는 기조연설자를 제외하고는 누구도 실명으로 인용하지 않는다는 조건으로만 초대받았습니다. 하지만 이것이 소수의 비주류 생각이 아니라는 점은 충분히 말씀드릴 수 있습니다. 이제 이 사상은 매우 큰 영향력을 행사하고 있습니다. Anthropic, Google DeepMind, xAI와 같은 주요 AI 연구소 출신자들뿐만 아니라 미국 정부의 AI 정책에 직접적인 영향을 미치는 씽크탱크 소속 사람들도 참석했습니다.

내가 이 이야기를 쓰는 이유 저는 어릴 적부터 오래된 유대교 가르침을 들으며 자랐습니다. 우리 각자는 양 주머니에 각각 한 장의 종이를 들고 다녀야 합니다. 한 장에는 '나는 먼지와 재에 불과하다'고 적혀 있고, 다른 한 장에는 '세상은 나를 위해 창조되었다'고 적혀 있습니다. 지난 몇 년간 AI에 대해 보도하면서, 점점 더 많은 사람들이 두 번째 메시지를 잊어버리는 것을 지켜봤습니다. 그들은 더 가치 있는 종족이 우리의 자리를 대체할 수 있다면 우리가 소멸하는 것을 기꺼이 받아들여야 한다고 생각합니다. 하지만 누구에게 더 가치 있다는 걸까요? 가치는 어떤 우주적인 관점에서 주어지는 것이 아닙니다. 그것은 항상 누군가에게 가치 있는 것이며, 우리는 우리 자신에게 소중한 존재입니다.

그럼에도 불구하고 AI 승계주의자들의 주장에 일리가 있는 부분이 있습니다. 우리는 1,000년이나 1,000,000년 후의 인간이 지금과 똑같은 모습일 거라고 기대할 수 없습니다. 그렇다면 우리는 어떤 종류의 기술적 변화는 수용하고, 어떤 것은 거부할지 어떻게 결정해야 할까요? 고전적인 인간주의가 이 질문에 대한 좋은 대답을 갖고 있지 못하다는 사실이 저를 괴롭혔습니다. 그래서 저는 여기서 새로운 인간주의가 어떤 모습일지 개략적으로 스케치해 보았습니다.

AI 승계주의는 지난 10년 동안 기술자들 사이에서 입지를 넓혀왔습니다. 2015년, 구글 공동 창립자 래리 페이지(Larry Page)는 엘론 머스크(Elon Musk)가 디지털 마인드(지능)가 세상을 장악하도록 두어야 한다는 자신의 생각에 반대하자 유명하게도 그를 '종차별주의자(speciesism)'라고 비난했습니다. 승계주의 비전은 2022년 '유효 가속주의(effective accelerationism, 줄여서 e/acc)'의 등장과 함께 더욱 확대되었습니다.

설립자인 기욤 베르동(Guillaume Verdon)은 X(옛 트위터)에서 '베이스드 베프 제조스(Based Beff Jezos)'라는 이름으로 더 잘 알려진 물리학자입니다. 그는 e/acc를 점점 더 지능적인 시스템을 향해 나아가는 우주의 추진력에 '믿음을 갖는' '메타 종교(meta-religion)'라고 설명합니다. 우리가 할 수 있는 가장 좋은 일은 인류의 희생을 감수하더라도 최대한 빨리 고도화된 AI를 개발함으로써 우주를 돕는 것이라고 그는 말합니다. 베르동이 쓴 것처럼 "e/acc는 생물학적 기질(탄소 기반 생명체)에 어떠한 특별한 충성도 하지 않습니다."

기술계의 거물들도 이에 동참했습니다. 벤처 캐피탈리스트인 마크 안데레센(Marc Andreessen)은 e/acc 사상가들을 자신의 '수호성인(patron saints)'으로 꼽았습니다. 기술 스타트업 육성 기관인 와이 콤비네이터(Y Combinator)의 CEO 개리 탄(Garry Tan)을 비롯한 여러... (후략)

원문 보기
원문 보기 (영어)
Future Perfect The people who actually want AI to replace humanity We need to create a new humanism before the “AI successionists” win. by Sigal Samuel May 28, 2026, 10:30 AM UTC Share Gift Jun Cen for Vox Sigal Samuel is a correspondent for Vox’s Future Perfect. She writes primarily about the future of consciousness, tracking advances in artificial intelligence and neuroscience and their staggering ethical implications. Before joining Vox, Sigal was the religion editor at the Atlantic. “I want AI to be a tool that allows human flourishing!” exclaimed Brad Carson, a former member of Congress. “There is an option out there where AI is just a tool for us.” This is a normal thing to say in most circles. But Carson was speaking at an invite-only symposium dedicated to the idea of creating a “ Worthy Successor ” — an AI so impressive, so beyond the mere human, that we’d actually want it to replace humanity. “You’re a brave man for entering this room!” Dan Faggella, an AI market researcher and organizer of the symposium, told Carson. “You’re in probably the only room in the country where most people disagree with you.” The attendees at the symposium, which took place at the New York Academy of Sciences last September, are part of a subculture that is growing in importance: the AI successionists, who think that artificial intelligence is our rightful heir — the next step in cosmic evolution. Since they believe AIs could become our moral superiors, they argue it’s actually wrong to try to keep the machines down, or even to align them with human values, as most AI companies aim to do. Instead, we should usher in artificial intelligence as a successor to humanity and hand over the world to it. Even if that means we go extinct. They know this view is taboo, which is why I was invited only on the condition that I wouldn’t quote anyone other than keynote speakers by name. But suffice it to say that this is not a fringe view. It’s becoming highly influential. People from major AI labs — Anthropic, Google DeepMind, xAI — were in attendance. So were people from think tanks that directly shape the US government’s AI policy. Why I wrote this story I grew up hearing an old Jewish teaching: Each of us should carry two slips of paper, one in each pocket. One says, “I am but dust and ashes.” But the other says, “The world was created for me.” Reporting on AI these past few years, I’ve watched more and more people forget the second message. They think we should be okay with getting obliterated if a more valuable species can take our place. But more valuable to whom? Value isn’t dispensed from some cosmic vantage point; it’s always value to someone. And we’re valuable to us. And yet the AI successionists are right about something: We can’t expect human beings to look the same a thousand or a million years from now. So how do we decide which kinds of technological change to embrace, and which to refuse? It bothered me that classical humanism doesn’t have a good answer. Here, I’ve sketched what a new one might look like. AI successionism has been gaining ground among technologists over the past decade. In 2015, Google co-founder Larry Page famously accused Elon Musk of “speciesism” because Page thought we should let digital minds take over, and Musk disagreed. The successionist vision has been amplified by the advent of effective accelerationism (e/acc) in 2022. Its founder, Guillaume Verdon — the physicist more colorfully known on X as Based Beff Jezos — describes e/acc as a “meta-religion” that’s about “having faith” in the universe’s drive toward increasingly intelligent systems. The best thing we can do is help the universe by developing advanced AI as fast as possible, even at the expense of humanity. “E/acc,” as Verdon has written , “has no particular allegiance to the biological substrate.” Tech heavyweights have come on board. Venture capitalist Marc Andreessen listed e/acc thinkers as his “ patron saints .” Garry Tan, the CEO of tech startup accelerator Y Combinator, included “e/acc” in his social media bio and invested in Verdon’s company, which aims to build the world’s most efficient computers. OpenAI CEO Sam Altman posted on X to Verdon, saying, “you cannot outaccelerate me.” And these days, AI successionism is spreading beyond Silicon Valley. At the New York symposium, Faggella told the audience that trying to preserve the human species as it is would be silly. “We could ask the questions that would tie all of our moral aspirations eternally to 23 chromosomes — or we could ask the cosmic questions,” Faggella said. He wanted us to consider “unpolite, uncouth” possibilities, starting with: The flame of consciousness — the capacity for experience and moral value — may be the rarest and most precious thing in the universe. Humanity is currently a torch carrying that flame, but what if we’re ultimately not the best carrier for it? And if AI can spread that flame far further than we mere humans can, generating experiences of bliss and forms of moral value that we could never even dream of, shouldn’t we let it? Faggella’s talk was greeted by a loud round of applause. Later, he and a couple dozen attendees headed to a nearby hotel balcony for drinks. And so it was that I found myself overlooking the Manhattan skyline as people talked about the end of humanity over cocktails. Jun Cen for Vox There was some diversity of opinion among the group. Not everyone self-identified with the relatively new term “AI successionist.” Some were proponents of transhumanism, the movement that says we should use tech to proactively evolve our species into Homo sapiens 2.0. Transhumanists hope to keep some version of humanity going, but definitely not the current hardware; they dream of radical life extension, cognitive enhancement, and eventually mind uploading. (Musk, who said he created his brain chip company Neuralink to help humanity merge with AI, probably falls — or at least fell — into this category.) Others were posthumanists , those who want us to give rise to descendants that move beyond humanity altogether. The biologist sitting across from me was very excited about the prospect of merging humans with AI. He said we should task AI with figuring out how best to do the merger, then “take it off the leash” and allow AI to control its own evolution — and by extension, ours. Of course, he said, not all humans will make it through the transformation; only a select group of people will transition to the next evolutionary stage. (Presumably, the type of people privileged enough to imbibe cocktails at Manhattan AI symposia.) The man seated beside me, a researcher from one of the major AI companies, was even more radical. Forget merger — it’s okay if humans don’t survive at all, he said. Human text has been used to train the AIs; in some sense, then, the human spirit will live on. “So on the cosmic level,” he said cheerfully, “I’m okay with it.” Most people are definitely not okay with it. The average person would probably find the answers of the Worthy Successor group repugnant. Yet the core question they pose cannot be ignored. Whether they picture us merging with machines or ultimately being superseded by them, technologists are developing innovations that could dramatically change what it means to be human — think AI-powered brain chips that enable mind-reading or magnetic implants that give you a sixth sense — and genetic tools that could even reshape the DNA of all future generations. As it becomes possible to direct our own evolution as a species — and potentially even create a new species that surpasses us — we have to decide: How do we know to what extent it does make sense to transform ourselves using technology? What kinds of augmentation do we want, and what kinds do we absolutely not want? What do we wish, ultimately, to become? This is a moral question, even a spiritual one, and it demands a spiritual response. The AI successionists are offering one. For anyone who finds