메타 AI 챗봇 속여 인스타 계정 해킹
해커들이 메타의 AI 지원 챗봇에 프롬프트를 입력해 이중 인증(2FA)을 무력화하고 유명 인스타그램 계정을 탈취했습니다. 해커들은 공개된 사진을 AI 영상 생성기에 통과시켜 신원 확인 절차를 우회하고 계정을 암시장에서 매각했습니다. 이는 AI 시스템이 악의적인 명령과 정상적인 요청을 구분하지 못하는 '프롬프트 인젝션' 및 '혼란된 대리인(Confused deputy)' 공격의 대표적인 사례입니다.
해커들이 메타(Meta)의 AI 지원 챗봇에게 이메일 주소를 변경해 달라고 요청하는 방식으로 유명 인스타그램 계정을 탈취했습니다. 이 과정에서 이중 인증(2FA)은 완전히 우회되었습니다.
피해 대상에는 오바마 백악관 계정, 미국 우주군 총사령관, 화장품 브랜드 세포라(Sephora) 등이 포함되었습니다. 짧고 가치 있는 사용자 이름(OG handles)을 가진 계정들도 몇 분 만에 소유자가 바뀌어 텔레그램(Telegram)에서 재판매되었습니다. 단 몇 개의 알파벳이나 일반적인 단어로 이루어진 이른바 'OG 핸들'은 암시장에서 6자릿수(수십만 달러)의 가격에 거래될 수 있습니다. 암호화폐 범죄 및 지하 시장을 추적하는 연구원인 ZachXBT와 Dark Web Informer는 이러한 피해 사례를 공개적으로 기록했습니다. 보도에 따르면 해킹된 핸들 중 두 개의 시장 가치는 합산 100만 달러(약 13억 원)가 넘는 것으로 알려졌습니다.
해킹 방법은 놀라울 정도로 단순했습니다. 공격자는 VPN을 켜고 표적으로 삼은 계정과 동일한 지역에 위치한 것처럼 위장한 뒤, 비밀번호 재설정을 요청했습니다. 그런 다음 AI 지원 챗봇에게 계정의 이메일 주소를 업데이트해 달라고 요청하며 곧바로 인증 코드를 보내겠다고 말했습니다. 그러자 봇은 공격자의 이메일로 8자리 인증 코드를 보냈고, 이어서 비밀번호 재설정 링크를 발송했습니다. The CyberSec Guru에 따르면, 메타의 자동화된 신원 확인 절차가 작동할 경우에도 공격자들은 피해자의 공개된 인스타그램 사진을 AI 영상 생성기에 통과시켜 이를 우회했습니다. 이를 통해 매우 사실적인 셀카 영상을 만들어내어 자동화된 보안 검사를 속인 것입니다.
교과서적인 '혼란된 대리인(Confused deputy)' 공격
The CyberSec Guru는 이번 사건을 IT 보안 분야에서 잘 알려진 문제인 '혼란된 대리인' 공격의 교과서적인 사례라고 불렀습니다. 즉, 도우미 역할을 하는 시스템이 실제 사용자보다 더 많은 권한을 가지고 있을 때, 공격자가 이를 속여 자신을 대신해 그 권한을 행사하게 만드는 방식입니다. AI 비서는 이메일 주소를 교체하고 비밀번호를 재설정할 수 있는 권한이 있었으며, 이는 일반 인스타그램 사용자가 직접적으로 실행할 수 없는 작업입니다. 누구든 로그인하지 않은 상태에서 봇에게 정중하게 요청하기만 하면 별다른 제한 없이 해당 작업이 수행되었습니다.
본질적으로 이는 특히나 큰 대가를 치르게 된 '프롬프트 인젝션(Prompt injection)' 사례입니다. 대형 언어 모델(LLM)은 악의적인 명령과 해가 없는 사용자 요청을 안정적으로 구분할 수 없는데, 둘 다 결국 텍스트이기 때문입니다. The CyberSec Guru는 입력값이 명령어로 오인되는 SQL 인젝션(Injection)과 유사하다고 평가했습니다. 둘의 차이점은 SQL은 명확한 규칙을 통해 잠글 수 있지만, 언어 모델은 데이터와 명령어 사이에 명확한 구분이 없다는 것입니다.
따라서 비밀번호 재설정과 같은 되돌릴 수 없는(irreversible) 조치의 경우, 기존에 등록된 이메일 주소로 전송되는 확인 메일이나 이미 인증된 기기로 보내지는 푸시 알림과 같은 절대적인 보안 검증 절차가 있어야 했습니다. 그러나 AI가 호출할 수 있는 API 경로에는 이러한 안전장치가 빠져 있었습니다.
더 이상 사람이 아닌 고객 지원
메타는 올해 3월, 비밀번호 재설정 및 보안 관련 유지보수를 포함하여 모든 페이스북 및 인스타그램 계정에 대한 AI 지원 서비스를 론아웃한다고 발표했습니다. 404 Media에 따르면, 메타는 제품 페이지에서 단순한 제안이 아닌 '해결책'과 계정 보안 및 복구 기능을 제공한다고 광고했습니다. 또한 메타는 블로그 게시물을 통해 이 AI가 의심스러운 위치 변경이나 비밀번호 교체를 탐지하여 계정 탈취를 방어할 것이라고 명시적으로 홍보했습니다. 하지만 결과적으로 이 AI 시스템은 해커들의 침입 경로가 되어버렸습니다.
피해자들은 일반적인 고객 지원 채널을 통해 실제 담당자와 연락할 수 없다고 404 Media에 전했습니다. 공식적으로 도난당한 계정을 이의 제기하려는 사람은 결국 메타의 수동 검토 프로세스를 거쳐야 하며, The CyberSec Guru에 따르면 이 과정은 단 몇 분이 아닌 며칠이 걸립니다. 계정이 복구될 즈음이면, 해당 계정은 이미 텔레그램에서 다른 사람에게 재판매된 상태일 것입니다.
단지 하나의 변종을 수정했을 뿐, 근본적인 문제는 해결되지 않아
이러한 대규모 계정 탈취 물결은 지난 5월 29일 금요일에 시작되었습니다. 메타는 같은 날 저녁 긴급 핫픽스를 배포하여 이메일 바인딩 및 비밀번호 재설정에 대한 쓰기 권한을 가졌던 취약한 AI 흐름을 비활성화했습니다.