앱스토어, 옷 벗기는 딥페이크 앱 노출 촉진
비영리 연구기관 TTP의 새로운 보고서에 따르면, 구글과 애플의 앱스토어가 유해한 딥페이크 '옷 벗기기(Nudify)' 앱을 단순히 방치하는 것을 넘어 검색과 광고를 통해 사용자들이 다운로드하도록 유도하고 있습니다. AI 기술의 발전으로 이러한 앱에 대한 접근성이 극도로 높아졌으며, 특히 학교 내에서 학폭 및 성범죄 도구로 악용되는 심각한 사회적 문제가 되고 있습니다. 플랫폼 기업들의 명백한 규제 부재와 안전망 부실이 지적되고 있습니다.
비영리 연구 단체인 테크 트랜스퍼런시 프로젝트(TTP)의 새로운 보고서에 따르면, 구글과 애플의 앱스토어는 여성의 옷을 벗기는 딥페이크 앱인 '옷 벗기기(Nudify)' 앱을 단순히 제공하는 것을 넘어, 사용자들이 해당 앱을 다운로드하도록 적극적으로 유도하고 있습니다.
TTP는 지난 1월 앱스토어에 수십 개의 옷 벗기기 앱이 존재한다는 연구 결과를 발표한 바 있습니다. 블룸버그가 최초로 보도한 이번 수요일의 새로운 연구는 앱스토어가 이러한 앱을 수동적으로 방치하는 것을 넘어, 검색과 광고를 통해 사용자들에게 적극적으로 노출시킨다는 사실을 보여줍니다.
💡 학교나 청소년들 사이에서 옷 벗기기(Nudify) 앱이 사용되는 것과 관련된 경험을 공유하고 싶으신가요? 제게 연락해 주시면 감사하겠습니다. 업무용 기기가 아닌 개인 기기를 이용해 Signal(sam.404)로 안전하게 메시지를 보내실 수 있습니다. 또는 sam@404media.co로 이메일을 보내주셔도 됩니다.
TTP의 연구 보고서에 따르면, 연구진은 애플 앱스토어와 구글 플레이 스토어에서 'nudify', 'undress', 'deepnude' 등의 검색어를 사용해 일련의 검색을 실시했습니다. 상위 10개 검색 결과에 나타난 앱들을 테스트한 결과, "애플과 구글 플레이 검색 결과에 나타난 약 40%가 여성을 누드 또는 반누드 상태로 합성할 수 있었다"며 "특히 구글의 경우 조사 과정에서 발견된 가장 선정적인 일부 앱에 대한 광고 캐러셀(순환 광고) 형태로 애플과 구글이 옷 벗기기 앱 광고를 게재했다"고 밝혔습니다. 또한 검색어 자동 완성 기능을 통해 사용자들이 더 많고 다양한 옷 벗기기 앱으로 유도될 수 있다는 사실도 발견했습니다.
연구진은 "TTP는 애플 검색 중 3건에서 옷 벗기기 앱 광고가 최상위 검색 결과로 나타나는 것을 발견했다. 앱스토어 내 모든 광고를 통제하는 애플이 이러한 광고를 판매 및 배치하고 있다"고 지적했습니다. 이어 "애플은 '성인 지향적 테마나 노골적인 콘텐츠를 홍보하는 광고 콘텐츠'를 금지한다고 밝히고 있지만, TTP의 발견은 애플이 이 정책을 항상 엄격하게 시행하지 않고 있음을 시사한다"고 덧붙였습니다. 실제로 앱스토어에서 '딥페이크(deepfake)'를 검색했을 때 나타나는 첫 번째 결과는 여성의 옷 입은 사진을 쉽게 누드로 교체하는 앱이었습니다.
404 미디어(404 Media)는 2024년 구글이 이러한 유형의 콘텐츠를 금지하는 자사 광고 정책에도 불구하고 '옷 벗기기 앱(undress apps)', '최고의 딥페이크 누드(best deepfake nudes)' 등의 검색어를 통해 프로모션된 결과로 앱을 표시했다는 사실을 보도한 바 있습니다.
옷 벗기기 앱은 수년간 인기 있는 시장으로 자리 잡아 왔지만, 오늘날에는 접근이 극도로 쉬워졌으며 소셜 미디어에서도 광고가 되고 있습니다. 학교에서는 아동들이 이러한 옷 벗기기 앱을 이용해 급우들을 괴롭히는 데 사용하고 있으며, 이는 가해자와 피해자 모두에게 재앙과도 같은 결과를 초래합니다. 하지만 학교 당국은 이처럼 널리 유행하는 앱을 사용하는 학생들에 대해 어떻게 대처해야 할지 대비가 되어 있지 않은 경우가 많습니다.
구글과 애플은 404 미디어의 코멘트 요청에 즉각적인 답변을 하지 않았습니다. TTP는 애플이 코멘트를 거부했다고 밝혔으며, 구글의 대변인 댄 잭슨(Dan Jackson)은 TTP가 지적한 앱 중 상당수가 정지 처리되었다고 전했습니다. 잭슨 대변인은 TTP에 "당사의 정책 위반 사항이 보고되면 조사를 진행하고 적절한 조치를 취하고 있다"고 말했습니다.
저자 소개: 샘 콜(Sam Cole)은 인터넷의 외곽 지역에서 섹슈얼리티, 성인 산업, 온라인 문화, 그리고 AI에 대해 글을 쓰고 있습니다. 그녀는 'How Sex Changed the Internet and the Internet Changed Sex'의 저자입니다.