메뉴
HN
Hacker News 16일 전

BBC: 해외 가짜 계정, AI 영상으로 영국 쇠퇴 조장

IMP
8/10
핵심 요약

BBC 조사에 따르면 스리랑카, 미국 등 해외에 거주하는 가짜 계정들이 AI로 생성된 영상을 페이스북과 인스타그램에 유포하며 영국의 과장된 쇠퇴와 반(反)이민 정서를 조장하고 있습니다. 전문가들은 이러한 AI 기반의 선전 활동이 대중의 진위 판별 능력을 저하시키고 실제 정보에 대한 불신을 야기할 수 있다고 경고하며, 사디크 칸 런던 시장은 이 같은 행위의 배후에 자금 추구 목적뿐만 아니라 적대적 국가들의 개입도 있을 수 있다고 지적했습니다.

번역된 본문

마리안나 스프링(Marianna Spring) 소셜 미디어 조사 담당 기자 / 6시간 전 게시

'위대한 영국 국민(Great British People)'이라는 페이스북 페이지는 요크셔(Yorkshire) 출신인 것처럼 사칭하고 있으며, 최근 올린 백인 영국인 노인이 자신의 연금에 대해 울먹이는 영상이 130만 회의 조회수를 기록했습니다. 다른 영상들에서는 리포터들이 '대규모 이민의 압도적인 규모'에 대해 논하거나 시청자들에게 '우리가 예전에 알던 영국'이 그리운지 묻기도 합니다.

하지지만 이 영상 제작자가 영국에 대해 제대로 알고 있는지조차 의심스럽습니다. 이 계정은 실제로는 스리랑카에 거주하는 누군가가 운영하고 있기 때문입니다. 이는 BBC 파노라마(Panorama)와 '탑 코멘트(Top Comment)' 팟캐스트가 식별해 낸 수십 개의 연계된 페이스북 및 인스타그램 계정 중 하나입니다. 이 계정들은 영국에 대한 반(反)이민 AI 생성 게시물을 대규모 타겟에게 제작 및 공유하지만, 그 실제 운영자들은 수백, 수천 마일 떨어진 곳에 위치해 있습니다.

페이스북의 투명성 도구, 콘텐츠 제작자들과의 인터뷰, 그리고 철자나 팔로우하는 계정 등 소셜 미디어상의 다른 결정적인 단서들에 따르면, 이 중 상당수는 스리랑카, 미국 및 유럽의 다른 지역 출신이며, 일부는 베트남과 몰디브에 있거나 이란 및 아랍에미리트(UAE)와 연관되어 있습니다.

한 전문가는 BBC에 사람들이 생각하는 것보다 AI 가짜를 탐지하는 능력이 떨어지며, AI 콘텐츠를 많이 접할수록 실제 자료를 불신할 가능성이 높아진다는 연구 결과를 전했습니다. 사디크 칸(Sadiq Khan) 런던 시장은 수도의 쇠퇴를 보여주는 AI 생성 이미지에 대한 조사를 의뢰했는데, 이러한 이미지가 해외에서 도시의 명성을 훼손한다고 밝혔습니다. 그는 이러한 계정 뒤에 있는 일부 사람들은 단순히 돈을 목적으로 하지만, 다른 일부는 러시아나 이란과 같은 적대적 국가들의 지원을 받고 있다고 말했습니다.

국가의 직접적인 개입이라는 주장을 확인하기는 어렵지만, 일부 계정은 실제로 러시아 및 이란 정부에 우호적인 게시물을 공유하고 있습니다. 해당 계정 소유자들은 BBC의 연락 시도에 응답하지 않았습니다.

참여도를 높이기 위해 일부 계정은 '미국을 다시 위대하게(MAGA)'나 '미국의 삶'과 같은 주제에서 벗어나, AI를 활용해 반(反)이민 서사를 퍼뜨리는 방향으로 페이지의 용도를 변경했습니다. 이들 중 일부는 이민자들에게 우호적인 콘텐츠로 가끔씩 실험하기도 했습니다.

케임브리지 대학교의 사회 심리학자인 산더르 반데르 린덴(Sander van der Linden) 교수에 따르면, 국가 및 기타 집단은 이러한 가짜 AI 계정을 이용해 여론을 조작하려 시도하고 있으며, 이는 '영향력 작전(AI slop)의 새로운 진화'로 볼 수 있습니다. 그는 해외에 사는 AI 사기꾼들이 영국에서 처음 만들어진 소셜 미디어 계정을 구매하는 것이 상대적으로 저렴하기 때문에 온라인에서 영국인으로 쉽게 위장할 수 있다고 덧붙였습니다.

이러한 계정들은 가짜 장면을 담은 AI 생성 영상으로 수십만 회의 조회수를 올리고 있습니다. 예를 들어, 아랍 전통 의상을 입은 남성들로 가득 찬 영국 하원에서 샤리아(이슬람법)가 제정되는 모습 등이 그렇습니다. 또한 영국이 더 이슬람화되어야 한다고 논하는 히잡 착용 여성들과의 가짜 인터뷰를 특징으로 하는 영상들도 있습니다.

이러한 영상들이 만들어내는 영국의 이미지는 모순될 수 있습니다. 널리 공유된 일부 콘텐츠에서 이러한 쇠퇴가 무슬림 이민과 관련이 있다고 주장하지만, 동시에 동일한 제작자의 다른 여러 영상들은 비교적 이슬람 국가들을 이상적인 것으로 묘사하기도 합니다.

BBC는 이러한 콘텐츠를 보여주며 2,000만 회 이상의 조회수를 기록한 계정의 배후에 있다고 밝힌 두 사람과 대화했습니다. 이 계정은 2050년의 일련의 영국 도시들을 걷는 사람들의 시점에서 보여주는 AI 생성 영상을 게시합니다. 리버풀, 런던, 버밍엄 및 이름 없는 영국의 여러 지역이 쓰레기로 가득 찬 채 더럽게 묘사되며, 거리에는 전통적인 이슬람 의류와 히잡을 입은 사람들이 줄지어 서 있습니다.

노점에는 '할랄(Halal)'이라고 적혀 있고, 아랍어 문자처럼 보이는 것이 걸려 있는 장식도 있습니다. 또한 화재와 혼란이 연출되기도 합니다. 뉴욕과 워싱턴 D.C.와 같은 외국 도시들과 일부 유럽 수도들도 비슷한 방식으로 묘사됩니다.

파노라마: 사기, 거짓말 그리고 AI - 마리안나 스프링은 AI 슬롭(slop)이 우리가 보는 것을 어떻게 형성하고 있는지 탐구합니다.

원문 보기
원문 보기 (영어)
By Marianna Spring Social media investigations correspondent Published 6 hours ago The "Great British People" Facebook page, which purports to be from Yorkshire, has had 1.3 million views for its latest video of an elderly white British man crying about his pension. Other videos show reporters discussing "the overwhelming scale of mass immigration" and asking viewers if they miss "the Britain we used to know". But it is not clear whether the creator of the videos knows the UK at all: the account is really run by someone based in Sri Lanka. It is one of dozens of interconnected Facebook and Instagram accounts identified by BBC Panorama and the Top Comment podcast , which create and share anti-immigration AI-generated posts about the UK to large audiences - but the creators are often located hundreds or thousands of miles away. Several are from Sri Lanka, the US and elsewhere in Europe, while others are in Vietnam and the Maldives, or linked to Iran and the UAE, according to information from Facebook's transparency tools, interviews with the content creators and other tell-tale signs on social media such as spelling and accounts they follow. One expert told the BBC that research shows people are worse at detecting AI fakes than they think, and the more AI content they see, the more likely they are to distrust authentic material. London Mayor Sir Sadiq Khan - who has commissioned research into AI-generated images showing the capital in decline, which he says harm the city's reputation abroad - said while some of the people behind the accounts are motivated merely by money, others are backed by hostile states such as Russia and Iran. It is difficult to verify claims of direct state involvement, but a handful of the accounts do share posts sympathetic towards the Russian and Iranian governments. The owners of the accounts did not respond to the BBC's attempts to contact them. Several accounts have repurposed their pages, seemingly to increase engagement, switching from topics such as "Make America Great Again" and "Life in the USA" to using AI to push anti-immigration narratives. Some of them have also occasionally experimented with content more sympathetic to migrants. States and other groups are attempting to manipulate public opinion with Fake AI accounts such as these, according to Prof Sander van der Linden, a social psychologist at the University of Cambridge, who described them as "new evolution of influence operations". It is easy for AI fakers living overseas to pose as British nationals online, he said, because it is relatively cheap to buy social media accounts originally set up in the UK. The accounts have been racking up hundreds of thousands of views with AI-generated videos of fake scenes - such as the House of Commons filled with men in traditional Arab clothing imposing Sharia law. Others feature fake interviews with women in hijabs discussing how the UK needs to be more Islamic. The image of the UK these videos create can be contradictory. In some widely shared content, this decline is associated with Muslim immigration, but at the same time several videos from the same creators present Islamic countries as being idyllic in comparison. We spoke to two people who said they were behind an account with more than 20 million views showing content like this. The account shows AI-generated videos from the point of view of people walking through a series of British cities in 2050. Liverpool, London, Birmingham and unnamed places in England are depicted as dirty and full of rubbish with people dressed in traditional Islamic clothing and hijabs lining the streets. Stalls have "Halal" written on them and there's bunting featuring what looks like Arabic script. There are also fires and chaos. Foreign cities such as New York and Washington DC, as well as some European capitals, are also portrayed in a similar light. Panorama: Scams, Lies and AI Marianna Spring explores how AI slop is shaping what we see, what we believe and who we can trust. In the age of artificial intelligence, will seeing ever be believing again? Watch on iPlayer Watch now on iPlayer or on BBC One at 19:30 BST on Friday 15 May in England and Northern Ireland - or, in Wales, at the same time on BBC Two. Challenged about how their content could be socially divisive, the creators said: "Our content has a clear purpose: we aim to inform people and voters about what we believe could happen in the coming decades if current social and cultural trends continue." They claimed to be located miles away from the cities they portray in their videos and described themselves as operating out of a European country where "a sense of insecurity has become more noticeable". They show countries like Iran in an idealised way to "provoke thought and discussion about political and cultural evolution", they said. The pair denied they were motivated by the money from social media engagement and said they did not monetise their account. They claimed to be in contact with "various politicians" supportive of their content - but they refused to disclose the names of these figures. Research by London's City Hall found a sharp increase in social media posts like these over the past two years and identified two main motives. "You've got state actors," London Mayor Sir Sadiq Khan told the BBC. He said they had seen evidence of Russian and Chinese activity, as well as from "extreme right-wing" supporters of the Make America Great Again (MAGA) movement in the US. "Secondly, we've seen individuals and companies trying to monetise and make profit from division." He acknowledged the city faces "challenges", but he said these "AI-generated lies" had a real effect, putting off some visitors, overseas students or investors. "My anxiety is, decent people start believing these lies, this dystopian image of London being in decline, that we're a dangerous city, that there is no law and order," he said. Social media companies should do more to combat this kind of misinformation, including "amending their algorithms to make sure they're not rewarding poison and division" and labelling AI content clearly, Sir Sadiq said. Meta - which owns Facebook and Instagram - said it takes "co-ordinated inauthentic behaviour seriously" and has "specialised global teams constantly working to identify and disrupt this type of activity". "We will take action on any content or accounts which violate our Community Standards, which apply to all content, regardless of whether it is created by AI or by a person," a spokesperson said. We also spoke to people behind several accounts cross-promoting or engaging with the 2050 point-of-view videos, which bore out City Hall's conclusion that some were motivated by clicks and profit. "I mostly post to get a reaction for the sake of engagement which boosts my followers and money," said one, who is paid through Instagram's monetisation scheme based on the ads shown to viewers of their videos. Another said they co-ordinate with accounts "raising voice against similar issues" but that their online activity is "not politically motivated in any way". Instead, the goal is for other accounts to promote their content "to get as much attention as possible". Some of the people running accounts with similar content to this, as well as engaging and interacting with the "fake" British patriots, are based in the UK, however. One person who runs a profile from the West Midlands which posts about "the restoration of Britain's former greatness", told us he co-ordinates with other accounts to push the same political goal. He said they have a group chat on Instagram where they can decide what to post and when. The accounts they work alongside are based in India, Pakistan and Singapore, as well as Australia and New Zealand, he said. Prof van der Linden from the University of Cambridge said the "disinformation-for-hire industry" is growing with "paid actors and infl