메뉴
BL
MIT Tech Review • 39일 전

플록 옹호론이 놓치고 있는 것

IMP
6/10
핵심 요약

미국 경찰 기술 기업 플록(Flock)이 경찰의 자동 번호판 인식 시스템 악용(스토킹 등)을 막겠다며 새 정책을 발표했지만, 사건번호 검증 없음 등 허점이 크다. 저자는 범죄 해결에 기술이 쓰이는 것 자체가 아니라 안보와 시민 자유 간 거래 조건을 기업이 일방적으로 설계했다는 점이 핵심 문제라고 지적한다. 앰버 얼럿 등 비상 상황에만 데이터 접근을 허용하는 등 대안적 설계가 가능하다고 제안한다.

번역된 본문

이 이야기는 원래 우리의 AI 주간 뉴스레터인 The Algorithm에 실렸습니다. 이런 이야기를 가장 먼저 받아보려면 여기에서 구독하세요.

경찰 기술 거대기업 플록(Flock)은 미국 전역에 약 12만 대의 자동 번호판 인식 장치 네트워크로 알려져 있는데, 지난 목요일 플랫폼에 몇 가지 변화를 발표했습니다. 이 업데이트는 경찰관들이 플랫폼을 불법적이거나 부적절한 목적으로 사용하는 것을 막기 위한 것입니다. 여기에는 스토킹도 포함됩니다. 워싱턴 포스트는 최근 경찰관들이 플록과 경쟁사들의 시스템을 악용한 50건의 사례를 밝혀냈으며, 대부분 여성을 스토킹하고 괴롭히는 데 사용된 경우였습니다. 위스콘신주의 한 여성은 경찰관이었던 전 남자친구가 자신의 차량을 179번이나 검색했다고 주장했습니다. 또 다른 여성은 경찰서장에게 스토킹을 당했지만 그를 신고할 곳이 없었습니다.

플록은 소프트웨어로 비정상적인 검색을 표시하고, 검색 시 형사 사건번호를 입력하도록 요구하는 등 경찰관이 모든 검색에 대해 정당한 사유를 갖도록 보장하는 방안으로 대응했습니다. 하지만 이러한 변화에는 커다란 허점이 있습니다. 예를 들어 경찰관들은 가짜 사건번호를 입력할 수 있으며, 실제로 그들은 지금까지도 다른 플록 방어 장치를 우회하기 위해 거짓말을 해왔습니다. 또한 이 정책들은 시민자유와 프라이버시 단체들의 더 광범위한 우려, 즉 플록이 범죄 예방 도구로 판매되었던 것이 대량 감시 네트워크로 변해가고 있다는 비판을 해결하지 못합니다. 이러한 비판으로 인해 반발이 커지고 있어, 일부 도시는 계약을 취소했고 일부 주는 번호판 인식 장치를 제한하거나 금지하는 법률을 제정하려 하고 있습니다.

이런 와중에 최근 플록을 옹호하는 몇 가지 주장이 나왔습니다. 이 카메라들이 범죄 해결에 도움이 된다면 뭐가 문제인가? 좋은 날에는 유괴범을 잡는 데 도움이 될 수도 있고, 그렇지 않더라도 단지 아무도 굳이 보지 않을 내 차의 사진을 찍는 것뿐이라는 것입니다.

플록의 시스템이 실제로 어느 정도로 범죄를 해결하거나 예방하는지라는 미해결 질문은 접어두더라도, 이런 주장은 더 중요한 질문을 건너뛰고 있습니다. 플록은 어떤 종류의 범죄 대응 시스템을 만들기로 선택했는가? 플록의 네트워크는 어떤 정보를 수집할지, 누가 검색할 수 있는지, 얼마나 오래 보관할지, 얼마나 광범위하게 공유할지에 대한 일련의 결정들 때문에 지금과 같은 방식으로 작동합니다. 그 결정들이 안보와 시민자유 사이의 거래 조건을 정합니다. 기술이 범죄 해결에 역할을 해야 한다고 믿는 것이 그 거래 조건을 맹목적으로 받아들여야 한다는 의미는 아닙니다.

예를 들어, 경찰관이 플록 플랫폼에서 검색을 실행하기 전에 사건번호를 입력하라는 새 요구 사항을 살펴봅시다. 이는 검색이 정당한 목적을 갖도록 보장하기 위한 것입니다. 하지만 플록은 MIT 테크놀로지 리뷰에 이 사건번호들을 검증하지 않는다고 확인해주었기 때문에, 경찰관은 그저 가짜 번호를 입력하면 됩니다. 대신 경찰서 기록과 일치하는 사건번호를 요구하는 시스템을 상상해볼 수 있습니다. 좀 더 개입적인 통합이 될 수는 있지만, 훨씬 강력한 안전장치이자 더 유용한 감사 기록을 남기는 방법입니다.

혹은 플록이 다른 무엇보다 자주 인용하는 사용 사례인 유괴되거나 실종된 사람을 찾는 것은 어떨까요? 이런 범죄를 해결하려는 노력은 플록의 전국적 카메라 네트워크에서 큰 도움을 받을 수 있습니다. 하지만 미국인들이 경찰관이 이 목적으로만 네트워크를 활용하기를 원한다면, 그렇게 설계할 수도 있습니다. 진행 중인 앰버 얼럿(Amber Alert, 아동 실종 경보)이나 유사한 비상 상황과 연동된 검색은 인근 도시들의 더 많은 데이터에 접근할 수 있게 하는 것입니다. 그렇게 하면 사람들이 대량 감시를 받아들이도록 요구하지 않으면서도 비상 상황에서 네트워크의 가치를 보존할 수 있습니다.

마지막으로, 플록이 얼마나 많은 데이터를 수집하고 얼마나 오래 보관하는가의 문제가 있습니다. 플록은 대체로 전국 단위 네트워크로 운영됩니다. 한 도시나 주의 경찰이 다른 곳에서 수집된 데이터를 검색할 수 있고, 기관들은 그 데이터를 수개월에서 수년간 보관할 수 있습니다. 그런데 플록 스스로 사건 발생 후 일주일 이내에 검색의 90%가 이루어진다고 말합니다. 이는 또 다른 가능한 거래 조건을 시사합니다. 실제로 범죄 해결에 유용한 범위와 기간에 맞춰서만 데이터를 보관하고 공유하는 것입니다. (회사는 최근 권장 보관 기간을 변경했습니다.)

원문 보기
원문 보기 (영어)
This story originally appeared in The Algorithm, our weekly newsletter on AI. To get stories like this in your inbox first, sign up here . Flock, the police-tech giant known for its network of some 120,000 automatic license plate readers around the US, announced some changes to its platform last Thursday. The updates are meant to prevent officers from using the platform for illegal or illegitimate purposes. That includes stalking. The Washington Post recently identified 50 cases in which officers misused systems from Flock and its competitors, often to stalk and harass women. One woman in Wisconsin alleged that her officer ex-boyfriend searched for her car 179 times. Another woman was being stalked by the chief of police, with nobody to report him to. Flock has responded with practices aimed at ensuring that officers have a proper cause for every search, like using software to flag abnormal searches and requiring searchers to enter a criminal case number. The changes come with big loopholes, though. For example, officers can enter bogus case numbers, just as they’ve lied to get around other Flock safeguards. The policies also don’t address some of the broader concerns from civil liberties and privacy groups that Flock is turning what was sold as a crime-stopping tool into a mass surveillance network. These criticisms have led to a growing backlash that already has some cities canceling contracts and some states trying to pass laws to limit or ban license plate readers entirely. Amid all this, there have recently been several arguments defending Flock: If these cameras help solve crime, what’s the big deal? On a good day they might help catch a kidnapper, and if not, they’re simply snapping pictures of my car that nobody will bother to look at. Putting aside the unanswered question about the extent to which Flock’s systems actually do solve or prevent crime, this all skips over a more important question: What kind of crime-fighting system has Flock chosen to build? Its network works the way it does because of a series of decisions about what information to collect, who can search it, how long to keep it, and how widely to share it. Those decisions set the terms of the bargain between security and civil liberties. Believing that technology should play a role in solving crime should not mean blindly accepting the terms of that bargain. Consider, for example, its new requirement that officers enter a case number before running a search on Flock’s platform. This is meant to ensure that searches have a legitimate purpose. But Flock confirmed to MIT Technology Review that it doesn’t verify those case numbers, so an officer can simply enter a bogus one. One could imagine a system that instead requires case numbers that match the police department’s records—a more intrusive integration, perhaps, but also a far stronger safeguard and one that leaves a more useful audit trail. Or what about finding people who have been kidnapped or have gone missing, the use case that Flock cites more than any other? Efforts to solve these crimes would hugely benefit from Flock’s nationwide network of cameras. But if Americans want officers to tap into that network only for this purpose, we could design it that way: Searches tied to an active Amber Alert, or a similar emergency, could perhaps access larger amounts of data from surrounding cities. That would preserve the network’s value in emergencies without requiring people to accept mass surveillance. Finally, there’s the question of how much data Flock collects and how long it’s kept. Flock mostly operates as a national network: Police in one city or state can search data collected in another, and agencies can retain that data for months or years. Yet Flock itself says 90% of searches happen within a week of an incident. That suggests another possible bargain: Keep and share data only as widely and for as long as it’s actually useful for solving crimes. (The company recently changed its recommended retention time to seven days, but in reality agencies can hold onto data for as long as they like.) In short, Flock could design its surveillance to be much narrower. If it did, some of the company’s critics might not cease. Chad Marlow, a senior policy counsel at the ACLU, half-joked to me that the most acceptable Flock contract by his standards is “one that is never signed” and emphasized that the best way to set limits on surveillance isn’t with new Flock guidelines but with new laws. (Flock CEO Garrett Langley, for his part, said he’ll “probably always have a different view than the ACLU.”) And narrowing the scope of its technology would threaten the company’s entire pitch to police departments. License plate readers have been around since the 1990s, used for tolls and ticketing. Flock’s business model—and recent $8 billion evaluation—relies on instead leveraging its cameras into a massive network that collects rich amounts of data and offers police departments a modernized way to make sense of not just their own but others’. Flock’s hand might soon be forced. Cities have canceled contracts with the company. Some have gone to competitors, while others are taking a beat as residents ponder how they want this tech to be used and write new rules for police to abide by. The result might be that communities drive their own bargains about how technology can be used to solve crime and how much surveillance people should have to accept for it to do so. Deep Dive Artificial intelligence A startup claims it broke through a bottleneck that’s holding back LLMs Subquadratic has now shared more details about its new model. But some are still skeptical. By Will Douglas Heaven archive page A fundamental flaw leaves LLMs strikingly vulnerable to attack It makes it easy to trick them into doing things they shouldn’t, such as telling you how to sabotage an aircraft’s navigation system. By Will Douglas Heaven archive page Anthropic found a hidden space where Claude puzzles over concepts A new technique has let the company probe deeper than ever into the weird workings of an LLM. By Will Douglas Heaven archive page Claude Science is Anthropic’s newest flagship product The company is doubling down on AI for science. By Grace Huckins archive page Stay connected Illustration by Rose Wong Get the latest updates from MIT Technology Review Discover special offers, top stories, upcoming events, and more. Enter your email Privacy Policy Thank you for submitting your email! Explore more newsletters It looks like something went wrong. We’re having trouble saving your preferences. Try refreshing this page and updating them one more time. If you continue to get this message, reach out to us at customer-service@technologyreview.com with a list of newsletters you’d like to receive.