오픈AI, 최고 수준 개인정보 마스킹 모델 공개
오픈AI가 텍스트 내 개인 식별 정보(PII)를 탐지하고 마스킹하는 오픈 웨이트 모델인 '오픈AI 프라이버시 필터(OpenAI Privacy Filter)'를 공개했습니다. 이 소형 모델은 문맥을 깊이 이해하여 기존 룰 기반 도구들이 놓치던 민감 정보를 정확히 찾아내며, 최대 12만 8천 토큰의 긴 문맥을 한 번의 빠른 처리로 해결합니다. 특히 로컬 환경에서 완벽하게 구동되어 데이터 유출 위험 없이 강력한 개인정보 보호 파이프라인을 구축하려는 개발자들에게 필수적인 인프라를 제공합니다.
2026년 4월 22일 | 연구 발표 | 보안
오픈AI 프라이버시 필터(OpenAI Privacy Filter) 소개: 텍스트 내 개인 식별 정보(PII)를 마스킹하는 최고 수준의 모델
로딩 중… 공유하기
오늘 저희는 텍스트 내 개인 식별 정보(PII)를 탐지하고 수정(Redaction)하는 오픈 웨이트(Open-weight) 모델인 '오픈AI 프라이버시 필터'를 출시합니다. 이번 출시는 처음부터 강력한 개인정보 보호 및 보안 조치를 더 쉽게 구현할 수 있는 도구 및 모델을 제공함으로써, 더 탄력적인 소프트웨어 생태계를 지원하려는 우리의 광범위한 노력의 일환입니다.
프라이버시 필터는 최첨단 개인 데이터 탐지 기능을 갖춘 소형 모델입니다. 이 모델은 처리량이 많은 개인정보 보호 워크플로우를 위해 설계되었으며, 비정형 텍스트 내에서 문맥을 인지(Context-aware)하여 PII를 탐지할 수 있습니다. 또한 로컬에서 실행할 수 있으므로 기기를 떠나지 않고도 PII를 마스킹하거나 수정할 수 있습니다. 긴 입력을 효율적으로 처리하여 빠르고 단 한 번의 패스로 마스킹 결정을 내립니다.
오픈AI에서는 개인정보 보호 워크플로우에 자체적으로 미세 조정(Fine-tuned)된 버전의 프라이버시 필터를 사용하고 있습니다. 최신 AI 기능을 통해 시장에 나와 있는 것보다 더 높은 수준의 개인정보 보호 기준을 세울 수 있다고 믿기에 이 모델을 개발했습니다. 오늘 출시하는 프라이버시 필터 버전은 평가 중에 식별된 주석(Annotation) 문제를 수정한 결과, PII-Masking-300k 벤치마크에서 최고 수준(State-of-the-art)의 성능을 달성했습니다. 이번 출시를 통해 개발자들은 자체 환경에서 프라이버시 필터를 실행하고, 각자의 사용 사례에 맞게 미세 조정하며, 훈련, 인덱싱, 로깅 및 검토 파이프라인에 더 강력한 개인정보 보호 기능을 구축할 수 있습니다.
최첨단 개인 데이터 탐지 기능을 갖춘 소형 모델
현대 AI 시스템에서 개인정보 보호는 단순한 패턴 매칭 이상을 요구합니다. 기존의 PII 탐지 도구는 주로 전화번호나 이메일 주소와 같은 형식에 대한 결정론적 규칙(Rule)에 의존합니다. 이는 매우 제한적인 사례에는 잘 작동하지만, 더 미묘한 개인 정보를 놓치는 경우가 많고 문맥 파악에 어려움을 겪습니다. 프라이버시 필터는 미묘한 성능 향상을 위해 더 깊은 언어 및 문맥 인식 능력을 바탕으로 구축되었습니다. 강력한 언어 이해 능력과 개인정보 보호 전용 레이블 시스템을 결합하여 올바른 결정이 문맥에 따라 좌우되는 경우를 포함하여 비정형 텍스트에서 더 광범위한 PII를 탐지할 수 있습니다. 공개 정보이므로 보존해야 하는 정보와, 사적인 개인과 관련되어 마스킹하거나 삭제해야 하는 정보를 더 잘 구분할 수 있습니다. 그 결과, 최첨단 수준의 개인정보 보호 필터링 성능을 제공할 만큼 강력한 모델이 탄생했습니다. 동시에 이 모델은 로컬에서 실행할 수 있을 만큼 가볍습니다. 즉, 필터링되지 않은 데이터가 식별을 위해 서버로 전송될 필요 없이 기기에 안전하게 남아 노출 위험을 줄일 수 있습니다.
모델 개요
프라이버시 필터는 스팬 디코딩(Span decoding)이 포함된 양방향 토큰 분류 모델(Bidirectional token-classification model)입니다. 자회귀(Autoregressive) 사전 학습된 체크포인트에서 시작하여 고정된 개인정보 레이블 분류 체계(Taxonomy)에 맞춰 토큰 분류기로 변환됩니다. 토큰별로 텍스트를 생성하는 대신, 입력 시퀀스를 한 번에 레이블링한 다음 제한된 비터비(Viterbi) 절차를 통해 일관된 스팬을 디코딩합니다. 이 아키텍처는 실제 프로덕션 환경에서 사용하기에 몇 가지 유용한 특성을 제공합니다:
- 빠르고 효율적: 모든 토큰이 단일 순방향 패스(Single forward pass)에서 레이블링됩니다.
- 문맥 인지: 언어 사전 지식(Prior)을 바탕으로 주변 문맥에 따라 PII 스팬을 탐지합니다.
- 긴 문맥 지원: 이번에 공개된 모델은 최대 128,000개의 토큰 문맥을 지원합니다.
- 구성 가능: 개발자는 워크플로우에 따라 재현율(Recall)과 정밀도(Precision)의 트레이드오프를 조정하여 작동 지점(Operating points)을 설정할 수 있습니다.
공개된 모델은 총 15억(1.5B) 개의 매개변수(Parameters)를 가지고 있으며, 그중 5천만(50M) 개가 활성화되어 있습니다. 프라이버시 필터는 8가지 카테고리에 걸쳐 스팬을 예측합니다:
- private_person (사적 개인)
- private_address (사적 주소)
- private_email (사적 이메일)
- private_phone (사적 전화번호)
- private_url (사적 URL)
- private_date (사적 날짜)
- account_number (계정 번호)
- secret (비밀 정보)
account_number 카테고리는 다양한 계정 번호를 마스킹하는 데 도움을 줍니다.