오픈AI, 자사 AI 생성 이미지 식별 기능 강화
오픈AI는 자사 AI 모델로 생성된 이미지를 쉽게 식별하고 추적할 수 있도록 C2PA 메타데이터 표준 채택 및 구글과 협력한 보이지 않는 워터마크(SynthID) 두 가지 조치를 발표했습니다. 메타데이터와 워터마크는 서로의 단점을 보완하여, 악의적인 조작 및 딥페이크 문제에 강력하게 대응하는 출처 증명 체계를 구축합니다. 또한 사용자가 이미지의 AI 생성 여부를 직관적으로 검증할 수 있는 공개 도구도 함께 프리뷰 공개되었습니다.
AI 이미지 생성기가 온라인에서 널리 제공되고 그 정교함이 그 어느 때보다 뛰어난 지금, 이미지의 진위 여부를 판별하는 것은 그 어느 때보다 어려워졌습니다. 하지만 화요일, 오픈AI는 이 문제 해결을 돕기 위한 두 가지 새로운 조치를 발표했습니다. 이 회사는 이미지가 AI에 의해 생성되었음을 메타데이터에 명확하게 표시하는 'C2PA'라는 개방형 표준을 채택했습니다. 또한 악의적인 행위자가 흔적을 지우려 하더라도 탐지는 어렵지만 제거하기는 더욱 어려운 보이지 않는 워터마크인 'SynthID'를 포함하기 위해 구글과 협력하고 있습니다.
이러한 새로운 보호 조치는 오픈AI 제품에서 생성된 이미지에만 적용되므로, 신뢰도가 낮은 AI 도구에서 쏟아져 나오는 수많은 이미지에는 영향을 미치지 않습니다. 그러나 이는 오픈AI가 문제의 일부가 되지 않도록 보장하는 데 도움이 될 수 있습니다. 오픈AI는 사용자가 이미지가 AI를 사용하여 생성되었는지 쉽게 테스트할 수 있도록, 두 가지 신호를 모두 확인할 수 있는 공개 검증 도구도 프리뷰로 공개했습니다. 초기에는 오픈AI 제품에서 생성된 이미지에만 적용되지만, 회사는 시간이 지남에 따라 다른 도구들로 적용 범위를 확장할 계획입니다.
2021년에 설립된 콘텐츠 출처 및 진위 증명 연합(C2PA)은 공론장에서 AI 이미지의 유해한 영향을 완화하는 데 전념하는 비영리 단체입니다. C2PA 표준은 여러 구글 제품에 채택되었지만, 업계 전반에 걸친 채택은 여전히 일관성이 부족한 상황입니다. C2PA 신호는 각 파일의 메타데이터에서 명확하게 액세스할 수 있기 때문에 조작될 수 있으며, 신뢰할 수 있는 사용자들 사이에서 가장 유용합니다. 'SynthID'는 이러한 간섭에 대한 더 강력한 방어 수단이 되도록 설계된 비교적 새로운 노력입니다. 구글이 개발한 SynthID 워터마크는 악의적인 행위자가 스크린샷, 크기 조정 또는 디지털 조작을 통해 이를 제거하려고 시도하더라도 유지되도록 설계되었습니다.
이 두 시스템은 서로의 약점을 보완하도록 고안되었습니다. 오픈AI는 공지에서 "워터마크는 스크린샷과 같은 변환 과정을 거쳐도 내구성을 유지할 수 있는 반면, 메타데이터는 워터마크 단독보다 더 많은 정보를 제공할 수 있다"며 "이 둘을 함께 사용하면 어느 한쪽의 계층만 단독으로 사용할 때보다 출처 증명이 훨씬 더 강력해진다"고 설명했습니다.