메뉴
BL
Wired AI 47일 전

애플 카메라 총괄 "AI, 일반인에게 슈퍼파워를 부여할 것"

IMP
7/10
핵심 요약

애플은 경쟁사와 달리 사진의 진정성을 훼손하지 않는 범위 내에서 제한적으로 생성형 AI를 사진 앱에 도입합니다. 새로운 '확장(Extend)' 및 '공간 재구성(Spatial Reframe)' 기능은 배경의 가짜 픽셀을 생성해 구도 문제를 해결하지만, 주요 피사체의 얼굴이나 무한 확장 등은 제한합니다. 또한 AI 편집 흔적을 남기기 위해 구글의 SynthID 기반 보이지 않는 워터마크를 도입하는 등 사진의 진실성을 지키는 데 집중합니다.

번역된 본문

요즘 사진이란 대체 무엇일까요? 거대 기술 기업들이 스마트폰과 카메라 소프트웨어에 생성형 AI 기능을 탑재하면서, 실제 이미지와 그렇지 않은 이미지 사이의 경계는 점점 더 흐려지고 있습니다. 예를 들어 구글과 삼성의 스마트폰에는 사진 속 인물을 지우거나 위치를 옮기고, 심지어 장면에 새로운 사물을 추가하여 사진을 크게 변경할 수 있는 기능이 포함되어 있습니다.

애플 역시 사진 앱에 새로운 생성형 AI 기능을 추가하며 이 흐름에 합류하고 있습니다. 하지만 아이폰 카메라 총괄인 존 맥코맥(Jon McCormack)은 애플이 경쟁사들보다 더 신중한 접근 방식을 취하고 있으며, 단순히 "AI를 위해 AI를 하는 것은 아니라고" 강조합니다.

월요일에 열린 연례 세계 개발자 회의(WWDC)에서 애플은 올해 하반기 아이폰에 적용될 iOS 27(역주: 원문 기준) 사진 앱에 추가되는 여러 AI 기능을 선보였습니다. 아이폰 사진 앱에는 이미 원하지 않는 사물을 지울 수 있는 '정리(Clean Up)' 도구가 있지만, 애플의 향상된 AI 모델을 활용하여 iOS 27에서 훨씬 더 나은 성능을 발휘하게 됩니다.

하지만 '확장(Extend)' 및 '공간 재구성(Spatial Reframe)'이라는 두 가지 새로운 기능이 눈에 띕니다. 이 기능들은 가짜 픽셀을 생성하면서도 사진 주변의 공간을 넓히거나 이미지의 원근감을 바꿀 수 있게 해줍니다. 카메라가 '그곳에 무엇이 있어야 할지 생각한 다음' 이를 그려 넣는 방식입니다.

맥코맥은 AI가 이제 풀리지 않던 수많은 문제들을 해결하는 데 도움을 주고 있으며, 이러한 새로운 기능들은 매우 신중하게 설계되었다고 말합니다. 그는 "포토샵이나 다른 도구로 무언가를 하는 모든 세부 방법을 알 필요가 없습니다. 이는 일반 사람들에게 절대적인 슈퍼파워를 부여합니다."라고 설명했습니다.

그렇다고 애플이 사용자가 마음대로 이미지를 조작하여 온갖 가짜를 만들도록 방치하지는 않을 것입니다. (적어도 사진 앱에서는 그렇습니다. 앱스토어에는 사진 같은 가짜 이미지를 만드는 도구가 이미 많이 있습니다.) 사진 앱이 생성하는 가짜 픽셀은 배경에 있는 것으로만 제한되며, 주요 피사체의 얼굴 픽셀은 변경하지 않습니다. 예를 들어 '정리' 도구를 사용할 때 이미지의 주요 피사체를 제거할 수는 없습니다. '확장' 기능은 한 번만 작동하며 이미지를 25%만 확대합니다. 저장한 후 이미지를 다시 편집하여 AI로 무한히 확장하는 것은 불가능합니다.

맥코맥은 또한 올해 하반기에 구글 딥마인드(Google DeepMind)의 SynthID 기술을 통합하여, 이미지가 생성형 AI로 수정되었음을 나타내는 보이지 않는 워터마크를 추가할 것이라고 밝혔습니다. 사진을 공유하는 모든 플랫폼에서 이를 AI 편집 이미지로 표시할 수 있습니다. (다만 디지털 워터마크가 완벽하지는 않다는 연구 결과도 존재합니다.)

맥코맥은 "사진은 실제로 일어난 무언가를 기록한 것입니다. 우리는 자신의 삶에 대한 진정한 기록이라는 개념을 진심으로 믿습니다. 사진을 찍을 때 우리는 추억을 만들고 있으며, 삶의 순간들을 나중에 다시 꺼내볼 수 있는 병에 담는 것과 같습니다. 우리가 그 순간의 신성함을 유지하는 도구를 만드는 것이 정말 중요합니다."라고 덧붙였습니다.

구글의 픽셀 카메라 부서 총괄과 몇 년 전 대화를 나눴을 때도 비슷한 감상을 공유했지만, 그는 사진을 '어떻게 기억했는지'의 중요성을 강조했습니다. 구글은 사용자가 마음속에 품고 있던 모습에 맞게 이미지를 변경하는 데 있어 훨씬 관대합니다. 기억 속의 하늘이 더 파랬던가요? 그렇다면 마음대로 변경하세요.

반면 애플의 새로운 도구들은 더 엄격하게 제한되어 있으며, 특히 촬영 과정에서 미처 인식하지 못했을 구도 문제를 해결하는 데 목적이 있습니다. 배경을 굴러가는 보기 흉한 비닐봉지를 미처 발견하지 못했을 수도 있습니다. 아이를 찍었는데 앵글이 조금 높았을 수도 있습니다. 또는 배우자를 너무 가장자리에 배치해서 공간이 조금 더 필요할 수도 있습니다.

애플 카메라 및 사진 소프트웨어 제품 관리자인 델라 허프(Della Huff)는 AI가 이러한 디지털 확장 과정에서 발생할 수 있는 환각(Hallucination) 현상을 최소화하기 위해 모델을 훈련시키는 데 많은 시간을 쏟았다고 말했습니다.

원문 보기
원문 보기 (영어)
Comment Loader Save Story Save this story Comment Loader Save Story Save this story What even is a photograph these days? As tech giants pack generative AI capabilities into our phones and their camera software, the line between what is a real image and what isn't continues to blur. Phones from Google and Samsung, for example, now come with features that let you drastically alter a photo by erasing people, moving people around in the shot, and even adding new objects to the scene. Apple is getting in on the action by adding new generative features to its Photos app, though the company's iPhone camera chief, Jon McCormack, stresses that Apple is taking a more measured approach than its competitors and isn't “doing AI for the sake of AI.” At its annual Worldwide Developer Conference on Monday, Apple showed off a handful of AI features invading the Photos app in iOS 27, which will arrive on iPhones later this year . While the iPhone’s Photos app already has the Clean Up tool, which lets you erase unwanted objects in pictures, it'll perform even better in iOS 27 thanks to its access to Apple's improved AI models. However, there are two new features—called Extend and Spatial Reframe—that let you expand the space around your photo or change the perspective of an image, all while generating fake pixels. The camera “thinks” about what should be there, then draws it in. McCormack says there's a giant backlog of unsolvable issues that AI is now helping to address and that these new features are very deliberate. “You don't have to know all the details of how to do something in Photoshop or something else—it gives normal people these absolute superpowers,” McCormack says. Apple doesn't want to let you run wild with your images and generate all kinds of fakery, though. (At least not in the Photos app; the App Store offers plenty of tools for making photorealistic slop.) The fake pixels the Photos app generates are restricted to what's in the background. It won't alter the pixels of the main subject's face. With Clean Up, for example, you cannot remove the primary subject in the image. The Extend function only works once and expands the image by 25 percent—you can’t save, edit the image again, and infinitely extend it with AI. McCormack also says Apple will integrate Google DeepMind's SynthID technology later this year to add an invisible watermark indicating these images have been altered with generative AI. Any platforms where you share the photo may be able to flag it as AI-edited. (Just know that researchers have shown that digital watermarks aren't foolproof .) “A photograph is of something that actually happened,” McCormack says. “We really do believe in this idea of authentic journalism to your own life—when you're capturing photographs, you're making these memories, you're putting moments of your life in a bottle that you can go back to. It's really important to us that we create tools that keep the sanctity of that moment.” The head of Google's Pixel camera division shared a similar sentiment when I spoke to him a few years ago ; however, he highlighted the importance of how you remembered the photograph. Google is far more lax in letting you alter the image to match what you had in your mind. Was the sky bluer in your memory? Go ahead and change it. Apple's new tools are more restrictive and are specifically meant to solve compositional problems you may not have realized you made during the capture process, McCormack says. Maybe you didn't see that unsightly plastic bag rolling through the background. Maybe you took a picture of your kid but shot a little too high up. Or maybe you framed your spouse too close to the edge and want a little more space. Della Huff, product manager for Apple's Camera and Photos software, says the team spent time training the AI models to minimize any hallucinations that might occur during these digital adjustments. “It's not going to create anything that shouldn't be there," Huff says. For example, if you're trying to extend a street scene, it's plausible that there could be a car parked outside the boundary of your original photo, but Extend won't make that assumption and generate it. “How the model has been trained is if you don't need to create something there, then just don't—do the minimum amount of hallucination to achieve the goal the user is asking the model to do.” But in one of my examples of using Extend in the iOS 27 developer beta, I took a photo of a friend sitting at a table, then tried to expand the scene a little more to the right. In the background, some people were sitting at tables, but as the scene was extended, the Photos app added a couple more tables, complete with fake people—people who were never there in real life—sitting at them. Huff says the feature is trying to match the existing aesthetic. If there are people in the background but Extend doesn't add anyone else as you expand the photo, that may look strange. “If we said the rule is we could never generate a background human ever, then the feature would become less useful,” she says. It's worth remembering a point Apple made at the keynote: There are usage limits for these new camera features. Apple isn't sharing exactly what those daily limits are, but users will need to subscribe to iCloud if they want to Extend, Spatial Reframe, or Clean Up their photos multiple times a day. One of the big themes of Apple's WWDC presentation this year was using natural language to get things done. You can converse with Siri naturally—no need to use rigid commands—and it will understand your intent. In the Calendar app, you can describe the event, and it will create it in a jiffy, no need to fill out various fields. You can describe the shortcut you want to create in the Shortcuts app without fiddling with triggers and actions. In Safari, you can speak an extension into existence. So how come you can't edit a photo with natural language? That's a feature Google introduced last year on Google Photos. Huff says the new Siri AI can handle a few touch-ups on your behalf and that Apple is not ruling out anything on the future road map. Siri cannot edit with the new AI features—those are strictly human-controlled—but this is partially because Apple doesn't think it’s a good user experience. Those features require a little more muscle; it’s hard to talk Siri through the process of changing a photo's perspective. “There’s so much more that’s open-ended about that, especially something like Spatial Reframing where that’s really a user-intent thing that you need to express,” Huff says. Speaking of Siri, the other big change coming in iOS 27 is that Siri is getting injected into the Camera app. McCormack says Sirifying the iPhone’s camera is purely about reducing friction. Siri’s Visual Intelligence feature—which operates like Google Lens by using computer vision to study an image—currently is activated through the Camera Control button. But this is a camera-specific function, so McCormack says it makes sense that it would live in the Camera app. “It’s embracing the idea that the camera is really a number of things,” he says. “It’s a memorialization device … it’s a note-taking device … or I’m just curious what that plant is.” Apple's more measured approach might feel at odds next to its image-generation app—Image Playground—which lets you create AI-generated images with text prompts (or by injecting a photo from your own library). In iOS 27, Image Playground defaults to generating more photorealistic pictures unless you specify a particular art style. But McCormack says these different uses of AI will feel different based on the context of where they live on your phone. If you're in the Photos app, users want to know they're in a safe place where memories are kept intact. But