메뉴
BL
Wired AI • 44일 전

구글 픽셀 11, AI로 완성하는 4가지 새로운 카메라 기능

IMP
7/10
핵심 요약

구글이 최신 픽셀 11 스마트폰을 통해 '매직 캡처(Magic Capture)'와 고도화된 '슈퍼 레즈 줌(Super Res Zoom)' 등 소프트웨어 및 AI(제미나이) 기반의 혁신적인 카메라 기능들을 선보였습니다. 이는 사용자가 촬영에 신경 쓰지 않고 현장에 온전히 집중할 수 있게 도와주며, AI가 최적의 순간을 자동으로 사진으로 담아내는 등 스마트폰 사진 촬영의 패러다임을 한 단계 업그레이드하는 중요한 변화입니다.

번역된 본문

구글의 픽셀 카메라 총괄인 아이작 레이놀즈(Isaac Reynolds)는 스마트폰 카메라의 매년 업그레이드가 일부 비판론자들이 생각하는 것처럼 진부하지 않고 여전히 매우 중요하다고 생각합니다. 그는 "대충 사진을 찍는 사람이 진짜 사진 취미가 갖고 싶어 한다면, 그들에게 적절한 도구를 제공하지 않는 이상 결코 그 한계를 깰 수 없을 것"이라며, "다른 사람들이 '글쎄'라고 부르는 기능들도 어떤 사람들에게는 삶을 바꾸는 기능"이라고 말합니다.

2022년 픽셀 7 프로에 탑재된 '30배 슈퍼 레즈 줌(Super Res Zoom)'을 예로 들어 보겠습니다. 이 기능은 머신러닝을 활용해 디지털 줌 사진의 여러 프레임을 합쳐 우리가 익숙했던 것보다 훨씬 선명한 결과물을 제공합니다. 레이놀즈는 이 기능 덕분에 구글은 이제 사람들이 이전보다 훨씬 더 30배 줌을 사용하는 것을 확인할 수 있다고 말합니다. 오늘 발표된 새로운 픽셀 11 프로는 최대 120배까지 줌이 가능하며, 디지털 이미지 합성 기술에 더해 AI로 생성된 픽셀을 활용해 디테일을 채워 넣습니다. 레이놀즈는 아마도 이런 기능 자체가 야생동물 사진과 같은 분야에 관심을 갖게 만드는 충분한 계기가 될 수 있다고 말합니다. 스마트폰으로 먼저 실험을 해본 후, 본격적으로 전문 카메라와 대형 줌 렌즈에 투자할 준비가 되는 것입니다.

"내가 매년 야간 촬영과 줌 기능에 집중하는 데는 이유가 있다"며 그는 "내가 얼마나 이를 발전시키든, 수천 명의 응답자를 대상으로 사용자 조사를 해보면 사람들은 항상 더 많은 것을 원하기 때문"이라고 덧붙였습니다. 매년 구글은 새로운 픽셀 폰을 선보이며, 주로 소프트웨어 기술에 힘입어 그 어느 때보다 좋은 사진을 담아내는 수많은 새로운 카메라 기능들을 선보입니다. 작년에는 픽셀 10 프로의 디지털 줌을 100배로 끌어올린 '프로 레즈 줌(Pro Res Zoom)'이 있었습니다. 그 두 해 전에는 지나가는 낯선 사람에게 부탁하지 않아도 두 사람이 함께 그룹 사진을 찍을 수 있게 해주는 '애드 미(Add Me)' 기능을 도입했습니다. 픽셀 11 시리즈를 위해 구글은 사진의 외형을 극적으로 바꾸거나 촬영의 번거로움을 덜어줄 수 있는 몇 가지 업그레이드를 시연했습니다. 다음은 픽셀 11 시리즈에 탑재된 몇 가지 주요 새 카메라 기능들을 자세히 살펴본 것입니다.

매직 캡처(Magic Capture) 좋아하는 밴드의 콘서트, 웨이터가 케이크를 가져올 때 사랑하는 사람에게 생일 축하 노래를 불러주는 순간, 혹은 아이들의 발표회와 같은 중요한 이벤트 영상을 캡처하고 싶을 수 있습니다. 하지만 우리는 너무나도 자주 이런 중요한 순간에 현장을 온전히 즐기는 대신, 순간을 기록하기 위해 얼굴 앞에 폰을 들고 있는 모습을 봅니다. 바로 이 문제를 해결하기 위해 구글은 새로운 '매직 캡처' 기능을 선보입니다.

이것은 픽셀 카메라 앱 내의 사진/동영상 탭 옆에 위치한 새로운 모드입니다. 매직 캡처를 선택하면 2분 길이의 동영상 녹화가 시작됩니다. 그런 다음 얼굴 앞에 폰을 들고 있는 대신, 피사체를 향하도록 들고 있거나 폰을 고정한 뒤 폰에서 시선을 떼면 됩니다. 즉, 구글의 제미나이(Gemini) 인공지능 모델이 대신 장면을 포착하고 사진을 찍어주어 짐작컨대 사용자는 눈앞에서 일어나는 일에 온전히 집중할 수 있게 해주는 것입니다.

결과는 어떨까요? 전체 동영상(1080p로 제한되지만, 픽셀 11 프로 사용자는 누구나 구글의 '비디오 부스트(Video Boost)' 기술을 사용해 4K로 업스케일링할 수 있음)을 얻을 수 있습니다. 더 중요한 것은 마치 사용자가 직접 최적의 순간에 셔터 버튼을 누른 것처럼 최고 화질의 사진 여러 장을 얻을 수 있다는 점입니다. 레이놀즈는 제미나이가 사진 라이브러리에 간직하고 싶을 완벽한 순간을 찾기 위해 500개 이상의 프레임을 분석하여 장면 내 '절정(peak)' 순간을 식별하는 데 탁월한 역할을 한다고 말합니다.

저 역시 댄서들의 라이브 공연이 있는 데모 현장에서 이를 직접 시험해 보았습니다. 실제로 제가 해야 할 일은 폰을 얼굴에 대지 않고 옆으로 치켜드는 것뿐이었습니다. 그리고 춤이 끝난 후 카메라 롤을 확인해 보니 놀랍도록 구도가 잘 잡힌 사진들을 발견할 수 있었습니다. 심지어 제미나이가 더 나은 구도라고 판단한 대로 가볍게 편집하여 이미지를 크롭하기도 했습니다. 이는 2018년에 출시되어 결국 실패했지만 마찬가지로 AI를 사용해 장면을 캡처했던 구글의 과거 카메라 기기 '클립스(Clips)'를 매우 연상케 합니다.

원문 보기
원문 보기 (영어)
Comment Loader Save Story Save this story Comment Loader Save Story Save this story Google's Pixel Camera chief, Isaac Reynolds, thinks year-to-year upgrades to smartphone cameras are still critical , even though some detractors think they’re passé. “A person who is a casual photographer and desperately wants to be a hobbyist—they're never going to break that ceiling unless you give them the tools," he says. "The features that others call ‘meh’—for some people, those features are life-changing." Take the 30X Super Res Zoom on the Pixel 7 Pro from 2022, which uses machine learning to stitch together multiple frames in a digitally zoomed photo to give you a result that’s much sharper than you're used to. Reynolds says that because of this feature, Google now sees people using 30X zoom dramatically more than before. The new Pixel 11 Pro, announced today , can zoom up to 120X, though in addition to the digital stitching, it relies on AI-generated pixels to fill in some details. Reynolds says maybe having that capability is enough to get someone interested in, say, wildlife photography. After experimenting on their phone, they’d be ready to invest in a professional camera and a big zoom lens. “There's a reason I work on low light and zoom every single year," he says. "Because no matter how much I do it, when I do the user study with thousands of respondents, people always want more." Every year, Google debuts a new Pixel phone , and every year, there's a slew of new camera tricks—largely powered by software wizardry—to deliver better photos than ever before. Last year, there was the Pro Res Zoom , which bumped up digital zoom on the Pixel 10 Pro to 100X. Two years before that, Google introduced “Add Me,” which lets two people take a group photo together without asking a stranger to take the pic for them. For the Pixel 11 series, Google has demonstrated a handful of upgrades that can drastically alter the look of your photos, and even take some of the work out of capturing photos. Here's a closer look at a few top new camera capabilities on the Pixel 11 series. Magic Capture So you want to capture a video of an important event—a concert of your favorite band, singing happy birthday to a loved one as a waiter brings a cake over, or your kid's recital. Too often, you see people holding their phone up during these milestones, trying to capture the moment, instead of being present. That's the problem Google's new Magic Capture feature is trying to solve. This is a new mode that sits next to the Photo/Video tab in the Pixel camera app. Select Magic Capture, and it will kick off a two-minute video recording. Then, rather than keeping the phone planted in front of your face, hold or prop the phone up so it’s pointing at your subject, then ignore the phone. The idea is to let Google's Gemini artificial intelligence models capture the scene and take photos on your behalf, so you can actually pay attention to what's happening in front of you. The result? You'll get access to the full video (it's restricted to 1080p, but anyone with a Pixel 11 Pro can use Google's Video Boost technology to bump that to 4K). More important is the handful of photos you'll get—in full quality—as if you tapped on the shutter button yourself during the best moments. Reynolds says Gemini does a remarkable job of identifying “peak” occurrences in the scene, analyzing more than 500 frames to find perfect shots you'll want in your photo library. I gave it a whirl during a demo with some live dancers. Indeed, all I had to do was hold the phone to the side—not in my face—and after the dance was over, I looked at the camera roll and found some surprisingly well-composed shots. It even cropped images with light edits based on what Gemini thought was a better composition. It's very much reminiscent of Google's Clips , a 2018 camera that ultimately flopped but similarly used AI to capture family moments. Magic Capture feels more intentional, and perhaps more useful. “I do think the dream is: ‘I don’t have to deal with it; AI can look at a hundred times as many frames as I can, let the models handle this,'” Reynolds says. “That is sort of the dream of so many people who refuse to take their phones out at an event because they don't want their kid to remember their face hidden behind a camera.” Instant Night Sight Everyone knows that if you want to shoot a photo in low light, you have to stay as still as possible. Our smartphone cameras take a few seconds to capture multiple images and stitch them together, meaning small movements can end in a blurry mess. But Google says its new Tensor G6 processor on the Pixel 11 Pro and Pixel 11 Pro XL can alleviate this problem by enabling a feature called Instant Night Sight. Instant Night Sight is 4.5 times faster than the standard Night Sight available on other Pixel phones. Yes, that means there will still be a small shutter delay as the camera captures the photo, but the delay isn’t as pronounced as before. Much of this is thanks to new image-processing models tailored for the G6 chipset, which are bolstered by engine updates to Night Sight. There are also hardware upgrades to a few cameras on the Pixel 11 series that provide greater light sensitivity, delivering brighter images in low light. Specifically, the Pixel 11 and Pixel 11 Pro Fold have an upgraded 48-megapixel primary camera that absorbs 56 percent more light, and the new 48-megapixel telephoto camera on the Pixel 11 Pro has 30 percent more light sensitivity. It's a shame Instant Night Sight is only available to the two Pro candybar Pixels. Camera Looks Like Apple is doing with its Photographic Styles, Google is ceding more control to you, the photographer, in how your photos look. The Pixel Camera now features “Camera Looks,” and there are four main pillars: Original, Natural, Shadows, and Vanilla. Natural offers “relaxed details,” whereas Vanilla has a warm, golden glow; Shadow nets you deeper contrast. These aren't just filters like the ones you slap on Instagram—they're calibrated at the sensor level, and you can see what they look like in the camera viewfinder before you tap the shutter button. From there, you can swipe left to cycle through a handful of additional looks, like Digi, Black Tie, Minimal, Editorial, Classic, and Velvet. And within each of these, you can further customize the settings for things like brightness, contrast, and highlights to tailor the look to your taste. “People are moving away from what Pixel pioneered 10 years ago, which was that hashtag #nofilter concept,” Reynolds says. “And now, there's a much stronger desire to personalize and be unique, and put yourself into it.” These Camera Looks must be chosen before you take the photo—not after. Reynolds says his team found that people engage with this feature very differently when it's available before capturing the photo—they think about it another way and enjoy it more—than if it were a filter to slap on in post. Creator Suite Arizona State University recently added content creation as an academic major—that's how many people really want to become influencers. So it makes sense then that Google would add some helpful tools to cater to those folks right in the camera app. The new Creator Suite lives in the Pixel Camera's video settings. Once enabled, you can save videos to specific project folders instead of your main camera library, turn on an audio visualizer so you can make sure the microphone is actually picking up sound, enable Google's Speech Enhancement feature to beef up the video subjects’ voices, and add a social media grid so it's easy to visualize how your video will be framed on different platforms. But arguably my favorite, as someone who has to make videos for my job, is the built-in teleprompter. You can pop any text into the feed, and it will track your spee