I tried the iPhone 15 Pro's new spatial video feature, and it will be the Vision Pro's killer app
- 해외 기사 -
iPhone 15 Pro의 새로운 공간 비디오 기능을 사용해 보았는데
Vision Pro의 킬러 앱이 될 것입니다.
그것은 단지 생생한 것만이 아니라 삶과도 같습니다.
저는 정확히 두 번의 Apple Visio Pro 경험을 했습니다.
하나는 6개월 전, Apple이 혼합 현실 헤드셋을 발표한 날이었고,
다른 하나는 불과 몇 시간 전이었습니다.
처음 경험했을 때 헤드셋 기능의 표면을 헤엄치는 듯한 느낌이 들었지만
오늘은 Vision Pro 다이버 자격을 갖춘 것 같은 느낌이 들었습니다.
즉, Vision Pro에서 공간 영상을 경험하는 것뿐만 아니라
표준 iPhone 15 Pro를 사용하여 헤드셋용으로 이러한 형태의 영상을 촬영한 후에는
또 어떤 느낌이 들겠습니까?
지금쯤이면 Apple이 오늘 공개 베타로 출시한 iOS 17.2가
우리 대부분이 처음으로 공간 비디오를 경험하게 될 것이라는 사실을 알고 계실 것입니다.
물론 처음에는 경험치의 절반에 불과합니다.
iPhone 15 Pro 및 iPhone 15 Pro Max는 iOS 17 업데이트를 통해
설정의 카메라 형식에서 전환할 수 있는 새로운 비디오 촬영 옵션을 추가합니다.
Vision Pro가 출시되면 내년쯤에는 혼합 현실 장치를 iCloud 계정에 연결한
Vision Pro 소유자에 대해 형식이 자동으로 켜집니다.
나는 새로운 iPhone 15 Pro의 기능뿐만 아니라
3,499달러짜리 Apple Vision Pro 헤드셋에서 볼 때
같은 콘텐츠가 실제로는 어떻게 보이는지 살짝 엿보았습니다.
그리고 이제 공간 비디오가 Vision Pro의 킬러 앱이 될 수 있다는 것을 깨달았습니다.
Apple이 제품 개발에 어떻게 오랜 시간을 투자했는지 이해하려면
iPhone 15 Pro 또는 iPhone 15 Pro Max를 살펴보기만 하면 됩니다.
여기서는 아마도 놓쳤을 것 같지만 분명 눈에 띄는 미묘한 디자인과
기능적 변화를 발견할 수 있습니다.
Apple은 Vision Pro의 공간 요구 사항을 염두에 두고
iPhone 15 Pro 및 Pro Max를 설계한 것으로 나타났습니다.
13mm 초광각 카메라를 가져와 48MP 기본 카메라의 대각선 반대쪽 위치(iPhone 14 Pro)에서
수직 아래 지점으로 이동했습니다.
14 Pro의 메인 카메라는 망원 카메라가 차지했습니다.
망원 카메라는 울트라와이드의 기존 슬롯으로 이동합니다.
Apple은 이 두 렌즈의 위치를 변경하여 입체 영상 또는 공간 영상 촬영을 가능하게 하지만,
이는 iPhone 15 Pro 및 iPhone 15 Pro Max를 가로 모드로 들고 있는 경우에만 가능합니다.
나는 가상 3D 효과를 만들기 위해 두 렌즈를 통해 동시에 비디오를 녹화하고
동일한 장면을 약간 다른 각도로 촬영하는 것만의 문제가 아니라는 것을 배웠습니다.
13mm 울트라와이드 카메라는 훨씬 더 큰 프레임을 촬영하므로
Apple의 계산 사진은 기본 카메라에서 나오는 프레임과 일치하도록
울트라와이드 비디오를 자르고 크기를 조정해야 합니다.
문제를 단순화하기 위해 Apple은 HEVC(고효율 비디오 코딩) 형식으로
2개의 1080p/30fps 비디오 스트림만 캡처합니다.
듀얼 스트림으로 인해 파일 크기가 조금 더 커져 약 1분 분량의 영상이 130MB의 파일로 생성됩니다.
이러한 공간 파일은 표면적으로는 새로운 미디어 형식이지만
iPhone 또는 Mac에서는 다른 2D 비디오 파일처럼 나타납니만 한계가 있습니다.
이러한 비디오 중 하나를 다듬을 수 있지만 두 스트림 간의
완벽한 동기화가 깨지지 않도록 다른 편집 내용을 적용할 수는 없습니다.
촬영
공간 비디오 캡처는 iOS 17.2 공개 베타 업데이트와 함께
iPhone 15 Pro 및 15 Pro Max에 제공되며, 오늘 누구나 다운로드할 수 있습니다
(베타 업데이트를 수락하려면 설정을 변경해야 함).
공간 비디오를 '수평'으로만 촬영할 수 있다는 점에 유의하세요.
테스트를 위해 iOS 17 개발자 베타를 실행하는 표준 iPhone 15 Pro를 사용했습니다.
카메라/형식의 설정에서 Apple Vision Pro용 공간 비디오를 이미 활성화했습니다.
카메라 앱의 비디오 캡처 모드에서 공간 비디오 모드에서 촬영하기 위해
자연스럽게 Vision Pro와 똑같이 보이는 작은 아이콘을 선택할 수 있었습니다.
이 항목을 선택하면 휴대폰이 단말기를 90도 회전하여 가로 방향이 되도록 안내했습니다
(Vision Pro 아이콘은 탭하는 즉시 회전합니다).
또한 모든 형식에 대해 선택 사항인 이미지 레벨 도구가 공간 비디오를 사용할 때
기본적으로 켜져 있다는 점도 확인했습니다.
이는 공간 비디오가 샷 레벨일 때 가장 좋기 때문입니다.
실제로 액션 장면처럼 휴대폰 수평을 유지할 수 없는 상황에서 촬영하는 것은 좋지 않은 생각일 수 있습니다.
대부분 이것은 Vision Pro 헤드셋으로 완성된 제품을 볼 때 어떤 느낌인지에 대한 것입니다.
3D 비디오에서 얼굴과 몇 센티미터 떨어진 곳에서 많은 움직임이 있으면 불편함을 유발할 수 있습니다.
최신 iOS 17.2 공개 베타에서 공간 비디오를 활성화하는 방법은 다음과 같습니다.
마찬가지로, 최종 공간 비디오에서 피사체가 거인처럼 나타나지 않도록
피사체로부터 3~8피트 거리를 유지하는 것이 가장 좋다는 것을 알았습니다.
저는 초밥을 준비하는 여성의 모습을 담은 짧은 공간 비디오 몇 장을 촬영했습니다.
장면에 깊이를 더하기 위해 스시를 전경에, 그녀를 배경에 배치하려고 했습니다.
비디오 촬영에 있어서 내가 촬영한 다른 비디오와 다르게 느껴지지는 않았지만,
한 쌍의 흥미로운 공간 비디오를 만들려고 노력하면서 약간 지나치게 생각했을 것입니다.
iPhone이 촬영한 내용에서 공간 비디오를 생성하기 위해
수많은 계산 과정을 거치더라도 비디오를 즉시 재생할 수 있어야 합니다.
우리는 휴대폰를 넘겨주고 몇 분 후에 Vision Pro에서 비디오를 볼 준비가 되었습니다.
몇 달이 지나도 Vision Pro를 사용하는 방법을 기억하지 못할까 봐 걱정했지만
시선, 제스처 및 Digital Crown 기반 컨트롤 모음에 방향을 바꾸는 데는
실제로 1~2분밖에 걸리지 않았습니다.
놀랍도록 직관적인 최첨단 기술로 남아 있습니다.
Apple이 올바른 Zeiss 렌즈를 삽입했는지 확인하기 위해
처방전 측정을 위해 헤드셋을 넘겨줘야 했습니다
(헤드셋을 사용할 때는 안경을 착용하지 않음)
iPhone과 달리 Vision Pro는 어느 정도 맞춤형 경험이 될 것이라는 점을 상기시켜 줍니다.
두 번째 착용 세션에서는 옵션인 머리 위 스트랩이 없었습니다. 즉,
처음으로 헤드기어의 전체 무게를 느꼈습니다.
너무 세게 조이지 않도록 조심하면서 헤드셋 뒷면 근처에 있는 조절 손잡이를 사용하여
헤드밴드를 조정하기 위해 최선을 다했지만 최적의 지점을 찾은 적이 있는지 잘 모르겠습니다.
마침내 이 헤드셋 중 하나를 검토하게 되었습니다.
Vision Pro를 마지막으로 사용한 이후 몇 가지 새로운 컨트롤이 있었습니다.
예를 들어 이제 창 가장자리를 살펴본 다음 창 바로 아래에 나타나는
흰색 곡선을 가상으로 꼬집고 당겨서 창 크기를 조정할 수 있습니다.
나는 이것을 두 번째 시도에서 알았고, 그것은 제2의 천성이 되었습니다.
마침내 Vision Pro Photos 앱을 잘 살펴보았습니다.
시선과 손가락 탭을 사용하여 쉽게 탐색할 수 있었습니다.
양손으로 집거나 당기면 사진과 갤러리를 스와이프할 수 있습니다.
나는 보통 이러한 동작을 수행할 때 손을 무릎이나 무릎 근처에 두었습니다.
iPhone 15 Pro로 24MP와 48MP로 촬영한 사진을 살펴봤습니다.
그 사진들을 확대하는 것은 재미있어서 그것들이 내 시야를 가득 채웠고,
핀치 앤 드래그로 이미지 주위를 이동했는데 예를 들어,
빨간 드레스의 레이스에서 절묘한 디테일을 볼 수 있었습니다.
저는 애리조나의 모뉴먼트 밸리에서 촬영한 사진과 얼어붙은 폭포가 특징인
아이슬란드에서 촬영한 사진을 포함하여 놀라운 파노라마 사진을 보았습니다.
원래 Vision Pro 경험에서 언급했듯이 마침내
iPhone으로 파노라마 사진을 찍을 이유가 생긴것입니다.
이 공간 비디오 장면은 가장 효과적인 장면 중 하나였습니다.
그 거품이 내 얼굴 바로 옆에 떠 있는 것 같았어요
Vision Pro Photos 앱에는 Spatial이라는 새로운 미디어 카테고리가 있습니다.
여기서는 미리 만들어진 공간 비디오 몇 개를 보았고,
마지막으로 iPhone 15 Pro에서 촬영한 공간 비디오 두 쌍을 보았습니다.
WWDC 2023 경험에서 본 캠프파이어 장면, 생일 축하 장면, 가족 캠핑의 친밀한 장면,
부엌에서 요리하는 가족의 또 다른 장면,
그리고 제가 가장 좋아하는 비눗방울을 가지고 노는 엄마와 아이의 장면이 있었습니다.
이러한 공간 비디오를 창이나 전체 화면에서 볼 수 있습니다.
여기서 가장자리는 통과 보기 또는 현실 세계를 360도 랩어라운드 이미지로 대체하는 몰입형 환경
(새로운 환경은 Joshua Tree)과 혼합됩니다.
버블 비디오에서 버블은 현장과 내 얼굴 가까이에 떠 있는 것처럼 보였습니다.
나는 그들에게 손을 뻗어 만져보고 싶은 충동을 느꼈습니다.
가족이 주방 아일랜드 주위에 앉아 식사를 하고 있고
아버지가 배경 요리를 하고 있는 주방 장면에서 3D 효과는
처음에 아버지를 작은 남자처럼 보이게 만듭니다.
그가 몸을 돌려 가족에게 더 가까이 다가가자 이상한 효과는 사라졌습니다.
iPhone 15 Pro에서 촬영한 공간 비디오가 어떻게 초점을 처리하는지,
그리고 기본적으로 긴 피사계 심도로 설정되어 있는지,
아니면 3D 효과를 위해 다른 것을 사용하고 있는지는 확실하지 않습니다.
공간 비디오 촬영 중에 iPhone 화면을 탭하여 초점 포인트를 설정할 수 있지만
편집시 이를 변경할 수는 없습니다.
내 두 개의 짧은 동영상은 인상적이었습니다.
촬영하는 동안 셰프님이 들고 계신 초밥 한 조각을 앞쪽에 놓기 위해 최선을 다했고,
최종 결과는 제가 바라던 효과를 정확하게 얻었습니다.
깊이가 흥미롭고 위압적이거나 거슬리지 않습니다.
그 장면은 내가 기억하는 그대로 정확하게 나타나며,
실제와 같은 공간감의 깊이로 완성됩니다.
전통적인 비디오 촬영으로는 불가능합니다.
내가 하지 않은 것은 일어서서 공간 영상에 더 가까이 다가가는 것이었습니다.
마찬가지로, 이 동영상은 들어서거나 이동할 수 있는 동영상이 아닙니다.
깊이의 환상을 만들기 위해 여전히 약간 다른 두 개의 비디오만 사용하고 있습니다.
궁금한 점이 있을 경우를 대비해 오디오도 캡처되었으며
이는 완벽하게 정상적으로 들렸습니다.
나는 어떤 종류의 공간 효과도 느끼지 못했지만 이 비디오는
방의 거리에 걸쳐 있는 오디오 소스로 촬영된것이 아닙니다.
향후 계획은?
iOS 17.2 공개 베타를 설치하면 공간 비디오 촬영 기능을 갖게 되므로
지금부터 Apple이 마침내 Vision Pro를 소비자에게 판매하기 시작할 때까지
많은 공간 비디오를 촬영할 수 있습니다.
이러한 비디오는 완벽하게 정상적으로 보일 것입니다.
그리고 마침내 Vision Pro를 구입했을때
스와이프할 수 있는 공간 비디오 라이브러리가 있다고 상상해 보십시오.
그리고 파노라마가 장치에서 멋지게 보일 것이라는 사실이
마침내 Apple의 비전프로 헤드셋을 구입하는 이유일 수 있습니다.
당연히 여기서 가장 큰 걸림돌은 가격입니다.
Apple은 앞서 언급한 것처럼 아마도 필요할 헤드 스트랩 액세서리를 제외하고
Vision Pro에 대해 3,499달러(약 £2,800 / AU$5,300)를 청구할 계획입니다.
이는 수백만 명이 iPhone 15 Pro를 소유하고 공간 비디오를 촬영할 수 있지만,
소중한 소수만이 Vision Pro에서 이를 시청할 수 있다는 것을 의미합니다.
아마도 Apple은 사람들이 월별 요금으로 비용을 지불할 수 있도록
재정 계획 중 하나에 Vision Pro를 포함시킬 것입니다.
iPhone 15 Pro를 구입하면 할인이 있을 수도 있습니다. 아마도..
Apple이 무엇을 하든, 공간 비디오는 Vision Pro를 소유하고 있지 않다면
적어도 그랬기를 바라는 사람들에게 가장 설득력 있는 사례가 될 수 있습니다.
이거 애플 독자규격이겠지만 메타 퀘스트 같은데서 플레이 하는 앱이 나올걸요 가격차 때문에 킬러앱이라기 보단 남 좋은일 되버릴 가능성이 큽니다 독자규격 아니면 더 쉽구요 심지어 너무 빨리 내줘서 이러다간 비전프로보다 메타 퀘스트로 플레이하는 앱이 더 먼저 출시될 수도 있습니다
앞으로 한동안은 최고급 고객을 위해 아이폰으로 촬영한 비전프로용 야동이 팔릴 세상이 되는 것인가...
컨텐츠 없다는 소리 나오는게 결국 ’기업의 컨텐츠 제공‘에만 초점을 맞춰서 그렇지 스마트폰(촬영기기), OS 통합 연동, XR기기 셋 다 직접 다 하는 기업인 애플이면 소비자 자체 컨텐츠나 사용성으로도 충분히 할거는 많겠네요
그걸 다 사주는 열성 애플 유저에게나 통하는 말이지. 500만원 짜리 비전 프로라…흐음ㅋ
뉴노멀
한 줄 요약하면 LG 옵티머스 3D 에 들어가던 3D 영상촬영 이군요
앞으로 한동안은 최고급 고객을 위해 아이폰으로 촬영한 비전프로용 야동이 팔릴 세상이 되는 것인가...
AV 킹왕굿
이거 애플 독자규격이겠지만 메타 퀘스트 같은데서 플레이 하는 앱이 나올걸요 가격차 때문에 킬러앱이라기 보단 남 좋은일 되버릴 가능성이 큽니다 독자규격 아니면 더 쉽구요 심지어 너무 빨리 내줘서 이러다간 비전프로보다 메타 퀘스트로 플레이하는 앱이 더 먼저 출시될 수도 있습니다
뭐가 되었든 소비자 입장에선 파이가 커지면 좋죠~^^
전 그렇지만은 않을거라고 보는게, 애플 공홈에서 제공하는 ar기능용 파일인 usd는 픽사가 개발한 포맷이고 여러 3d프로그램에서도 열립니다. 개발 목적 자체가 개방형 포맷이었으니까요. 같은 논리로 3d 컨텐츠 확장을 위해서라도 공간 비디오 기능 자체는 애플이 구현하는거지만, 관련 포맷이나 접근성 면에선 타 플랫폼에서도 접근이 가능하게 할 확률이 크다고 봅니다.
동영상 촬영 용도는 아니지만 이미 양안 컬러카메라 이용해서 외부컬러패쓰쓰루 vr180 sbs로 촬영하는 방법은 있더군요.