Quest 2 컨트롤러가 필요 없는 핸드 트래킹은 중요한 업데이트를 앞두고 있습니다.
핸드 트래킹 2.0은 5월에 퀘스트 2에, 이달에는 오리지널 퀘스트에 도착하여 컨트롤러 없이 손을 사용하는 것이 극적으로 개선되었습니다. 메타는 연구진과 엔지니어들이 "디바이스의 카메라가 전체 손을 볼 수 없거나 손이 빠르게 움직일 때 손 포즈를 더 잘 이해하기 위해 딥 러닝을 적용하는 새로운 방법을 개발했다"며 그 결과를 "연속성을 추적하는 단계적 기능 향상"이라고 설명했다.
이상적인 조명 조건에서 2.0은 빠르게 움직이는 손, 한 손이 다른 손을 덮고 심지어 손이 만지는 것을 처리할 수 있습니다. 이전에는 추적이 일시적으로 중단되었던 시나리오입니다. 손 추적을 훨씬 더 실용적으로 사용하고 박수 및 손가락 세기와 같은 새로운 동작을 가능하게 했습니다. 일부 오래된 앱은 1.0에서 발생한 문제를 처리하기 위해 개발자가 만든 손 추적 품질 필터링 알고리즘을 사용했기 때문에 개발자 측 선택 업그레이드입니다. 그러나 Cubism, Unplugged: Air Guitar 및 Hand Physics Lab 을 포함한 거의 모든 손 추적 게임 이 이를 지원합니다.
Meta는 이제 곧 출시될 Hand Tracking 2.1에 "전체 추적 스택에 대한 변경 사항이 포함되어 추적 안정성이 더욱 향상됩니다"라고 말합니다.
2.1에서 추적 손실이 감소하여 손이 일시적으로 덜 자주 사라지게 됩니다. 그리고 재획득 시간이 빨라졌기 때문에 시스템이 손을 놓치더라도 더 빨리 다시 나타납니다.
또한 2.1에는 예측 정확도를 향상시키기 위해 새로운 신경망이 추가되었습니다. Meta는 이것이 특히 빠른 동작에 대해 "더 적은 오버슈팅과 부드러운 손 포즈"를 제공한다고 주장합니다. 모든 VR 추적 시스템은 각 프레임이 렌더링을 시작하고 실제로 표시되기 시작하는 시간 사이에 약간 움직이는 머리와 손을 고려하기 위해 예측을 사용합니다.
마지막으로 2.1은 Quest 시스템 인터페이스에서 사용되는 핀치 제스처의 안정성을 개선했으며 Meta는 이를 통해 오탐지를 줄일 수 있다고 주장합니다.
Hand Tracking 2.1은 올해 말 시스템 소프트웨어 업데이트를 통해 Quest 2와 Quest Pro 모두에 제공됩니다.
