제가 처음 ipiSoft’s markerless 모션캡쳐 기술에 대해 들었을 때 강한 호기심을 갖게 되었습니다. 두 개의 표준 Microsoft Kinect 모션센서와 함께 사용하는 ipiSoft는 전통 모캡시스템의 비용의 일부만으로도 구입할 수 있으며 정확한 모션캡쳐 전송이 가능한 제품이었습니다. 뿌만 아니라 설치 또한 마커의 사용 없이 모캡을 할 수 있게 해줍니다. 액터의 수트에 부착된 이러한 반사물체는 모션을 추적하는 데 사용되는데, 이런것을 사용하게 되면 가격이 올라가게 됩니다. 반면에 ipiSoft app와 2개의 Kinects는 최소의 패키지를 구성하는데, 이것은 inertial 센서와 같은 대체 기어는 물론 복잡한 스튜디오나 기술팀 조차도 필요로 하지 않습니다.

그런데 어떻게 이게 가능한 것일까요? ipiSoft의 역량을 실험해 본 후에 나는 흥미로운 결론을 세웠습니다.

iPi Studio

제가 ipiSoft 기술을 테스트하기 전에 ipiSoft의 창립자이자 회장인 Michael Nikonov의 비하인드 스토리를 들어보도록 합시다. 그는 혁신적인 markerless방식의 모션캡쳐로 특허를 받은 삼성의 팀원으로 있었습니다.

Nikonov에 따르면, markerless모션캡쳐는 기존의 모캡방식과 경쟁할 수 있을 뿐 아니라 헐리우드에서 사용된 마커기반의 시스템과도 비교할 만한 정확성을 가지고 있어서 앞으로 우수한 시스템이 될 준비가 되어 있다고 했습니다.

“나는 구식의 컴퓨터에 대한 모캡솔루션을 비교했습니다” Nikonov가 말했습니다. “이제, 애니메이션용도의 모캡의 사용은 예산 때문에 제한되어서는 안되고, 오직 당신이 제공할 수 있는 창의성의 양에 의해 사용되어야 합니다.

업계에서 자리를 잡은 영국회사 Vicon의 마커기반 모션캡쳐 기술의 setup을 잠깐 살펴보도록 합시다. 이 회사의 최신 초보자용 제품라인인 Bonita는 작은 IR 반사마커가 있는 액터의 수트와 함께 IR LED 라이트를 쓰는 카메라를 사용합니다. Vicon 소프트웨어는 여러 대의 카메라를 둥글게 배치하여 (Realtime triangulation) 3D 공간 내에서의 액터들의 포인트를 찾을 수 있습니다. Bonita시스템은 $10,000부터 가격이 책정됩니다.

ipiSoft와 markerless시스템은 반사하는 마커와 같은 점에 의존하지 않고, 복잡한 알고리즘을 사용하는데 이 알고리즘은 Kinect 카메라로 보내는 픽셀정보를 해석합니다.

Michael Nikonov

또한 Kinect의 카메라 시스템은 웹캠 같은 카메라로 적외선 프로젝션에 사용할 뿐만 아니라, 사물과 3D인체의 움직임을 추적하는 프로세서로도 사용됩니다.

Nikonov가 말하기를, markerless접근방식은 특히 occlusion을 다룰 때 더 믿을 만 하다고 합니다.( occlusion이란 폐색으로, 액터의 바디 일부가 어떤 부분에 의해 감춰졌을 때 나타나는 현상으로 예를 들면 팔이 몸통 뒤에 갔을 때)

Nikonov 에 의하면, occlusion문제를 해결할 수 있는 유일한 방법은 16~20개의 장치를 설치 및 배치하여 더 많은 카메라를 사용하는 마커기반의 시스템입니다. 이 카메라들 때문에 센서들을 실행하는 복잡함뿐 아니라 액터는 반드시 수트를 입어야 하며, 또 작업이 잘 진행되는지 확인하는 기술자들도 있어야 합니다. 결과적으로 이 모든것들로 인해 마커기반 모캡이 가격이 높습니다. 실제로 Nikonov가 다음과 같이 지적했습니다. “마커기반과 관련된 모든것을은 비쌉니다. ipiSote 한 대보다 수트 하나 가격이 더 비쌉니다”

모든 카메라와 케이블을 포함하여 액터에게 센서를 부착해야 하는 번거로움과 이 모든 장비를 설치할 공간이 필요한 단점에도 불구하고 마커기반의 모션캡쳐 가격은 오히려 예전보다 더 비싸졌습니다. 반면에 iPiSoft markerless소트프웨어의 베이직 버전은 $595(스탠다드 버전은 $995)에 키넥트 센서 한 개당 120불 정도 밖에 하지 않습니다.

ipiSoft의 웹사이트 상단에 보면 “대중을 위한 모션캡쳐”라는 말을 볼 수 있습니다. 나는 그 말에 동의합니다. 독자적인 애니메이터나 작은 스튜디오들조차도 사용할 수 있는 여유가 됩니다. 그러나 아직까지 궁금한 게 있습니다. 이것을 실제로 어떻게 잘 사용할 수 있을까요? Michael Nikonov와의 대화를 한 후에 스스로 정답을 찾을 수 있었습니다.

말씀드린대로 ipiSoft 시스템은 저렴한 가격에 바로 구입이 가능한 Kinect 모션센서를 사용합니다. 마이크로소프트에 따르면 이 Kinect 모션센서 입력장치는 원래 2010년 출시되었던 Xbox 360 비디오 게임을 위한 개발된 것입니다. 이 센서는 은은한 조명 아래의 3D 데이터를 캡쳐 하는 적외선 센서를 포함합니다.

Two Kinects and a pair of USB extension cables

iPi Soft 모션캡쳐 소프트웨어의 예전 버전은 오직 하나의 Kinect를 지원했지만, 이제는 두 개의 Kinect에서 데이터를 수집할 수 있는 능력을 갖추고 있어서 Depth 정보를 더욱 더 정확하게 전달할 수 있습니다. 캐릭터가 360도 회전하는 동작을 문제없이 촬영할 수 있다는 점은 단 두 개의 키넥트 센서가 캐릭터의 위치값의 미미한 차이를 인식하고 처리해 낼 수 있도록 만들었다는 점에서 인상적이었습니다.

A Microsoft Kinect