실시간 텍스처 누적을 통한 3D 신체 모델 생성 방법 및 그 시스템

Abstract

본 발명은 RGBD 이미지 프레임을 입력으로 받아 실시간으로 신체 모델과 텍스처 및 노멀 맵을 복원하는 알고리즘을 사용하여 3D 신체 모델을 생성하는 실시간 텍스처 누적을 통한 3D 신체 모델 생성 방법 및 그 시스템에 관한 것으로서, RGBD 이미지 프레임으로부터 신체 포즈 추적 정보를 획득하는 단계, 단일 RGBD 카메라 파라미터를 사용하여 상기 RGBD 이미지 프레임을 포인트 클라우드로 변환하고, 상기 RGBD 이미지 프레임의 포인트 클라우드 어레이 정보와 3D 파라메트릭 신체 모델의 메쉬(Mesh)를 매핑하는 단계 및 비동기 프로세스에서, 비동기 텍스처 누적 방식을 이용한 3D 신체 모델 생성 경량화 알고리즘을 통해 상기 매핑된 정보로부터 직교 가중치(Orthogonality weight), 색상 값(color value) 및 로컬 노멀(local normal) 값을 산출하며, UV 좌표에서의 텍스처 및 노멀 맵을 추출하고, 상기 3D 파라메트릭 신체 모델에 렌더링하여 3D 신체 모델을 생성하는 단계를 포함한다.