영상 변환 장치 및 방법 document_id 1020110061531

[청구항 1] 업 샘플링 된 깊이 영상 및 고해상도 컬러 영상에서 이웃 픽셀들 간의 컬러-깊이 유사도를 이용하여 고해상도 깊이 영상의 깊이 유사 가중치를 결정하는 가중치 결정부 상기 업 샘플링 된 깊이 영상에 기초하여 생성된 깊이 그래디언트(gradient) 영상의 에지(edge)의 폭을 저-고해상도 깊이 에지 폭 상관관계를 이용하여 감쇄시킴으로써, 고해상도 깊이 그래디언트 영상을 생성하는 그래디언트 영상 생성부; 및 상기 깊이 유사 가중치, 상기 고해상도 깊이 그래디언트 영상 및 저-고해상도 깊이 일관성에 기초하여 저해상도 깊이 영상을 고해상도 깊이 영상으로 변환하는 영상 변환부 를 포함하는 영상 변환 장치 [청구항 2] 제1항에 있어서,상기 저해상도 깊이 영상 및 상기 고해상도 컬러 영상을 입력받는 입력부; 및상기 저해상도 깊이 영상을 보간(interpolation)하여 상기 업 샘플링 된 깊이 영상을 생성하는업샘플링부를더 포함하는영상 변환 장치. [청구항 3] 제1항에 있어서,상기 가중치 결정부는상기 고해상도 깊이 영상의 제1 픽셀과 인접한 제2 픽셀에 대하여, 상기 업 샘플링 된 깊이 영상에서 깊이 값의 유사도를 계산하고, 상기 고해상도 컬러 영상에서 컬러 값의 유사도를 계산하는 유사도 계산부포함하는영상 변환 장치. [청구항 4] 제3항에 있어서,상기 유사도 계산부는상기 제1 픽셀과 상기 제2 픽셀간의 거리계산하는영상 변환 장치. [청구항 5] 제1항에 있어서,상기 가중치 결정부는상기 이웃 픽셀들 간에 상기 컬러-깊이 유사도가 클수록 상기 깊이 유사 가중치가 큰 값결정하는영상 변환 장치. [청구항 6] 제1항에 있어서,디언트 영상 생성부는상기 업 샘플링 된 깊이 영상에 대해서 그래디언트의 크기를 계산하여 상기 깊이 그래디언트 영상을 생성하는 계산부; 및상기 그래디언트의 크기의 국부 최대값(local maximum)을 계산하여 에지를 추출하는에지추출부를포함하는영상 변환 장치. [청구항 7] 제1항에 있어서,디언트 영상 생성부는상기 깊이 그래디언트 영상과 기존에 저장된 원본 고해상도 깊이 그래디언트 영상 간에 대응하는 에지의 폭을 추출하여 상기 저-고해상도 깊이 에지 폭 상관관계를 획득하는상관관계획득부를포함하는영상 변환 장치. [청구항 8] 제1항에 있어서,해상도 깊이 일관성은고해상도 깊이 영상에서 소정 픽셀의 깊이 값과 저해상도 깊이 영상에서 상기 소정 픽셀에 대응하는 픽셀의 깊이 값 사이의 일관성특징으로 하는영상 변환 장치. [청구항 9] 제1항에 있어서,해상도 깊이 일관성은촬영 장치의 렌즈에 따라 결정되는 상기 저해상도 깊이 영상의 분포에 기초하여결정되는것을특징으로 하는영상 변환 장치. [청구항 10] 제1항에 있어서,상기 영상 변환부는상기 깊이 유사 가중치, 상기 고해상도 깊이 그래디언트 영상 및 상기 저-고해상도 깊이 일관성을 고려한 목적함수가 최소값을 가지도록 최적화를 수행하는 최적화부포함하는영상 변환 장치. [청구항 11] 제10항에 있어서,상기 최적화부는상기 고해상도 깊이 영상의 크기가 큰 경우에는 켤레 구배 알고리즘(conjugate gradient descent algorithm) 또는 야코비 반복(jacobi iterative) 알고리즘을 이용하여 최적화수행하는영상 변환 장치.