실시간으로 비트스트림의 공간 해상도를 변환할 수 있는스케일러블 비디오 코딩 방법 및 그 방법을 이용한 코덱 document_id 1020060112777

[청구항 26] gop(group of picture) 단위를 구분하는 키 프레임들이 먼저 입력된 과거 키 프레임을 참조하여 움직임 예측을 수행하는 스케일러블 비디오 인코더에 있어서, 공간 해상도가 변경될 위치에 해당하는 gop의 키 프레임을 공간 해상도 변경의 시작 포인트로 지정하는 포인트 지정부; 및 상기 시작 포인트로 지정된 키 프레임을 idr 프레임 및 인트라 프레임으로 부호화하는 부호화부 를 포함하여 실시간으로 공간 해상도를 변경하며 복호화가 가능한 비트스트림을 생성하는 것을 특징으로 하는 스케일러블 비디오 인코더 [청구항 27] gop(group of picture) 단위를 구분하는 키 프레임들이 먼저 입력된 과거 키 프레임을 참조하여 움직임 예측을 수행하는 스케일러블 비디오 인코더에 있어서, 상기 gop 단위로 입력되는 프레임들에 대해 제1 주기 간격으로 idr 프레임으로 부호화하는 경우 상기 제1 주기 간격보다 짧은 제2 주기 간격으로 상기 프레임들을 인트라 프레임으로 부호화하고, 상기 gop 단위로 입력되는 프레임들에 대해 제1 주기 간격으로 idr 프레임으로 부호화하지 않는 경우 상기 프레임들을 제3 주기 간격으로 인트라 부호화하는 부호화부 를 포함하여 실시간으로 공간 해상도를 변경하며 복호화가 가능한 비트스트림을 생성하는 것을 특징으로 하는 스케일러블 비디오 인코더 [청구항 28] 부호화된 스케일러블 비디오 비트스트림에서 공간 해상도가 가변하는 비트스트림을 추출하는 비트스트림 추출기에 있어서, 공간 해상도를 향상 변경하고자 하는 경우, 상기 부호화된 스케일러블 비디오 비트스트림의 gop 단위를 구분하는 키 프레임들 중에서 공간 해상도 변경의 시작 포인트로 지정되고, idr 프레임 및 인트라 프레임으로 부호화된 키 프레임을 탐색하는 키 프레임 탐색부; 및 상기 탐색된 키 프레임부터 공간 해상도 향상과 관련된 nal 유닛을 선택하고, 공간 해상도를 축소 변경하고자 하는 경우 해당 시간적 위치부터 공간 해상도 축소와 관련된 nal 유닛을 선택하는 nal 유닛 선택부 를 포함하는 것을 특징으로 하는 비트스트림 추출기 [청구항 29] 제28항에 있어서,상기 선택된 nal 유닛 앞에 공간 해상도 변경 정보를 생성하여 삽입하는정보삽입부더포함하는것을특징으로 하는비트스트림 추출기. [청구항 30] 제29항에 있어서,상기 공간 해상도 변경 정보는 상기 탐색된 키 프레임 이후의 비트스트림에서 가장 높은 값의 디펜던시 아이디에 대응하는 시퀀스 파라미터 세트(sps)의시퀀스파라미터 세트아이디포함하는것을특징으로 하는비트스트림 추출기. [청구항 31] 제29항에 있어서,상기 공간 해상도 변경 정보는 변경 전의 공간 해상도를 갖는 비디오 시퀀스가 끝났음을 알리는 정보이며, 상기 비디오 시퀀스가 하나의 idr 프레임부터 다음 idr 프레임 이전까지의일련유닛인것을특징으로 하는비트스트림 추출기. [청구항 32] gop(group of picture) 단위를 구분하는 키 프레임들이 먼저 입력된 과거 키 프레임을 참조하여 움직임 예측을 수행하는 스케일러블 비디오 디코더에 있어서, 현재 입력되는 gop의 키 프레임이 공간 해상도 변경의 시작 포인트로 지정되고 인트라 프레임 및 idr 프레임으로 부호화된 키 프레임인지 확인하는 키 프레임 확인부 상기 키 프레임이 인트라 프레임 및 idr 프레임인 경우, 상기 시작 포인트로 지정된 키 프레임의 nal 유닛 앞에 삽입된 공간 해상도 변경 정보를 추출하는 정보 추출부; 및 상기 공간 해상도 변경 정보로부터 출력할 공간 해상도를 결정하는 해상도 결정부 를 포함하여 실시간으로 비트스트림의 공간 해상도를 변경하며 복호화하는 것을 특징으로 하는 스케일러블 비디오 디코더 [청구항 33] gop(group of picture) 단위를 구분하는 키 프레임들이 먼저 입력된 과거 키 프레임을 참조하여 움직임 예측을 수행하는 스케일러블 비디오 디코더에 있어서, 상기 gop 단위로 입력되는 비트스트림에서 idr 프레임을 검색하는 키 프레임 검색부 상기 idr 프레임으로 구성된 현재 액세스 유닛의 최대 디펜던시 아이디 값을 확인하는 아이디 확인부; 및 상기 현재 액세스 유닛의 최대 디펜던시 아이디 값을 먼저 입력된 과거 idr 프레임으로 구성된 액세스 유닛의 최대 디펜던시 아이디 값과 비교하여 상이 여부에 따라 상기 현재 액세스 유닛의 공간 해상도 변경 유무를 판단하는 판단부 를 포함하여 실시간으로 비트스트림의 공간 해상도를 변경하며 복호화하는 것을 특징으로 하는 스케일러블 비디오 디코더 [청구항 34] 제33항에 있어서,현재 액세스 유닛의 공간 해상도가 변경된 것으로 판단되면 상기 현재 액세스 유닛의 최대 디펜던시 아이디 값과 대응하는 시퀀스 파라미터 세트의 해상도 정보로부터 최종 출력할 영상의 공간 해상도 및 공간 해상도와 관련된 재구성 레이어를 결정하는 해상도결정부더포함하는것을특징으로 하는스케일러블 비디오 디코더. [청구항 35] gop(group of picture) 단위를 구분하는 키 프레임들이 먼저 입력된 과거 키 프레임을 참조하여 움직임 예측을 수행하는 스케일러블 비디오 디코더에 있어서, 현재 입력되는 gop의 최대 디펜던시 아이디 값을 확인하는 아이디 확인부; 및 상기 현재 gop의 최대 디펜던시 아이디 값을 먼저 입력된 과거 gop의 최대 디펜던시 아이디 값과 비교하여 상이 여부에 따라 상기 현재 gop의 공간 해상도 변경 유무를 판단하는 판단부 를 포함하는 것을 특징으로 하는 스케일러블 비디오 디코더 [청구항 36] 제35항에 있어서,상기 현재gop의 공간 해상도가 변경된 것으로 판단되면 상기 현재 gop의 최대 디펜던시 아이디 값과 대응하는 시퀀스 파라미터 세트의 해상도 정보로부터 최종 출력할 영상의 공간 해상도 및 공간 해상도와 관련된 재구성 레이어를 결정하는 해상도결정부더포함하는것을특징으로 하는스케일러블 비디오 디코더. [청구항 37] gop(group of picture) 단위를 구분하는 키 프레임들이 먼저 입력된 과거 키 프레임을 참조하여 움직임 예측을 수행하는 스케일러블 비디오 디코더에 있어서, 현재 입력되는 gop의 공간 해상도가 변경되었는지 여부를 판단하는 판단부 상기 현재 gop의 공간 해상도가 향상 변경된 경우, 상기 현재 gop와 동일 레이어의 먼저 입력된 과거 gop의 키 프레임과 시간적으로 동일한 위치에 대응하는 하위 레이어의 키 프레임을 업 샘플링하는 업 샘플링부; 및 상기 업 샘플링된 하위 레이어의 키 프레임을 참조하여 상기 현재 gop의 키 프레임이 움직임 예측을 수행하는 움직임 예측부 를 포함하는 것을 특징으로 하는 스케일러블 비디오 디코더 [청구항 38] gop(group of picture) 단위를 구분하는 키 프레임들이 먼저 입력된 과거 키 프레임을 참조하여 움직임 예측을 수행하는 스케일러블 비디오 코덱에 있어서, 공간 해상도가 변경될 위치에 해당하는 gop의 키 프레임을 공간 해상도 변경의 시작 포인트로 지정하고 idr 프레임 및 인트라 프레임으로 부호화하여 실시간으로 공간 해상도를 변경하며 복호화가 가능한 비트스트림을 생성하는 인코더 상기 비트스트림에서 공간 해상도가 변경되는 프레임의 nal 유닛 앞에 공간 해상도 변경 정보를 삽입하여 공간 해상도가 가변하는 비트스트림을 추출하는 비트스트림 추출기; 및 상기 공간 해상도가 가변하는 비트스트림을 상기 공간 해상도 변경 정보를 바탕으로 실시간으로 공간 해상도를 변경하며 복호화하는 디코더 를 포함하는 것을 특징으로 하는 스케일러블 비디오 코덱 [청구항 39] 제38항에 있어서,상기 비트스트림 추출기는공간 해상도를 향상 변경하고자 하는 경우, 상기 부호화된 스케일러블 비디오 비트스트림의 gop 단위를 구분하는 키 프레임들 중에서 공간 해상도 변경의 시작 포인트로 지정되고, idr 프레임 및 인트라 프레임으로 부호화된 키 프레임을 탐색하는 키 프레임 탐색부; 상기 탐색된 키 프레임부터 공간 해상도 향상과 관련된 nal 유닛을 선택하고, 공간 해상도를 축소 변경하고자 하는 경우 해당 시간적 위치부터 공간 해상도 축소와 관련된 nal 유닛을 선택하는 nal 유닛 선택부; 및상기 선택된 nal 유닛 앞에 공간 해상도 변경 정보를 생성하여 삽입하는정보삽입부포함하는것을특징으로 하는스케일러블 비디오 코덱. [청구항 40] 제38항에 있어서,상기 공간 해상도 변경 정보는 상기 시작 포인트로 지정된 키 프레임 이후의 비트스트림에서 가장 높은 값의 디펜던시 아이디(dependency id)와 대응하는 시퀀스 파라미터 세트(sps)의시퀀스파라미터 세트아이디포함하는것을특징으로 하는스케일러블 비디오 코덱. [청구항 41] 제38항에 있어서,상기 공간 해상도 변경 정보는 변경 전의 공간 해상도를 갖는 비디오 시퀀스가 끝났음을 알리는 정보이며, 상기 비디오 시퀀스가 하나의 idr 프레임부터 다음 idr 프레임 이전까지의일련유닛인것을특징으로 하는스케일러블 비디오 코덱. [청구항 42] gop(group of picture) 단위를 구분하는 키 프레임들이 먼저 입력된 과거 키 프레임을 참조하여 움직임 예측을 수행하는 스케일러블 비디오 코덱에 있어서, 상기 gop 단위로 입력되는 프레임들에 대해 소정 주기 간격으로 인트라 프레임으로 부호화하여 비트스트림을 생성하는 부호화부 상기 부호화된 비트스트림에서 상기 gop 단위로 최대 디펜던시 아이디 값을 확인하여 공간 해상도 변경 유무를 검출하는 해상도 변경 검출부; 및 공간 해상도가 향상된 것으로 판단되면 공간 해상도가 향상된 gop의 키 프레임이 하위 레이어의 키 프레임을 참조하여 복호화하는 복호화부 를 포함하는 것을 특징으로 하는 스케일러블 비디오 코덱 [청구항 43] 제42항에 있어서,상기 부호화부는,상기 gop 단위로 입력되는 프레임들에 대해 제1 주기 간격으로 idr 프레임으로 부호화하는 경우 상기 제1 주기 간격보다 짧은 제2 주기 간격으로 상기 프레임들을 인트라 프레임으로 부호화하고, 상기 gop 단위로 입력되는 프레임들에 대해 제1 주기 간격으로 idr 프레임으로 부호화하지 않는경우상기프레임들을제3주기간격인트라 부호화하는것을특징으로 하는스케일러블 비디오 코덱. [청구항 44] 제42항에 있어서,상기 해상도 변경 검출부는,상기 부호화된 비트스트림에서 현재 입력되는 gop의 최대 디펜던시 아이디 값을 확인하는 아이디 확인부; 및상기 현재 gop의 최대 디펜던시 아이디 값을 먼저 입력된 과거 gop의 최대 디펜던시 아이디 값과 비교하여 상이 여부에 따라 상기 현재 gop의 공간 해상도 변경 유무를 판단하는판단부포함하는것을특징으로 하는스케일러블 비디오 코덱. [청구항 45] 제42항에 있어서,상기 복호화부는,현재 입력되는 gop의 공간 해상도가 향상 변경된 경우, 상기 현재 gop와 동일 레이어의 이전에 입력된 과거 gop의 키 프레임과 시간적으로 동일한 위치에 대응하는 하위 레이어의 키 프레임을 업 샘플링하는 업 샘플링부; 및상기 업 샘플링된 하위 레이어의 키 프레임을 참조하여 상기 현재 gop의 키 프레임이 움직임 예측을 수행하는움직임예측부포함하는것을특징으로 하는스케일러블 비디오 코덱.