가공데이터 · 특허 지식베이스

비짐 기반 비디오 부호화 document_id 1020047004203

출원번호
1020047004203
분류
전기(H섹션)
문맥 (context)
[청구항 1] 비디오 데이터 프레임들의 스트림을 처리하는 비디오 처리 시스템에 있어서, 입력되는 비디오 데이터 프레임들(32)이 적어도 하나의 미리 결정된 비짐(viseme)에 대응하는지를 결정하는 비짐 식별 시스템(12) 상기 적어도 하나의 미리 결정된 비짐에 대응하는 프레임들을 저장하는 비짐 라이브러리(16); 및 상기 적어도 하나의 미리 결정된 비짐에 대응하는 각 프레임을 부호화하는 부호화기(14)로서, 현 프레임을 부호화하기 위해 상기 비짐 라이브러리(16)에 미리 저장된 프레임을 사용하는 상기 부호화기(14)를 포함하는 패키징 시스템(10)을 포함하는 비디오 처리 시스템 [청구항 2] 제 1 항에 있어서,상기 비짐 식별 시스템(12)은 상기 비디오 데이터 프레임들(32)과 연관된 오디오 데이터 스트림(33) 내 음소(phoneme)들을 식별하는스피치멘터포함하는,비디오 처리 시스템. [청구항 3] 제 2 항에 있어서,상기 비짐 식별 시스템(12)은 식별된 음소들을 상기 적어도 하나의 미리 결정된 비짐에 맵핑하는,비디오 처리 시스템. [청구항 4] 제 2 항에 있어서,상기 비짐 식별 시스템(12)은 연관된 음소를 프레임들에 첨부하는,비디오 처리 시스템. [청구항 5] 제 1 항에 있어서,적어도 하나의 비짐에 대응하지 않는 프레임들을 제거하는 프레임 데시메이션 시스템더 포함하는비디오 처리 시스템. [청구항 6] 제 5 항에 있어서,부호화된 비디오 데이터 프레임들을 복호하는 복호기(42); 및복호된 프레임들을 저장하는 프레임 참조 라이브러리(44)를 포함하는 수신기 시스템(40)을 더 포함하고,상기 복호기(44)는 부호화된 현 프레임을 복호하기 위해 상기 프레임 참조 라이브러리로부터 미리 복호된 프레임을 사용하고, 상기 미리 복호된 프레임은 상기 부호화된 현프레임동일한비짐에 속하는,비디오 처리 시스템. [청구항 7] 제 6 항에 있어서,상기 수신기 시스템(40)은 상기 데시메이션 시스템(22)에 의해 제거된 프레임들을 재구성하는 모핑(morphing) 시스템더 포함하는,비디오 처리 시스템. [청구항 8] 제 7 항에 있어서,상기 부호화기(14)는 프레임들을 재구성하기 위해 상기 모핑 시스템(48)에 의해 사용되는 상세 움직임 정보생성하는,비디오 처리 시스템. [청구항 11] 실행시, 비디오 데이터 프레임들의 스트림을 처리하는, 기록 가능한 매체 상에 저장된 프로그램 제품에 있어서, 입력되는 비디오 데이터 프레임들이 적어도 하나의 미리 결정된 비짐에 대응하는지를 결정하는 시스템(12) 상기 적어도 하나의 미리 결정된 비짐에 대응하는 프레임들을 저장하는 비짐 라이브러리(16); 및 상기 적어도 하나의 미리 결정된 비짐에 대응하는 각 프레임을 부호화하는 시스템(14)으로서, 상기 부호화 시스템은 현 프레임을 부호화하기 위해 상기 비짐 라이브러리에 미리 저장된 프레임을 사용하는 상기 부호화 시스템(14)을 포함하는 프로그램 제품 [청구항 12] 제 11 항에 있어서,상기 결정 시스템(12)은 상기 비디오 데이터 프레임들과 연관된 오디오 데이터 스트림내 음속들을 식별하는스피치멘터포함하는,프로그램 제품. [청구항 13] 제 11 항에 있어서,상기 결정 시스템(12)은 식별된 음소들을 상기 적어도 하나의 미리 결정된 비짐에 맵핑하는,프로그램 제품. [청구항 14] 적어도 하나의 미리 결정된 비짐과 연관된 프레임들을 사용하여 부호화된 비디오 데이터 프레임들을 복호하는 복호기(42)에 있어서, 복호된 프레임들을 저장하기 위한 프레임 참조 라이브러리(44)로서, 상기 복호기(42)는 부호화된 현 프레임을 복호하기 위해 상기 프레임 참조 라이브러리에 미리 저장된 프레임을 사용하고, 상기 미리 저장된 프레임은 상기 부호화된 현 프레임과 동일한 비짐에 속하는, 상기 프레임 참조 라이브러리(44); 및 부호화 처리 동안 제거된 비디오 데이터 프레임들을 재구성하는 모핑 시스템(48)을 포함하는 복호기(42)
지시문 (instruction)
주어진 본문을 읽고 관련 정보를 분석하여 질문에 답하라.
질문 (question)
비디오 처리 시스템에서 비짐 식별 시스템(12)이 오디오 데이터 스트림 내의 음소(phoneme)를 식별할 경우, 식별된 음소와 비짐(viseme) 사이에는 어떠한 관계가 형성되며 이를 처리하는 구체적인 방식은 무엇인가?
추론 과정 (compact_reasoning)
  1. 1과제 해석task_interpretation

    비짐 식별 시스템이 오디오 스트림에서 음소를 식별할 때, 음소와 비짐 사이의 관계 및 처리 방식을 파악해야 한다.

  2. 2정보 추출information_extraction

    청구항 2와 3을 통해 비짐 식별 시스템이 스피치멘터를 포함하여 음소를 식별하고, 이를 비짐에 맵핑한다는 정보를 추출한다.

    • 상기 비짐 식별 시스템(12)은 식별된 음소들을 상기 적어도 하나의 미리 결정된 비짐에 맵핑하는
  3. 3근거 선택evidence_selection

    음소와 비짐의 관계를 설명하는 '맵핑' 구절과 식별 주체인 '스피치멘터' 구절을 선택한다.

    • 식별된 음소들을 상기 적어도 하나의 미리 결정된 비짐에 맵핑하는
  4. 4논리 통합logical_integration

    비짐 식별 시스템 내의 스피치멘터가 음소를 식별하면, 시스템은 식별된 음소를 미리 결정된 비짐에 맵핑하는 방식으로 관계를 형성하고 처리한다.

  5. 5결론 도출conclusion_formulation

    음소와 비짐은 맵핑 관계를 가지며, 스피치멘터를 통해 음소를 식별한 후 이를 비짐에 대응시키는 방식으로 처리된다.

  6. 6답변 생성answer_generation

    질문에 대해 음소와 비짐 사이의 맵핑 관계와 스피치멘터를 이용한 처리 방식을 기술한다.

최종 답변 (final_answer)
비짐 식별 시스템(12)이 오디오 데이터 스트림 내의 음소를 식별할 경우, 식별된 음소와 비짐 사이에는 맵핑(mapping) 관계가 형성된다. 구체적인 처리 방식은 비짐 식별 시스템에 포함된 스피치멘터를 통해 음소들을 식별하고, 식별된 음소들을 미리 결정된 비짐에 맵핑하는 방식으로 이루어진다.
핵심 해석 (core_interpretation)
본 발명은 오디오의 음소 정보를 비디오의 비짐 정보와 맵핑함으로써, 음성 데이터에 대응하는 비짐 라이브러리의 프레임을 효율적으로 활용하여 비디오를 부호화하는 기술에 관한 것이다.