ＬＡＳｅＲ 기반의 단말을 위한 스테레오스코픽 입체 영상 컨텐츠 제공 장치 및 방법 document_id A220623059986

LASeR는 이동 단말과 같이 가용 자원이 부족한 통신 환경에서 멀티미디어 서비스를 이용할 수 있도록 만들어진 멀티미디어 컨텐츠 포맷을 말한다. 멀티미디어 서비스를 위해 다양한 기술들이 최근 논의되고 있다. 특히, 멀티미디어 컨텐츠의 각 요소들의 시간적 공간적 구성 및 표현에 관한 기술이 MPEG(Moving Picture Experts Group)-4 LASeR(Lightweight Application Scene Representation) 이다.상기 LASeR는 장면 기술(scene description), 비디오, 오디오, 이미지, 폰트, 텍스트, 메타데이터(metadata), 스크립트(script)와 같은 데이터들을 이용하여 다양한 멀티미디어의 자유로운 표현과 사용자와의 상호 작용을 위해 제안된 기술이다. 상기 LASeR의 데이터들은 명령어를 포함하는 접근단위(access unit, 이하 'AU'라 칭함)로 구성되며, 상기 명령어는 특정 시간의 장면 특성을 변경하는데 이용된다. 동시에 수행되어야 하는 명령어들은 하나의 묶음으로 하나의 AU에 들어간다. 상기 AU는 하나의 장면, 소리 또는 짧은 애니메이션 등이 될 수 있다. 현재, LASeR는 W3C(World Wide Web Consortium)와 융합될 수 있도록 표준화가 진행되고 있으며, W3C의 SVG(Scalable Vector Graphics)과 SMIL(Synchronized Multimedia Integration Language)표준을 이용한다. 상기 SVG는 수학적인 방법으로 장면을표현하기 때문에 화면이나 해상도에 관계없이 동일한 화질의 결과를 디스플레이할 수 있으며, 텍스트 기반이므로 적은 데이터 용량으로 효과적인 장면의표현이 가능하다. 상기 SMIL은 멀티미디어 데이터의 시간적, 공간적 관계를 정의하고 도시한다. 상기 SVG와 SMIL을 이용하면, 오디오, 비디오, 문자, 영상, 다면체 등을 표현할 수 있다. 도 1는 종래 LASeR 컨텐츠를 수신한 단말의 동작을 도시한 도면이다. LASeR 컨텐츠는 Video, Audio등의 미디어를 포함하여 실제 단말에서 서비스 되는 장면에서 보여지는 모든 자원 요소들을 포함하는 컨텐츠를 의미한다. 도 1을 참조하면 단말은, 100단계에서 LASeR 서비스를 수신한다. 그리고, 단말은 110단계에서 상기 수신된 LASeR 서비스의 LASeR 컨텐츠를 복호화(Decoding)하고, 120단계에서 상기 복호화한 LASeR 컨텐츠에서 LASeR 명령어들을 확인하여 실행한다. 130단계에서 단말은 상기 LASeR 컨텐츠의 모든 이벤트들을 처리하고, 140단계에서 미디어 객체의 시간 정보에 따라 미디어 객체의 표시 여부를 결정한다. 마지막으로, 단말은 150 단계에서 장면구성요소들을 렌더링하여 디스플레이한다. 상기 LASeR 컨텐츠를 수신한 단말 동작은 ISO/IEC 14496-20 : MPEG-4 LASeR 표준 문서의 실행 모델(Execution Model)을 따른다. 상기 설명한 LASeR 컨텐츠는 LASeR 언어를 사용하여 003c#표 1003e#의 구문(syntax)으로 표현될 수 있다. 아래 003c#표 1003e#에 의하면, 단말은 레이저 명령어(003c#NewScene003e#) 가 수행될 때마다 해당 레이저 명령어 내에 포함된 장면(003c#svg003e#…003c#/svg003e#)을 구성하여 디스플레이한다. 한편, 최근의 영상 기술은 3차원 입체 영상을 구현하는 방식에 대한 연구가 활발히 진행되고 있다. 이는 보다 사실적이고 현실감 있는 영상 정보를 표현하기 위함이다. 3차원 입체 영상을 구현하는 방법의 하나로 여러 대의 카메라를 사용하여 다양한 각도에서 여러 장의 영상으로부터 3차원 객체를 추출해내는 방법이 있는데, 이러한 방법은 복잡한 연산과 계산과정이 필요하다는 단점이 있다. 그래서 인간 시각 특성을 활용하여, 기존의 디스플레이 장치에 좌시점 영상과 우시점 영상을 각각 해당 위치에 주사한 후, 좌시점과 우시점을 사용자의 좌안과 우안에 분리하여 상이 맺히게 함으로써 입체감을 느끼게 하는 방법이 여러 가지 면에서 가능성을 인정 받아 널리 시도되고 있다. 이러한 양안 시차 방법을 사용하여 만든 입체 영상을 스테레오스코픽 입체 영상이라고 한다. 입체 영상에 관한 관심이 높아짐에 따라 Barrier LCD를 장착한 휴대단말기에서는 스테레오스코픽 컨텐츠를 재생하여 사용자에게 좀 더 실감나는 영상을 제공할 수 있게 되었다. 특히 스테레오스코픽 컨텐츠를 재생하기 위한 방법으로, 보다 적은 데이터 용량으로 다양한 요소들을 사용하여 풍부한(Rich) 장면을 표현할 수 있기 때문에, 많은 사업자들이 장면 표현 도구로 많이 사용하고 있는 상기 LASeR를 선택하여 서비스하고자 한다. 그러나 스테레오스코픽 비디오 스트림은 좌, 우 영상 데이터를 함께 담고 있어야 하기 때문에 도 2a에 도시한 일반적인 비디오 스트림과는 차이가 있다. 도 2a를 참조하면, 일반적인 비디오 스트림은 다수의 영상 프레임들이 연속적으로 이어져 하나의 스트림으로 구성되어 있음을 알 수 있다. 도 2b 내지 도 2e는 일반적인 스테레오스코픽 비디오 스트림을 도시한 도면이다. 먼저, 도 2b의 스테레오스코픽 비디오 스트림은 좌, 우 영상을 함께 하나의 프레임에 담아 하나의 비디오 스트림으로 구성하고 있다. 도 2c의 스테레오스코픽 비디오 스트림은 좌, 우 영상을 한 줄씩 끼워짜기 방식(인터리빙)으로 하나의 프레임에 담아 하나의 비디오 스트림으로 구성하고 있다. 도 2d의 스테레오스코픽 비디오 스트림은 좌, 우 영상의 프레임을 순서대로 번갈아 가며 하나의 비디오 스트림으로 구성하고 있으며, 도 2e의 스테레오스코픽 비디오 스트림은 좌, 우 영상을 각기 다른 비디오 스트림으로 구성하고 있다. 상기 도 2b 내지 도 2e에 도시된 바와 같이 스테레오스코픽 입체영상은 기존의 비디오 스트림과는 달리 좌, 우의 영상이 두 개의 비디오 스트림으로 구성되거나, 하나의 비디오 스트림으로 구성되더라도 좌, 우 영상이 각각의 프레임으로 구성되어 있거나 혹은 하나의 프레임에 혼합된 형태로 구성된다. 이러한 스테레오스코픽 입체 영상은 단말 디스플레이의 LCD Barrier 타입에 따라 좌, 우 두 영상이 합쳐져 하나의 입체 영상으로 보이게 된다. 하지만 기존의 LASeR 기반의 단말은 하나의 미디어 요소에 대해 하나의 비디오 스트림만을 인식하여 디스플레이하기 때문에, 상기 스테레오스코픽 입체 영상를 디스플레이하고자 할 경우, 도 2e의 참조번호(210)과 같이 두 개 이상의 비디오 스트림이 전달될 경우, 디스플레이해야 하는 비디오 스트림을 식별할 수 없게 된다. 혹은 단말은, 두 개 이상의 비디오 스트림들 중 인식 가능한 하나의 비디오 스트림만을 디스플레이함으로써 입체영상을 보여주지 못한다.또한 도 2b 내지 도 2d와 같이 하나의 비디오 스트림으로 전달된다고 하더라도, 도 2d의 참조번호(200)과 같이 좌, 우 두 영상이 합쳐진 입체영상이 아니라, 좌, 우가 반복하여 나타나는 일반 비디오 영상이 되므로 사용자가 쉽게 피로감을 느낄 수 있다는 단점이 있다. 또한 도 2b의 경우는 거의 똑같아 보이는 좌, 우 영상을 한 화면에 나누어 보아야 하므로 사용자의 입장에서는 쓸데없이 비디오의 크기만 줄어들뿐더러, 역시 쉽게 피로감을 느낄 수 있다는 단점이 있다. 도 2c의 경우도 일그러진 영상으로 보여지게 되므로, 상기 다른 예들과 마찬가지의 문제점들을 가지고 있다. 따라서 스테레오스코픽 입체영상을 서비스하고자 하는 경우에, LASeR 기반의 단말을 위한 스테레오스코픽 입체영상을 제공하는 방법 및 장치가 요망된다. 또한 단말에 탑재된 LASeR 엔진의 스테레오스코픽 입체영상 지원여부에 관계없이 스테레오스코픽 입체영상의 정보를 해석하여 최적화된 영상이 LASeR 엔진에 전달될 수 있도록 하는 기능이 요망된다.