KR20100086440A - 지상파 디지털멀티미디어방송에서 비실시간 스테레오스코픽 서비스 수행 방법 및 지상파 디지털멀티미디어방송 수신 장치 - Google Patents
지상파 디지털멀티미디어방송에서 비실시간 스테레오스코픽 서비스 수행 방법 및 지상파 디지털멀티미디어방송 수신 장치 Download PDFInfo
- Publication number
- KR20100086440A KR20100086440A KR1020100005984A KR20100005984A KR20100086440A KR 20100086440 A KR20100086440 A KR 20100086440A KR 1020100005984 A KR1020100005984 A KR 1020100005984A KR 20100005984 A KR20100005984 A KR 20100005984A KR 20100086440 A KR20100086440 A KR 20100086440A
- Authority
- KR
- South Korea
- Prior art keywords
- video
- descriptor
- image
- stereoscopic
- additional
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 74
- 238000012545 processing Methods 0.000 title description 8
- 238000012546 transfer Methods 0.000 claims abstract description 7
- 239000003550 marker Substances 0.000 claims description 21
- 230000005540 biological transmission Effects 0.000 claims description 16
- 230000011664 signaling Effects 0.000 claims description 7
- 238000001824 photoionisation detection Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 14
- 239000000284 extract Substances 0.000 description 10
- 230000003252 repetitive effect Effects 0.000 description 5
- 230000001186 cumulative effect Effects 0.000 description 3
- 230000006866 deterioration Effects 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000014759 maintenance of location Effects 0.000 description 3
- 230000004888 barrier function Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 238000005469 granulation Methods 0.000 description 1
- 230000003179 granulation Effects 0.000 description 1
- 238000000707 layer-by-layer assembly Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000004321 preservation Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
- H04N21/4351—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reassembling additional data, e.g. rebuilding an executable program from recovered modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/167—Synchronising or controlling image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2365—Multiplexing of several video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4348—Demultiplexing of additional data and video streams
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
지상파 디지털멀티미디어방송에서 비실시간 스테레오스코픽 서비스을 수행하는 방법 및 지상파 디지털멀티미디어방송 수신 장치가 개시된다. 지상파 디지털멀티미디어방송 수신 장치는 지상파 DMB 서비스에서 부가 데이터는 미리 비휘발성 저장장치에 저장해 두었다가, 실시간으로 전송되는 기준 데이터를 동기화하여 함께 처리함으로써 스테레오스코픽 서비스를 수행할 수 있다. 본 발명에 의하면, 추가적인 전송률을 요구하지 않고도 스테레오스코픽 서비스를 수행할 수 있다.
Description
본 발명은 지상파 디지털멀티미디어 방송 서비스에 관한 것으로, 비실시간으로 전송되는 기준 데이터와 부가 데이터를 이용하여 스테레오스코픽 서비스를 수행하는 방법 및 장치에 관한 것이다.
본 발명은 방송통신위원회의 IT원천기술개발사업의 일환으로 수행한 연구로부터 도출된 것이다[과제관리번호: 2008-F-011-01, 과제명: 차세대 DTV 핵심기술 개발(표준화연계)-무안경 개인형 3D 방송기술개발(계속)].
좌우 양안 시점의 비디오 데이터를 이용하는 스테레오스코픽 비디오 서비스는 입체적인 영상을 제공하여 시청자에게 실감을 증가시킬 수 있다. 현재, 스테레오스코픽 비디오 서비스는 지상파 DMB에 적용되려고 시도 중에 있다. 이 때, 스테레오스코픽 비디오 서비스는 시청자에게 좌안 영상과 우안 영상을 모두 제공해야 하므로, 모노스코픽 서비스에 비해 최대 2배의 데이터를 전송할 필요가 있다. 이로 인해, 데이터 전송률에 제한이 있기 때문에, 지상파 DMB에 스테레오스코픽 비디오 서비스를 제공하는 것은 어려움이 있다. 스테레오스코픽 서비스를 위해 부가 데이터와 기준 데이터를 함께 다중화하여 전송하는 서비스를 "실시간" 스테레오스코픽 서비스라고 정의된다.
그러나, 부가 데이터와 기준 데이터를 함께 송신하는 것은 데이터 전송률의 제한을 받기 때문에, 이러한 제한을 극복하여 지상파 DMB 수신 장치에서도 스테레오스코픽 서비스를 수행할 수 있는 방법이 요구된다.
본 발명은 지상파 디지털멀티미디어방송 비실시간 스테레오스코픽 서비스를 위한 장치 및 방법을 제공한다.
본 발명은 스테레오스코픽 서비스를 위한 부가 데이터를 먼저 다운로드하여저장하고 있다가 실시간으로 전송되는 기준 데이터를 부가 데이터와 함께 처리함으로써, 데이터 전송률의 제한을 극복할 수 있는 장치 및 방법을 제공한다.
본 발명은 비실시간으로 송신되는 기준 데이터와 부가 데이터 간의 동기화를 수행함으로써, 스테레오스코픽 데이터의 화질 열화를 방지할 수 있는 장치 및 방법을 제공한다.
본 발명의 일실시예에 따른 방송 수신 장치가 수행하는 스테레오스코픽 서비스 수행 방법은 MPEG-2 TS에 포함된 프로그램 연관 테이블(PAT)에서 사용자가 선택한 프로그램에 대응하는 프로그램 맵 테이블(PMT)를 추출하는 단계, 상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자 중 스테레오스코픽 서비스 서술자(SS_descriptor)에 정의된 정보를 분석하는 단계, 상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자에 기초하여 상기 MPEG-2 TS에 포함된 기준 비디오를 추출하는 단계, 상기 분석한 정보를 이용하여 상기 방송 수신 장치에 미리 저장된 부가 비디오를 추출하는 단계 및 상기 분석한 정보를 이용하여 스테레오스코픽 비디오가 시작되는 시점부터 상기 추출된 기준 비디오 및 부가 비디오를 동기화하여 디스플레이하는 단계를 포함할 수 있다.
본 발명의 일실시예에 따른 상기 스테레오스코픽 서비스 서술자에 정의된 정보를 분석하는 단계는, 스테레오스코픽 서비스의 종류를 정의하는 서비스 타입(Service Type)을 분석하는 단계, 상기 부가 비디오를 추출할 파일명을 정의한 컨텐츠 네임(ContentName)을 분석하는 단계 및 상기 기준 비디오 및 부가 비디오 간의 동기화를 위한 시작 위치를 나타내는 마커(NRT_marker)를 분석하는 단계를 포함할 수 있다.
본 발명의 다른 실시예에 따른 방송 수신 장치가 수행하는 스테레오스코픽 서비스의 수행 방법은 MPEG-2 TS에 포함된 프로그램 연관 테이블(PAT)에서 사용자가 선택한 프로그램에 대응하는 프로그램 맵 테이블(PMT)를 추출하는 단계, 상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자 중 스테레오스코픽 서비스 서술자(SS_descriptor)에 정의된 정보를 분석하는 단계, 상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자에 기초하여 상기 MPEG-2 TS에 포함된 기준 이미지를 추출하는 단계, 상기 분석한 정보를 이용하여 상기 방송 수신 장치에 미리 저장된 부가 이미지를 추출하는 단계 및 상기 추출된 기준 이미지 및 부가 이미지를 동기화하여 디스플레이하는 단계를 포함할 수 있다.
본 발명의 다른 실시예에 따른 상기 스테레오스코픽 서비스 서술자에 정의된 정보를 분석하는 단계는, 스테레오스코픽 서비스의 종류를 정의하는 서비스 타입(Service Type)을 분석하는 단계, 상기 부가 이미지를 추출할 파일명을 정의한 이미지 네임(ImageName)을 분석하는 단계 및 상기 이미지 네임을 상기 부가 이미지를 추출할 파일명으로 정의하기 위한 스테레오스코픽 서비스 이미지 식별자(SS_image_PID)를 분석하는 단계를 포함할 수 있다.
본 발명의 또 다른 실시예에 따른 방송 수신 장치가 수행하는 스테레오스코픽 서비스 수행 방법은 컨텐츠를 전송하는 MPEG-2 TS에 포함된 프로그램 연관 테이블(PAT)에서 사용자가 선택한 프로그램에 대응하는 프로그램 맵 테이블(PMT)을 추출하는 단계 -상기 컨텐츠는 상기 MPEG-2 TS를 통해 좌영상과 우영상을 기준 비디오로서 번갈아가며 미리 설정된 기간동안 반복적으로 전송됨-, 상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자 중 스테레오스코픽 서비스 서술자(SS_descriptor)에 정의된 정보를 분석하는 단계, 상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자에 기초하여 상기 MPEG-2 TS에 포함된 기준 비디오를 추출하는 단계, 상기 기준 비디오에 대응하는 부가 영상이 상기 방송 수신 장치에 저장되어 있는 지 판단하는 단계, 상기 부가 영상이 방송 수신 장치에 포함된 경우, 상기 기준 영상과 상기 부가 영상을 스테레오스코픽하게 디스플레이하는 단계 및 상기 부가 영상이 상기 방송 수신 장치에 저장되어 있지 않는 경우, 상기 기준 영상을 모노스코픽하게 디스플레이하고, 상기 기준 영상을 상기 방송 수신 장치에 저장하는 단계를 포함할 수 있다.
본 발명의 또 다른 실시예에 따른 상기 스테레오스코픽 서비스 서술자에 정의된 정보를 분석하는 단계는 스테레오스코픽 서비스의 종류를 정의하는 서비스 타입(Service Type)을 분석하는 단계, 상기 부가 비디오를 읽을 파일명과 상기 기준 비디오를 저장할 파일명을 정의한 컨텐츠 네임(ContentName)을 분석하는 단계, 상기 기준 비디오 및 부가 비디오 간의 동기화를 위한 시작 위치를 나타내는 마커(NRT_marker)를 분석하는 단계 및 상기 기준 비디오를 저장할 파일에 대한 파일 사이즈(file size) 및 보존 기한(expire date)를 분석하는 단계를 포함할 수 있다.
본 발명의 일실시예에 따른 스테레오스코픽 서비스 수행 방법을 처리하는 방송 수신 장치는 MPEG-2 TS에 포함된 프로그램 연관 테이블(PAT)에서 사용자가 선택한 프로그램에 대응하는 프로그램 맵 테이블(PMT)를 추출하는 단계, 상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자 중 스테레오스코픽 서비스 서술자(SS_descriptor)에 정의된 정보를 분석하는 단계, 상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자에 기초하여 상기 MPEG-2 TS에 포함된 기준 비디오를 추출하는 단계, 상기 분석한 정보를 이용하여 상기 방송 수신 장치에 미리 저장된 부가 비디오를 추출하는 단계 및 상기 분석한 정보를 이용하여 스테레오스코픽 비디오가 시작되는 시점부터 상기 추출된 기준 비디오 및 부가 비디오를 동기화하여 디스플레이하는 단계를 수행할 수 있다.
본 발명의 다른 실시예에 따른 스테레오스코픽 서비스 수행 방법을 처리하는 방송 수신 장치는 MPEG-2 TS에 포함된 프로그램 연관 테이블(PAT)에서 사용자가 선택한 프로그램에 대응하는 프로그램 맵 테이블(PMT)를 추출하는 단계, 상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자 중 스테레오스코픽 서비스 서술자(SS_descriptor)에 정의된 정보를 분석하는 단계, 상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자에 기초하여 상기 MPEG-2 TS에 포함된 기준 이미지를 추출하는 단계, 상기 분석한 정보를 이용하여 상기 방송 수신 장치에 미리 저장된 부가 이미지를 추출하는 단계 및 상기 추출된 기준 이미지 및 부가 이미지를 동기화하여 디스플레이하는 단계를 수행할 수 있다.
본 발명의 또 다른 실시예에 따른 스테레오스코픽 서비스 수행 방법을 처리하는 방송 수신 장치는 컨텐츠를 전송하는 MPEG-2 TS에 포함된 프로그램 연관 테이블(PAT)에서 사용자가 선택한 프로그램에 대응하는 프로그램 맵 테이블(PMT)를 추출하는 단계 -상기 컨텐츠는 상기 MPEG-2 TS를 통해 좌영상과 우영상을 기준 비디오로서 번갈아가며 미리 설정된 기간동안 반복적으로 전송됨-, 상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자 중 스테레오스코픽 서비스 서술자(SS_descriptor)에 정의된 정보를 분석하는 단계, 상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자에 기초하여 상기 MPEG-2 TS에 포함된 기준 비디오를 추출하는 단계, 상기 기준 비디오에 대응하는 부가 영상이 상기 방송 수신 장치에 저장되어 있는 지 판단하는 단계, 상기 부가 영상이 방송 수신 장치에 포함된 경우, 상기 기준 영상과 상기 부가 영상을 스테레오스코픽하게 디스플레이하는 단계 및 상기 부가 영상이 상기 방송 수신 장치에 저장되어 있지 않는 경우, 상기 기준 영상을 모노스코픽하게 디스플레이하고, 상기 기준 영상을 상기 방송 수신 장치에 저장하는 단계를 포함할 수 있다.
본 발명의 일실시예에 따르면, 지상파 디지털멀티미디어방송 비실시간 스테레오스코픽 서비스를 수행할 수 있다.
본 발명의 일실시예에 따르면, 스테레오스코픽 서비스를 위한 부가 데이터를 먼저 다운로드하여 저장하고 있다가 실시간으로 전송되는 기준 데이터를 부가 데이터와 함께 처리함으로써, 데이터 전송률의 제한을 극복할 수 있다.
본 발명의 일실시예에 따르면, 비실시간으로 송신되는 부가 데이터와 기준 데이터 간의 동기화를 수행함으로써, 스테레오스코픽 데이터의 화질 열화를 방지할 수 있다.
도 1은 본 발명의 일실시예에 따른 비실시간 지상파 DMB 스테레오스코픽 서비스를 수행하는 과정을 도시한 도면이다.
도 2는 본 발명의 일실시예에 따른 비실시간 MOT/스트림 모드 스테레오스코픽 비디오 서비스를 위한 컨텐츠 접근 과정을 도시한 도면이다.
도 3은 본 발명의 일실시예에 따른 비실시간 MOT/스트림 모드 비디오 연동형 스테레오스코픽 데이터 서비스를 위한 컨텐츠 접근 과정을 도시한 도면이다.
도 4는 본 발명의 일실시예에 따른 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스를 위한 컨텐츠 접근 과정을 도시한 도면이다.
도 5는 본 발명의 일실시예에 따른 스테레오스코픽 영상의 기본 포맷과 선택사항 포맷을 도시한 도면이다.
도 6은 본 발명의 일실시예에 따른 스테레오스코픽 영상을 재생하는 과정을 도시한 도면이다.
도 7은 본 발명의 일실시예에 따른 지상파 DMB 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스를 수행하는 일례를 도시한 도면이다.
도 2는 본 발명의 일실시예에 따른 비실시간 MOT/스트림 모드 스테레오스코픽 비디오 서비스를 위한 컨텐츠 접근 과정을 도시한 도면이다.
도 3은 본 발명의 일실시예에 따른 비실시간 MOT/스트림 모드 비디오 연동형 스테레오스코픽 데이터 서비스를 위한 컨텐츠 접근 과정을 도시한 도면이다.
도 4는 본 발명의 일실시예에 따른 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스를 위한 컨텐츠 접근 과정을 도시한 도면이다.
도 5는 본 발명의 일실시예에 따른 스테레오스코픽 영상의 기본 포맷과 선택사항 포맷을 도시한 도면이다.
도 6은 본 발명의 일실시예에 따른 스테레오스코픽 영상을 재생하는 과정을 도시한 도면이다.
도 7은 본 발명의 일실시예에 따른 지상파 DMB 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스를 수행하는 일례를 도시한 도면이다.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
본 발명에서 언급되는 용어는 아래와 같이 정의된다.
(1) 스테레오스코픽(Stereoscopic)
인간의 좌우 양안 시점(view)의 데이터를 이용하여 사용자가 입체감을 느끼게하는 특성이며, 3D와 동일한 의미이다.
(2) 모노스코픽 (Monoscopic)
인간의 단일 시점(view)의 데이터를 이용하여 사용자가 입체감을 느끼지 못하는 특성이며, 2D와 동일한 의미이다.
(3) 지상파 DMB(Digital Mulitmedia Broadcasting) 비실시간 스테레오스코픽 서비스
종래의 지상파 DMB의 모노스코픽 서비스와 호환적으로 스테레오스코픽 비디오 또는 비디오 연동형 데이터 서비스를 제공하되 스테레오스코픽 표출을 위해 추가적으로 필요한 데이터를 비실시간적인 방법으로 전송하는 서비스이다.
(4) 지상파 DMB 비실시간 스테레오스코픽 비디오 서비스
지상파 DMB 서비스에서 비실시간으로 비디오를 전송하여 스테레오스코픽한비디오를 제공하는 서비스이다.
(5) 지상파 DMB 비실시간 비디오 연동형 데이터 서비스
지상파 DMB 서비스에서 비실시간으로 정지영상(이미지)을 전송하여 모노스코픽 비디오와 연동하여 스테레오스코픽한 이미지를 제공하는 서비스이다.
(6) 지상파 DMB 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스
지상파 DMB 서비스에서 광고 컨텐츠와 같이 미리 설정한 기간동안 비실시간으로 반복적으로 전송하여 스테레오스코픽한비디오를 제공하는 서비스이다.
(7) 지상파 DMB 비실시간 MOT/스트림 모드 스테레오스코픽 (비디오, 데이터) 서비스
스테레오스코픽 비디오 또는 데이터를 표시하기 위한 부가 데이터를 MOT 프로토콜을 통해 지상파 DMB 수신 장치에 미리 전송하여 비휘발성 저장 장치에 저장해 두었다가, 부가 데이터에 대응하는 기준 데이터인 모노스코픽 비디오 또는 모노스코픽 데이터가 실시간으로 수신될 때, 비휘발성 저장 장치에 저장된 부가 데이터와 기준 데이터를 함께 처리하여 스테레오스코픽 비디오 또는 데이터를 표시하는 서비스이다.
(8) 지상파 DMB 비실시간 MOT/스트림 모드 비디오 연동형 스테레오스코픽 데이터 서비스
지상파 DMB 서비스에서 모노스코픽 비디오 서비스와 연동하여 스테레오스코픽 데이터 서비스를 제공하는 서비스이다.
(9) 지상파 DMB 스테레오스코픽 서비스 수신 장치
지상파 DMB 신호를 수신하여 사용자에게 스테레오스코픽 서비스를 제공하는 장치이다.
(10) 렌티큘러 렌즈 방식
스크린을 중심으로 180 도의 시야각을 제공할 수 있도록 영상을 확산시키는렌티큘러(lenticular) 렌즈를 세로로 배열시킨 렌티큘러 스크린을 통하여 좌, 우 영상을 굴절시켜 인간의 양 눈으로 서로 다른 영상을 보내는 디스플레이 방식이다.
(11) 기준 영상
스테레오스코픽 영상에서 종래의 지상파 DMB 수신 장치가 호환적으로 인식하여 재생하는 영상 또는 스테레오스코픽 모드에서 모노스코픽 모드로 시청모드 전환 시 재생되는 영상을 의미한다. 이 때, 동영상의 경우, “기준 동영상” 또는 “기준 비디오”, 정지영상의 경우 “기준 정지영상” 또는 “기준 이미지”로 지칭될 수 있다.
(12) 부가 영상
스테레오스코픽 영상에서 기준 영상이 아닌 다른 시점의 영상을 의미한다. 부가 영상은 지상파 DMB 수신 장치에서 기준 영상과 함께 스테레오스코픽으로 재생하기 위하여 사용되며, 종래의 지상파 DMB 수신 장치에서는 인식되지 못하고 무시될 수 있다. 이 때, 동영상의 경우, “부가 동영상” 또는 “부가 비디오”, 정지영상의 경우 “부가 정지영상” 또는 “부가 이미지”로 지칭될 수 있다.
그리고, 본 발명의 일실시예에서 사용되는 용어의 약어는 아래 표 1과 같다.
도 1은 본 발명의 일실시예에 따른 비실시간 지상파 DMB 스테레오스코픽 서비스를 수행하는 과정을 도시한 도면이다.
도 1의 지상파 DMB 송신 장치(100)는 지상파 DMB 서비스를 위해 실시간으로 데이터를 지상파 DMB 수신 장치(101)에 전송할 수 있다. 이 때, 본 발명의 일실시예에 따르면, 지상파 DMB 수신 장치(101)는 사용자에게 스테레오스코픽 서비스를 제공할 수 있다. 좌우 영상을 이용하는 스테레오스코픽 서비스는 입체적인 영상을 제공함으로써, 사용자에게 실감을 향상시킬 수 있다. 이와 같은 스테레오스코픽 서비스는 좌안 영상과 우안 영상을 모두 전송하여야 하기 때문에, 모노스코픽 서비스에 비해 최대 2배까지 많은 정보량을 전송할 필요가 있다.
따라서, 본 발명의 일실시예에 따른 지상파 DMB 송신 장치(100)는 스테레오스코픽 서비스를 위한 부가 영상을 기준 영상과 함께 다중화하여 전송하지 않고, 다른 방법에 의해 전송하여 미리 지상파 DMB 수신 장치(101)의 메모리와 같은 비휘발성 저장 장치에 저장한다. 그러면, 지상파 DMB 수신 장치(101)는 이후 지상파 DMB 송신 장치(101)로부터 실시간으로 전송되는 기준 영상과 미리 저장하고 있는 부가 영상을 함께 처리하여 사용자에게 스테레오스코픽 서비스를 제공할 수 있다.
본 발명의 일실시예에 따르면, 지상파 DMB 수신 장치(101)가 지상파 DMB 송신 장치(100)로부터 부가 영상을 비실시간으로 획득하는 방법은 다음과 같이 여러 가지가 존재할 수 있다.
(ⅰ) MOT(multimedia object transfer) 프로토콜을 이용하여 부가 영상을 파일 형태로 지상파 DMB 수신 장치(101)에 다운로드하는 방법
(ⅱ) 부가 영상을 파일 형태로 초고속 유선 인터넷을 통해 다운로드 받고, 부가 영상을 휴대형 저장 장치에 담아 지상파 DMB 수신 장치(101)에 미리 옮겨두는 방법
(ⅲ) 지상파 DMB 수신 장치(101)가 휴대 인터넷을 지원하는 경우, 부가 영상을 파일 형태로 휴대 인터넷을 통해 미리 다운로드하는 방법
(ⅳ) 광고와 같이 일정 기간 동안 반복하여 송출되는 컨텐츠의 경우, 지상파 DMB 송신 장치(100)가 좌영상과 우영상을 번갈아 가며 기준 영상을 전송하고, 지상파 DMB 수신 장치(101)가 번갈아 가면서 전송되는 좌영상과 우영상을 비휘발성 저장 장치에 저장해 두었다가, 다음에 동일 컨텐츠가 방송될 때 저장된 영상을 함께 처리하여 스테레오스코픽하게 디스플레이하는 방법. 즉, 좌영상이 기준 영상으로서 실시간으로 전송되면, 지상파 DMB 수신 장치(101)에 미리 저장된 우영상을 부가 영상으로 활용하고, 우영상이 기준 영상으로서 실시간으로 전송되면, 지상파 DMB 수신 장치(101)에 미리 저장된 부가 영상으로 활용하는 방법. (ⅳ) 방법에 따르면, 좌영상 또는 우영상이 지상파 DMB 수신 장치(101)에 미리 저장되어 있지 않는 경우, 지상파 DMB 송신 장치(100)로부터 최초로 전송되는 좌영상 또는 우영상은 모노스코픽하게 디스플레이된다. (ⅳ) 방법의 경우 부가 영상을 전송하기 위한 추가적인 전송률이 요구되지 않지만, 반복적인 컨텐츠에만 적용될 수 있다.
본 발명의 일실시예에 따르면, 스테레오스코픽 비디오 서비스를 위해 부가 비디오를 MOT 프로토콜을 이용하여 미리 지상파 DMB 수신 장치(101)로 다운로드 하는 방법을 이용한 비실시간 스테레오스코픽 서비스가 제공될 수 있다. 이하에서는, 이와 같은 서비스를 “지상파 DMB 비실시간 MOT/스트림 모드 스테레오스코픽 비디오 서비스”라고 지칭하기로 한다.
그리고, 본 발명의 다른 실시예에 따르면, 스테레오스코픽 BIFS 데이터 서비스를 위해 부가 이미지를 MOT 프로토콜을 이용해 미리 지상파 DMB 수신 장치(101)로 다운로드 하는 방법을 이용한 비실시간 스테레오스코픽 서비스가 제공될 수 있다. 이하에서는, 이와 같은 서비스를 “지상파 DMB 비실시간 MOT/스트림 모드 비디오 연동형 스테레오스코픽 데이터 서비스”라고 지칭하기로 한다.
또한, 본 발명의 또 다른 실시예에 따르면, 반복 컨텐츠의 경우, 별도의 부가 비디오를 전송함이 없이 스테레오스코픽 비디오 서비스를 제공할 수 있는 비실시간 스테레오스코픽 비디오 서비스가 제공될 수 있다. 이하에서는, 이와 같은 서비스를 “지상파 DMB 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스”라고 지칭하기로 한다.
본 발명의 일실시예에 따른 지상파 DMB 비실시간 스테레오스코픽 서비스는 종래의 모노스코픽 서비스와 공간적 또는 시간적으로 혼용 가능하다. 구체적으로, 스테레오스코픽 비디오 서비스에서 “시간적 혼용”은 모노스코픽 비디오 서비스 구간에 이어 스테레오스코픽 비디오 서비스 구간이 이어지고, 다시 모노스코픽 비디오 서비스 구간이 이어져 제공되는 것을 의미한다.
그리고, 스테레오스코픽 BIFS 데이터 서비스에 있어 ‘공간적 혼용’은 모노스코픽 비디오 상에 BIFS를 이용하여 오버레이되는 텍스트, 그래픽, 이미지 들 중 일부 이미지만을 스테레오스코픽 정지영상으로 디스플레이하게 하는 것을 의미하며, ‘시간적 혼용’은 방송시간대 별로 모노스코픽 BIFS 데이터만 서비스되는 구간에 이어서 스테레오스코픽 BIFS 데이터가 함께 서비스되는 구간이 나오고 다시 모노스코픽 BIFS 데이터만 서비스되는 구간으로 되돌아 가는 형태가 프로그램 전체에서 일 회 이상 반복하여 서비스되는 것을 의미한다.
비실시간 스테레오스코픽 비디오 서비스의 경우, 기준 비디오와 부가 비디오 간의 프레임 수준의 동기화가 요구된다. 본 발명의 일실시 예에 따른 비실기간 스테레오스코픽 비디오 서비스의 경우, 스테레오스코픽 비디오의 지속 구간의 길이는 비휘발성 저장 장치에 저장되어 있는 부가 비디오 파일의 특성에 의존한다. 즉, 부가 비디오의 프레임 수가 기준 비디오의 프레임 수 보다 작다면, 부가 비디오의 마지막 프레임까지만 스테레오스코픽하게 디스플레이된다. 또 부가 비디오가 압축된 형태로 저장되어 있고, 첫 프레임이 IDR(Instantaneous Decoding Refresh) 픽처가 아닌 경우, 부가 비디오의 첫 프레임은 복호화가 될 수 없다면 부가 비디오의 첫 IDR 프레임부터 스테레오스코픽하게 디스플레이된다.
본 발명의 일실시예에 따른 지상파 DMB 비실시간 스테레오스코픽 서비스의 요구 사항은 다음과 같다.
<지상파 DMB 비실시간 스테레오스코픽 서비스 요구사항>
1. 일반 요구사항
지상파 DMB 비실시간 스테레오스코픽 서비스는 "지상파 디지털멀티미디어방송(DMB) 송수신 정합표준”을 기반으로 한다.
지상파 DMB 비실시간 스테레오스코픽 서비스에서, 부가 영상은 기준 영상과 함께 다중화되어 동일한 서브채널로 지상파 DMB 수신 장치(101)에 실시간 송수신되지 않으며, 부가 영상은 지상파 DMB 수신 장치(101) 내에 탑재된 비휘발성 저장장치로부터 획득된다.
그리고, 본 발명의 일실시예에 따른 지상파 DMB 비실시간 스테레오스코픽 서비스는 종래의 지상파 DMB 수신 장치와 호환성이 보장된다. 이 때, 종래의 지상파 DMB 수신 장치는 모노스코픽 서비스를 제공하는 지상파 DMB 수신 장치 또는 "디지털멀티미디어방송(DMB) 비디오 연동형 스테레오스코픽 데이터 서비스” 표준에 의한 실시간 스테레오스코픽 데이터 서비스를 추가로 지원할 수 있는 지상파 DMB 수신 장치를 의미한다.
2. 서비스 요구사항
(1) 수신성능
지상파 DMB 수신 장치(101)는 "지상파 디지털멀티미디어방송(DMB) 비디오 송수신 정합” 표준에서 정의한 수신성능 요구사항을 준수한다.
(2) 서비스
스테레오스코픽 비디오 서비스의 경우, 지상파 DMB 수신 장치(101)는 비디오를 스테레오스코픽하게 제공한다. 그리고, 스테레오스코픽 비디오 연동형 데이터 서비스의 경우, 지상파 DMB 수신 장치(101)는 BIFS 데이터 서비스를 통해 제공되는 그래픽, 텍스트 또는 이미지 중 일부 또는 모든 이미지를 스테레오스코픽하게 제공한다.
(3) 형식
지상파 DMB 수신 장치(101)는 "지상파 디지털멀티미디어방송(DMB) 비디오 송수신 정합” 표준에서 정의한 비디오 형식과 보조데이터 형식을 지원한다. 지상파 DMB 수신 장치(101)는 패럴랙스 배리어 방식 또는 렌티큘러 렌즈 방식과 같이 영상 수평해상도의 1/2에 해당하는 데이터만 활용하는 디스플레이 방식을 대상으로 최적화된 형식도 추가로 지원할 수 있다.
(4) 호환성
스테레오스코픽 서비스 제공 시 종래의 모노스코픽 지상파 DMB 수신 장치에서 화질 열화 없이 모노스코픽하게 재생할 수 있다. 지상파 DMB 수신 장치(101)는 종래의 모노스코픽 서비스를 수신하여 재생할 수 있다. 그리고, 본 발명의 일실시예에 따른 지상파 DMB 비실시간 스테레오스코픽 서비스는종래의 지상파 DMB 수신 장치와의 상호운용성을 최대한 보장하여야 한다.
3. 스테레오스코픽 영상의 전송, 다중화 및 시그널링
지상파 DMB 수신 장치(101)는 "지상파 디지털멀티미디어방송(DMB) 비디오 송수신 정합" 표준 및 "디지털멀티미디어방송(DMB) 비디오 연동형 스테레오스코픽 데이터 서비스"에서 규정한 전송 메커니즘 및 서비스 전송, 다중화 방식을 따르되 다음의 추가 규정이 적용된다.
(1) 스테레오스코픽 객체 타입
스테레오스코픽 영상의 객체 타입(ObjectTypeIndication)은 "지상파 디지털멀티미디어방송(DMB) 비디오 송수신 정합" 표준 및 "디지털멀티미디어방송(DMB) 비디오 연동형 스테레오스코픽 데이터 서비스"에 정의된 비디오 타입 및 보조 데이터 타입을 따른다. 일례로, 기준 비디오 및 부가 비디오의 ObjectTypeIndication은 "지상파 디지털멀티미디어방송(DMB) 비디오 송수신 정합" 표준에 정의된 Visual ISO/IEC 14496-10(0x21)로 한다. 그리고, 기준 이미지 및 부가 이미지의 ObjectTypeIndication은 디지털멀티미디어방송(DMB) 비디오 연동형 스테레오스코픽 데이터 서비스" 표준을 따른다.
부가 이미지에 대한 압축 부호화 방식은 기준 이미지에 대한 압축 부호화 방식과 동일하며, 부가 이미지의 ObjectTypeIndication도 기준 이미지의 ObjectTypeIndication과 동일하다. 다만, 디지털멀티미디어방송(DMB) 비디오 연동형 스테레오스코픽 데이터 서비스" 표준에서는, 부가 이미지의 ObjectTypeIndication는 기준 이미지의 ObjectTypeIndication과 다를 수 있다.
(2) 스테레오스코픽 서비스 시그널링
본 발명의 일실시예에 따르면, 종래의 지상파 DMB 수신 장치와의 상호운용성을 극대화하기 위해, 비실시간 스테레오스코픽 서비스를 위한 시그널링은 MPEG-2 TS 계층의 프로그램 지정 정보(PSI)중 하나인 PMT 내로 제한될 수 있다.
스테레오스코픽 서비스는 스테레오스코픽 전용 또는 종래의 모노스코픽 서비스와 시간적 혼용 형태로 제공될 수 있다. 이를 위해, 본 발명의 일실시예에 따르면, PMT 내에 스테레오스코픽 서비스 서술자(StereoscopicService_descriptor: SS_descriptor)를 추가로 정의하여 비실시간 스테레오스코픽 서비스를 시그널링할 수 있다.
SS_descriptor는 PMT 내 program_info_length 직후에 나오는 descriptor loop에 포함되며, 아래와 같은 정보를 제공할 수 있다. SS_descriptor는 "디지털멀티미디어방송(DMB) 비디오 연동형 스테레오스코픽 데이터 서비스" 표준에 정의된 SDS_descriptor를 호환적으로 확장한 것으로서, 동일한 descriptor_tag를 사용한다.
(ⅰ) 모노스코픽 서비스 구간과 스테레오스코픽 서비스 구간의 구분
(ⅱ) 스테레오스코픽 서비스의 종류
(ⅲ) 스테레오스코픽 데이터의 구성 포맷
(ⅳ) 기준 영상이 좌영상인지 또는 우영상인지에 대한 정보
(ⅴ) 비실시간 MOT/스트림 모드 스테레오스코픽 비디오 서비스 또는 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스인 경우, 좌우영상 동기화 시작 위치 정보
(ⅵ) 비실시간 MOT/스트림 모드 스테레오스코픽 비디오 서비스인 경우, 부가 비디오 파일명
(ⅶ) 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스인 경우, 부가 비디오 파일명을 구성하기 위한 정보. 이 정보는 기준 비디오를 다음 회에 컨텐츠가 반복할 때 사용될 부가 비디오로 저장할 파일명을 구성하기 위한 정보도 될 수 있다.
(ⅷ) 저장할 파일을 플래시 메모리에 보존할 기한
(ⅸ) 플래시 메모리에 파일을 저장할 때 필요한 최소한의 플래시 메모리 공간에 대한 권고값
(ⅹ) 비실시간 MOT/스트림 모드 비디오 연동형 스테레오스코픽 데이터 서비스인 경우, 부가 이미지 파일들의 파일명
본 발명의 일실시예에 따르면, SS_descriptor의 문법은 아래 표 2와 같다.
StereoMono_serviceFlag: 스테레오스코픽 서비스 경우 ‘1’, 종래의 모노스코픽 지상파 DMB 서비스 경우 ‘0’을 사용한다. 스테레오스코픽 서비스를 위한 지상파 DMB 수신 장치(101)는 StereoMono_serviceFlag의 값에 따라 스테레오스코픽 디스플레이를 자동으로 on/off 할 수 있다.
ServiceType: 아래 표 3과 같이 스테레오스코픽 서비스의 종류를 나타낸다. 단, ‘ServiceType=111’은 향후 신택스 확장을 위한 값이다.
CompositionType: 아래 표 4와 같이 수신되는 스테레오스코픽 데이터의 구성 타입을 나타낸다. 단, ServiceType이 010인 경우, ‘CompositionType=001’로 설정될 수 있다.
LR_first: 기준 영상이 좌영상인 경우 ‘1’, 우영상인 경우 ‘0’을 사용한다. 이 때, 기준 영상은 지상파 DMB 서비스를 위해 다중화된 스트림 내에 실시간으로 전송되는 영상 데이터이다.
NRT_marker: 아래 표 5와 같이 좌우영상의 동기화를 위한 시작 위치를 알려준다.
ContetNameLength: ContentName의 길이를 바이트 단위로 나타낸다.
ContetName: 아래의 규칙에 따라 필요한 비디오 파일명을 구성하기 위한 정보를 나타낸다.
-지상파 DMB 비실시간 MOT/스트림 모드 스테레오스코픽 서비스의 경우, ContetName은 지상파 DMB 수신 장치(101)의 플래시 메모리에 저장된 부가 비디오 ES를 포함하고 있는 파일명으로 지정된다.
-지상파 DMB 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스의 경우, ContetName은 지상파 DMB 수신 장치(101)의 플래시 메모리에 저장된 부가 비디오 ES를 포함하고 있는 파일을 지정할 때 활용될 수 있다. 또한, 기준 비디오 ES를 지상파 DMB 수신 장치(101)의 플래시 메모리에 파일로 저장할 때도 활용될 수 있다. 지상파 DMB 수신 장치(101)의 플래시 메모리로부터 부가 비디오 ES를 읽어올 때, 부가 비디오가 좌영상이면 “L_”, 우영상이면 “R_”을 접두어로 ContentNameString과 합성된 결과가 읽어 올 파일명이 된다. 지상파 DMB 수신 장치(101)의 플래시 메모리에 기준 비디오 ES를 저장할 때도 기준 비디오가 좌영상이면 “L_”, 우영상이면 “R_”을 접두어로 URL과 합성된 결과가 저장할 파일명이 된다.
동일 플래시 메모리 공간에 저장된 파일들을 유일무이하게 구분하기 위하여 ContentNameString은 CRID와 같이 유일무이한 이름으로 설정될 수 있다.
ExpireDate: 지상파 DMB 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스의 경우, 플래시 메모리에 파일로 저장할 ES에 대해 지상파 DMB 송신 장치(100)에서 권고하는 보존 기한을 나타낸다. 실제 값은 보존 기한의 마지막 날을 나타낸다. 일례로, 단위는 2 일이며, 1월 1일부터 누적일수로 표시될 수 있다. 오늘에 해당하는 누적일보다 작은 값이면, ExpireDate는 내년 1월 1일부터의 누적일수를 나타낸다. 그리고, ExpireDate의 값이 ‘0’이면, 보존 기한을 알 수 없음을 나타낸다.
FileSize: 지상파 DMB 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스의 경우, 지상파 DMB 수신 장치(101)의 플래시 메모리에 파일로 저장할 ES에 대해 지상파 DMB 송신 장치(100)에서 권고하는 필요한 최소 메모리 용량이다. 일례로, 단위는 1 Mbyte가 될 수 있으며, 장치의 특성에 따라 변경될 수 있다. FileSize의 값이 ‘0’이면 필요 용량에 대한 정보가 없음을 의미한다. 최대 255 MByte까지 지정 가능하다.
SS_image_count: 지상파 DMB 비실시간 MOT/스트림 모드 비디오 연동형 스테레오스코픽 데이터 서비스의 경우, 기준 이미지의 개수를 나타낸다.
SS_image_PID: 지상파 DMB 비실시간 MOT/스트림 모드 비디오 연동형 스테레오스코픽 데이터 서비스의 경우, 기준 이미지를 실어나르는 TS 패킷의 PID를 나타낸다.
ImageNameLength: ImageName의 길이를 바이트 단위로 나타낸다.
ImageName: 지상파 DMB 비실시간 MOT/스트림 모드 비디오 연동형 스테레오스코픽 데이터 서비스의 경우, 플래시 메모리에 저장된 부가 이미지 파일명을 지정한다.
(3) 비실시간 스테레오스코픽 서비스를 위한 MPEG-4 OD 구조
본 발명에서 정의하는 비실시간 스테레오스코픽 서비스를 위한 MPEG-4 OD 구조는 종래의 2D 비디오 및/또는 2D BIFS 서비스의 경우와 동일할 수 있다. 즉 마치 기준 비디오 및/또는 기준 이미지만을 사용하여 종래의 2D 비디오 및/또는 2D BIFS를 서비스하는 것처럼 MPEG-4 OD 구조가 설정될 수 있다.
(4) 부가 영상을 위한 파일명
지상파 DMB 수신 장치(101)는 다음의 절차를 통해 비실시간 스테레오스코픽 서비스를 위해 필요한 파일의 이름을 결정할 수 있다.
(ⅰ) 지상파 DMB 비실시간 MOT/스트림 모드 스테레오스코픽 서비스의 경우, SS_descriptor 내의 ContentName이 플래시 메모리로부터 읽어들일 부가 비디오 ES를 포함하고 있는 파일 이름이다.
(ⅱ) 지상파 DMB 비실시간 MOT/스트림 모드 비디오 연동형 스테레오스코픽 데이터 서비스의 경우, 3D BIFS 서비스에 사용될 각 기준 이미지를 실어 나르는 TS 패킷의 PID와 상기 PID에 대응되는 부가 이미지 파일명을 SS_descriptor 내에 쌍으로 표시함으로써 지상파 DMB 수신 장치(101)의 플래시 메모리로부터 읽어들일 부가 이미지 파일명을 알려준다.
(ⅲ) 지상파 DMB 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스의 경우, SS_descriptor 내의 ContentName은 필요한 파일명의 일부를 구성한다.
(5) 부가 영상을 위한 파일 포맷
부가 비디오의 파일 포맷은 ISO/IEC 23000-9 DMB Application Format (DMB-AF)가 사용될 수 있고, 부가 이미지의 파일 포맷은 기준 이미지와 동일한 포맷인 JPEG, PNG, MNG가 사용될 수 있다.
DMB-AF는 MPEG-2 TS를 직접 포함할 수도 있고, 각 미디어 별 ES를 별개 스트림으로 저장할 수도 있다. 본 발명에서 사용되는 DMB-AF 파일은 부가 비디오 ES 외의 다른 미디어 ES(즉 오디오 ES나 다른 비디오 ES)를 포함하지 않는다.
(6) 부가 비디오 파일의 저장 기간 및 크기 정보 전달
지상파 DMB 송신 장치(100)가 부가 영상의 파일 저장 기간과 파일 크기에 대한 정보를 지상파 DMB 수신 장치(101)로 알려줄 필요가 있다. 부가 영상의 파일 저장 기간은 지상파 DMB 수신 장치(101)가 해당 파일을 플래시 메모리에 저장하고 있어야 할 기간을 의미하고, 파일 크기는 지상파 DMB 수신 장치(101)가 지상파 DMB 송신 장치(100)로부터 다운로드하여 저장할 때 확보하여야 하는 플래시 메모리 용량을 의미한다. 부가 영상의 파일 저장 기간과 크기는 지상파 DMB 수신 장치(101)가 플래시 메모리를 관리할 때 도움이 될 수 있다.
일례로, 지상파 DMB 비실시간 MOT/스트림 모드 스테레오스코픽 서비스의 경우, 부가 비디오의 파일 저장 기간과 파일 크기는 각기 MOT 헤더 코아의 BodySize와 MOT 헤더 확장 파라미터 중 Expiration에 의해 지정될 수 있다.
그리고, 지상파 DMB 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스의 경우, 부가 비디오의 파일 저장 기간과 파일 크기는 SS_descriptor 내의 ExpireDate와 FileSize에 의해 각기 전달된다. SS_descriptor 내의 ExpireDate와 FileSize은 실시간으로 전달되는 기준 비디오 ES를 지상파 DMB 수신 장치(101)의 플래시 메모리에 저장할 때 실제로 사용된다. 그러나, SS_descriptor 내의 ExpireDate와 FileSize은 지상파 DMB 수신 장치(101)의 부가 비디오 ES를 플래시 메모리로부터 읽어올 때 사용되지 않는다.
(7) 비실시간 스테레오스코픽 비디오 서비스에서의 좌우영상 동기화 방법
스테레오스코픽 서비스에 있어 좌우영상 동기화란 좌영상과 이에 대응되는 우영상을 동시에 스테레오스코픽 디스플레이로 입력하는 것을 의미한다. 비실시간 스테레오스코픽 비디오 서비스에서 기준 비디오는 실시간으로 전송되지만, 부가 비디오는 지상파 DMB 수신 장치(101)의 플래시 메모리로부터 읽어 와야 하므로, 좌우영상의 동기화 메커니즘이 필요하다.
ㄱ. 스테레오스코픽 비디오의 첫 프레임 위치 시그널링
SS_descriptor 내의 NRT_Marker 값에 의해 스테레오스코픽 비디오의 첫 프레임 위치가 시그널링될 수 있다. NRT_Marker는 좌우 영상의 첫 프레임을 쌍으로 구성하기 위해 필요한 기준 정보이다. 따라서, 시그널링 정보의 전송 위치 이후 지점에서 전원이 인가되거나, 채널 전환이 된 지상파 DMB 수신 장치(101)는 비록 스테레오스코픽 컨텐츠의 기준 비디오에 해당하는 스트림을 수신 중이라 하더라도 플래시 메모리에 저장되어 있는 부가 비디오 파일 내의 어느 부분을 읽어서 좌우영상 쌍을 맞출지 알 수 없으므로, 스테레오스코픽 컨텐츠를 모노스코픽하게 디스플레이할 수 밖에 없다. 따라서, 좌우영상의 동기화는 반드시 첫 프레임부터 이루어질 필요가 있다.
ㄴ. 스테레오스코픽 비디오의 첫 프레임이 아닌 좌우영상의 동기화
지상파 DMB 수신 장치(101)는 기준 비디오의 첫 액세스 단위(Access Unit: AU)의 구성 요소 타임 스탬프(Composition Time Stamp: CTS)를 부가 비디오의 CTS 값을 위한 오프셋 값으로 저장할 수 있다. 지상파 DMB 수신 장치(101)는 부가 비디오의 AU(또는 PU)를 읽을 때, CTS 값을 함께 읽을 수 있다. 첫 AU의 경우, 부가 비디오의 CTS는 0으로 설정되므로, 상기 저장해 둔 오프셋 값을 더하여 부가 비디오 AU의 CTS로 설정할 수 있다. 기준 비디오의 AU와 부가 비디오의 AU는 동일 시점에 디스플레이되어야 하는 데이터이므로, 상기 두 CTS 값을 이용하여 좌우영상의 쌍을 찾을 수 있다. 이상적으로는 한 쌍을 이루는 좌우영상의 두 CTS 값이 동일하여야 하나, 어떤 이유로든 약간 상이할 수도 있다. 따라서, 본 발명의 일실시예에 따른 지상파 DMB 수신 장치(101)는 두 CTS 값의 차이가 일정한 문턱값이하이면 한 쌍의 좌우영상으로 판단한다.
4. MOT/스트림 모드 비실시간 스테레오스코픽 서비스를 위한 MOT 카루젤
(1) 개요
비실시간 스테레오스코픽 서비스를 위한 부가 영상 파일들은 기준 영상이 실시간으로 방송되기 이전에 MOT 디렉토리 모드에 의해 MOT 카루젤로서 패킷 모드 서브채널을 통해 반복 전송된다. 부가 영상 파일들이 전송되는 서브채널을 “부가 영상 파일 채널”이라 부른다.
이러한 부가 영상 파일 전송을 담당하는 패킷 모드 서비스는 기준 영상이 전송되는 동일 앙상블 내에서 기준 영상이 실시간으로 전송될 지상파 DMB 비디오 서비스에 대한 2차 서비스 컴포넌트(secondary service component)로 지정될 수 있다.
부가 영상 파일을 전송하기 위한 애플리케이션은 FIG 0/13에 의해 시그널링될 수 있다. 부가 영상 파일전송 애플리케이션에 대한 User Application Type은 ETSI TS 101 756에 정의된다. 부가 영상 파일들은 부가 영상 파일 채널 내에 각기 MOT 객체(object)로서 전송되고, MOT 디렉토리 객체(directory object)는 MOT 객체들의 목록을 전달한다. 개별적으로 MOT 객체에 적용될 MOT 파라미터들은 MOT 디렉토리 내의 개별 항목인 MOT 헤더 정보 내에 전송된다. MOT 헤더 정보는 MOT 헤더 코아(header core)와 MOT 헤더 확장(header extension)으로 구성된다.
(2) MOT 헤더 코아
본 발명에서 사용되는 개별 객체에 대한 MOT 헤더 코아는 ETSI EN 301 234에 정의되어 있으며, 다음의 제한 사항이 적용될 수 있다.
ContentType - 부가 영상 파일이 비디오이면, ETSI TS 101 756에 기재된 바와 같이 부가 영상 파일의 content type은 video(000100)으로 설정되고, 부가 영상 파일이 이미지이면 부가 영상 파일의 content type은 image(000010)로 설정된다.
ContentSubType - 지상파 DMB 수신 장치(101)는 이 값을 무시한다.
(3) MOT 헤더 확장 파라미터
본 발명의 일실시예에서 사용되는 MOT 헤더 확장 파라미터는 아래 표 6과 같다.
CAReplacementObject 0x24 MOT 아니오 아니오 한 번
Expiration - 지상파 DMB 수신 장치(101)의 플래시 메모리에 파일을 보존할 기한. 지상파 DMB 송신 장치(101)에서 제공하지 않을 경우, 지상파 DMB 수신 장치(101)는 자신의 플래시 메모리 관리 정책에 의해 보존 기한을 정할 수 있다.
ContentName - 부가 영상 파일 이름. 지상파 DMB 수신 장치(101)에서 좌우영상의 쌍을 구성할 때, 이 파일 이름을 사용한다.
(4) MOT 디렉토리 확장 파라미터
본 발명의 일실시예에 따르면, 전체 카루젤을 위한 MOT 파라미터는 아래 표 7과 같다. 즉 DefaultExpiration만 사용된다.
이하에서는, 지상파 DMB 수신 장치(101)가 비실시간 MOT/스트림 모드 스테레오스코픽 비디오 서비스, 비실시간 MOT/스트림 모드 비디오 연동형스테레오스코픽 데이터 서비스, 및 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스를 수행하는 과정을 설명하기로 한다.
도 2는 본 발명의 일실시예에 따른 비실시간 MOT/스트림 모드 스테레오스코픽 비디오 서비스를 위한 컨텐츠 접근 과정을 도시한 도면이다.
이 때, 기준 비디오는 MPEG-2 TS를 통해 스트림 모드로 지상파 DMB 수신 장치(101)에 실시간 전송되고, 상기 부가 비디오는, 기준 비디오의 전송 전에 MOT(Motion Object Transfer) 프로토콜에 따른 MOT 카루젤(carousel)에 의해 일정 시간동안 반복적으로 상기 지상파 DMB 수신 장치(101)에 전송되어 비휘발성 메모리에 저장될 수 있다.
① 단계에서, 지상파 DMB 수신 장치(101)는 MPEG-2 TS에서 PID가 0x0000인 프로그램 연관 테이블(PAT)를 분석할 수 있다.
② 단계에서, 지상파 DMB 수신 장치(101)는 PAT 내용 중 사용자가 선택한 프로그램에 대응하는 PMT를 추출한 후, PMT의 PID를 읽는다.
③ 단계에서, 지상파 DMB 수신 장치(101)는 PMT 내용 중 사용자가 선택한 프로그램에 대응하는하는 서술자(Descriptor)들을 읽는다. 상기 서술자 중 스테레오스코픽 서비스 서술자(SS_descriptor)가 존재하면, 지상파 DMB 수신 장치(101)는 SS_descriptor에 정의된 정보를 분석한다. 이 때, 지상파 DMB 수신 장치(101)는 SS_descriptor의 ServiceType이 비실시간 MOT/스트림 모드 스테레오스코픽 비디오 서비스임을 확인한다. 그리고, 지상파 DMB 수신 장치(101)는 SS_descriptor의ContentName을 부가 비디오 ES를 읽어들일 파일명으로 지정한다. 또한, 지상파 DMB 수신 장치(101)는 SS_descriptor 내의 NRT_marker를 읽은 후 좌우 영상의 첫 프레임을 동기화한다. 이 때, NRT_marker는 기준 비디오 및 부가 비디오 간의 동기화를 위한 시작 위치를 나타내는 마커를 의미한다. 그리고, 좌우 영상은 기준 비디오와 부가 비디오를 의미한다.
④ 단계에서, 지상파 DMB 수신 장치(101)는 PMT 내용 중 사용자가 선택한 프로그램에 대응하는 서술자 중 초기 객체 서술자(IOD_descriptor)를 분석한 다음, 장면서술자 스트림(BIFS 스트림)과 객체서술자 스트림(OD 스트림)에 관련된 요소 스트림 서술자(ESD)를 각각 분석한다. 또한, 지상파 DMB 수신 장치(101)는 분석한 각각의 ESD 정보로부터 ES_ID를 식별한 다음, 이와 동일한 ES_ID 값을 갖는 싱크 레이어 서술자(SL_descriptor)를 Descriptor Loop에서 찾는다.
⑤ 단계에서, 지상파 DMB 수신 장치(101)는 ④번 단계에서 식별된 SL_descriptor 바로 위의 PID 및 StreamType을 분석한 다음, TS로부터 각기 BIFS 스트림과 OD 스트림을 포함하는 TS 패킷들을 찾는다.
⑥ 단계에서, 지상파 DMB 수신 장치(101)는 BIFS 스트림에 포함된 오디오 객체 및 비디오 객체의 OD_ID를 이용하여 OD 스트림으로부터 오디오 OD 및 비디오 OD를 읽는다.
⑦ 단계에서, 지상파 DMB 수신 장치(101)는 OD 안에서 각 미디어(오디오 또는 비디오) 스트림에 해당되는 ESD를 분석한다. 즉, 지상파 DMB 수신 장치(101)는 오디오 ES_ID 및 비디오 ES_ID를 식별한다. 이 때, 비디오 ES_ID는 기준 비디오 ES_ID이다.
⑧ 단계에서, 지상파 DMB 수신 장치(101)는 ⑦번 단계에서 식별된 ES_ID에 대응하는 PID를 식별한 다음, TS로부터 각기 오디오 스트림과 비디오 스트림을 포함하는 TS 패킷들을 찾는다.
⑨ 단계에서, 지상파 DMB 수신 장치(101)는 TS 패킷 파서, PES 패킷 파서, SL 패킷 파서를 통해 TS 패킷으로부터 오디오 ES와 기준 비디오 ES를 추출하여 각기 오디오 디코더 및 비디오 디코더로 전달할 수 있다.
⑩ 단계에서, 지상파 DMB 수신 장치(101)는 ③번 단계에서 지정한 부가 비디오 ES를 읽어들일 파일명인 ContentName을 이용하여 지상파 DMB 수신 장치(101)의 플래시 메모리로부터 부가 비디오 ES를 담은 파일을 읽는다.
⑪ 단계에서, 지상파 DMB 수신 장치(101)는 ⑩번 단계에서 읽은 파일로부터 부가 비디오 ES를 추출하여 비디오 디코더로 전달한다. 지상파 DMB 수신 장치(101)는 ③번 단계에서 NRT_marker가 지정하는 바에 따라 스테레오스코픽 비디오가 시작되는 시점부터, 좌우영상을 동기화하여 스테레오스코픽한 비디오를 디스플레이할 수 있다.
도 3은 본 발명의 일실시예에 따른 비실시간 MOT/스트림 모드 비디오 연동형스테레오스코픽 데이터 서비스를 위한 컨텐츠 접근 과정을 도시한 도면이다.
이 때, 기준 이미지는 MPEG-2 TS를 통해 스트림 모드로 지상파 DMB 수신 장치(101)에 실시간 전송되고, 부가 이미지는, 기준 이미지의 전송 전에 MOT(Motion Object Transfer) 프로토콜에 따른 MOT 카루젤에 의해 일정 시간동안 반복적으로 지상파 DMB 수신 장치(101)에 전송되어 비휘발성 메모리에 저장된다.
① 단계에서, 지상파 DMB 수신 장치(101)는 MPEG-2 TS에서 PID가 0x0000인 PAT를 분석한다.
② 단계에서, 지상파 DMB 수신 장치(101)는 PAT 내용 중 사용자가 선택한 프로그램에 대응하는 PMT의 PID를 읽을 수 있다.
③ 단계에서, 지상파 DMB 수신 장치(101)는 PMT 내용 중 사용자가 선택한 프로그램에 대응하는 서술자(Descriptor)들을 읽는다. 이 중 SS_descriptor가 존재하면, 지상파 DMB 수신 장치(101)는 SS_descriptor에 정의된 정보를 분석한다. 이 때, 지상파 DMB 수신 장치(101)는 SS_descriptor의 ServiceType이 비실시간 MOT/스트림 모드 비디오 연동형 스테레오스코픽 데이터 서비스임을 확인한다.
④ 단계에서, 지상파 DMB 수신 장치(101)는 PMT 내용 중 사용자가 선택한 프로그램에 대응하는 서술자 중 초기 객체 서술자(IOD_descriptor)를 분석한 다음, 장면서술자 스트림(BIFS 스트림)과 객체서술자 스트림(OD 스트림)에 관련된 ESD를 각각 분석한다. 이 때 비디오 연동형 데이터 서비스가 존재하므로, 지상파 DMB 수신 장치(101)는 기본 BIFS 스트림, 기본 OD 스트림, 추가 BIFS 스트림, 추가 OD 스트림 등 각기 4 개의 스트림에 해당하는 ESD들을 분석한다. 또한, 지상파 DMB 수신 장치(101)는 각각의 ESD 정보로부터 ES_ID를 식별한 다음 이와 동일한 ES_ID 값을 갖는 SL_descriptor를 Descriptor Loop에서 찾는다.
⑤ 단계에서, 지상파 DMB 수신 장치(101)는 ④번 단계에서 식별된 SL_descriptor 바로 위의 PID 및 StreamType을 분석한 다음, TS로부터 각기 기본/추가 BIFS 스트림들과 기본/추가 OD 스트림들을 포함하는 TS 패킷들을 찾는다.
⑥ 단계에서, 지상파 DMB 수신 장치(101)는 기본 BIFS 스트림에 포함된 오디오 객체 및 비디오 객체의 OD_ID를 이용하여 기본 OD 스트림으로부터 오디오 OD 및 비디오 OD를 읽는다. 또 지상파 DMB 수신 장치(101)는 추가 BIFS 스트림에 포함된 JPEG 이미지 객체의 OD_ID를 이용하여 추가 OD 스트림으로부터 JPEG OD를 읽는다.
⑦ 단계에서, 지상파 DMB 수신 장치(101)는 OD 안에서 각 미디어(오디오 또는 비디오) 스트림에 해당되는 ESD를 분석한다. 이 때, 지상파 DMB 수신 장치(101)는 오디오 ES_ID, 비디오 ES_ID 및 JPEG 이미지 ES_ID를 식별한다. 이 때, JPEG 이미지는 기준 이미지이다.
⑧ 단계에서, 지상파 DMB 수신 장치(101)는 ⑦번 단계에서 식별된 ES_ID에 대응되는 PID를 식별한 다음 TS로부터 각기 오디오 스트림, 비디오 스트림, 그리고 JPEG 이미지를 포함하는 TS 패킷들을 찾는다. 이 때 찾은 PID가 SS_descriptor 내의 SS_image_PID들 중 하나와 동일한 값이면, 지상파 DMB 수신 장치(101)는 아래의 ImageName을 부가 이미지를 읽어들일 파일명으로서 저장한다.
⑨ 단계에서, 지상파 DMB 수신 장치(101)는 TS 패킷 파서, PES 패킷 파서, SL 패킷 파서를 통해 TS 패킷으로부터 오디오 ES, 비디오 ES, 그리고 JPEG 파일을 추출하여 각기 오디오 디코더, 비디오 디코더, 그리고 JPEG 디코더로 전달한다.
⑩ 단계에서, 지상파 DMB 수신 장치(101)는 ⑨번 단계의 과정과 동시에 다음을 수행한다. 구체적으로, 지상파 DMB 수신 장치(101)는 ⑦번 단계에서 저장한 파일명을 이용하여 플래시 메모리로부터 부가 이미지 JPEG 파일을 읽어 JPEG 디코더로 전달한다.
도 4는 본 발명의 일실시예에 따른 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스를 위한 컨텐츠 접근 과정을 도시한 도면이다.
이 때, 기준 비디오는, 미리 설정한 기간동안 반복적으로 전송되는 컨텐츠이고, 부가 비디오는, 기준 비디오가 지상파 DMB 수신 장치(101)에 저장된 컨텐츠이다.
① 단계에서, 지상파 DMB 수신 장치(101)는 MPEG-2 TS에서 PID가 0x0000인 PAT를 분석한다.
② 단계에서, 지상파 DMB 수신 장치(101)는 PAT 내용 중 사용자가 선택한 프로그램에 해당하는 PMT의 PID를 읽어낸다.
③ 단계에서, 지상파 DMB 수신 장치(101)는 PMT 내용 중 사용자가 선택한 프로그램에 해당하는 서술자(Descriptor)들을 읽는다. 이 중 SS_descriptor가 존재하면 지상파 DMB 수신 장치(101)는 SS_descriptor에 정의된 정보를 분석한다. 이 때, 지상파 DMB 수신 장치(101)는 SS_descriptor의 ServiceType이 비실시간 반복 콘텐트 스테레오스코픽 비디오 서비스임을 확인한다. 그리고, 지상파 DMB 수신 장치(101)는 SS_descriptor 내의 ContentName으로부터 “부가 비디오를 읽어들일 파일명”과 “기준 비디오를 저장할 파일명”을 구성하고 추후 사용할 수 있도록 각각 저장한다. 또한, 지상파 DMB 수신 장치(101)는 SS_descriptor 내의 ExpireDate와 FileSize를 읽어 저장한다. 그리고, 지상파 DMB 수신 장치(101)는 SS_descriptor 내의 NRT_marker를 읽고 기준 비디오 및 부가 비디오에 대응하는 좌우 영상의 첫 프레임을 동기화한다.
④ 단계에서, 지상파 DMB 수신 장치(101)는 PMT 내용 중 사용자가 선택한 프로그램에 해당하는 서술자 중 초기 객체 서술자(IOD_descriptor)를 분석한 다음, 장면서술자 스트림(BIFS 스트림)과 객체서술자 스트림(OD 스트림)에 관련된 ESD를 각각 분석한다. 또한, 지상파 DMB 수신 장치(101)는 각 ESD 정보로부터 ES_ID를 식별한 다음, 이와 동일한 ES_ID 값을 갖는 SL_descriptor를 Descriptor Loop에서 찾는다.
⑤ 단계에서, 지상파 DMB 수신 장치(101)는 ④번 단계에서 식별된 SL_descriptor 바로 위의 PID 및 StreamType을 분석한 다음, TS로부터 각기 BIFS 스트림과 OD 스트림을 포함하는 TS 패킷들을 찾는다.
⑥ 단계에서, 지상파 DMB 수신 장치(101)는 BIFS 스트림에 포함된 오디오 객체 및 비디오 객체의 OD_ID를 이용하여 OD 스트림으로부터 오디오 OD 및 비디오 OD를 읽는다.
⑦ 단계에서, 지상파 DMB 수신 장치(101)는 OD 안에서 각 미디어(오디오 또는 비디오) 스트림에 해당되는 ESD를 분석한다. 또한, 지상파 DMB 수신 장치(101)는 오디오 ES_ID 및 비디오 ES_ID를 식별한다. 이 때, 비디오 ES_ID는 기준 비디오 ES_ID이다.
⑧ 단계에서, 지상파 DMB 수신 장치(101)는 ⑦번 단계에서 식별된 ES_ID에 대응되는 PID를 식별한 다음 TS로부터 각기 오디오 스트림과 비디오 스트림을 포함하는 TS 패킷들을 찾는다.
⑨ 단계에서, 지상파 DMB 수신 장치(101)는 TS 패킷 파서, PES 패킷 파서, SL 패킷 파서를 순차적으로 거쳐 TS 패킷으로부터 오디오 ES와 기준 비디오 ES를 추출하여 각기 오디오 디코더 및 비디오 디코더로 전달한다.
⑩ 단계에서, 지상파 DMB 수신 장치(101)는 ③번 단계에서 저장해 둔 “부가 비디오를 읽어들일 파일명”을 갖는 파일이 플래시 메모리에 있으면 이로부터 부가 비디오 ES를 담은 파일을 읽는다. 만약 “부가 비디오를 읽어들일 파일명”을 갖는 파일이 플래시 메모리에 없으면, 지상파 DMB 수신 장치(101)는 기준 비디오를 모노스코픽하게 디스플레이한다.
⑪ 단계에서, 지상파 DMB 수신 장치(101)는 ⑩번 단계에서 읽은 파일로부터 부가 비디오 ES를 추출하여 비디오 디코더로 전달한다. ③번 단계에서 NRT_marker가 지정하는 바에 따라 스테레오스코픽 비디오가 시작되는 시점부터, 좌우영상이 동기화되어 스테레오스코픽하게 표출되도록 한다.
⑫ 단계에서, ⑪번 단계의 과정과 동시에 다음을 수행한다. 이 때, 지상파 DMB 수신 장치(101)는 ③번 단계에서 저장해 둔 FIleSize를 이용하여 저장에 필요한 자원을 미리 확인할 수 있으며, ExpireDate를 이용하여 파일 저장 후 해당 파일의 보존 기한을 관리할 수 있게 한다. 이미 그러한 이름의 파일이 플래시 메모리에 있으면, 파일 저장 과정은 생략된다.
⑬ 단계에서, 지상파 DMB 수신 장치(101)는 ③번 단계에서 저장해 둔 “기준 비디오를 저장할 파일명”을 갖는 파일이 플래시 메모리에 있는지 검사한 후, 만약 없으면 스테레오스코픽 비디오가 시작되는 시점부터, ⑨번 단계에서 얻은 비디오 ES를 “기준 비디오를 저장할 파일명”의 파일로서 플래시 메모리에 저장한다.
도 5는 본 발명의 일실시예에 따른 스테레오스코픽 영상의 기본 포맷과 선택사항 포맷을 도시한 도면이다.
스테레오스코픽 영상은 아래 2 가지 포맷 중 하나로 구성된다. 이러한 포맷은 지상파 DMB 송신 장치(100)의 부호기의 입력 영상 포맷이면서 동시에 지상파 DMB 수신 장치(101)의 복호기의 출력 영상 포맷으로 사용된다.
아래의 기본 포맷과 선택사항 포맷은 종래의 지상파 DMB의 모노스코픽 비디오 서비스 및 비디오 연동형 모노스코픽 데이터 서비스와 호환적인 포맷이다. 즉 종래 지상파 DMB 수신 장치는 이와 같은 포맷으로 활용 가능한 데이터 중 모노스코픽 표현에 필요한 기준 영상 데이터만을 실시간으로 수신하여 재생하였다. 기본 포맷과 선택사항 포맷에서 기준 영상은 동일한 형태이지만 부가 영상은 다른 형태로 구성되어 지상파 DMB 수신 장치(101)로 제공될 수 있다. 즉 선택사항 포맷에서 부가 영상의 수평해상도는 기준 영상의 1/2이다.
본 발명의 일실시예에 따른 지상파 DMB 수신 장치(101)는 지상파 DMB의 스테레오스코픽 서비스를 제공하는 장치로, 스테레오스코픽 영상의 기본 포맷과 선택사항 포맷을 모두 지원할 수 있다. 기본 포맷에 따르면, 스테레오스코픽 영상은 좌우 양안 시점에 대응하는 동일한 크기의 좌영상(501) 및 우영상(502)로 구성된다. 좌영상(501) 및 우영상(502) 중 어느 하나는 기준 영상이고, 다른 하나는 부가 영상을 의미한다. 또한, 선택사항 포맷에 따르면, 스테레오스코픽 영상은 좌영상(503)과 좌영상(503)을 가로축으로 서브 샘플링하여 1/2 해상도(half image)를 나타내는 우영상(504)로 구성될 수 있다. 이 때, 좌영상(503)과 우영상(504)의 형태는 바뀔 수 있다.
도 6은 본 발명의 일실시예에 따른 스테레오스코픽 영상을 재생하는 과정을 도시한 도면이다.
본 발명의 일실시예에 따른 지상파 DMB 수신 장치(101)는 무안경식 3D 디스플레이 방식을 지원할 수 있다. 이 때, 무안경식 3D 디스플레이 방식은 패럴랙스 배리어 방식 또는 렌티큘러 렌즈 방식을 포함할 수 있다.
도 6를 참고하면, 지상파 DMB 수신 장치(101)의 스테레오스코픽 디스플레이의 해상도가 QVGA(320x260)인 경우와 VGA(660x480)인 경우가 도시되어 있다. 도 6에서, 좌영상(601)과 우영상(602)는 기본 포맷이고, 우영상(603)은 선택사항 포맷을 의미한다.
도 4에서 볼 수 있듯이, QVGA(320x260)의 경우, 좌영상(604)과 우영상(605)는 격렬 주사(Vertical Line Interlace) 방식의 스테레오스코픽 영상으로 변환된 후 디스플레이된다. 이 때, 기준 영상은 좌영상(604)이다. VGA(640x480)인 경우에도 동일한 방식이 적용된다.
구체적으로, QVGA급 스테레오스코픽 영상 재생에서, 기준 영상(601)의 포맷이 기본 포맷인 경우, 기준 영상(601)은 1/2 서브샘플링을 통하여 수평 해상도가 1/2로 감소된 기준 영상(604)으로 변형되어 격렬 주사 포맷(606)으로 변환된다. 또한, 부가 영상(602)의 포맷이 기본 포맷(이 예에서는 320x240 화소)인 경우, 부가 영상(602)은 1/2 서브샘플링을 통하여 수평 해상도가 1/2로 감소된 부가 영상(604)으로 변형되어 격렬 주사 포맷(606)으로 변환된다. 부가 영상(603)의 포맷이 선택사항 포맷(이 예에서는 160 x240 화소)인 경우, 부가 영상(603)은 수평 해상도의 감소없이 격렬 주사 포맷(606)으로 변환된다.
또한, QVGA급 스테레오스코픽 영상 재생에서, 기준 영상(607)과 부가 영상(608)이 기본 포맷인 경우, 기준 영상(607)과 부가 영상(608)은 모두 수직 방향으로 2 배 업샘플링된 후 격렬 주사 포맷(609)로 변환된다. 이 때, 부가 영상(603)의 포맷이 선택사항 포맷인 경우, 부가 영상(603)은 수평 및 수직 방향으로 2 배 업샘플링된 후 격렬 주사 포맷(609)으로 변환된다.
도 7은 본 발명의 일실시예에 따른 지상파 DMB 비실시간 반복 컨텐츠 스테레오스코픽 비디오 서비스를 수행하는 일례를 도시한 도면이다.
도 7는 광고와 같이 1 개월, 3 개월, 6 개월 등 일정 기간 동안 반복하여 송출되는 콘텐트에 대한 서비스에 대한 것이다. 지상파 DMB 송신 장치(100)는 특정 프레임(701)을 통해 좌영상(702)과 우영상(703)을 기준 비디오로서 번갈아 가며 송신한다. 예를 들어, 도 7에서 볼 수 있듯이, 광고가 첫 회 방송될 때는 좌영상(702)을 기준 비디오로서 전송하고, 동일 광고가 2 회째 방송될 때는 우영상(704)을 기준 비디오로서 전송하며, 3 회째는 다시 좌영상(702)을 기준 비디오로서 전송하는 방식이다.
지상파 DMB 수신 장치(101)가 기준 비디오를 수신하면, 기준 비디오에 대응되는 부가 비디오가 플래시 메모리(704)에 있는지 검사한다. 만약, 기준 비디오에 대응되는 부가 비디오가 존재하는 경우, 지상파 DMB 수신 장치(101)는 기준 비디오와 부가 비디오를 통해 좌우 영상 쌍으로 구성한 후 스테레오스코픽 비디오를 디스플레이할 수 있다. 만약, 기준 비디오에 대응되는 부가 비디오가 존재하지 않는 경우, 지상파 DMB 수신 장치(101)는 기준 비디오만을 모노스코픽하게 디스플레이할 수 있다. 결국, 지상파 DMB 수신 장치(101)는 이러한 과정과 함께 기준 비디오가 플래시 메모리에 저장되어 있는지 검사하여 없으면, 이를 플래시 메모리에 저장함으로써 다음 회 콘텐트 반복 시 활용할 수 있다.
본 발명의 실시 예에 따른 방법들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
100: 지상파 DMB 송신 장치 101: 지상파 DMB 수신 장치
Claims (16)
- 방송 수신 장치가 수행하는 스테레오스코픽 서비스 수행 방법은,
MPEG-2 TS에 포함된 프로그램 연관 테이블(PAT)에서 사용자가 선택한 프로그램에 대응하는 프로그램 맵 테이블(PMT)를 추출하는 단계;
상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자 중 스테레오스코픽 서비스 서술자(SS_descriptor)에 정의된 정보를 분석하는 단계;
상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자에 기초하여 상기 MPEG-2 TS에 포함된 기준 비디오를 추출하는 단계;
상기 분석한 정보를 이용하여 상기 방송 수신 장치에 미리 저장된 부가 비디오를 추출하는 단계; 및
상기 분석한 정보를 이용하여 스테레오스코픽 비디오가 시작되는 시점부터 상기 추출된 기준 비디오 및 부가 비디오를 동기화하여 디스플레이하는 단계
를 포함하는 스테레오스코픽 서비스 수행 방법. - 제1항에 있어서,
상기 스테레오스코픽 서비스 서술자에 정의된 정보를 분석하는 단계는,
스테레오스코픽 서비스의 종류를 정의하는 서비스 타입(Service Type)을 분석하는 단계;
상기 부가 비디오를 추출할 파일명을 정의한 컨텐츠 네임(ContentName)을 분석하는 단계; 및
상기 기준 비디오 및 부가 비디오 간의 동기화를 위한 시작 위치를 나타내는 마커(NRT_marker)를 분석하는 단계
를 포함하는 스테레오스코픽 서비스 수행 방법. - 제1항에 있어서,
상기 MPEG-2 TS에 포함된 기준 비디오를 추출하는 단계는,
상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자 중 초기 객체 서술자(IOD)를 분석하는 단계;
장면 서술자 스트림(BIFS stream) 및 객체 서술자 스트림(OD stream)에 연관된 기초 스트림 서술자(ESD)를 분석하는 단계;
상기 분석한 기초 스트림 서술자로부터 기초 식별자를 추출한 후, 상기 추출한 기초 식별자와 동일한 값을 갖는 싱크 레이어 서술자(SL_descriptor)를 검색하는 단계;
상기 싱크 레이어 서술자 바로 위에 위치한 패킷 아이디 및 스트림 타입을 분이용하여 상기 MPEG-2 TS로부터 장면 서술자 스트림 및 객체 서술자 스트림을 포함하는 전송 스트림(TS) 패킷을 검색하는 단계;
상기 장면 서술자 스트림에 포함된 비디오 객체의 객체 식별자를 이용하여 기준 비디오의 기초 스트림 식별자(ES_ID)를 검색하는 단계; 및
상기 기준 비디오의 기초 스트림 식별자를 이용하여 상기 MPEG-2 TS로부터 상기 기준 비디오를 포함하는 전송 스트림 패킷을 추출하는 단계
를 포함하는 스테레오스코픽 서비스 수행 방법. - 제1항에 있어서,
상기 기준 비디오는,
상기 MPEG-2 TS를 통해 스트림 모드로 상기 방송 수신 장치에 실시간 전송되고,
상기 부가 비디오는,
상기 기준 비디오의 전송 전에 MOT(Motion Object Transfer) 프로토콜에 따른 MOT 카루젤(carousel)에 의해 일정 시간동안 반복적으로 상기 방송 수신 장치에 전송되어 비휘발성 메모리에 저장된 것을 특징으로 하는 스테레오스코픽 서비스 수행 방법. - 제1항에 있어서,
상기 추출된 기준 비디오 및 부가 비디오를 동기화하여 디스플레이하는 단계는,
상기 스테레오스코픽 서비스 서술자(SS_descriptor)에 정의된 정보 중 상기 기준 비디오 및 부가 비디오 간의 동기화를 위한 시작 위치를 나타내는 마커(NRT_marker)를 이용하여 스테레오스코픽 비디오의 첫 프레임 위치를 시그널링하는 것을 특징으로 하는 스테레오스코픽 서비스 수행 방법. - 제5항에 있어서,
상기 추출된 기준 비디오 및 부가 비디오를 동기화하여 디스플레이하는 단계는,
상기 기준 비디오의 엑세스 단위(AU)에 대한 타임 스탬프와 상기 부가 비디오의 엑세스 단위에 대한 타임 스탬프 및 PCR (Program Clock Reference) 값을 이용하여 동기화하는 것을 특징으로 하는 스테레오스코픽 서비스 수행 방법. - 방송 수신 장치가 수행하는 스테레오스코픽 서비스의 수행 방법은,
MPEG-2 TS에 포함된 프로그램 연관 테이블(PAT)에서 사용자가 선택한 프로그램에 대응하는 프로그램 맵 테이블(PMT)를 추출하는 단계;
상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자 중 스테레오스코픽 서비스 서술자(SS_descriptor)에 정의된 정보를 분석하는 단계;
상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자에 기초하여 상기 MPEG-2 TS에 포함된 기준 이미지를 추출하는 단계;
상기 분석한 정보를 이용하여 상기 방송 수신 장치에 미리 저장된 부가 이미지를 추출하는 단계; 및
상기 추출된 기준 이미지 및 부가 이미지를 동기화하여 디스플레이하는 단계
를 포함하는 스테레오스코픽 서비스 수행 방법. - 제7항에 있어서,
상기 스테레오스코픽 서비스 서술자에 정의된 정보를 분석하는 단계는,
스테레오스코픽 서비스의 종류를 정의하는 서비스 타입(Service Type)을 분석하는 단계;
상기 부가 이미지를 추출할 파일명을 정의한 이미지 네임(ImageName)을 분석하는 단계; 및
상기 이미지 네임을 상기 부가 이미지를 추출할 파일명으로 정의하기 위한 스테레오스코픽 서비스 이미지 식별자(SS_image_PID)를 분석하는 단계
를 포함하는 스테레오스코픽 서비스 수행 방법. - 제7항에 있어서,
상기 MPEG-2 TS에 포함된 기준 이미지를 추출하는 단계는,
상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자 중 초기 객체 서술자(IOD)를 분석하는 단계;
장면 서술자 스트림(BIFS stream) 및 객체 서술자 스트림(OD stream)에 연관된 기초 스트림 서술자(ESD)를 분석하는 단계 -상기 장면 서술자 스트림은 기본 BIFS 스트림 및 추가 BIFS 스트림을 포함하고, 상기 객체 서술자 스트림은 기본 OD 스트림 및 추가 OD 스트림을 포함함-;
상기 분석한 기초 스트림 서술자로부터 기초 식별자를 추출한 후, 상기 추출한 기초 식별자와 동일한 값을 갖는 싱크 레이어 서술자(SL_descriptor)를 검색하는 단계;
상기 싱크 레이어 서술자 바로 위에 위치한 패킷 아이디 및 스트림 타입을 분이용하여 상기 MPEG-2 TS로부터 장면 서술자 스트림 및 객체 서술자 스트림을 포함하는 전송 스트림(TS) 패킷을 검색하는 단계;
상기 추가 BIFS 스트림에 포함된 이미지 객체의 객체 식별자를 이용하여 상기 추가 OD 스트림으로부터 기준 이미지의 기초 스트림 식별자(ES_ID)를 검색하는 단계; 및
상기 기준 이미지의 기초 스트림 식별자를 이용하여 상기 MPEG-2 TS로부터 상기 기준 이미지를 포함하는 전송 스트림 패킷을 추출하는 단계
를 포함하는 스테레오스코픽 서비스 수행 방법. - 제7항에 있어서,
상기 기준 이미지는,
상기 MPEG-2 TS를 통해 스트림 모드로 상기 방송 수신 장치에 실시간 전송되고,
상기 부가 이미지는,
상기 기준 이미지의 전송 전에 MOT(Motion Object Transfer) 프로토콜에 따른 MOT 카루젤에 의해 일정 시간동안 반복적으로 상기 방송 수신 장치에 전송되어 비휘발성 메모리에 저장된 것을 특징으로 하는 스테레오스코픽 서비스 수행 방법. - 방송 수신 장치가 수행하는 스테레오스코픽 서비스 수행 방법은,
컨텐츠를 전송하는 MPEG-2 TS에 포함된 프로그램 연관 테이블(PAT)에서 사용자가 선택한 프로그램에 대응하는 프로그램 맵 테이블(PMT)을 추출하는 단계 -상기 컨텐츠는 상기 MPEG-2 TS를 통해 좌영상과 우영상을 기준 비디오로서 번갈아가며 미리 설정된 기간동안 반복적으로 전송됨-;
상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자 중 스테레오스코픽 서비스 서술자(SS_descriptor)에 정의된 정보를 분석하는 단계;
상기 프로그램 맵 테이블에서 상기 사용자가 선택한 프로그램에 대응하는 서술자에 기초하여 상기 MPEG-2 TS에 포함된 기준 비디오를 추출하는 단계;
상기 기준 비디오에 대응하는 부가 영상이 상기 방송 수신 장치에 저장되어 있는 지 판단하는 단계;
상기 부가 영상이 방송 수신 장치에 포함된 경우, 상기 기준 영상과 상기 부가 영상을 스테레오스코픽하게 디스플레이하는 단계 및
상기 부가 영상이 상기 방송 수신 장치에 저장되어 있지 않는 경우, 상기 기준 영상을 모노스코픽하게 디스플레이하는 단계;
를 포함하는 스테레오스코픽 서비스 수행 방법. - 제11항에 있어서,
상기 스테레오스코픽 서비스 서술자에 정의된 정보를 분석하는 단계는,
스테레오스코픽 서비스의 종류를 정의하는 서비스 타입(Service Type)을 분석하는 단계;
상기 부가 비디오를 읽을 파일명과 상기 기준 비디오를 저장할 파일명을 정의한 컨텐츠 네임(ContentName)을 분석하는 단계;
상기 기준 비디오 및 부가 비디오 간의 동기화를 위한 시작 위치를 나타내는 마커(NRT_marker)를 분석하는 단계; 및
상기 기준 비디오를 저장할 파일에 대한 파일 사이즈(file size) 및 보존 기한(expire date)를 분석하는 단계
를 포함하는 스테레오스코픽 서비스 수행 방법. - 제11항에 있어서,
상기 기준 영상과 상기 부가 영상을 스테레오스코픽하게 디스플레이하는 단계는,
상기 기준 비디오가 좌영상인 경우, 상기 방송 수신 장치로부터 우영상인 부가 영상을 추출하여 스테레오스코픽하게 디스플레이하는 단계; 및
상기 기준 비디오가 우영상인 경우, 상기 방송 수신 장치로부터 좌영상인 부가 영상을 추출하여 스테레오스코픽하게 디스플레이하는 단계
를 포함하는 스테레오스코픽 서비스 수행 방법. - 제13항에 있어서,
상기 모노스코픽하게 디스플레이하는 단계는,
상기 기준 영상이 좌영상이고, 상기 기준 영상에 대응하는 우영상의 부가 영상이 상기 방송 수신 장치에 저장되지 않은 경우, 상기 기준 영상을 좌영상으로 상기 방송 수신 장치에 저장하는 단계;
상기 기준 영상이 우영상이고, 상기 기준 영상에 대응하는 좌영상의 부가 영상이 상기 방송 수신 장치에 저장되어 있지 않은 경우, 상기 기준 영상을 우영상으로 상기 방송 수신 장치에 저장하는 단계
를 포함하는 스테레오스코픽 서비스 수행 방법. - 제11항에 있어서,
상기 추출된 기준 비디오 및 부가 비디오를 동기화하여 디스플레이하는 단계는,
상기 스테레오스코픽 서비스 서술자(SS_descriptor)에 정의된 정보 중 상기 기준 비디오 및 부가 비디오 간의 동기화를 위한 시작 위치를 나타내는 마커(NRT_marker)를 이용하여 스테레오스코픽 비디오의 첫 프레임 위치를 시그널링하는 것을 특징으로 하는 스테레오스코픽 서비스 수행 방법. - 제15항에 있어서,
상기 추출된 기준 비디오 및 부가 비디오를 동기화하여 디스플레이하는 단계는,
상기 스테레오스코픽 비디오의 동기화는, 상기 기준 비디오의 엑세스 단위(AU)에 대한 타임 스탬프와 상기 부가 비디오의 엑세스 단위에 대한 타임 스탬프 및 PCR 값을 이용하여 동기화하는 것을 특징으로 하는 스테레오스코픽 서비스 수행 방법.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP10151448A EP2211556A1 (en) | 2009-01-22 | 2010-01-22 | Method for processing non-real time stereoscopic services in terrestrial digital multimedia broadcasting and apparatus for receiving terrestrial digital multimedia broadcasting |
Applications Claiming Priority (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020090005557 | 2009-01-22 | ||
| KR20090005557 | 2009-01-22 | ||
| KR20090076901 | 2009-08-19 | ||
| KR1020090076901 | 2009-08-19 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20100086440A true KR20100086440A (ko) | 2010-07-30 |
| KR101305789B1 KR101305789B1 (ko) | 2013-09-06 |
Family
ID=42645010
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020100005984A KR101305789B1 (ko) | 2009-01-22 | 2010-01-22 | 지상파 디지털멀티미디어방송에서 비실시간 스테레오스코픽 서비스 수행 방법 및 지상파 디지털멀티미디어방송 수신 장치 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR101305789B1 (ko) |
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2012030176A2 (ko) * | 2010-09-01 | 2012-03-08 | 엘지전자 주식회사 | 3d (3-dimentional) 방송 서비스를 위한 방송 신호 처리 방법 및 장치 |
| WO2012086990A2 (en) * | 2010-12-23 | 2012-06-28 | Samsung Electronics Co., Ltd. | Improvements to subtitles for three dimensional video transmission |
| WO2012102563A2 (ko) * | 2011-01-26 | 2012-08-02 | 한국전자통신연구원 | 실시간 방송 프로그램의 기준 영상과 부가 영상간의 동기화 방법 및 이를 수행하는 송수신 시스템 |
| WO2012121572A2 (ko) | 2011-03-10 | 2012-09-13 | 한국전자통신연구원 | 프로그램 연동형 스테레오스코픽 방송 서비스를 제공하기 위한 송신 장치 및 방법, 및 수신 장치 및 방법 |
| WO2012121567A2 (ko) | 2011-03-10 | 2012-09-13 | 한국전자통신연구원 | 실시간 방송 프로그램의 기준 영상과 부가 영상간의 동기화 방법 및 장치 |
| WO2012081874A3 (ko) * | 2010-12-13 | 2012-09-20 | 한국전자통신연구원 | 스테레오스코픽 비디오 서비스 위한 시그널링 방법 및 이러한 방법을 사용하는 장치 |
| KR20120104498A (ko) | 2011-03-10 | 2012-09-21 | 경희대학교 산학협력단 | Ｍｐｅｇ-2 ｔｓ 기반 방송 서비스 환경에서 전달 시간이 다른 콘텐츠를 연동하여 3ｄ 서비스를 제공하는 방법 |
| KR20130014428A (ko) * | 2011-07-29 | 2013-02-07 | 경희대학교 산학협력단 | 실시간으로 전송되는 기준 영상과 별도로 전송되는 부가 영상 및 콘텐츠를 연동하여 3ｄ 서비스를 제공하기 위한 전송 장치 및 방법, 및 수신 장치 및 방법 |
| WO2013022311A2 (ko) * | 2011-08-10 | 2013-02-14 | 한국전자통신연구원 | 고정 및 이동 융합형 3dtv에서 좌/우 스트림을 동기화하는 컨텐츠 제공 장치 및 방법, 그리고, 컨텐츠 재생 장치 및 방법 |
| WO2013162256A1 (ko) * | 2012-04-23 | 2013-10-31 | 엘지전자 주식회사 | 3ｄ 서비스를 위한 신호 처리 장치 및 방법 |
| KR101350261B1 (ko) * | 2008-12-30 | 2014-01-13 | 엘지전자 주식회사 | 이차원 영상과 3d 영상의 통합 서비스가 가능한 디지털 방송 수신방법, 및 이를 이용한 디지털 방송 수신장치 |
| KR101405276B1 (ko) * | 2011-08-10 | 2014-07-15 | 한국전자통신연구원 | 고정 및 이동 융합형 ３ｄｔｖ에서 좌／우 스트림을 동기화하는 컨텐츠 제공 장치 및 방법, 그리고, 컨텐츠 재생 장치 및 방법 |
| US9106896B2 (en) | 2010-10-19 | 2015-08-11 | Electronics And Telecommunications Research Institute | Method and apparatus for non-real time stereoscopic video service |
| US9716912B2 (en) | 2011-04-20 | 2017-07-25 | Lg Electronics Inc. | Transmission method for broadcast service, reception method therefor, and reception apparatus therefor |
| US9723259B2 (en) | 2011-10-18 | 2017-08-01 | Electronics And Telecommunications Research Institute | Apparatus and method for adding synchronization information to an auxiliary data space in a video signal and synchronizing a video |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100585966B1 (ko) | 2004-05-21 | 2006-06-01 | 한국전자통신연구원 | 3차원 입체 영상 부가 데이터를 이용한 3차원 입체 디지털방송 송/수신 장치 및 그 방법 |
| KR100905723B1 (ko) * | 2006-12-08 | 2009-07-01 | 한국전자통신연구원 | 비실시간 기반의 디지털 실감방송 송수신 시스템 및 그방법 |
-
2010
- 2010-01-22 KR KR1020100005984A patent/KR101305789B1/ko not_active IP Right Cessation
Cited By (32)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9288469B2 (en) | 2008-12-30 | 2016-03-15 | Lg Electronics Inc. | Digital broadcast receiving method providing two-dimensional image and 3D image integration service, and digital broadcast receiving device using the same |
| KR101350261B1 (ko) * | 2008-12-30 | 2014-01-13 | 엘지전자 주식회사 | 이차원 영상과 3d 영상의 통합 서비스가 가능한 디지털 방송 수신방법, 및 이를 이용한 디지털 방송 수신장치 |
| US9282315B2 (en) | 2008-12-30 | 2016-03-08 | Lg Electronics Inc. | Digital broadcast receiving method providing two-dimensional image and 3D image integration service, and digital broadcast receiving device using the same |
| US9554198B2 (en) | 2008-12-30 | 2017-01-24 | Lg Electronics Inc. | Digital broadcast receiving method providing two-dimensional image and 3D image integration service, and digital broadcast receiving device using the same |
| US9357198B2 (en) | 2008-12-30 | 2016-05-31 | Lg Electronics Inc. | Digital broadcast receiving method providing two-dimensional image and 3D image integration service, and digital broadcast receiving device using the same |
| WO2012030176A3 (ko) * | 2010-09-01 | 2012-05-03 | 엘지전자 주식회사 | 3d (3-dimentional) 방송 서비스를 위한 방송 신호 처리 방법 및 장치 |
| WO2012030176A2 (ko) * | 2010-09-01 | 2012-03-08 | 엘지전자 주식회사 | 3d (3-dimentional) 방송 서비스를 위한 방송 신호 처리 방법 및 장치 |
| US9549228B2 (en) | 2010-09-01 | 2017-01-17 | Lg Electronics Inc. | Broadcast signal processing method and device for 3-dimensional (3D) broadcasting service |
| US9106896B2 (en) | 2010-10-19 | 2015-08-11 | Electronics And Telecommunications Research Institute | Method and apparatus for non-real time stereoscopic video service |
| WO2012081874A3 (ko) * | 2010-12-13 | 2012-09-20 | 한국전자통신연구원 | 스테레오스코픽 비디오 서비스 위한 시그널링 방법 및 이러한 방법을 사용하는 장치 |
| WO2012086990A2 (en) * | 2010-12-23 | 2012-06-28 | Samsung Electronics Co., Ltd. | Improvements to subtitles for three dimensional video transmission |
| WO2012086990A3 (en) * | 2010-12-23 | 2012-11-29 | Samsung Electronics Co., Ltd. | Improvements to subtitles for three dimensional video transmission |
| KR20120086661A (ko) * | 2011-01-26 | 2012-08-03 | 한국전자통신연구원 | 실시간 방송 프로그램의 기준 영상과 부가 영상간의 동기화 방법 및 이를 수행하는 송수신 시스템 |
| WO2012102563A3 (ko) * | 2011-01-26 | 2012-12-13 | 한국전자통신연구원 | 실시간 방송 프로그램의 기준 영상과 부가 영상간의 동기화 방법 및 이를 수행하는 송수신 시스템 |
| US9866814B2 (en) | 2011-01-26 | 2018-01-09 | Electronics And Telecommunications Research Institute | Method of synchronizing reference image with additional image of real-time broadcasting program, and transceiver system for performing same |
| WO2012102563A2 (ko) * | 2011-01-26 | 2012-08-02 | 한국전자통신연구원 | 실시간 방송 프로그램의 기준 영상과 부가 영상간의 동기화 방법 및 이를 수행하는 송수신 시스템 |
| KR20120104498A (ko) | 2011-03-10 | 2012-09-21 | 경희대학교 산학협력단 | Ｍｐｅｇ-2 ｔｓ 기반 방송 서비스 환경에서 전달 시간이 다른 콘텐츠를 연동하여 3ｄ 서비스를 제공하는 방법 |
| WO2012121567A2 (ko) | 2011-03-10 | 2012-09-13 | 한국전자통신연구원 | 실시간 방송 프로그램의 기준 영상과 부가 영상간의 동기화 방법 및 장치 |
| KR101878218B1 (ko) * | 2011-03-10 | 2018-07-16 | 한국전자통신연구원 | Ｍｐｅｇ-2 ｔｓ 기반 방송 서비스 환경에서 전달 시간이 다른 콘텐츠를 연동하여 3ｄ 서비스를 제공하는 방법 |
| WO2012121572A2 (ko) | 2011-03-10 | 2012-09-13 | 한국전자통신연구원 | 프로그램 연동형 스테레오스코픽 방송 서비스를 제공하기 위한 송신 장치 및 방법, 및 수신 장치 및 방법 |
| EP2685729A4 (en) * | 2011-03-10 | 2014-08-13 | Korea Electronics Telecomm | TRANSMISSION DEVICE AND METHOD FOR PROVIDING A BROADCASTING SERVICE ASSOCIATED WITH A PROGRAM, AND RECEIVING DEVICE AND METHOD THEREFOR |
| WO2012121572A3 (ko) * | 2011-03-10 | 2012-11-15 | 한국전자통신연구원 | 프로그램 연동형 스테레오스코픽 방송 서비스를 제공하기 위한 송신 장치 및 방법, 및 수신 장치 및 방법 |
| WO2012121567A3 (ko) * | 2011-03-10 | 2012-11-29 | 한국전자통신연구원 | 실시간 방송 프로그램의 기준 영상과 부가 영상간의 동기화 방법 및 장치 |
| US9716912B2 (en) | 2011-04-20 | 2017-07-25 | Lg Electronics Inc. | Transmission method for broadcast service, reception method therefor, and reception apparatus therefor |
| KR20130014428A (ko) * | 2011-07-29 | 2013-02-07 | 경희대학교 산학협력단 | 실시간으로 전송되는 기준 영상과 별도로 전송되는 부가 영상 및 콘텐츠를 연동하여 3ｄ 서비스를 제공하기 위한 전송 장치 및 방법, 및 수신 장치 및 방법 |
| WO2013019042A1 (ko) * | 2011-07-29 | 2013-02-07 | 한국전자통신연구원 | 실시간으로 전송되는 기준 영상과 별도로 전송되는 부가 영상 및 콘텐츠를 연동하여 3ｄ 서비스를 제공하기 위한 전송 장치 및 방법, 및 수신 장치 및 방법 |
| WO2013022311A2 (ko) * | 2011-08-10 | 2013-02-14 | 한국전자통신연구원 | 고정 및 이동 융합형 3dtv에서 좌/우 스트림을 동기화하는 컨텐츠 제공 장치 및 방법, 그리고, 컨텐츠 재생 장치 및 방법 |
| KR101405276B1 (ko) * | 2011-08-10 | 2014-07-15 | 한국전자통신연구원 | 고정 및 이동 융합형 ３ｄｔｖ에서 좌／우 스트림을 동기화하는 컨텐츠 제공 장치 및 방법, 그리고, 컨텐츠 재생 장치 및 방법 |
| US9900577B2 (en) | 2011-08-10 | 2018-02-20 | Electronics And Telecommunications Research Institute | Apparatus and method for providing content for synchronizing left/right streams in fixed/mobile convergence 3DTV, and apparatus and method for playing content |
| WO2013022311A3 (ko) * | 2011-08-10 | 2013-05-30 | 한국전자통신연구원 | 고정 및 이동 융합형 3dtv에서 좌/우 스트림을 동기화하는 컨텐츠 제공 장치 및 방법, 그리고, 컨텐츠 재생 장치 및 방법 |
| US9723259B2 (en) | 2011-10-18 | 2017-08-01 | Electronics And Telecommunications Research Institute | Apparatus and method for adding synchronization information to an auxiliary data space in a video signal and synchronizing a video |
| WO2013162256A1 (ko) * | 2012-04-23 | 2013-10-31 | 엘지전자 주식회사 | 3ｄ 서비스를 위한 신호 처리 장치 및 방법 |
Also Published As
| Publication number | Publication date |
|---|---|
| KR101305789B1 (ko) | 2013-09-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101305789B1 (ko) | 지상파 디지털멀티미디어방송에서 비실시간 스테레오스코픽 서비스 수행 방법 및 지상파 디지털멀티미디어방송 수신 장치 | |
| US11330311B2 (en) | Transmission device, transmission method, receiving device, and receiving method for rendering a multi-image-arrangement distribution service | |
| US8289998B2 (en) | Method and apparatus for generating three (3)-dimensional image data stream, and method and apparatus for receiving three (3)-dimensional image data stream | |
| US9756380B2 (en) | Broadcast receiver and 3D video data processing method thereof | |
| US20140139626A1 (en) | Method for displaying 3d caption and 3d display apparatus for implementing the same | |
| KR102181994B1 (ko) | 송신 장치, 송신 방법, 수신 장치, 수신 방법 및 수신 표시 방법 | |
| EP2574064A1 (en) | Image data transmitting device, image data transmitting method and image data receiving device | |
| US11438567B2 (en) | Reception device, display control method, transmission device, and transmission method for program content type | |
| EP2306747A1 (en) | 3D stereoscopic/multiview video processing system and its method | |
| US20130235270A1 (en) | Playback apparatus, playback method, integrated circuit, broadcast system, and broadcast method | |
| EP2211556A1 (en) | Method for processing non-real time stereoscopic services in terrestrial digital multimedia broadcasting and apparatus for receiving terrestrial digital multimedia broadcasting | |
| US9628780B2 (en) | Device and method for receiving digital broadcast signal | |
| CA2772927C (en) | Cable broadcast receiver and 3d video data processing method thereof | |
| JP2012039340A (ja) | 受信装置および受信方法 | |
| CN103416069A (zh) | 发送设备、发送方法、接收设备以及接收方法 | |
| US8953019B2 (en) | Method and apparatus for generating stream and method and apparatus for processing stream | |
| US20140125762A1 (en) | Transmission device, transmission method, reception apparatus, and reception method | |
| US20140049606A1 (en) | Image data transmission device, image data transmission method, image data reception device, and image data reception method | |
| JP2013090020A (ja) | 映像出力装置および映像出力方法 | |
| US20140147088A1 (en) | Transmission device, receiving/playing device, transmission method, and receiving/playing method | |
| US20130215240A1 (en) | Receiver apparatus and output method | |
| US20140327740A1 (en) | Transmission apparatus, transmisson method, receiver and receiving method | |
| US20130113883A1 (en) | Receiving device and output method | |
| US20140232823A1 (en) | Transmission device, transmission method, reception device and reception method | |
| KR20140000136A (ko) | 화상 데이터 송신 장치, 화상 데이터 송신 방법, 화상 데이터 수신 장치 및 화상 데이터 수신 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| LAPS | Lapse due to unpaid annual fee |