[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

KR101442836B1 - 가시광 통신을 이용한 영상 부가정보 제공방법 및 장치 - Google Patents

가시광 통신을 이용한 영상 부가정보 제공방법 및 장치 Download PDF

Info

Publication number
KR101442836B1
KR101442836B1 KR20080001757A KR20080001757A KR101442836B1 KR 101442836 B1 KR101442836 B1 KR 101442836B1 KR 20080001757 A KR20080001757 A KR 20080001757A KR 20080001757 A KR20080001757 A KR 20080001757A KR 101442836 B1 KR101442836 B1 KR 101442836B1
Authority
KR
South Korea
Prior art keywords
additional information
light emitting
image
visible light
emitting device
Prior art date
Application number
KR20080001757A
Other languages
English (en)
Other versions
KR20090076032A (ko
Inventor
안종훈
원은태
손재승
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR20080001757A priority Critical patent/KR101442836B1/ko
Priority to US12/319,441 priority patent/US9031376B2/en
Publication of KR20090076032A publication Critical patent/KR20090076032A/ko
Application granted granted Critical
Publication of KR101442836B1 publication Critical patent/KR101442836B1/ko
Priority to US14/598,579 priority patent/US10271009B2/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B10/00—Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/11—Arrangements specific to free-space transmission, i.e. transmission through air or vacuum
    • H04B10/114—Indoor or close-range type systems
    • H04B10/116—Visible light communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23412—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs for generating or manipulating the scene composition of objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H04N21/4725—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8545—Content authoring for generating interactive applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8583—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by creating hot-spots
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/025—Systems for the transmission of digital non-picture data, e.g. of text during the active part of a television frame
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/12—Systems in which the television signal is transmitted via one channel or a plurality of parallel channels, the bandwidth of each channel being less than the bandwidth of the television signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Optical Communication System (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명에 따른 영상 부가정보 제공 방법은 디스플레이장치를 통해 표시되는 영상에 포함된 부가정보를 제공하는 방법에 있어서, (a)영상 데이터 및 상기 영상 데이터에 포함된 객체(Object)에 대한 부가정보를 포함하는 데이터 패킷을 수신하는 과정과, (b)상기 데이터 패킷으로부터 영상 데이터를 추출하고, 상기 영상 데이터를 복호화하는 과정과, (c)상기 데이터 패킷으로부터 상기 부가정보를 추출하고, 상기 부가 정보를 복호화하는 과정과, (d)복호화된 상기 영상 데이터를 디스플레이를 통해 출력함과 동시에, 디스플레이에 구비된 발광 소자를 이용한 가시광 통신 프로토콜을 통해 영상에 포함된 특정 객체에 대한 부가정보를 전송하는 과정을 포함한다.
가시광, 영상, 부가, BIFS

Description

가시광 통신을 이용한 영상 부가정보 제공방법 및 장치{METHOD FOR PROVIDING ADDITIONAL INFORMATION OF VIDEO USING VISIBLE COMMUNICATION AND APPARATUS FOR THE SAME}
본 발명은 영상 재생 방법 및 장치에 관한 것으로서, 특히 영상에 포함된 부가정보를 다수의 사용자에게 각각 제공할 수 있는 영상 재생 방법 및 장치에 관한 것이다.
휴대용 단말을 이용하여 영상 데이터를 제공하는 서비스 중, 대표적인 것 중의 하나가 DMB(DMB : Digital Multimedia Broadcasting, 이하 ‘DMB’라 기재하도록 함.)방송이다.
DMB는 단순히 스트림(Stream) 형태의 방송 신호들만이 제공되는 것이 아니라 DMB방송국이 MPEG-4 BIFS가 적용된 디지털 멀티미디어 방송 신호를 방송한다. 여기서 상기 MPEG4-BIFS라는 것은 MPEG-4 장면 기술(description)을 말하는 것이다. 이러한 지상파 DMB는 오디오/비디오 스트림 이외에 보조 데이터로 MPEG-4 BIFS를 제공하는 데, BIFS는 화면을 객체 단위로 구성하여 이를 합성하여 화면(scene)을 구성하며, BIFS 노드(nods) 중 사용자의 입력에 반응하는 노드를 지원하여 사용자가 컨텐츠를 보면서 메뉴 및 버튼을 클릭함으로써 인터렉티브를 가능하게 한다.
일반적으로 MPEG-4는 오디오, 비디오, 그리고 객체(Object)들을 부호화할 수 있는 디지털 비트 스트림 프로토콜을 말하는 것이며, 다양한 멀티미디어 컨텐츠를 디지털로 표현하고 전송할 수 있는 규정을 의미하는 것이다. 그리고 상기 MPEG-4는 객체(Object) 기반의 표현 시스템이기 때문에 각각의 화면을 구성, 즉 컴포지션(Composition)을 하기 위한 장면 기술 정보가 필요하다.
여기서 이러한 장면 기술 정보를 BIFS라고 한다. 여기서 상기 BIFS라는 것은, MPEG-4 장면 기술 프로토콜을 말하는 것으로서 MPEG-4 객체들을 구성하고 MPEG-4 객체와의 인터페이스에 대해 기술하며 MPEG-4 객체들을 움직이도록 하며, MPEG-4 객체를 구성 및 혼합하고 상호작용을 하는데 사용되는 정보를 말하는 것이다. 따라서 이러한 MPEG-4 BIFS 기반의 디지털 멀티미디어 방송 데이터를 수신하는 디지털 멀티미디어 방송 수신 단말기는 디지털 멀티미디어 방송의 컨텐츠를 구성하는 객체들을 수신하여 이를 BIFS에 따라 구성하여 이를 사용자에게 제공한다.
이러한, MPEG-4 BIFS 기반의 디지털 멀티미디어 방송 서비스는 사용자가 컨텐츠를 보면서 메뉴 및 버튼을 클릭할 수 있도록 개인이 사용하는 휴대용 단말기에 제공되는 것이 일반적이다.
한편, 다수의 사용자를 대상으로 하는 대형 전광판 등의 대형 디스플레이 장치에 MPEG-4 BIFS 기반의 디지털 멀티미디어 방송 서비스를 제공하게 될 경우, 대형 디스플레이 장치를 통해 다수의 사용자들이 각각 개별적으로 원하는 객체를 선택할 수 있는 환경을 구현하기가 어렵다. 그리고, 다수의 사용자가 원하는 특정 데 이터를 개별적으로 제공하는 환경을 구현하기가 어렵다.
본 발명은 전술한 점을 고려하여 안출된 것으로서, 다수의 사용자에게 영상을 제공하며 가시광 통신을 지원하는 디스플레이 장치를 이용하여, 개인이 원하는 부가정보를 각각 제공할 수 있는 방법 및 장치를 제공하는데 그 목적이 있다.
상기한 목적을 달성하기 위하여 본 발명의 일 측면에 따른 영상 부가정보 제공 방법은 디스플레이장치를 통해 표시되는 영상에 포함된 부가정보를 제공하는 방법에 있어서, (a)영상 데이터 및 상기 영상 데이터에 포함된 객체에 대한 부가정보를 포함하는 데이터 패킷을 수신하는 과정과, (b)상기 데이터 패킷으로부터 영상 데이터를 추출하고, 상기 영상 데이터를 복호화하는 과정과, (c)상기 데이터 패킷으로부터 상기 부가정보를 추출하고, 상기 부가 정보를 복호화하는 과정과, (d)복호화된 상기 영상 데이터를 디스플레이를 통해 출력함과 동시에, 디스플레이에 구비된 발광 소자를 이용한 가시광 통신 프로토콜을 통해 영상에 포함된 특정 객체에 대한 부가정보를 전송하는 과정을 포함한다.
상기 가시광 통신에 사용된 발광소자는 영상에 포함된 특정 객체가 위치한 영역에 마련된 발광 소자이며, 상기 부가 정보는 상기 특정 객체에 대응하는 부가정보일 수 있다.
상기 데이터 패킷은 음성 데이터를 더 포함하며, 상기 데이터 패킷으로부터 음성 데이터를 추출하고, 상기 음성 데이터를 복호화하는 과정을 더 포함할 수 있 다.
(e)상기 특정 객체가 위치한 영역에 구비된 발광 소자로부터 발산되는 가시광 신호를 수신하는 과정과, (f)상기 객체가 위치한 영역에 구비된 발광 소자가 발산하는 파장 대역의 광 신호를 수신장치의 디스플레이에 구비된 발광 소자를 통해 표시하는 과정과, (g)상기 특정 객체가 위치한 영역에 구비된 발광 소자로부터 전송되는 상기 부가정보를 추출하고, 추출된 상기 부가정보를 제공하는 과정을 포함한다.
상기 (g)과정은 추출된 상기 부가정보를 메모리에 저장하는 과정을 더 포함한다.
상기 (g)과정은 추출된 복수의 상기 부가정보에 대한 리스트를 생성하는 과정과, 상기 부가정보 리스트를 디스플레이하는 과정과, 상기 부가정보 리스트에 포함된 어느 하나의 상기 부가정보를 선택받는 과정과, 상기 부가정보에 포함된 상세정보를 디스플레이하는 과정을 포함한다.
바람직하게, 상기 (c)과정은 선택적으로 상기 부가정보를 확보하는 과정을 더 포함할 수 있다.
본 발명의 다른 측면에 따른 영상 부가정보 제공 방법은 가시광 통신을 지원하는 이동 단말이 영상에 포함된 부가정보를 제공하는 방법에 있어서, (a)영상 데이터를 디스플레이함과 동시에 가시광 통신 프로토콜을 통해 영상에 포함된 특정 객체에 대한 부가정보를 전송하는 디스플레이장치로부터 발산되는 가시광 신호를 수신하는 과정과, (b)상기 객체가 위치한 영역에 구비된 발광 소자가 발산하는 파 장 대역의 광 신호를 수신장치의 디스플레이에 구비된 발광 소자를 통해 표시하는 과정과, (c)상기 특정 객체가 위치한 영역에 구비된 발광 소자로부터 전송되는 상기 부가정보를 추출하고, 추출된 상기 부가정보를 제공하는 과정을 포함한다.
상기 (c)과정은 추출된 상기 부가정보를 메모리에 저장하는 과정을 더 포함할 수 있다.
상기 (c)과정은 추출된 복수의 상기 부가정보에 대한 리스트를 생성하는 과정과, 상기 부가정보 리스트를 디스플레이하는 과정과, 상기 부가정보 리스트에 포함된 어느 하나의 상기 부가정보를 선택받는 과정과, 상기 부가정보에 포함된 상세정보를 디스플레이하는 과정을 포함할 수 있다.
본 발명의 또 다른 측면에 따른 영상 부가정보 전송장치는 영상에 포함된 부가정보를 제공하는 장치에 있어서, 외부로부터 입력되는 데이터 패킷으로부터 영상 데이터 및 상기 영상 데이터에 구비된 특정 객체에 대응하는 부가정보를 포함하는 데이터를 분리하는 역 다중화기와, 상기 영상 데이터를 복호화하여 영상을 복원하는 영상 복호화기와, 복원된 상기 영상을 복수의 발광 소자를 통해 디스플레이하는 디스플레이 장치와, 상기 부가정보를 포함하는 데이터를 복원하는 데이터 복호화기와, 가시광 통신 프로토콜을 기반으로 디스플레이 장치에 구비된 발광 소자를 이용하여 상기 특정 객체에 대응하는 부가정보를 전송하는 가시광 송신 장치를 포함한다.
상기 가시광 송신 장치는 영상에 포함된 특정 객체가 위치한 영역에 마련된 발광 소자를 통해 상기 특정 객체에 대응하는 부가정보를 전송한다.
상기 영상 부가정보 전송장치는 음성 데이터를 복호화하여 음성을 복원하는 음성 복호화기와, 복원된 상기 음성을 출력하는 스피커를 더 포함할 수 있다.
상기 발광소자는 발광다이오드(LED; light emitting diode)일 수 있다.
본 발명의 또 다른 측면에 따른 영상 부가정보 제공장치는 복수의 발광소자를 이용하여 영상을 디스플레이하는 장치로부터 상기 영상에 포함된 부가정보를 수신하고, 상기 부가정보를 제공하는 휴대용 단말에 있어서, 디스플레이 장치에 구비된 발광 소자로부터 발산하는 가시광 신호를 수신하여 전기적 신호로 변환하는 이미지 센서와, 가시광 통신 프로토콜에 의해, 상기 이미지 센서로부터 출력되는 신호로부터 데이터를 획득하는 가시광 수신 모듈과, 상기 가시광 수신 모듈이 획득한 데이터로부터 상기 영상 데이터의 특정 객체에 대응하는 부가정보를 추출하는 부가정보 관리부와, 상기 이미지 센서에 입력되는 가시광 신호에 대응하는 파장 대역의 색을 지시하는 신호 및 상기 부가정보 관리부로부터 제공받는 정보를 표시하는 디스플레이 장치를 포함한다.
상기 부가정보 관리부는, 추출된 상기 부가정보를 저장하는 메모리를 더 포함할 수 있다.
상기 부가정보 관리부는 추출된 복수의 상기 부가정보에 대한 리스트를 생성하고, 생성된 상기 부가정보 리스트를 디스플레이하는 것이 바람직하다.
상기 부가정보 리스트에 포함된 부가정보 중, 어느 하나의 부가정보를 선택받는 외부 입력 인터페이스를 더 포함할 수 있다.
본 발명의 영상 부가정보 전송 장치 및 영상 부가정보 제공장치에 따르면, 사용자가 시청하고 있는 화면에서 사용자가 흥미를 가지고 있는 사물(객체)에 관련된 부가 정보를 가시광 통신을 이용해서 제공해줄 수 있다.
또한, 본 발명은 전광판과 같이 다수의 사용자에게 영상을 제공하는 디스플레이 장치를 이용하여 다수의 사용자 개개인이 원하는 부가 정보를 효과적으로 제공해 줄 수 있다.
이하 본 발명에 따른 바람직한 실시예를 첨부한 도면을 참조하여 상세히 설명한다. 하기 설명에서는 구체적인 구성 소자 등과 같은 특정 사항들이 나타나고 있는데 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐 이러한 특정 사항들이 본 발명의 범위 내에서 소정의 변형이나 혹은 변경이 이루어질 수 있음은 이 기술분야에서 통상의 지식을 가진 자에게는 자명하다 할 것이다.
본 발명은 사용자가 시청하고 있는 화면에서 사용자가 흥미를 가지고 있는 사물(객체)에 관련된 부가 정보를 가시광 통신을 이용하여, 다수의 사용자에게 제공할 수 있는 방법 및 장치를 제공한다. 일반적인 BIFS를 포함하는 DMB 서비스는, 사용자가 영상에 포함된 객체를 선택하고, 선택한 객체에 별도의 인터렉션(interaction)을 수행하여, MPEG TS 자체에 포함된 정보 또는 지시하고 있는 정보의 위치를 통해 부가정보를 획득한다. 그러나, 다수의 사용자에게 영상을 제공하는 장치에서는, 다수의 사용자로부터 각각 요청되는 인터렉션(interaction)을 수행할 수 없다. 따라서, 본 발명은 인터렉션(interaction)과는 무관하게, 미리 부가정 보를 확보하고 상기 부가정보를 가시광 통신을 이용하여 제공할 수 있는 방법 및 장치를 제공한다.
이를 구현하기 위하여, 본 발명일 실시예에서 영상 부가정보 전송장치는 다수의 사용자를 대상으로 영상을 표시하는 대형 디스플레이장치에 구비됨을 예시하고, 영상 부가정보 제공장치는 상기 대형 디스플레이장치를 통해 영상을 시청하는 사용자가 소지하는 휴대용 단말(예컨대, 이동통신 단말)에 구비됨을 예시한다.
도 1은 본 발명의 일 실시예에 따른 영상 부가정보 전송장치의 블록 구성도이다. 도 1을 참조하면, 본 발명의 일 실시예에 따른 영상 부가정보 전송장치는 역다중화기(500), 영상 복호화기(510), 음성 복호화기(520), 데이터 복호화기(530), 디스플레이 장치(540), 스피커(550), 및 가시광 통신 장치(560)를 포함한다.
역다중화기(500)는 외부로부터 수신한 MPEG-TS로부터 영상데이터 스트림, 음성데이터 스트림, 및 상기 영상 또는 음성 데이터에 포함된 부가정보를 구비한 데이터 스트림을 각각 분리한다.
영상 복호화기(510)는 상기 영상데이터 스트림을 MPEG Video Coding 표준에 따라 복호화하여 영상 신호를 생성하고, 음성 복호화기(520)는 음성데이터 스트림을 MPEG audio coding 표준에 따라 부호화하여 음성 신호를 생성한다. 비록 본 발명의 실시예에서, 영사 복호화및 음성 복호화를 MPEG 표준을 기준으로 복호화하는 것을 예시하였으나, 본 발명이 이를 한정하는 것은 아니며, 영상 및 음성을 복호화할 수 있으면 충분하다.
데이터 복호화기(530)는 상기 데이터 스트림을 상기 영상 또는 음성 데이터 에 포함된 부가정보를 구비한 데이터로 복호화하고, 가시광 통신 장치(560)에 제공한다. 상기 부가정보는 상기 영상에 포함된 적어도 하나의 객체(Object)에 대한 정보를 포함한다. 예컨대, 상기 부가정보는 객체가 포함된 영상 프레임을 지시하는 식별자, 상기 영상 프레임 내에서 객체가 마련된 위치에 대한 정보, 상기 객체의 식별자, 상기 객체의 명칭, 상기 객체에 대한 상세정보를 포함할 수 있다.
디스플레이 장치(540)는 영상 복호화기(510)로 제공받은 영상 신호를 표시한다. 디스플레이 장치(540)는 복수의 발광 소자를 구비한다. 디스플레이 장치(540)에 구비된 각 화소는 가시광 영역의 파장 대역의 광을 표현할 수 있는 발광소자를 구비할 수 있다. 바람직하게, 상기 발광소자는 적색광, 녹색광, 청색광을 발산하는 발광다이오드를 구비할 수 있다.
나아가, 상기 발광소자는 TFT-LCD로 이루어진 디스플레이 장치(540)에 백 라이트 유닛으로 구비되며, 온-오프 제어가 가능한 발광 다이오드(LED : Light Emitting Diode)일 수도 있다.
스피커(550)는 상기 음성 복호화부(520)를 통해 복원된 상기 음성 신호를 출력한다.
가시광 통신 장치(560)는 데이터 복호화기(530)로부터 수신한 상기 부가정보를 가시광 통신 프로토콜을 기반으로 전송한다. 가시광 통신 장치(560)는 상기 부가정보에 포함된 객체가 포함된 영상 프레임을 지시하는 식별자, 상기 영상 프레임 내에서 객체가 마련된 위치에 대한 정보, 및 상기 객체의 식별자를 참조하여, 상기 객체의 위치에 대응하는 영역에 구비된 발광소자를 매개로하여 상기 부가정보를 전 송한다.
도 2는 본 발명의 일 실시예에 따른 디스플레이 장치에 표시되는 영상의 일 예시도 이다. 도 2를 참조하면, 디스플레이 장치(540)는 내부에 구비된 발광소자를 통해, 점퍼를 입고 선글라스를 착용한 인물을 포함하는 영상 프레임을 표현한다. 상기 영상 프레임에서, 상기 점퍼 및 선글라스는 상기 객체로 지정될 수 있으며, 가시광 통신 장치(560)는 영상 프레임 내에 상기 점퍼 및 선글라스가 위치한 영역(561,565)의 발광소자에 가시광 통신 프로토콜에 의해 정해진 가시광 변조신호를 전달한다. 이로써, 상기 점퍼 및 선글라스가 위치한 영역의 발광소자는 각 객체에 대응하는 부가정보를 전송하게 된다.
도 3은 본 발명의 일 실시예에 따른 영상 부가정보 제공 장치의 블록 구성도이다. 도 3을 참조하면, 본 발명에 따른 영상 부가정보 제공 장치는 이미지 센서모듈(610), 디스플레이모듈(620), 가시광 수신 모듈(630), 부가정보 관리부(640) 및 제어부(660)를 포함한다.
이미지 센서모듈(610)은 가시광 파장 대역의 광 신호를 전기적 신호로 변환하는 복수의 이미지 센서를 포함한다.
디스플레이모듈(620)은 상기 이미지 센서모듈(610)에 구비된 복수의 이미지 센서를 통해 변환되는 신호를 가시광 파장 대역의 광 신호로 변환하여 표시한다.
가시광 수신모듈(630)은 상기 이미지 센서모듈(610)에 구비된 복수의 이미지 센서를 통해 수신된 신호를 가시광 통신 프로토콜에 적용함으로써, 가시광 통신을 통해 전송되는 데이터를 획득한다. 상기 가시광 통신을 통해 전송되는 데이터는 상 기 부가정보를 포함한다. 예컨대, 상기 부가정보는 MPEG의 BIFS 정보일 수 있다.
부가정보 관리부(640)는 상기 가시광 수신모듈(630)을 통해 획득한 부가정보를 제공받으며, 상기 부가정보들의 리스트를 생성한다.
나아가, 영상 부가정보 제공 장치는 영상 부가정보 제공 장치의 전반적인 기능들과 관련된 정보를 저장하는 메모리(650)를 더 포함할 수 있다. 그리고, 부가정보 관리부(640)는 상기 부가정보들의 리스트 및 상기 가시광 수신모듈(630)로부터 제공받은 부가정보를 상기 메모리(650)에 저장시킨다.
또한, 부가정보 관리부(640)는 상기 부가정보들의 리스트를 디스플레이모듈(620)에 제공한다.
바람직하게, 본 발명의 실시예에 따른 영상 부가정보 제공 장치는 사용자와의 인터페이스를 위한 장치로서 구비된 외부 입력장치(660)를 더 구비할 수 있다. 외부 입력장치(660)는 영상 부가정보 제공 장치의 외부에 마련된 키 및 상기 키의 입력에 대응하여 그 고유의 키 입력 데이터를 출력하는 장치이다.
제어부(670)는 영상 부가정보 제공 장치에 구비된 장치들의 전반적인 동작을 제어한다. 특히, 제어부(670)는 외부 입력장치(660)로부터의 상기 키 입력 데이터가 어떠한 키 입력인지를 확인하고, 그 결과에 대응하는 동작을 수행한다. 예컨대, 부가정보 관리부(640)가 제공하는 상기 부가정보들의 리스트가 디스플레이모듈(620)을 통해 표시되면, 사용자는 외부 입력장치(660)를 통해 상기 부가정보들의 리스트 중 어느 하나의 부가 정보를 선택할 수 있다. 이때, 제어부(670)는 외부 입력장치(660)로부터의 상기 키 입력 데이터가 어떠한 키 입력인지를 확인하고, 메모 리에 저정된 부가정보를 추출하여 디스플레이모듈(620)을 통해 표시하게 된다.
나아가, 영상 부가정보 제공 장치는 음성 또는 화상 통신을 지원하는 통상의 이동통신 단말에 구비될 수 있으며, 이러한 구성을 가지는 이동통신 단말은 통상적인 이동통신 서비스 관련 동작을 수행하면서, 영상 부가정보 제공 장치의 동작을 더 수행할 수 있도록 구현될 수 있다.
이하, 전술한 구성요소 및 도 4를 참조하여 본 발명의 일 실시예에 따른 영상 부가정보 전송장치의 동작을 설명함으로써, 본 발명의 일 실시예에 따른 영상 부가정보 전송방법의 진행 과정을 설명한다.
우선, 710단계에서는 영상 부가정보 전송장치가 외부로부터 MPEG TS를 수신한다.
720단계에서는, 역다중화기(500)는 수신한 MPEG TS를 정해진 형식에 따라 영상데이트 스트림, 음성데이터 스트림, 데이터스트림으로 분리한다.
다음으로, 730단계에서는 영상데이터 스트림, 음성데이터 스트림, 데이터 스트림을 각각 복원하게 된다. 즉, 상기 영상 복호화부(510)는 MPEG TS 중 압축된 영상데이터 스트림을 원래의 영상 신호로 복원하고, 음성복호화부(520)는 MPEG TS 중 압축된 음성데이터 스트림을 원래의 음성 신호로 복원한다. 그리고, 상기 데이터 복호화부(530)는 MPEG TS 중 데이터 스트림을 부가정보를 포함하는 원래의 데이터로 복원한다.
740단계에서는, 디스플레이 장치를 통해 전송할 부가정보를 획득한다. 즉, 상기 데이터 복호화부(530)를 통해서 복원된 부가정보를 포함하는 데이터는 상기 가시광 송신장치(560)로 전달된다. 그리고 가시광 송신징치(560)는 상기 부가정보를 포함하는 데이터를 가시광 통신 프로토콜에 기초한 전송 패킷으로 변환한다.
바람직하게, 상기 부가정보는 상기 객체가 포함된 영상 프레임을 지시하는 식별자, 상기 영상 프레임 내에서 객체가 마련된 위치에 대한 정보, 및 상기 객체의 식별자를 포함하는 정보를 직접적으로 구비할 수 있다.
또한, 상기 부가정보는 상기 객체에 대한 정보가 저장된 위치를 지시하는 URL 등의 정보일 수 있다. 이러한 경우, 740단계에서는 상기 객체에 대한 정보가 저장된 위치로부터 상기 객체에 대한 정보 즉, 상기 객체가 포함된 영상 프레임을 지시하는 식별자, 상기 영상 프레임 내에서 객체가 마련된 위치에 대한 정보, 및 상기 객체의 식별자를 포함하는 정보를 요청하고 획득하는 과정을 더 포함한다.
750단계에서는, 이와 같이 복원된 신호 중, 영상 신호는 디스플레이 장치(540)로 전달되어 출력되고, 음성 신호는 스피커(550)로 전달되어 출력된다.
다음으로, 가시광 송신징치(560)는 상기 부가정보에 포함된 합성객체의 영상 내의 위치를 고려하여, 변환된 상기 전송 패킷을 디스플레이 장치(540)에 구비된 발광 소자를 통해 전송한다(760단계). 예컨대, 디스플레이 장치(540)가 도 2와 같은 영상을 표시하는 경우, 가시광 송신징치(560)는 객체로 지정된 점퍼 및 선글라스에 대한 부가정보를 수신하고, 상기 부가정보에 대한 전송패킷을 각각 생성한다. 그리고, 가시광 송신징치(560)는 상기 부가정보로부터 객체로 지정된 점퍼가 영상 내에 위치하는 영역(561)을 확인한 후, 객체로 지정된 점퍼가 영상 내에 위치하는 영역(561)에 마련된 발광 소자를 통해 전송 패킷을 전송한다. 이와 마찬가지로, 가 시광 송신징치(560)는 객체로 지정된 선글라스가 영상 내에 위치하는 영역(565)을 확인하고, 객체로 지정된 선글라스가 영상 내에 위치하는 영역(565)에 마련된 발광 소자를 통해 전송 패킷을 전송한다.
이하, 전술한 구성요소 및 도 5를 참조하여 본 발명의 일 실시예에 따른 영상 부가정보 제공장치의 동작을 설명함으로써, 본 발명의 일 실시예에 따른 영상 부가정보 제공방법의 진행 과정을 설명한다.
우선, 영상 부가정보 제공장치에 구비된 이미지 센서모듈(610)을 영상 부가정보 전송 장치에 구비된 디스플레이장치(540)를 향하게 함으로써, 이미지 센서모듈(610)이 전송 장치에 구비된 디스플레이장치(540)로부터 발생되는 광 신호를 수신하고, 수신된 광신호를 전기적 신호로 변환한다(910단계).
다음으로, 디스플레이모듈(620)은 상기 이미지 센서모듈(610)에 구비된 복수의 이미지 센서를 통해 변환된 신호에서 색을 지시하는 신호를 획득(920단계)하고, 획득한 상기 색을 지시하는 신호를 디스플레이모듈(620)의 화면 크기에 맞추어 출력하게 된다(930단계).
한편, 가시광 수신모듈(630)은 상기 이미지 센서모듈(610)에 구비된 복수의 이미지 센서를 통해 수신된 신호를 가시광 통신 프로토콜에 적용하여, 가시광 통신을 통해 전송되는 데이터를 확인하고, 영상 부가정보 전송 장치가 전송하는 상기 부가정보를 획득한다(940).
그리고, 950단계에서는 획득한 상기 부가정보를 디스플레이모듈(620)을 통해 표시한다.
나아가, 일 실시예에 따른 영상 부가정보 제공 방법은 상기 부가정보들에 대한 리스트를 이용하여 사용자에게 선택적으로 부가정보를 제공하는 과정을 더 포함하는 것이 바람직하다.
이하, 도 6을 참조하여, 본 발명의 일 실시예에 따른 영상 부가정보 제공 방법에서 부가정보들에 대한 리스트를 이용하여 사용자에게 선택적으로 부가정보를 제공하는 과정의 순서를 설명한다.
부가정보 관리부(640)는 복수의 상기 부가정보를 수신하고 상기 부가정보들에 대한 리스트를 생성하고, 상기 부가정보들에 대한 리스트 디스플레이모듈(620)에 제공한다(941단계).
942단계에서는 디스플레이모듈(620)이 상기 부가정보들에 대한 리스트를 표시한다.
그러면, 사용자와의 인터페이스를 위한 장치로서 구비된 외부 입력장치(660)(예컨대, 키 패드)를 통해 상기 부가정보들에 대한 리스트 중 어느 하나의 부가정보를 선택받는 정보를 수신한다(943단계).
다음으로, 944단계에서는 부가정보 관리부(640)는 메모리(650)에 저장된 복수의 부가정보 중, 선택된 상기 부가정보를 추출하고, 디스플레이모듈(620)에 제공한다.
전술한 영상 부가정보 전송 장치 및 영상 부가정보 제공장치에 따르면, 본 발명은MPEG의 BIFS 정보를 이용해서 사용자가 시청하고 있는 화면에서 사용자가 흥미를 가지고 있는 사물(객체)에 관련된 부가 정보를 가시광 통신을 이용해서 제공 해줄 수 있다. 나아가, 본 발명은 전광판과 같이 다수의 사용자에게 영상을 제공하는 디스플레이 장치를 이용하여 다수의 사용자 개개인이 원하는 부가 정보를 효과적으로 제공해 줄 수 있다.
이상에서 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 이것에 의해 한정되지 않으며 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 수정 및 변형이 가능함은 물론이다.
도 1은 본 발명의 일 실시예에 따른 영상 부가정보 전송장치의 블록 구성도
도 2는 본 발명의 일 실시예에 따른 영상 부가정보 전송장치를 통해 표시되는 영상의 일 예시도
도 3은 본 발명의 일 실시예에 따른 영상 부가정보 제공 장치의 블록 구성도
도 4는 본 발명의 일 실시예에 따른 영상 부가정보 전송방법의 흐름도
도 5는 본 발명의 일 실시예에 따른 영상 부가정보 제공방법의 흐름도
도 6은 본 발명의 다른 실시예에 따른 영상 부가정보 전송방법의 흐름도

Claims (19)

  1. 디스플레이장치를 통해 표시되는 영상에 포함된 부가정보를 제공하는 방법에 있어서,
    (a)영상 데이터 및 상기 영상 데이터에 포함된 객체에 대한 부가정보를 포함하는 데이터 패킷을 수신하는 과정과,
    (b)상기 데이터 패킷으로부터 영상 데이터를 추출하고, 상기 영상 데이터를 복호화하는 과정과,
    (c)상기 데이터 패킷으로부터 상기 부가정보를 추출하고, 상기 부가 정보를 복호화하는 과정과,
    (d)복호화된 상기 영상 데이터를 디스플레이를 통해 출력함과 동시에, 복수의 발광 소자 중, 제1 발광소자 및 제2발광소자는 각각 영상 내의 제1객체가 위치한 제1영역 및 제2객체가 위치한 제2영역 내에 구비되고, 상기 제1객체 및 제2객체와 연관되어 추출된 부가정보를 표현하는 제1가시광 신호 및 제2가시광 신호를 출력하는 과정과,
    (e)상기 제1객체가 위치한 상기 제1영역 및 상기 제2객체가 위치한 상기 제2영역에 구비된 상기 제1 발광소자 및 제2발광소자로부터 발산되는 상기 제1가시광 신호 및 제2가시광 신호를 수신하는 과정과,
    (f)상기 제1 발광소자 및 제2발광소자가 발산하는 파장 대역의 광 신호를 수신장치의 디스플레이에 구비된 발광 소자를 통해 표시하는 과정과,
    (g)상기 제1객체 및 제2객체가 위치한 영역에 구비된 상기 제1 발광소자 및 제2발광소자로부터 전송되는 상기 부가정보를 추출하고, 추출된 상기 부가정보를 제공하는 과정을 포함하며,
    상기 부가정보를 제공하는 과정은,
    추출된 복수의 상기 부가정보에 대한 리스트를 생성하는 과정과,
    상기 부가정보 리스트 중, 선택된 적어도 하나의 상기 부가정보에 포함된 상세정보를 제공하는 과정을 포함함을 특징으로 하는 가시광 통신을 이용한 영상 부가정보 제공 방법.
  2. 제1항에 있어서, 상기 가시광 통신에 사용된 발광소자는 영상에 포함된 특정 객체가 위치한 영역에 마련된 발광 소자이며, 상기 부가 정보는 상기 특정 객체에 대응하는 부가정보인 것을 특징으로 하는 가시광 통신을 이용한 영상 부가정보 제공 방법.
  3. 제1항에 있어서,
    상기 데이터 패킷은 음성 데이터를 더 포함하며,
    상기 데이터 패킷으로부터 음성 데이터를 추출하고, 상기 음성 데이터를 복호화하는 과정을 더 포함하는 것을 특징으로 하는 가시광 통신을 이용한 영상 부가정보 제공 방법.
  4. 삭제
  5. 제1항에 있어서, 상기 (g)과정은
    추출된 상기 부가정보를 메모리에 저장하는 과정을 더 포함함을 특징으로 하는 가시광 통신을 이용한 영상 부가정보 제공 방법.
  6. 제1항에 있어서, 상기 (g)과정은
    추출된 복수의 상기 부가정보에 대한 리스트를 생성하는 과정과,
    상기 부가정보 리스트를 디스플레이하는 과정과,
    상기 부가정보 리스트에 포함된 어느 하나의 상기 부가정보를 선택받는 과정과,
    상기 부가정보에 포함된 상세정보를 디스플레이하는 과정을 포함함을 특징으로 하는 가시광 통신을 이용한 영상 부가정보 제공 방법.
  7. 제1항에 있어서, 상기 (c)과정은 선택적으로 상기 부가정보를 요청하여 확보하는 과정을 더 포함하는 것을 특징으로 하는 가시광 통신을 이용한 영상 부가정보 제공 방법.
  8. 가시광 통신을 지원하는 이동 단말이 영상에 포함된 부가정보를 제공하는 방법에 있어서,
    (a)영상 데이터를 디스플레이함과 동시에 가시광 통신 프로토콜을 통해 영상 내에서, 제1객체가 위치한 제1영역 및 제2객체가 위치한 제2영역에 구비된 제1 발광소자 및 제2발광소자로부터 발산되는 제1가시광 신호 및 제2가시광 신호를 수신하는 과정과,
    (b)상기 제1 발광소자 및 제2발광소자가 발산하는 파장 대역의 광 신호를 수신장치의 디스플레이에 구비된 발광 소자를 통해 표시하는 과정과,
    (c)상기 제1객체 및 제2객체가 위치한 영역에 구비된 상기 제1 발광소자 및 제2발광소자로부터 전송되는 상기 부가정보를 추출하고, 추출된 상기 부가정보를 제공하는 과정을 포함하며,
    상기 부가정보를 제공하는 과정은,
    추출된 복수의 상기 부가정보에 대한 리스트를 생성하는 과정과,
    상기 부가정보에 대한 리스트 중, 선택된 적어도 하나의 상기 부가정보에 해당되는 상세정보를 제공하는 과정을 포함함을 특징으로 하는 가시광 통신을 이용한 영상 부가정보 제공 방법.
  9. 제8항에 있어서, 상기 (c)과정은
    추출된 상기 부가정보를 메모리에 저장하는 과정을 더 포함함을 특징으로 하는 가시광 통신을 이용한 영상 부가정보 제공 방법.
  10. 제8항에 있어서, 상기 (c)과정은
    추출된 복수의 상기 부가정보에 대한 리스트를 생성하는 과정과,
    상기 부가정보 리스트를 디스플레이하는 과정과,
    상기 부가정보 리스트에 포함된 어느 하나의 상기 부가정보를 선택받는 과정과,
    상기 부가정보에 포함된 상세정보를 디스플레이하는 과정을 포함함을 특징으로 하는 가시광 통신을 이용한 영상 부가정보 제공 방법.
  11. 삭제
  12. 삭제
  13. 삭제
  14. 삭제
  15. 복수의 발광소자를 이용하여 영상을 디스플레이하는 장치로부터 상기 영상에 포함된 부가정보를 수신하고, 상기 부가정보를 제공하는 휴대용 단말에 있어서,
    복호화된 영상 데이터를 디스플레이를 통해 출력함과 동시에 제공되며, 제1객체가 위치한 제1영역 및 제2객체가 위치한 제2영역에 구비된 제1 발광소자 및 제2발광소자로부터 발산되는 제1가시광 신호 및 제2가시광 신호를 수신하여 전기적 신호로 변환하는 이미지 센서와,
    가시광 통신 프로토콜에 의해, 상기 제1객체 및 제2객체가 위치한 영역에 구비된 상기 제1 발광소자 및 제2발광소자로부터 전송되는 상기 부가정보 데이터를 획득하는 가시광 수신 모듈과,
    상기 가시광 수신 모듈이 획득한 데이터로부터, 영상 내에 포함된 상기 제1객체 및 제2객체에 대응하는 부가정보를 추출하는 부가정보 관리부와,
    상기 이미지 센서에 입력되는 가시광 신호에 대응하는 파장 대역의 색을 지시하는 신호 및 상기 부가정보 관리부로부터 제공받는 정보를 표시하는 디스플레이 장치를 포함하며,
    상기 부가정보 관리부는,
    추출된 복수의 상기 부가정보에 대한 리스트를 생성 및 제공하고, 상기 부가정보에 대한 리스트 중, 선택된 적어도 하나의 상기 부가정보에 해당되는 상세정보를 제공하는 것을 특징으로 하는 가시광 통신을 이용한 영상 부가정보 제공장치.
  16. 제15항에 있어서, 추출된 상기 부가정보를 저장하는 메모리를 더 포함함을 특징으로 하는 가시광 통신을 이용한 영상 부가정보 제공장치.
  17. 삭제
  18. 제15항에 있어서,
    상기 부가정보에 대한 리스트에 포함된 부가정보 중, 적어도 하나의 부가정보를 선택받는 외부 입력 인터페이스를 더 포함하는 것을 특징으로 하는 가시광 통신을 이용한 영상 부가정보 제공장치.
  19. 외부로부터 입력되는 데이터 패킷으로부터 영상 데이터 및 상기 영상 데이터에 구비된 특정 객체에 대응하는 부가정보를 포함하는 데이터를 분리하는 역 다중화기와, 상기 영상 데이터를 복호화하여 영상을 복원하는 영상 복호화기와, 복원된 상기 영상을 복수의 발광 소자를 통해 디스플레이하는 디스플레이 장치와, 상기 부가정보를 포함하는 데이터를 복원하는 데이터 복호화기와, 복호화된 상기 영상 데이터를 디스플레이를 통해 출력함과 동시에, 복수의 발광 소자 중, 제1 발광소자 및 제2발광소자는 각각 영상 내의 제1객체가 위치한 제1영역 및 제2객체가 위치한 제2영역 내에 구비되고, 상기 제1객체 및 제2객체와 연관되어 추출된 부가정보를 표현하는 제1가시광 신호 및 제2가시광 신호를 전송하는 가시광 송신 장치를 포함하는 영상표시장치와,
    복호화된 상기 영상 데이터를 디스플레이를 통해 출력함과 동시에 제공되며, 상기 제1객체가 위치한 제1영역 및 상기 제2객체가 위치한 제2영역에 구비된 상기 제1 발광소자 및 제2발광소자로부터 발산되는 상기 제1가시광 신호 및 제2가시광 신호를 수신하여 전기적 신호로 변환하는 이미지 센서와, 가시광 통신 프로토콜에 의해, 상기 제1객체 및 제2객체가 위치한 영역에 구비된 상기 제1 발광소자 및 제2발광소자로부터 전송되는 상기 부가정보 데이터를 획득하는 가시광 수신 모듈과, 상기 가시광 수신 모듈이 획득한 데이터로부터, 영상 내에 포함된 상기 제1객체 및 제2객체에 대응하는 부가정보를 추출하는 부가정보 관리부와, 상기 이미지 센서에 입력되는 가시광 신호에 대응하는 파장 대역의 색을 지시하는 신호 및 상기 부가정보 관리부로부터 제공받는 정보를 표시하는 디스플레이 장치를 포함하는 휴대용 단말을 포함하며,
    상기 부가정보 관리부는,
    추출된 복수의 상기 부가정보에 대한 리스트를 생성 및 제공하고, 상기 부가정보에 대한 리스트 중, 선택된 적어도 하나의 상기 부가정보에 해당되는 상세정보를 제공하는 것을 특징으로 하는 가시광 통신을 이용한 영상 부가정보 제공 시스템.
KR20080001757A 2008-01-07 2008-01-07 가시광 통신을 이용한 영상 부가정보 제공방법 및 장치 KR101442836B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR20080001757A KR101442836B1 (ko) 2008-01-07 2008-01-07 가시광 통신을 이용한 영상 부가정보 제공방법 및 장치
US12/319,441 US9031376B2 (en) 2008-01-07 2009-01-07 Method and apparatus for providing additional information of video using visible light communication
US14/598,579 US10271009B2 (en) 2008-01-07 2015-01-16 Method and apparatus for providing additional information of video using visible light communication

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20080001757A KR101442836B1 (ko) 2008-01-07 2008-01-07 가시광 통신을 이용한 영상 부가정보 제공방법 및 장치

Publications (2)

Publication Number Publication Date
KR20090076032A KR20090076032A (ko) 2009-07-13
KR101442836B1 true KR101442836B1 (ko) 2014-11-04

Family

ID=40844638

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20080001757A KR101442836B1 (ko) 2008-01-07 2008-01-07 가시광 통신을 이용한 영상 부가정보 제공방법 및 장치

Country Status (2)

Country Link
US (2) US9031376B2 (ko)
KR (1) KR101442836B1 (ko)

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7644282B2 (en) 1998-05-28 2010-01-05 Verance Corporation Pre-processed information embedding system
US6737957B1 (en) 2000-02-16 2004-05-18 Verance Corporation Remote control signaling using audio watermarks
WO2004036352A2 (en) 2002-10-15 2004-04-29 Verance Corporation Media monitoring, management and information system
US20060239501A1 (en) 2005-04-26 2006-10-26 Verance Corporation Security enhancements of digital watermarks for multi-media content
US8020004B2 (en) 2005-07-01 2011-09-13 Verance Corporation Forensic marking using a common customization function
US8781967B2 (en) 2005-07-07 2014-07-15 Verance Corporation Watermarking in an encrypted domain
US8873933B2 (en) * 2008-10-09 2014-10-28 Samsung Electronics Co., Ltd Method for operating additional information of video using visible light communication and apparatus for the same
KR101621095B1 (ko) * 2009-09-16 2016-05-16 삼성전자주식회사 디스플레이를 통한 부가 정보 제공 방법 및 장치
WO2011071275A2 (ko) * 2009-12-11 2011-06-16 광주과학기술원 컨트롤 정보를 이용한 촉각 정보 표현 방법 및 촉각 정보 전송 시스템
US8838977B2 (en) 2010-09-16 2014-09-16 Verance Corporation Watermark extraction and content screening in a networked environment
KR20130013716A (ko) * 2011-07-28 2013-02-06 삼성전자주식회사 Ｌｅｄ 백라이트유닛을 구비한 정보 디스플레이 장치에서의 가시광 통신 방법 및 이를 위한 정보 디스플레이 장치
KR20130013720A (ko) * 2011-07-28 2013-02-06 삼성전자주식회사 Ｌｅｄ 백라이트유닛을 구비한 정보 디스플레이 장치에서의 가시광 통신 방법 및 이를 위한 정보 디스플레이 장치
US8923548B2 (en) 2011-11-03 2014-12-30 Verance Corporation Extraction of embedded watermarks from a host content using a plurality of tentative watermarks
WO2013074947A2 (en) * 2011-11-18 2013-05-23 Rubriq Corporation Method and apparatus for enabling recipient interaction with a content stream
US9323902B2 (en) 2011-12-13 2016-04-26 Verance Corporation Conditional access using embedded watermarks
KR101974366B1 (ko) * 2012-02-10 2019-05-03 삼성전자주식회사 디지털 정보 디스플레이 장치에서 영상 내 각 객체에 대한 부가 정보를 제공하기 위한 방법 및 이를 위한 디지털 정보 디스플레이 장치 그리고 상기 부가 정보를 제공받는 가시광 통신 단말
WO2013152801A1 (en) * 2012-04-13 2013-10-17 Telefonaktiebolaget L M Ericsson (Publ) An improved method and apparatus for providing extended tv data
KR101376908B1 (ko) * 2012-05-09 2014-04-01 영남대학교 산학협력단 가시광 통신 신호에 기초한 영상 내 객체 검출
US9571606B2 (en) 2012-08-31 2017-02-14 Verance Corporation Social media viewing system
US8869222B2 (en) * 2012-09-13 2014-10-21 Verance Corporation Second screen content
US9106964B2 (en) 2012-09-13 2015-08-11 Verance Corporation Enhanced content distribution using advertisements
US8942571B2 (en) * 2012-12-24 2015-01-27 Industrial Technology Research Institute Apparatus and method for data embedding in light communication and the light communication system and method thereof
WO2014153199A1 (en) 2013-03-14 2014-09-25 Verance Corporation Transactional video marking system
US9251549B2 (en) 2013-07-23 2016-02-02 Verance Corporation Watermark extractor enhancements based on payload ranking
US9208334B2 (en) 2013-10-25 2015-12-08 Verance Corporation Content management using multiple abstraction layers
KR101511442B1 (ko) * 2013-10-28 2015-04-13 서울과학기술대학교 산학협력단 카메라를 통해 ｌｅｄ-ｉｄ/ｒｆ 통신을 수행하는 스마트 디바이스와 이를 이용한 위치 기반 서비스 제공 시스템 및 방법
EP3117626A4 (en) 2014-03-13 2017-10-25 Verance Corporation Interactive content acquisition using embedded codes
US20150358079A1 (en) * 2014-06-04 2015-12-10 Grandios Technologies, Llc Visible light communication in a mobile electronic device
DE102014008405A1 (de) * 2014-06-13 2015-12-17 Technische Universität Dortmund Optische Freiraumübertragung
WO2016007426A1 (en) 2014-07-07 2016-01-14 Immersion Corporation Second screen haptics
US9735868B2 (en) * 2014-07-23 2017-08-15 Qualcomm Incorporated Derivation of an identifier encoded in a visible light communication signal
US10389444B2 (en) * 2015-12-28 2019-08-20 Casio Computer Co., Ltd. Image processing apparatus, image processing system, image processing method, and recording medium
US9893808B2 (en) 2016-03-18 2018-02-13 Target Brands, Inc. VLC location data applications in a retail setting
CN107425907B (zh) * 2017-05-02 2020-10-30 中国人民解放军信息工程大学 基于可见光的数据传输方法、装置及系统
KR102351498B1 (ko) * 2018-01-09 2022-01-14 삼성전자주식회사 데이터 처리 방법 및 그에 따른 전자 장치
CN108337557B (zh) * 2018-02-11 2020-09-22 南昌大学 一种可见光多屏幕同屏显示装置和方法
CN112152718B (zh) * 2019-06-28 2022-09-30 Oppo广东移动通信有限公司 信息识别方法、装置、智能穿戴设备及存储设备
CN112954374B (zh) * 2021-01-28 2023-05-23 广州虎牙科技有限公司 视频数据处理方法、装置、电子设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004072365A (ja) * 2002-08-06 2004-03-04 Sony Corp 光通信装置、光通信データ出力方法、および光通信データ解析方法、並びにコンピュータ・プログラム
JP2007135078A (ja) * 2005-11-11 2007-05-31 Ntt Communications Kk データ通信装置、データ通信方法およびデータ通信プログラム

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5940139A (en) * 1996-08-07 1999-08-17 Bell Communications Research, Inc. Background extraction in a video picture
CN1128542C (zh) * 1998-04-03 2003-11-19 松下电器产业株式会社 便携式视听系统
KR100595154B1 (ko) * 1999-01-26 2006-07-03 엘지전자 주식회사 티브이 프로그램(ＴＶ ｐｒｏｇｒａｍ)에서의 오브젝트 캡쳐장치
US7343617B1 (en) * 2000-02-29 2008-03-11 Goldpocket Interactive, Inc. Method and apparatus for interaction with hyperlinks in a television broadcast
WO2001093473A2 (en) * 2000-05-31 2001-12-06 Optinetix (Israel) Ltd. Systems and methods for distributing information through broadcast media
US7583901B2 (en) * 2002-10-24 2009-09-01 Nakagawa Laboratories, Inc. Illuminative light communication device
KR100999768B1 (ko) * 2003-09-17 2010-12-08 엘지전자 주식회사 디지털 멀티미디어 방송 수신기의 부가정보 저장 및이용방법
US7952555B2 (en) * 2003-11-19 2011-05-31 Eizo Nanao Corporation Luminance control method, liquid crystal display device and computer program
US7570246B2 (en) * 2005-08-01 2009-08-04 Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. Method and apparatus for communication using pulse-width-modulated visible light
WO2007032394A1 (ja) * 2005-09-13 2007-03-22 Nikon Corporation データ通信装置、電子カメラおよびデータ通信システム
KR100738685B1 (ko) * 2005-09-27 2007-07-11 주식회사 케이티 양방향 방송 서비스를 이용한 부가정보 제공 장치 및 그방법
TW200746655A (en) * 2005-11-18 2007-12-16 Sony Corp Encoding device and method, decoding device and method, and transmission system
KR101438387B1 (ko) * 2006-07-12 2014-09-05 삼성전자주식회사 서라운드 확장 데이터 부호화 및 복호화 방법 및 장치
JP4440239B2 (ja) * 2006-08-18 2010-03-24 富士フイルム株式会社 距離画像作成方法及び距離画像センサ、及び撮影装置
KR100770918B1 (ko) * 2006-10-20 2007-10-26 삼성전자주식회사 가시광 통신 장치에서 현재 상태에 따라 방출되는 가시광색 제어 장치 및 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004072365A (ja) * 2002-08-06 2004-03-04 Sony Corp 光通信装置、光通信データ出力方法、および光通信データ解析方法、並びにコンピュータ・プログラム
JP2007135078A (ja) * 2005-11-11 2007-05-31 Ntt Communications Kk データ通信装置、データ通信方法およびデータ通信プログラム

Also Published As

Publication number Publication date
US20090175594A1 (en) 2009-07-09
US10271009B2 (en) 2019-04-23
US20150124173A1 (en) 2015-05-07
US9031376B2 (en) 2015-05-12
KR20090076032A (ko) 2009-07-13

Similar Documents

Publication Publication Date Title
KR101442836B1 (ko) 가시광 통신을 이용한 영상 부가정보 제공방법 및 장치
KR100904015B1 (ko) 멀티동영상컨텐츠 탐색 서비스 제공 시스템 및 그 방법
KR101539778B1 (ko) 부팅 중에 사용자에게 정보를 제공할 수 있는 디스플레이 장치 및 그 구동 방법
KR101281845B1 (ko) 스케일러블 비디오 전송 단말 장치에 대한 비주얼 프로그램 가이드 장치 및 방법
US20160261927A1 (en) Method and System for Providing and Displaying Optional Overlays
US11985291B2 (en) Reception device, display control method, transmission device, and transmission method for program content type
KR101615763B1 (ko) 가시광 통신을 이용한 영상 부가정보 운영방법 및 이를 위한 장치
US20100088736A1 (en) Enhanced video processing functionality in auxiliary system
US20160057488A1 (en) Method and System for Providing and Displaying Optional Overlays
KR101670560B1 (ko) 3-차원 비디오 콘텐츠로의 삽입을 위해 2-차원 비디오 콘텐츠를 변환하는 방법 및 장치
KR20130066168A (ko) 에이치디엠아이 신호로 방송 수신기의 듀얼 디스플레이를 위한 휴대용 단말기의 장치 및 방법
KR20150009122A (ko) 지역 광고를 합성하는 서버 및 장치, 그리고 영상 스트림을 합성하는 서버
US11936936B2 (en) Method and system for providing and displaying optional overlays
US20100194845A1 (en) Television system and control method thereof
US20130215240A1 (en) Receiver apparatus and output method
KR101902320B1 (ko) 디스플레이장치, 이에 연결되는 외장형 주변장치 및 영상표시방법
JP5265468B2 (ja) 映像受信装置及び表示装置
JP2006217662A (ja) ディジタル放送受信装置
KR20170130883A (ko) 하이브리드 망 기반의 가상 현실 방송 서비스 방법 및 장치
KR101587442B1 (ko) 타겟팅 증강 콘텐츠 제공 시스템, 증강 콘텐츠 제공 방법 및 장치, 증강 콘텐츠 등록 방법 및 장치
JP6855193B2 (ja) 放送受信システム
US9154729B2 (en) Television receiving apparatus and control method for television receiving apparatus
KR101100779B1 (ko) 정보 제작 구성이 결합된 ｈｄ 디지털 방송 신호 송출 시스템 및 그 방법
WO2013151077A1 (ja) コンテンツ表示制御装置及びプログラム
JP2021101582A (ja) 放送受信システム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
J201 Request for trial against refusal decision
AMND Amendment
B701 Decision to grant
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170830

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180830

Year of fee payment: 5