[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

KR20170016744A - 메타 데이터를 이용한 디바이스 원격 제어 장치 및 방법 - Google Patents

메타 데이터를 이용한 디바이스 원격 제어 장치 및 방법 Download PDF

Info

Publication number
KR20170016744A
KR20170016744A KR1020150110222A KR20150110222A KR20170016744A KR 20170016744 A KR20170016744 A KR 20170016744A KR 1020150110222 A KR1020150110222 A KR 1020150110222A KR 20150110222 A KR20150110222 A KR 20150110222A KR 20170016744 A KR20170016744 A KR 20170016744A
Authority
KR
South Korea
Prior art keywords
metadata
image
control
information
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR1020150110222A
Other languages
English (en)
Other versions
KR101711822B1 (ko
Inventor
김동호
유동호
Original Assignee
서울과학기술대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 서울과학기술대학교 산학협력단 filed Critical 서울과학기술대학교 산학협력단
Priority to KR1020150110222A priority Critical patent/KR101711822B1/ko
Publication of KR20170016744A publication Critical patent/KR20170016744A/ko
Application granted granted Critical
Publication of KR101711822B1 publication Critical patent/KR101711822B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/12—Arrangements for remote connection or disconnection of substations or of equipment thereof
    • H04L67/2804—
    • H04L67/36—

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Selective Calling Equipment (AREA)

Abstract

본 기술은 메타 데이터를 이용한 디바이스 원격 제어 장치 및 방법이 개시된다. 본 발명의 구체적인 예에 따르면, 카메라를 통해 각 디바이스 기기의 영상을 수집하고 수집된 디바이스 기기 영상에 대해 획득된 제어 기능 정보를 토대로 메타 데이터를 구성하여 사물인터넷 또는 기존의 인터넷을 기반으로 교환하고 각 디바이스를 원격으로 제어함에 있어, 각 디바이스가 실제 위치한 영상 공간 내의 디바이스 기기의 영상 및 위치 정보를 선택된 해당 디바이스 기기의 제어 기능 정보와 함께 표시함으로써 원격 접속 사용자의 사용자 인터페이스 환경을 개선하여 원격 접속을 용이하게 구현할 수 있으며, 이에 따라 각 디바이스 기기 영상에 대한 메타 데이터를 이용하여 사용자에 의해 선택된 해당 디바이스 기기의 제어가 용이하여 사용자 편의성을 제공할 수 있다.

Description

메타 데이터를 이용한 디바이스 원격 제어 장치 및 방법{APPARATUS AND METHOD FOR REMOTE CONTROLLING DEVICE USING METADATA}
본 발명은 메타 데이터를 이용한 디바이스 제어 장치 및 방법에 관한 것으로 더욱 상세하게는, 디바이스의 영상정보를 카메라로 수집하는 과정에서 사물인터넷을 통해 디바이스 제어 기능 정보를 포함하는 부가 정보를 수집하여 메타 데이터를 구성하고 구성된 메타 데이터를 이용하여 각 디바이스 기기를 원격에서 제어하는 기술에 관한 것이다.
최근에는 컴퓨터 장치나 무선이동통신 단말기나 뿐만 아니라 TV, 카메라, 게임기, MP3/동영상 플레이어, 내비게이션 장치, 리모컨과 같은 거의 모든 전자 디바이스가 인터넷에 접속하여 통신을 할 수 있으며, 모든 사물에까지 통신기능이 적용하는 사물인터넷 또는 만물인터넷 시대가 도래하고 있다.
인터넷의 발전에 따라 원격에서 시스템에 접근하여 원격제어를 수행하는 시스템이 사용되고 있다. 컴퓨터에 원격 접속하여 원거리에 있는 컴퓨터를 제어하는 기능이 가장 흔히 볼 수 있는 원격제어 시스템이다.
그러나 원격컴퓨터 접속이 아닌 일반 전자디바이스를 원격지에서 제어하기 위해서는 사물의 배치나 디바이스의 모양 등 시각적인 정보를 제공하기 어려워 원격제어를 수행하는데 있어 어려움이 존재한다. 예를 들어, 가정에 있는 TV, 보일러, 가스레인지 등 다양한 디바이스를 원격지에서 제어하고자 할 때, 원격제어를 수행하는 자에게 사물의 배치, 디바이스의 모양 등 시각적인 정보가 제공되지 않는 제약조건이 있다.
이에 본 발명에서는 디바이스의 영상정보를 카메라로 수집하는 과정에서 디바이스의 제어 기능정보와 위치정보를 사물인터넷 또는 인터넷을 통해 수집하여 메타 데이터로 구성하고 구성된 메타 데이터를 이용하여 각 디바이스의 기능을 원격에서 제어하기 위한 사진 또는 동영상 등의 시각정보를 제공함으로써 디바이스 기기의 원격 제어의 편리함을 제공할 수 있는 방법을 제안하고자 한다.
본 발명은 상기한 바와 같은 문제점을 해결하기 위한 것으로, 본 발명의 목적은 카메라를 통해 수집된 디바이스의 영상정보, 디바이스의 제어기능정보, 위치정보 등의 속성을 메타 데이터로 구성하여 사물인터넷 또는 인터넷을 기반으로 교환할 수 있는 메타 데이터를 이용한 디바이스 원격 제어 장치 및 방법을 제공하고자 함에 있다.
본 발명의 다른 목적은, 각 디바이스를 원격에서 제어함에 있어 디바이스가 위치한 위치정보와 영상정보, 디바이스의 제어기능 정보에 대한 표준화된 메타 데이터를 이용하여 해당 디바이스 기기에 대해 사용자가 원격 제어하기 편리한 화면을 제공하고 제공된 화면을 이용하여 해당 디바이스 기기를 원격으로 제어할 수 있는 메타 데이터를 이용한 디바이스 원격 제어 장치 및 방법을 제공하고자 함에 있다.
이러한 기술적 과제를 달성하기 위한 본 발명의 메타 데이터를 이용한 디바이스 원격 제어 장치는, 카메라를 통해 각 디바이스 기기의 영상을 수집하는 영상 획득부; 상기 영상 획득부의 디바이스 기기에 대한 제어 기능 정보를 사물인터넷 또는 인터넷 기반으로 수집하여 전달하고 수신된 메타 데이터를 사물인터넷 및 인터넷 기반을 통해 교환하는 통신부; 상기 영상 획득부의 획득된 디바이스 기기의 영상 및 위치 정보 및 제어 기능 정보에 대해 표준화된 메타 데이터를 생성하여 압축 저장하고 메타 데이터를 상기 통신부로 전달하는 메타 데이터 생성부; 선택된 디바이스 기기의 영상에 대한 메타 데이터를 이용하여 선택된 디바이스 기기를 원격 제어하는 디바이스 제어부를 포함하는 것을 특징으로 한다.
바람직하게 상기 메타 데이터는 상기 영상획득부가 수집하는 영상공간 (GOP: Group of Picture)내에 위치한 모든 디바이스 기기의 절대적 위치 정보 및 상대적 위치정보 중 하나의 디바이스 기기의 위치 정보, 디바이스의 종류 및 가격을 포함하고, 해당 디바이스 기기에 대한 제어 기능 정보가 기록된 IP 주소 및 해당 디바이스 기기에 대한 제어 기능 정보 중 적어도 하나 이상을 더 포함할 수도 있으며, 상기 메타 데이터 생성부는 상기 영상획득부가 수집하는 영상정보와 상기 메타 데이터 간의 시간 및 공간적 동기를 수행하여 검색 가능한 모든 디바이스 기기의 메타 데이터를 생성한 후 압축 저장하도록 구비될 수 있고, 상기 디바이스 제어부는 사용자 요청에 따라 상기 영상획득부가 수신한 영상정보와 메타 데이터 생성부에 의해 기록된 메타 데이터의 디바이스 기기 및 원격지의 공간을 화면에 표시하고, 원격 제어 요청에 따라 해당 디바이스 기기의 제어 기능 정보를 화면에 표시하는 사용자 인터페이스 모듈; 표시된 디바이스 기기 중 사용자에 의해 선택된 해당 디바이스의 메타 데이터를 이용하여 해당 디바이스를 원격 구동하기 위한 제어 신호를 생성한 후 생성된 제어 신호를 통신망을 통해 해당 디바이스 기기로 전달하는 제어 모듈을 포함할 수 있다. 상기 디바이스 기기의 영상, 위치, 및 제어 기능 정보는 사용자 인터페이스 모듈을 통해 메뉴 바 형태, 가상 현실의 형태, 및 증강 현실의 형태 중 하나로 화면에 표시될 수도 있다.
그리고, 전술한 장치를 기반으로 하는 본 발명의 메타 데이터를 이용한 디바이스 원격 제어 방법은, 영상 획득부에서 각 디바이스 기기의 영상을 수집하는 (a) 단계; 통신부에서 사물 인터넷 또는 인터넷 기반으로 디바이스 기기의 제어 기능 정보를 수집하는 (b) 단계; 메타 데이터 생성부에서 영상 획득부의 디바이스 기기 영상에 대해 영상 및 위치 정보와 제어 기능 정보를 표준화된 메타 데이터로 구성하고 메타 데이터를 압축 및 저장한 후 통신부로 전달하여 구성된 메타 데이터를 사물 인터넷 또는 인터넷 기반으로 교환하는 (c) 단계; 디바이스 제어부에서 메타 데이터를 이용하여 원격지의 영상 공간 상의 모든 디바이스 기기의 영상 및 위치 정보 및 원격 제어 요청에 따라 해당 디바이스 기기의 제어 기능 정보를 화면에 표시하는 (d) 단계; 및 디바이스 제어부에서 사용자에 의해 선택된 디바이스 기기의 메타 데이터를 이용하여 선택된 디바이스 기기를 원격 제어하는 (e) 단계를 포함하는 것을 특징으로 한다.
상기와 같은 본 발명에 따르면, 카메라를 통해 수집된 영상 공간의 배경 영상 및 디바이스 기기 영상으로부터 획득된 디바이스 기기의 영상 및 위치를 포함하는 디바이스 속성 정보와 디바이스 기기의 제어 기능 정보를 토대로 메타 데이터로 구성하여 사물 인터넷 또는 인터넷을 기반으로 교환하고, 각 디바이스를 원격에서 제어함에 있어 디바이스 기기가 위치한 위치정보 및 영상정보와 디바이스의 제어기능 정보에 대한 표준화된 메타 데이터를 이용하여 해당 디바이스 기기에 대해 사용자가 원격제어하기에 편리한 인터페이스를 제공하여 원격 접속용 사용자 인터페이스 환경을 개선할 수 있고, 이에 따라 디바이스 기기의 원격 접속을 용이하게 구현할 수 있는 이점을 가진다.
또한, 본 발명에 의하면, 각 디바이스 기기 영상에 대한 메타 데이터를 이용하여 사용자에 의해 선택된 해당 디바이스 기기의 원격 접속 및 제어가 용이하여 사용자 편의성을 제공할 수 있는 효과를 가진다.
본 명세서에서 첨부되는 다음의 도면들은 본 발명의 바람직한 실시 예를 예시하는 것이며, 후술하는 발명의 상세한 설명과 함께 본 발명의 기술사상을 더욱 이해시키는 역할을 하는 것이므로, 본 발명은 그러한 도면에 기재된 사항에만 한정되어 해석되어서는 아니 된다.
도 1을 본 발명의 실시 에에 따른 메타 데이터를 이용한 디바이스 제어 장치의 구성을 보인 도이다.
도 2는 본 발명의 실시 예에 따른 메타 데이터를 이용한 디바이스 제어 장치의 세부적인 구성을 보인 도이다.
도 3은 본 발명의 실시 예에 따른 메타 데이터를 이용한 디바이스 제어 장치의 의한 화면을 보인 예시도이다.
도 4는 본 발명의 다른 실시 예에 따른 메타 데이터를 이용한 디바이스 제어 과정을 보인 순서도이다.
본 발명의 구체적인 특징 및 이점들은 첨부도면에 의거한 다음의 상세한 설명으로 더욱 명백해질 것이다. 이에 앞서, 본 명세서 및 청구범위에 사용된 용어나 단어는 발명자가 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야 할 것이다. 또한, 본 발명에 관련된 공지 기능 및 그 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는, 그 구체적인 설명을 생략하였음에 유의해야 할 것이다.
도 1을 본 발명의 실시 에에 따른 메타 데이터를 이용한 디바이스 제어 장치의 구성을 보인 도이고, 도 2는 도 1에 도시된 디바이스 제어부의 세부적인 구성을 보인 도이며, 도 3은 도 2에 도시된 유저 인터페이스 모듈에 의해 표시된 화면을 보인 예시도이다.
도 1 내지 도 3에 도시된 바와 같이, 본 발명의 실시 예에 따른 메타 데이터를 이용한 디바이스 제어 장치는, 카메라를 통해 획득된 영상 공간 내의 배경 영상 및 각 디바이스 기기의 영상을 수집하고 수집된 디바이스의 영상 정보, 및 위치 정보를 포함하는 디바이스의 속성 정보와 수집된 디바이스 기기에 대해 대한 제어 기능 정보를 토대로 메타 데이터를 생성하며, 각 디바이스를 원격 제어함에 띠라, 디바이스 기기의 위치 정보, 영상 정보, 및 제어 기능 정보에 대해 표준화된 메타 데이터를 이용하여 사용자가 원격접속이 용이한 인터페이스 환경을 제공하며, 제공된 사용자 인터페이스 환경에 따라 제어하고자 하는 디바이스의 원격 접속 및 제어를 실행하도록 구비되고, 이러한 장치는, 영상 획득부(10), 통신부(20), 메타 데이터 생성부(30), 및 디바이스 제어부(50)를 포함한다.
본 발명의 실시 예에서 사용되는 ‘메타 데이터??'라는 용어는, 영상 파일의 속성 정보를 포함하는 부가 정보 태그를 말하며, 영상 파일의 헤더(header) 또는 테일(tail)에 부가되며, 국가별 제작사별 또는 디바이스 기기에 사용되는 다양한 포맷을 하나로 통합하여 표준화된 형태로 제공되는 것이 바람직하다.
장치(S)는 카메라를 통해 사진 또는 동영상을 찍을 때 GOP(group of pictures)의 배경과 해당 영상 공간에 존재하는 다양한 디바이스의 영상 등의 영상 정보를 수집하는 기능을 수행하는 영상 획득부(10)를 포함하고, 상기 영상 획득부(10)는 수신된 영상 공간 내에 배경 영상과 디바이스 기기의 제어하고자 하는 디바이스 기기의 영상을 촬영할 수 있는 디지털 카메라 기능이 적용되는 것이 바람직하다.
그리고, 장치(S)는 영상 획득부(10)로부터 제공받은 다수의 디바이스 기기 영상을 제공받아 사용자 명령에 따라 영상 획득부(10)의 획득된 디바이스 기기 영상에 대한 디바이스 기기의 제어 기능 정보를 사물 인터넷 또는 인터넷 기반으로 획득하여 메타 데이터 생성부(30)로 전달하고 메타 데이터 수신부(30)로부터 제공된 수신된 메타 데이터를 사물 인터넷 또는 인터넷 기반으로 교환하는 통신부(20)를 포함하고,
또한, 장치(S)는 통신부(20)를 통해 제공받은 영상 획득부의 디바이스 기기 영상에 대한 위치정보, 영상 정보 및 제어 기능 정보에 대한 표준화된 메타 데이터를 구성하여 압축 저장하고 메타 데이터를 통신부(20)를 통해 사물 인터넷 또는 인터넷 기반으로 교환하는 메타 데이터 생성부(30)를 더 포함한다.
여기서, 사용자 명령은 화면의 소정 위치에 마련된 메타 데이터 생성 버튼의 누름 조작 또는 화면의 터치 스크린 상에 표시된 메타 데이터 생성 아이콘의 터치 조작으로 이루어질 수 있으며 이에 국한하지 아니한다.
즉, 메타 데이터 생성부(30)는, 기 정해진 디바이스 기기 위치 및 영상 정보와 제어 기능 정보를 선택적으로 이용하여 디바이스 기기의 파일명을 생성하는 부가 정보 적용 규칙을 설정한다. 메타 데이터 생성부(30)는 디바이스 기기의 위치 및 영상 및 제어 기능 정보를 헤더 또는 테일에 부가하여 하나의 파일로 생성하고 이를 저장한다. 또한 디바이스 제어부(50)는 메타 데이터를 이용한 디바이스 제어 서비스를 제공하기 위한 프로그램이 내장되어 있다.
이때 메타 데이터는 영상 획득부(10)를 통해 촬영된 디바이스 영상 정보뿐만 아니라 디바이스 위치, 종류, 및 가격 중 적어도 하나 이상을 선택적으로 이용하도록 설정할 수 있다.
즉, 메타 데이터는, 영상 획득부(10)가 수집하는 영상공간 (GOP: Group of Picture) 내에 위치한 모든 디바이스 기기의 절대적 또는 상대적 위치정보, 각 디바이스 기기의 종류 및 가격 정보들과 함께 해당 디바이스 기기에 대한 제어 기능 정보가 기록된 IP 주소 및 해당 디바이스 기기의 제어 가능한 제어 기능 정보를 포함할 수 있다.
모든 디바이스 기기의 절대적 또는 상대적 위치정보, 각 디바이스 기기의 종류 및 가격 정보들과 함께 해당 디바이스 기기에 대한 제어 기능 정보가 기록된 IP 주소 및 해당 디바이스 기기의 제어 가능한 제어 기능 정보를 기 저장되어 부가 정보 적용 규칙에 따라 표준화하여 메타 데이터가 생성된다.
이때 메타 데이터는 상기 영상획득부가 수집하는 영상정보와 상기 메타 데이터 사이의 시간 및 공간적 동기를 수행하여 생성한다.
메타 데이터 생성부(30)는 영상 획득부(10)가 수집된 영상 정보와 상기 메타 데이터 간의 시간 및 공간적 동기를 수행하여 디바이스 기기에 대한 메타 데이터를 압축 저장한다.
상기 디바이스 제어부(50)는, 메타 데이터를 이용한 디바이스 제어 서비스를 제공하기 위한 통상적인 중앙처리 유닛으로 디바이스가 위치한 위치정보와 배경정보, 디바이스의 제어기능 정보에 대한 표준화된 메타 데이터를 이용하여 해당 디바이스 기기에 대해 사용자가 원격 접속 및 제어하기에 편리한 인터페이스 환경을 화면을 통해 제공하고, 메타 데이터를 이용하여 원격 접속된 디바이스를 원격 제어한다.
이하 도 2를 참조하여 본 발명의 실시 예에 따른 디바이스 제어부(50)의 세부 구성에 대해 설명하면 다음과 같다.
우선 디바이스 제어부(50)는 사용자 요청에 따라 상기 영상획득부가 저장한 영상정보와 메타 데이터 생성부(30)에 기록된 디바이스 기기 및 원격지의 영상 공간을 화면에 표시하고 원격 제어 요청에 따라 해당 디바이스 기기의 제어 기능 정보를 화면에 표시하는 사용자 인터페이스 모듈(51)과, 화면에 표시된 다수의 디바이스 기기 중 원격 접속된 해당 디바이스 기기를 원격 구동하기 위한 제어 신호를 생성하고 제어 신호를 통신망을 통해 해당 디바이스 기기로 전달하는 제어 모듈(53)을 포함할 수 있다.
즉, 사용자 인터페이스 모듈(51)은 각종 동작명령을 입력 받고, 동작메뉴와 동작상태, 그리고 상기 영상 획득부(10)에서 카메라를 통해 촬영되어 생성되는 디바이스 기기 영상을 표시하는 화면을 더 구비할 수도 있다. 상기 화면은 키패드(keypad)와 같은 입력장치와, 액정표시장치(Liquid Crystal Display)나 플라즈마 표시 패널(Plasma Display Panel)과 같은 표시장치로 각각 구비될 수도 있다. 사용상의 편리성을 향상시키기 위하여 하나의 장치로 입력 및 표시기능을 수행하는 터치스크린(touch screen)으로 구비될 수 있다.
상기 화면의 입력 장치는 상기 영상파일을 화면에 표시하게 하는 재생버튼과, 재생중인 디바이스 기기 영상에 포함된 화면의 위치를 출발지나 목적지, 또는 즐겨 찾는 위치(Point Of Interest, 이하 'POI'라 함)로 설정하기 위한 위치설정버튼이 구비될 수 있고, 다수의 디바이스 기기 중 하나를 선택하기 위한 선택버튼 및 상기 영상파일에 부가되는 파일명 및 메타데이터를 생성하도록 미리 설정하기 위한 부가정보 설정버튼이 더 구비될 수 있으며, 상기 버튼들은 화면에 아이콘(icon) 형태로 구비될 수 있다.
이러한 재생 버튼의 입력에 따른 사용자 요청에 따라 상기 사용자 인터페이스 모듈(53)은 상기 영상획득부가 저장한 영상정보와 메타 데이터 생성부에 의해 저장 모듈에 기록된 디바이스 기기 및 원격지의 공간을 화면에 표시하고, 사용자의 원격 제어 요청에 따라 해당 디바이스 기기의 제어기능을 화면에 표시한다.
예를 들어 화면은 도 3에 도시된 바와 같이 제어 가능한 다수 디바이스 기기가 표시된다.
그리고, 디바이스 기기 들의 화면 상의 표시 위치는 위치설정버튼의 선택에 의해 화면 내에서의 이동이 가능하다.
화면에 표시되는 디바이스 기기의 영상 및 위치 정보 및 해당 디바이스 기기의 제어 기능 정보는 유저 인터페이스 모듈(51)의 메뉴 바를 이용하여 표시할 수 있고, 가상현실을 이용하여 표시할 수 있으며, 증강현실을 이용하여 표시할 수도 있으며 본 발명은 이에 국한하지 아니한다.
한편 제어 모듈(55)은 표시된 디바이스 기기 중 사용자에 의해 선택된 해당 디바이스의 제어 기능 정보를 이용하여 해당 디바이스를 원격 구동하기 위한 제어 신호를 생성하여 생성된 제어 신호를 통신망을 통해 해당 디바이스 기기로 전달하도록 구비될 수 있다.
예를 들어 화면에 표시된 다수의 디바이스 기기 중 하나가 선택 버튼 조작에 의해 선택되면, 상기 제어 모듈(55)은 사용자 인터페이스 모듈(51)을 통해 화면의 해당 디바이스 기기의 제어 가능한 다양한 기능 중 터치 조작으로 선택된 기능을 실행하기 위한 제어 신호를 생성한다. 이에 생성된 제어 신호는 통신망을 통해 해당 디바이스 기기로 전달된다.
여기서, 통신망은 외부의 컴퓨터 시스템이나 서버에 접속하기 위한 모듈로서, 범용직렬버스(Universal Serial Bus, 이하 'USB'라 함)를 이용하는 것이 일반적이나, 블루투스(bluetooth)나 적외선 통신(Infrared data Association) 방식의 무선통신모듈이 구비될 수 있다.
즉, 본 발명의 실시 예에서, 카메라를 통해 수신된 사진 또는 동영상 GOP(group of pictures)의 배경정보와 해당 공간에 존재하는 다양한 디바이스의 영상을 영상 정보로 저장하고, 디바이스의 위치 정보 등의 속성 정보와 함께 스위치 on/off 등 디바이스의 다양한 제어 기능 정보 등을 디지털 기기에 대한 메타 데이터로 생성하여 저장한다.
그리고, 원격지에서 디바이스 기기를 제어하고자 할 때, 사용자 인터페이스 모듈을 통해 생성된 공간 배경 정보와 디바이스의 위치, 디바이스의 모양은 메뉴바, 가상현실 또는 증강현실의 형태로 제공되고, 이러한 사용자 인터페이스 환경에서 압축 저장된 메타 데이터를 이용하여 디바이스의 제어 기능 정보가 표출되고 표출된 디바이스 기기의 다양한 제어 기능 중 선택된 제어 기능이 원격 제어를 통해 실행된다.
즉, 카메라를 통해 각 디바이스 기기의 영상을 수집하고 수집된 디바이스 기기 영상에 대해 획득된 제어 기능 정보를 토대로 메타 데이터를 구성하여 사물인터넷 또는 기존의 인터넷을 기반으로 교환하고 각 디바이스를 원격으로 제어함에 있어, 각 디바이스가 실제 위치한 영상 공간 내의 디바이스 기기의 영상 및 위치 정보를 선택된 해당 디바이스 기기의 제어 기능 정보와 함께 표시함으로써 원격 접속 사용자의 사용자 인터페이스 환경을 개선하여 원격 접속을 용이하게 구현할 수 있으며, 이에 따라 각 디바이스 기기 영상에 대한 메타 데이터를 이용하여 사용자에 의해 선택된 해당 디바이스 기기의 제어가 용이하여 사용자 편의성을 제공할 수 있다.
카메라를 통해 각 디바이스 기기의 영상을 수집하고 수집된 디바이스 기기 영상에 대해 획득된 제어 기능 정보를 토대로 메타 데이터를 구성하여 사물인터넷 또는 기존의 인터넷을 기반으로 교환하고, 각 디바이스를 원격으로 제어함에 있어, 각 디바이스가 실제 위치한 영상 공간 내의 디바이스 기기의 영상 및 위치 정보를 선택된 해당 디바이스 기기의 제어 기능 정보와 함께 표시하며, 사용자에 의해 선택된 디바이스 기기의 메타 데이터를 이용하여 선택된 디바이스 기기를 원격 제어하는 일련의 과정은 도 4를 참조하여 설명한다.
도 4는 도 1에 도시된 메타 데이터를 이용한 디바이스 원격 제어 장치의 동작 과정을 보인 흐름도로서, 도 4를 참조하여 본 발명의 다른 실시 예에 따른 메타 데이터를 이용한 디바이스 원격 제어 과정을 설명한다.
우선, 영상 획득부에서 각 디바이스 기기의 영상을 수집하고, 사물 인터넷 또는 인터넷 기반으로 디바이스 기기의 제품 기능 정보를 수집하며 수집된 디바이스에 대한 영상 및 위치 정보와 제품 기능 정보를 표준화된 메타 데이터로 구성하고 구성된 메타 데이터를 사물 인터넷 또는 인터넷 기반으로 교환한다(S1-S3)
이때 상기 메타 데이터는 상기 영상획득부가 수집하는 영상공간 (GOP: Group of Picture)내에 위치한 모든 디바이스 기기의 절대적 위치정보 또는 상대적 위치 정보와 디바이스의 종류 및 가격 중 적어도 하나를 포함할 수 있고, IP 주소 및 해당 디바이스 기기의 제어 가능한 기능 정보 중 적어도 하나 이상을 포함하는 해당 디바이스 기기에 대한 제어 기능 정보를 더 포함한다. 그리고 메타 데이터는 수집된 영상 정보와 상기 메타 데이터 간의 시간 및 공간적 동기를 수행하여 생성되고 생성된 메타 데이터는 압축 저장된다.
이러한 메타 데이터는 디바이스 제어부(50)를 통해 생성된 공간 배경정보와 디바이스의 위치, 디바이스의 모양 등을 이용하여 가상현실 또는 증강현실의 형태로 화면에 표시되고, 이러한 사용자 인터페이스 환경에서 메타 데이터의 디바이스 기기의 제어 기능 정보를 토대로 선택된 디바이스 기기를 원격 접속하는 기능을 수행한다(S4, S5).
즉, 디바이스 제어부에서 저장된 다수의 디바이스 기기 영상을 포함하는 메타 데이터를 그래픽 처리하여 화면에 표시 가능하고 화면은 도 3에 도시된 바와 같이 제어 가능한 다수 디바이스 기기들이 표시된다.
한편 디바이스 제어부에서 화면에 표시된 다수의 디바이스 기기 중 하나가 선택 버튼 조작에 의해 원격 접속이 요청되면, 선택된 디바이스 기기의 메타 데이터를 이용하여 제어 가능한 기능들을 화면에 표시하고 표시된 제어 가능한 다양한 기능 중 터치 조작으로 선택된 기능을 실행하기 위한 제어 신호를 생성한다. 이에 생성된 제어 신호는 통신망을 통해 해당 디바이스 기기로 전달된다(S6, S7).
이에 따라, 카메라를 통해 각 디바이스 기기의 영상을 수집하고 수집된 디바이스 기기 영상에 대해 획득된 제어 기능 정보를 토대로 메타 데이터를 구성하여 사물인터넷 또는 기존의 인터넷을 기반으로 교환하고 각 디바이스를 원격으로 제어함에 있어, 각 디바이스가 실제 위치한 영상 공간 내의 디바이스 기기의 영상 및 위치 정보를 선택된 해당 디바이스 기기의 제어 기능 정보와 함께 표시함으로써 원격 접속 사용자의 사용자 인터페이스 환경을 개선하여 원격 접속을 용이하게 구현할 수 있으며, 이에 따라 각 디바이스 기기 영상에 대한 메타 데이터를 이용하여 사용자에 의해 선택된 해당 디바이스 기기의 제어가 용이하여 사용자 편의성을 제공할 수 있다.
본 실시 예에서 사용되는 '~부'라는 용어, 즉 '~모듈'은 소프트웨어, FPGA 또는 ASIC과 같은 하드웨어 구성요소를 의미하며, 모듈은 어떤 기능들을 수행한다. 그렇지만 모듈은 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. 모듈은 어드레싱(addressing) 할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 모듈은 소프트웨어 구성요소들, 객체지향 소프트웨어 구성 요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들, 및 변수들을 포함한다. 구성요소들과 모듈들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 모듈들로 결합되거나 추가적인 구성요소들과 모듈들로 더 분리될 수 있다. 뿐만 아니라, 구성요소들 및 모듈들은 디바이스 내의 하나 또는 그 이상의 CPU들을 재생시키도록 구현될 수 도 있다.
이상으로 본 발명의 기술적 사상을 예시하기 위한 바람직한 실시 예와 관련하여 설명하고 도시하였지만, 본 발명은 이와 같이 도시되고 설명된 그대로의 구성 및 작용에만 국한되는 것이 아니며, 기술적 사상의 범주를 일탈함이 없이 본 발명에 대해 다수의 변경 및 수정이 가능함을 당업자들은 잘 이해할 수 있을 것이다. 따라서 그러한 모든 적절한 변경 및 수정과 균등 물들도 본 발명의 범위에 속하는 것으로 간주되어야 할 것이다.
카메라를 통해 각 디바이스 기기의 영상을 수집하고 수집된 디바이스 기기 영상에 대해 획득된 제어 기능 정보를 토대로 메타 데이터를 구성하여 사물인터넷 또는 기존의 인터넷을 기반으로 교환하고 각 디바이스를 원격으로 제어함에 있어, 각 디바이스가 실제 위치한 영상 공간 내의 디바이스 기기의 영상 및 위치 정보를 선택된 해당 디바이스 기기의 제어 기능 정보와 함께 표시함으로써 원격 접속 사용자의 사용자 인터페이스 환경을 개선하여 원격 접속을 용이하게 구현할 수 있으며, 이에 따라 각 디바이스 기기 영상에 대한 메타 데이터를 이용하여 사용자에 의해 선택된 해당 디바이스 기기의 제어가 용이하여 사용자 편의성을 제공할 수 있는 메타 데이터를 이용한 디바이스 원격 제어 장치 및 방법의 정확성 및 신뢰도 측면, 더 나아가 성능 효율 면에 매우 큰 진보를 가져올 수 있으며, 적용되는 유비쿼터스의 시판 또는 영업의 가능성이 충분할 뿐만 아니라 현실적으로 명백하게 실시할 수 있는 정도이므로 산업상 이용가능성이 있는 발명이다.

Claims (6)

  1. 카메라를 통해 각 디바이스 기기의 영상을 수집하는 영상 획득부;
    상기 영상 획득부의 디바이스 기기에 대한 제어 기능 정보를 사물인터넷 또는 인터넷 기반으로 수집하여 전달하고 수신된 메타 데이터를 사물인터넷 및 인터넷 기반을 통해 교환하는 통신부;
    상기 영상 획득부의 획득된 디바이스 기기의 영상 및 위치 정보 및 제어 기능 정보에 대해 표준화된 메타 데이터를 생성하여 압축 저장하고 메타 데이터를 상기 통신부로 전달하는 메타 데이터 생성부; 및
    선택된 디바이스 기기의 영상에 대한 메타 데이터를 이용하여 선택된 디바이스 기기를 원격 제어하는 디바이스 제어부를 포함하는 것을 특징으로 하는 메타 데이터를 이용한 디바이스 원격 제어 장치.
  2. 제1항에 있어서, 상기 메타 데이터는
    상기 영상획득부가 수집하는 영상공간 (GOP: Group of Picture)내에 위치한 모든 디바이스 기기의 절대적 위치 정보 및 상대적 위치정보 중 하나의 디바이스 기기의 위치 정보, 디바이스의 종류 및 가격을 포함하고,
    디바이스 기기에 대한 제어 기능 정보가 기록된 IP 주소 및 해당 디바이스 기기에 대한 제어 기능 정보 중 적어도 하나 이상을 더 포함하는 것을 특징으로 하는 메타 데이터를 이용한 디바이스 원격 제어 장치.
  3. 제1항에 있어서, 상기 메타 데이터 생성부는
    상기 영상획득부가 수집하는 영상정보와 상기 메타 데이터 간의 시간 및 공간적 동기를 수행하여 검색 가능한 모든 디바이스 기기의 메타 데이터를 생성한 후 압축 저장하도록 구비되는 것을 특징으로 하는 메타 데이터를 이용한 디바이스 원격 제어 장치.
  4. 제3항에 있어서 상기 디바이스 제어부는
    사용자 요청에 따라 상기 영상획득부가 저장한 영상정보와 메타 데이터 생성부의 디바이스 기기 및 원격지의 디바이스 기기의 위치한 영상 공간을 화면에 표시하고, 원격 제어 요청에 따라 해당 디바이스 기기의 제어 기능 정보를 화면에 표시하는 사용자 인터페이스 모듈; 및
    화면에 디바이스 기기 중 사용자에 의해 선택된 해당 디바이스의 메타 데이터를 이용하여 해당 디바이스를 원격 구동하기 위한 제어 신호를 생성한 후 생성된 제어 신호를 통신망을 통해 해당 디바이스 기기로 전달하는 제어 모듈을 포함하는 것을 특징으로 하는 메타 데이터를 이용한 디바이스 원격 제어 장치.
  5. 제4항에 있어서, 상기 메타 데이터는
    기 정해진 인터페이스 환경에 따라 메뉴 바 형태, 증강 현실 형태, 및 증강 현실의 형태 중 하나로 화면에 표시되는 것을 특징으로 하는 메타 데이터를 이용한 디바이스 원격 제어 장치.
  6. 영상 획득부에서 각 디바이스 기기의 영상을 수집하는 (a) 단계;
    통신부에서 사물 인터넷 또는 인터넷 기반으로 디바이스 기기의 제어 기능 정보를 수집하는 (b) 단계;
    메타 데이터 생성부에서 영상 획득부의 디바이스 기기 영상에 대해 영상 및 위치 정보와 제어 기능 정보를 표준화된 메타 데이터로 구성하고 메타 데이터를 압축 및 저장한 후 통신부로 전달하여 구성된 메타 데이터를 사물 인터넷 또는 인터넷 기반으로 교환하는 (c) 단계;
    디바이스 제어부에서 메타 데이터를 이용하여 원격지의 영상 공간 상의 모든 디바이스 기기의 영상 및 위치 정보 및 원격 제어 요청에 따라 해당 디바이스 기기의 제어 기능 정보를 화면에 표시하는 (d) 단계; 및
    디바이스 제어부에서 사용자에 의해 선택된 디바이스 기기의 메타 데이터를 이용하여 선택된 디바이스 기기를 원격 제어하는 (e) 단계를 포함하는 것을 특징으로 하는 메타 데이터를 이용한 디바이스 원격 제어 방법.
KR1020150110222A 2015-08-04 2015-08-04 메타 데이터를 이용한 디바이스 원격 제어 장치 및 방법 Active KR101711822B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150110222A KR101711822B1 (ko) 2015-08-04 2015-08-04 메타 데이터를 이용한 디바이스 원격 제어 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150110222A KR101711822B1 (ko) 2015-08-04 2015-08-04 메타 데이터를 이용한 디바이스 원격 제어 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20170016744A true KR20170016744A (ko) 2017-02-14
KR101711822B1 KR101711822B1 (ko) 2017-03-03

Family

ID=58121054

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150110222A Active KR101711822B1 (ko) 2015-08-04 2015-08-04 메타 데이터를 이용한 디바이스 원격 제어 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101711822B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190125686A (ko) * 2018-04-30 2019-11-07 (주)테슬라시스템 드론 동영상에 증강현실 정보의 삽입시에 사용되는 메타 파일 구조
WO2020022780A1 (en) * 2018-07-25 2020-01-30 Samsung Electronics Co., Ltd. Method and apparatus for establishing device connection
CN110800314A (zh) * 2017-04-28 2020-02-14 株式会社OPTiM 计算机系统、远程操作通知方法以及程序
KR20220137266A (ko) * 2021-04-02 2022-10-12 주식회사 멕서스 촬영 정보를 이용하여 통신장비의 위치를 파악하는 원격 관제 솔루션 서버

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101119084B1 (ko) * 2011-07-13 2012-03-15 (주)블루비스 메타데이터를 이용한 영상관리 시스템 및 그 방법
WO2012162442A2 (en) * 2011-05-23 2012-11-29 Blu Homes, Inc. Method, apparatus and system for customizing a building via a virtual environment
KR101358064B1 (ko) * 2012-10-29 2014-02-11 한국과학기술원 사용자 이미지를 이용한 원격 제어 방법 및 시스템
KR20140075825A (ko) * 2012-11-23 2014-06-20 한국전자통신연구원 실감 미디어의 메타데이터를 생성하는 방법 및 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012162442A2 (en) * 2011-05-23 2012-11-29 Blu Homes, Inc. Method, apparatus and system for customizing a building via a virtual environment
KR101119084B1 (ko) * 2011-07-13 2012-03-15 (주)블루비스 메타데이터를 이용한 영상관리 시스템 및 그 방법
KR101358064B1 (ko) * 2012-10-29 2014-02-11 한국과학기술원 사용자 이미지를 이용한 원격 제어 방법 및 시스템
KR20140075825A (ko) * 2012-11-23 2014-06-20 한국전자통신연구원 실감 미디어의 메타데이터를 생성하는 방법 및 장치

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110800314A (zh) * 2017-04-28 2020-02-14 株式会社OPTiM 计算机系统、远程操作通知方法以及程序
CN110800314B (zh) * 2017-04-28 2022-02-11 株式会社OPTiM 计算机系统、远程操作通知方法以及记录介质
KR20190125686A (ko) * 2018-04-30 2019-11-07 (주)테슬라시스템 드론 동영상에 증강현실 정보의 삽입시에 사용되는 메타 파일 구조
WO2020022780A1 (en) * 2018-07-25 2020-01-30 Samsung Electronics Co., Ltd. Method and apparatus for establishing device connection
US11350264B2 (en) 2018-07-25 2022-05-31 Samsung Electronics Co., Ltd. Method and apparatus for establishing device connection
KR20220137266A (ko) * 2021-04-02 2022-10-12 주식회사 멕서스 촬영 정보를 이용하여 통신장비의 위치를 파악하는 원격 관제 솔루션 서버

Also Published As

Publication number Publication date
KR101711822B1 (ko) 2017-03-03

Similar Documents

Publication Publication Date Title
CN110716645A (zh) 一种增强现实数据呈现方法、装置、电子设备及存储介质
US20160165170A1 (en) Augmented reality remote control
CN108924538B (zh) Ar设备的屏幕拓展方法
JP6446766B2 (ja) プログラム、表示制御装置、記録媒体及び表示制御システム
JP6677890B2 (ja) 情報処理システム、その制御方法、及びプログラム、並びに情報処理装置、その制御方法、及びプログラム
CN112073764B (zh) 一种显示设备
JP2013162487A (ja) 画像表示装置及び撮像装置
US20150070247A1 (en) Information processing apparatus, information processing method, and program
KR101711822B1 (ko) 메타 데이터를 이용한 디바이스 원격 제어 장치 및 방법
JP6357023B2 (ja) 情報処理プログラム、情報処理装置、情報処理装置の制御方法および情報処理システム
JP2009169768A (ja) 情報処理装置及びプログラム
CN103634632A (zh) 图片信息的处理方法、装置及系统
CN111131735B (zh) 视频录制方法、视频播放方法、装置及计算机存储介质
EP3070681A1 (en) Display control device, display control method and program
JP6617547B2 (ja) 画像管理システム、画像管理方法、プログラム
WO2018055659A1 (ja) 画面共有システム、画面共有方法及びプログラム
EP3873099A1 (en) Vr video playing control method and related apparatus
KR20130123629A (ko) 파노라마 동영상을 이용하여 원하는 시선방향의 동영상 및 관심지점 정보를 제공하는 방법
CN109074327B (zh) 服务提供系统、服务递送系统、服务提供方法和程序
JP6256430B2 (ja) コンテンツ提供サーバ、コンテンツ提供方法、およびコンピュータプログラム
CN111242107B (zh) 用于设置空间中的虚拟对象的方法和电子设备
JP2013255171A (ja) 画像配信装置及び画像表示装置
JP7227452B2 (ja) 撮像データ取得プログラム、撮像データ取得装置及び撮像データ取得方法
CN114489342B (zh) 图像处理方法、装置及电子设备
US11889237B2 (en) Setting method and a non-transitory computer-readable storage medium storing a program

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20150804

PA0201 Request for examination
E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20160926

Patent event code: PE09021S01D

PG1501 Laying open of application
E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20170220

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20170224

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20170227

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
FPAY Annual fee payment

Payment date: 20200129

Year of fee payment: 4

PR1001 Payment of annual fee

Payment date: 20200129

Start annual number: 4

End annual number: 4

PR1001 Payment of annual fee

Payment date: 20210128

Start annual number: 5

End annual number: 5

PC1903 Unpaid annual fee

Termination category: Default of registration fee

Termination date: 20221114

PR0401 Registration of restoration

Patent event code: PR04011E01D

Patent event date: 20221114

Comment text: Registration of Restoration

PR1001 Payment of annual fee

Payment date: 20221114

Start annual number: 6

End annual number: 6

R401 Registration of restoration
PR1001 Payment of annual fee

Payment date: 20240220

Start annual number: 8

End annual number: 8

PR1001 Payment of annual fee

Payment date: 20250109

Start annual number: 9

End annual number: 9