[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

KR20150045465A - 이벤트와 연관된 정보를 사람에게 제공하기 위한 방법 - Google Patents

이벤트와 연관된 정보를 사람에게 제공하기 위한 방법 Download PDF

Info

Publication number
KR20150045465A
KR20150045465A KR1020157006483A KR20157006483A KR20150045465A KR 20150045465 A KR20150045465 A KR 20150045465A KR 1020157006483 A KR1020157006483 A KR 1020157006483A KR 20157006483 A KR20157006483 A KR 20157006483A KR 20150045465 A KR20150045465 A KR 20150045465A
Authority
KR
South Korea
Prior art keywords
event
person
information
scene
images
Prior art date
Application number
KR1020157006483A
Other languages
English (en)
Inventor
체 로우
팅야오 우
Original Assignee
알까뗄 루슨트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 알까뗄 루슨트 filed Critical 알까뗄 루슨트
Publication of KR20150045465A publication Critical patent/KR20150045465A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/021—Services related to particular areas, e.g. point of interest [POI] services, venue services or geofences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00—Monitoring arrangements; Testing arrangements
    • H04R29/007—Monitoring arrangements; Testing arrangements for public address systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/2866—Architectures; Arrangements
    • H04L67/30—Profiles
    • H04L67/306—User profiles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/52—Network services specially adapted for the location of the user terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/535—Tracking the activity of the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303—Tracking of listener position or orientation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W64/00—Locating users or terminals or network equipment for network management purposes, e.g. mobility management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W8/00—Network data management
    • H04W8/18—Processing of user or subscriber data, e.g. subscribed services, user preferences or user profiles; Transfer of user or subscriber data

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Acoustics & Sound (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Otolaryngology (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Position Input By Displaying (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 이벤트와 연관된 정보를 사람에게 제공하기 위한 방법에 관한 것이고, 방법은 이벤트에 관련된 사람을 검출하는 단계, 후속하여 상기 이벤트에 관련된 상기 사람의 지리적 위치를 결정하는 단계, 및 이벤트에 관련된 사람의 지리적 위치에서 지향성 정보의 제공을 제어하는 단계를 포함한다.

Description

이벤트와 연관된 정보를 사람에게 제공하기 위한 방법{METHOD FOR PROVISIONING A PERSON WITH INFORMATION ASSOCIATED WITH AN EVENT}
본 발명은 청구항 제 1 항의 전제부에 기술된 바와 같이 이벤트와 연관된 정보를 사람에게 제공하기 위한 방법, 청구항 제 3 항의 전제부에 기술되는 이벤트와 연관된 정보를 사람에게 제공하기 위한 관련 시스템 및 청구항 제 8 항의 전제부에 기술되는 관련 디바이스에 관한 것이다.
이벤트와 연관된 정보를 사람에게 제공하기 위한 이러한 방법 및 관련 시스템은 예를 들면, 사람들의 주목을 끌기 위해 길의 어디에나 놓인 광고판들로부터 본 기술 분야에 잘 알려졌다. TV상의 멀티미디어 광고들과 달리, 이러한 하나의 포스터 기반 광고는 통상 실외에 있고 관찰자들에게 정적이고 평면적인 정보를 제공한다. 이는 얼마나 많은 사람들이 이들 매우 값비싼 광고 배포에 대해 실제로 주목하는지를 아는 것에 관심이 있을 것이다. 추가로, 이는 광고 포스터 또는 멀티미디어 자산에 실제로 관심이 있는 사람에게 재생된 한 페이지의 포스터 또는 멀티미디어 자산의 주제에 관한 더 많은 추가의 정보를 제공하는 것이 가능하다.
무선 주파수 식별 인에이블 광고 보드의 경우, 사람은, 그의 근거리 무선 통신(NFC) 인에이블된 이동 전화에 의해 광고판을 터치하여 더 많은 상세한 정보를 이러한 이동 전화상에 다운로드할 수 있다. 이러한 해결책은 거대한 시장에 존재하지 않는 특정한 디바이스, NFC 인에이블된 이동 전화를 요구하고, 사람이 그의 전화로 판을 터치할 것을 요구한다는 점에서 불편하다.
본 발명의 목적은 정보가 이벤트에 관련된 사람에게 배타적으로 제공되는 자동 방식으로 사람이 관련되는 이벤트와 연관된 정보를 사람에게 제공하기 위한 방법, 시스템, 또는 관련 디바이스를 제공하는 것이다.
본 발명에 따라, 이러한 목적은 청구항 제 1 항에 따른 방법, 청구항 제 3 항에 따른 시스템, 및 청구항 제 8 항에 따른 관련 디바이스에 의해 달성된다.
사실, 본 발명에 따라, 이러한 목적은 먼저, 이벤트에서 사람의 관련이 검출된다는 사실에 의해 달성되고, 관련은 장면상의 이미지들의 분석에 기초하여 가능하게 검출되고, 이벤트는 적어도 하나의 카메라에 의해 기록되고, 후속하여 이벤트에 관련된 사람의 지리적 위치는, 또한 가능하게는 적어도 하나의 카메라에 의해 기록된 3차원 장면에 기초하여, 및 또한 사람의 결정된 지리적 위치에 기초하여, 결정되어, 단지 이벤트에 관련된 사람의 결정된 지리적 위치에서 지향성 음성과 같은 지향성 정보를 이벤트에 관련된 사람에게 제공하는 것을 제어한다.
따라서, 먼저 이벤트에 관련된 사람을 검출하면, 이벤트에 관련된 검출된 사람의 지리적 위치가 결정되고, 후속하여 이벤트에 관련되는 사람 대 사람의 지리적 위치에서 지향성 음성의 제공은 그에 기초하여 제어된다.
이러한 하나의 이벤트는 멀티미디어 자산, 예를 들면, 영화, 정보 멀티미디어 자산, 광고, 또는 임의의 다른 종류의 멀티미디어 자산에 대한 관심 또는 심지어 프레젠테이션 보드에 나타내는 멀티미디어 자산이 아닌 특정 물체에 대한 관심일 수 있다.
또 다른 대안적인 이벤트는 추가의 정보가 관련된 사람에게 제공되는 임의의 상황일 수 있거나 또는 이러한 이벤트는 심각하거나 덜 심각한 법의 위반일 수 있거나 또는 바람직한 행동일 수 있고, 경고 또는 정정과 같은 정보가 이러한 행동을 보이는 사람에게 제공될 것이다.
사람이 이벤트에 관련되는지, 예를 들면, 사람이 프레젠테이션 보드에 나타낸 멀티미디어 자산과 같은 물체에 관심이 있는지를 결정하기 위해, 사람의 이러한 관련은 다음에 기초하여 결정될 수 있다:
- 관련될 수 있는 사람과 보드 사이의 거리. 적어도 하나의 카메라에 의해 캡처된 장면상의 이미지들을 사용하는 장면의 분석(깊이 계산)에 기초하여, 사람과 프레젠테이션 보드 또는 물체 사이의 거리가 결정될 수 있다.
- 얼굴/머리 배향. 또한 캡처된 장면상의 이미지들의 이미지 처리에 기초하여, 사람이 보드쪽을 향하고 있는지가 결정될 수 있다;
- 사람이 프레젠테이션 보드 또는 물체를 "바라보고" 있는 시간 기간, 이러한 파라미터는 사용자들 및 신청자들에 의해 맞춤화된 임계치일 수 있다.
또한, 사람의 지리적 위치를 결정하기 위해 이러한 지리적 위치의 계산은 다음에 기초할 수 있다:
도 1에 도시된 바와 같이, 캡처된 장면으로부터의 깊이 계산에 기초하여, 사람(A)과 카메라들 사이의 거리를 검색할 수 있다. 도면에서, 이러한 거리는 b로서 표시된다. 비행 시간 카메라가 사용되는 경우, 거리(b)는 적외선이 사람(A)에 입사하는 시간 및 반향되는 시간에 의해 결정된다. 쌍안 사진 카메라가 사용되는 경우, 거리(b)는 두 개의 카메라들 사이의 차에 기초하여 계산될 것이고, 이는 카메라들 및/또는 프레젠테이션 보드에 관련된 사용자의 지리적 위치를 결정한다.
대안적으로, 도 2에 도시된 바와 같이, 배향각(a)은 다음의 수식: a = x/y * C에 의해 계산될 수 있고, x는 사람(A)과 중간점 사이의 거리이고 y는 최대 범위의 거리이고 C는 최대 시야각이다. X,y는 쉽게 측정될 수 있고 C는 카메라의 알려진 파라미터이다. 그래서 배향각이 결정될 수 있다. 사람과 카메라들 사이의 거리와 함께 배향각은 카메라들 및/또는 프레젠테이션 보드에 관련된 사람의 지리적 위치를 결정한다.
깊이 및 배향각들의 계산의 나타낸 알고리즘은 알고리즘들 중 하나의 실시예라는 것이 주의되어야 한다. 사람, 사람(A), 및 카메라들의 및/또는 프레젠테이션 보드(광고판) 사이의 시야각 및 거리를 결정하기 위한 추가의 대안적인 알고리즘들 또는 방법들이 존재할 수 있다.
지향성 정보의 제공은 검출되는 이벤트에 기초하는 음성 전달 정보일 수 있다. 검출될 이벤트는 특정한 미리 규정된 정보와 연관된다. 이벤트에 관련되는 사람에 대한 프로파일 정보가 현재 이용가능한 경우, 연관된 정보는 또한 이러한 관련된 사람에 대해 개인화될 수 있다.
본 발명의 다른 특징적인 실시예는 청구항 제 2 항, 제 4 항 및 제 9 항에 개시된다.
관련 시스템 및 관련 디바이스는, 지향성 정보 제공 제어 수단의 제어하에서, 이러한 이벤트에 관련된 사람의 지리적 위치에서 이벤트와 연관되는 정보를 실제로 제공하기 위한 단계를 수행하기 위한 정보 제공 수단을 추가로 포함한다. 이러한 내부 또는 외부 정보 제공 수단(IPM)은 지향성 스피커일 수 있거나 또는 대안적으로 Wi-Fi 또는 블루투스 또는 사람의 이동 통신 디바이스에 대한 임의의 다른 무선 기술 또는 무선을 통해 사람에게 전송된 지향성 메시지일 수 있다. 이러한 방식으로, 이벤트와 연관되는 정보는 단지 이벤트에만 관련된 사람에게 제공될 수 있다.
본 발명의 다른 특징적인 실시예는 청구항 제 5 항 및 제 10 항에 개시된다.
이벤트 검출 수단은 이벤트에 관련된 적어도 한 명의 사람을 포함하는 장면을 포함하는 이미지들에 기초하여 이벤트에 관련된 사람을 검출하도록 적응되고, 장면을 포함하는 이미지들은 적어도 하나의 카메라에 의해 캡처된다.
본 발명의 다른 특징적인 실시예는 청구항 제 6 항 및 제 11 항에 개시된다.
이벤트 검출 수단은 또한 적어도 하나의 카메라에 의해 캡처되는 상기 장면을 포함하는 상기 이미지들로부터 결정된 복수의 사람들 중 한 사람의 얼굴 검출, 응시 검출, 머리 추적 중 적어도 하나에 기초하여 이벤트에 관련된 사람을 검출하도록 적응된다. 특정한 미리 결정된 이벤트에 관심을 보이는 것으로 해석될 수 있는 이러한 사람의 임의의 다른 움직임 또는 제스처는 또한 사람이 이러한 이벤트에 관련되는지 안되는지를 결정하기 위해 적용가능할 수 있다.
본 발명의 다른 특징적인 실시예는 청구항 제 7 항 및 제 12 항에 개시된다.
위치 결정 수단은 하나 이상의 카메라들에 의해 캡처되는 장면을 포함하는 이미지들에 기초하여 이벤트에 관련된 사람의 지리적 위치를 결정할 수 있다.
하나 이상의 카메라들에 의해 캡처된 사진 또는 영상 이미지들은 프레젠테이션 보드 또는 물체의 앞의 장면의 3 차원 모델을 재구성하기 위해 사용될 것이다. 재구성된 3차원 장면에 기초하여, 시스템은 타깃 사람, 즉, 이벤트에 관심 있는 사람의 위치를 결정할 수 있다. 타깃 사람, 즉 이벤트에 관심 있는 사람의 지리적 위치는 다음에 기초할 수 있다:
도 1에 도시된 바와 같이, 캡처된 장면으로부터의 깊이 계산에 기초하여, 사람과 카메라들 사이의 거리를 검색할 수 있다. 도면에서, 이러한 거리는 b로서 표시된다. 비행 시간 카메라가 사용되는 경우, 거리(b)는 적외선이 사람(A)에 입사되는 시간 및 반향되는 시간에 의해 결정된다. 쌍안 사진 카메라가 사용되는 경우, 거리(b)는 두 개의 카메라들 사이의 차에 기초하여 계산될 것이고, 이는 카메라들 및/또는 프레젠테이션 보드에 관련된 사람의 지리적 위치를 결정한다.
대안적으로, 도 2에 도시된 바와 같이, 배향각(a)은 다음의 수식: a = x/y * C에 의해 계산될 수 있고, x는 사람(A)과 중간 지점 사이의 거리이고 y는 최대 범위의 거리이고 C는 최대 시야각이다. X,y는 쉽게 측정될 수 있고 C는 카메라의 알려진 파라미터이다. 이렇게 배향각이 결정될 수 있고, 사람과 카메라들 사이의 거리는 카메라들 및/또는 프레젠테이션 보드에 관한 사람의 지리적 위치를 결정한다.
깊이 및 배향각들의 계산의 나타낸 알고리즘은 알고리즘들 중 하나의 예시라는 것이 주의되어야 한다. 사람, 사람(A), 및 카메라들의 및/또는 프레젠테이션 보드(광고판) 사이의 시야각 및 거리를 결정하기 위한 추가의 대안적인 알고리즘들 또는 방법들이 존재할 수 있다.
단일 카메라가 상기 장면상의 이미지들을 캡처하기 위해 사용되는 경우, 비행 시간 카메라와 같은 깊이 카메라는 이벤트에 관련된 사람의 지리적 위치를 결정하기 위해 적용되어야 한다.
- 청구항들에서 사용된 용어 '포함하는'은 이후 나열된 수단들로 제한되는 것으로 해석되지 않아야 한다는 것이 주의되어야 한다. 따라서, '수단들(A 및 B)을 포함하는 디바이스'의 표현의 범위는 구성 요소들(A, B)로만 구성되는 디바이스들로 제한되지 않아야 한다. 이는, 본 발명에 관하여, 단지 디바이스의 관련 구성 요소들이 A 및 B라는 것을 의미한다.
유사하게는, 또한 청구항들에 사용되는, 용어 '결합된'은 직접 접속들만으로 제한되는 것으로 해석되지 않아야 한다는 것이 주의되어야 한다. 따라서, 표현 '디바이스(B)에 결합된 디바이스(A)'의 범위는 디바이스(A)의 출력이 디바이스(B)의 입력에 직접 접속되는 디바이스들 또는 시스템들로 제한되지 않아야 한다. 이는 다른 디바이스들 또는 수단들을 포함하는 경로일 수 있는 A의 출력과 B의 입력 사이의 경로가 존재할 수 있다는 것을 의미한다.
본 발명은 정보가 이벤트에 관련된 사람에게 배타적으로 제공되는 자동 방식으로 사람이 관련되는 이벤트와 연관된 정보를 사람에게 제공하기 위한 방법, 시스템, 또는 관련 디바이스를 제공한다.
도 1은 본 발명에 따라 사람에게 정보를 제공하기 위한 방법이 로컬로 실행되는 환경의 개요도.
도 2는 본 발명에 따라 사람에게 정보를 제공하기 위한 방법이 로컬로 실행되고 단일 카메라가 장면을 캡처하기 위해 적용되는 환경의 대안적인 개요도.
도 3은 도 1에 나타낸 환경에서 사용을 위한 정보 제공 시스템(IPS)의 기능도.
본 발명의 상기 및 다른 목적들 및 특징들은 더 명확해질 것이고 본 발명 자체는 첨부하는 도면들과 함께 취해진 일 실시예의 다음의 설명을 참조함으로써 가장 잘 이해될 것이다.
다음의 단락들에서, 도면들을 참조하면, 사람에게 본 발명에 따른 이벤트와 연관된 추가의 정보를 제공하기 위한 방법의 구현이 기술된다.
이러한 기술의 제 1 단락에서, 도 3에 나타낸 정보 제공 시스템(IPS)의 주요 기능부들이 기술된다. 제 2 단락에서, 이전에 언급된 수단 사이의 모든 접속들이 규정된다. 다음의 단락에서, 정보 제공 시스템(IPS)의 실제 실행이 기술된다.
정보 제공 시스템은 이벤트에 관련된 사람을 검출하도록 적응되는 이벤트 검출 수단(EDM), 검출된 이벤트에 관련된 사람의 지리적 위치를 결정할 수 있는 위치 결정 수단(LDM), 및 검출된 이벤트에 관련된 사람의 지리적 위치에서 이벤트와 연관된 정보(예를 들면, 지향성 음성)의 제공을 제어하도록 적응되는 지향성 정보 제공 제어 수단(IPCM)을 포함한다. 또한 정보 제공 시스템(IPS)은 지향성 정보 제공 제어 수단(IPCM)의 제어하에서, 이벤트에 관련된 사람의 지리적 위치에서 이벤트와 연관된 정보를 제공하도록 적응되는 외부 정보 제공 수단(IPM)을 포함하거나, 또는 대안적으로 그에 결합된다. 이러한 외부 정보 제공 수단(IPM)은 지향성 스피커일 수 있거나 또는 Wi-Fi 또는 블루투스 또는 사람의 이동 통신 디바이스에 대한 임의의 다른 무선 기술 또는 무선을 통해 사람에게 전송된 지향성 메시지일 수 있다.
추가로 정보 제공 시스템(IPS)은 적어도 한 명의 사람이 나타나는 장면을 모니터링할 수 있는 장면 모니터링 수단(SMM)을 포함한다.
이러한 장면은 멀티미디어 자산을 렌더링하기 위한 프레젠테이션 보드(PB)의 환경들 또는 특정한 물체의 환경들일 수 있다. 이러한 장면은 프레젠테이션 보드에 렌더링된 멀티미디어 자산에 관심이 있거나 없을 수 있거나 또는 언급된 물체에 관심이 있을 수 있는 한 명 이상의 사람을 포함할 수 있다. 이러한 장면의 이러한 모니터링은 장면에서 이미지들 및/또는 사운드를 캡쳐링하는 카메라에 의해 수행될 수 있다. 대안적으로, 이러한 장면의 모니터링은 다음에 의해 수행될 수 있다:
1. 환경들의 움직임을 검출하기 위해 사용된 초음파 기술(http://www.popularmechanics.com/technology/gadgets/home-theater/next-up-in-kinect-style-motion-sensing-ultrasound-9118795?click=pm latest)
2. 적외선 카메라들, 비행 시간 카메라와 같은 깊이 카메라
3. 근접성에 기초하여 환경들을 검출/모니터링하기 위한 RFID 기술.
대안적으로 이러한 장면 모니터링 수단(SMM)은 상기 정보 제공 시스템에 대해 외부에 위치될 수 있다.
장면 모니터링 수단(SMM)은 출력이 이벤트 검출 수단(EDM)의 입력에 또한 결합된다. 장면 모니터링 수단(SMM)과 이벤트 검출 수단(EDM) 사이의 결합은 통합된 장면 모니터링 수단(SMM)의 경우에 내부 결합일 수 있거나 또는 외부에 위치된 장면 모니터링 수단(SMM)의 경우에 외부 통신 링크를 통해 결합될 수 있다.
이벤트 검출 수단(EDM)은 이후 지향성 정보 제공 제어 수단(IPCM)의 입력 단자에 결합되는 외부 단자를 갖는 위치 결정 수단(LDM)의 입력 단자에 결합되는 출력 단자를 추가로 갖는다. 지향성 정보 제공 제어 수단(IPCM)은 통합된 정보 제공 수단(IPM)의 경우 내부 결합을 통해 정보 제공 수단(IPM)에 결합되거나, 또는 외부에 위치된 정보 제공 수단(IPM)의 경우에 외부 통신들을 통해 결합된다.
본 발명의 일 특정한 실현 및 본 발명의 실행을 설명하기 위해, 프레젠테이션 보드(PB)가 특정한 위치에 위치된다고 가정된다. 이러한 보드 앞에서, 한 명 이상의 사람들을 갖는 장면이 존재한다고 가정된다. 또한, 한 명 이상의 사람들로부터 단 한 명의 사람(A)이 프레젠테이션 보드(PB)에 나타낸 멀티미디어 자산 또는 언급된 물체에 주목한다고 가정된다.
추가로, 프레젠테이션 보드(PB)의 상부에 일 세트의 카메라들이 장착된 이러한 경우에서, 장면 모니터링 수단(SMM)은 사람(A)을 포함하는 소그룹의 사람이 존재하는 장면인, 프레젠테이션 보드(PB) 앞의 장면을 모니터링한다는 것이 가정된다. 장면 모니터링 수단(SMM)의 각각의 카메라는 이미지들 및 선택적으로 장면의 사운드를 캡처하고, 상기 장면은 소그룹의 사람들을 포함한다.
이벤트 검출 수단(EDM)은 이후 한 명의 사람(A)을 검출하는데, 이 사람은 이벤트에 관련된다. 즉, 사람(A)이 나타낸 멀티미디어 자산을 상당한 시간 동안 응시할 때 프레젠테이션 보드(PB)상에 렌더링되는 멀티미디어 자산에 관심이 있어서, 그의 얼굴이 스크린을 향하고 그의 눈들은 스크린에 집중된다.
이벤트 검출 수단(EDM)은, 예를 들면, 프레젠테이션 보드(PB) 앞의 장면(카메라들의 세트에 의해 캡쳐되는)상의 캡처된 이미지들에 기초하여 관심 있는 사람(A)를 검출한다. 이벤트 검출 수단(EDM)은 광고판의 방향을 바라보는 얼굴을 찾고, 장면에서 사람의 응시를 검출하고, 결정된 복수의 사람들 중 한 명의 사람의 머리를 추적하는 등에 대해 검색함으로써 관심 있는 사람을 검출하기 위해 캡처된 이미지들을 분석한다.
사람이 이벤트에 관련되는지 안 되는지의 여부, 예를 들면, 프레젠테이션 보드에 나타낸 멀티미디어 자산과 같은 물체에 관심이 있는지의 여부를 결정하기 위해, 이러한 사람의 관련은 다음에 기초하여 결정될 수 있다:
- 사람과 보드 사이의 거리가 관련될 수 있다. 적어도 하나의 카메라에 의해 캡처된 장면상의 이미지들을 사용하는 장면의 분석(깊이 계산)에 기초하여, 사람과 보드 사이의 거리를 결정할 수 있다;
- 얼굴/머리 배향. 또한 캡처된 장면상의 이미지들의 이미지 처리에 기초하여, 사람이 보드를 향해 마주보고 있는지의 여부가 결정될 수 있다;
사람이 프레젠테이션 보드 또는 물체를 바라보고 있는 시간 기간. 이러한 파라미터는 사용자들 및 적용자들에 의해 맞춤화된 임계치일 수 있다.
대안적으로, 사람(A)은 프레젠테이션 보드에 대한 지향성 제스처를 행함으로써 나타낸 멀티미디어 자산에 대해 그의 관심을 표현할 수 있다.
이러한 경우, 한 명 이상의 사람들이, 프레젠테이션에 관심이 있는 것으로 밝혀져, 그들이 발견되는, 검출된 이벤트에 관련되는 것으로 검출되면, 위치, 즉 이러한 관심 있는 사람의 지리적 위치가 결정되어야 한다. 검출된 이벤트에 관련되는 이러한 사람, 즉, 위치 결정 수단(LDM)에서 렌더링된 멀티미디어 자산에 관심이 있는 사람의 지리적 위치를 결정하기 위해, 또한 프레젠테이션 보드(PB)에 가까운 장면상의 캡처된 이미지들(예를 들면, 카메라들의 세트에 의해 캡처되는)에 기초하여, 검출된 이벤트에 관련된 사람의 지리적 위치를 결정한다. 이벤트 검출 수단(EDM)은 프레젠테이션 보드(PB) 앞의 장면의 3차원 모델을 재구성하기 위해 캡처된 이미지들을 분석한다. 이러한 재구성된 3 차원 장면에 기초하여, 시스템은 타깃 사람의 위치를 결정할 수 있다.
사람의 지리적 위치를 결정하기 위해, 이러한 지리적 위치의 계산은 다음에 기초할 수 있다: 도 1에 도시된 바와 같이, 캡처된 장면으로부터의 깊이 계산에 기초하여, 사람과 카메라들 사이의 거리가 검색될 수 있다. 도면에서, 이러한 거리는 b로서 표시된다. 비행 시간 카메라가 사용되는 경우, 거리(b)는 적외선이 사람(A)에 입사하는 시간 및 반향되는 시간에 의해 결정된다. 쌍안 사진 카메라가 사용되는 경우, 거리(b)는 두 개의 카메라들 사이의 차에 기초하여 계산될 것이고, 이는 카메라들 및/또는 프레젠테이션 보드에 관한 사용자의 지리적 위치를 결정한다.
대안적으로, 도 2에 도시된 바와 같이, 장면을 캡처하기 위해 단일 카메라가 사용되는 경우, 배향각(a)은 다음의 수식: a = x/y * C에 의해 계산될 수 있고, x는 사람(A)과 중간 지점 사이의 거리이고 y는 최대 범위의 거리이고 C는 최대 시야각이다. X,y는 쉽게 측정될 수 있고 C는 카메라의 알려진 파라미터이다. 이렇게 배향각이 결정될 수 있고 사람과 카메라들 사이의 거리는 카메라들 및/또는 프레젠테이션 보드에 관한 사람의 지리적 위치를 결정한다.
깊이 및 배향각들의 계산의 나타낸 알고리즘은 알고리즘들 중 하나의 실시예라는 것이 주의되어야 한다. 사람, 사람(A), 및 카메라들 및/또는 프레젠테이션 보드(광고판) 사이의 시야각 및 거리를 결정하기 위한 추가의 대안적인 알고리즘들 또는 방법들이 존재할 수 있다.
후속하여, 위치 결정 수단(LDM)에 의하여, 이벤트에 관련된 사람의 지리적 위치를 결정한 후, 위치 결정 수단은 결정된 지리적 위치를 지향성 정보 제공 제어 수단(IPCM)으로 전송하고, IPCM은 사람의 결정된 지리적 위치를 수신하고 후속하여 검출된 이벤트에 관련된 사람의 지리적 위치에서 이벤트와 연관되는 추가의 정보의 제공을 제어할 것이다. 이러한 방식으로 이벤트와 연관되는 정보는 이벤트에 관련된 사람에게만 제공될 수 있다.
추가의 정보는 보드(PB)상에 보여지는 정보에 실제로 관련된다. 이는 메모리, 예를 들면, 칩 메모리에 의해 프레젠테이션 보드(PB)에 저장되거나 또는 네트워크 어딘가에 저장될 수 있다. 네트워크에서 추가의 정보의 저장의 경우에, 네트워크 접속은 보드상에 또한 제공되어야 한다. 추가의 정보의 내용은 모두에게 동일하거나 상이할 수 있고 사용되는 검출 기술들의 종류에 기초하여 개인들에게 맞춤화될 수 있다. 검출 기술이 사람의 프로파일을 식별할 수 있는 경우, 그에게 가장 적합한 맞춤화된 추가의 정보가 관심 있는 사용자에게 제공될 수 있다. 그렇지 않은 경우, 단지 일반적인 추가의 정보가 제공될 수 있다.
추가의 정보가 개인화될 수 있도록 사람에 대한 프로파일 정보를 획득하는 것을 용이하게 하는 적용가능한 기술들은 다음과 같을 수 있다:
1. 캡처된 이미지들에 기초하여 누구인지를 식별하기 위한 얼굴 인식
2. Wi-Fi 또는 블루투스 링크에 기초하여, 또한 다소 고유한 사람의 모바일 ID(SIM id)를 식별하기
3. 지문에 기초하여 사람을 식별하기. 이러한 경우, 사용자는 보드를 터치해야 한다.
4. RFID 또는 유사한 기술들.
또한, 지향성 정보 제공 제어 수단(IPCM)에 결합되는 외부 정보 제공 수단(IPM)은, 지향성 정보 제공 제어 수단(IPCM)의 제어 하에서, 이벤트에 관련된 사람의 지리적 위치에서 이벤트와 연관되는 추가의 정보를 제공한다.
따라서, 외부 정보 제공 수단(IPM)은 지향성 음성에 의해 이벤트에 관련된 사람의 지리적 위치에서 이벤트와 연관된 추가의 정보를 사람(A)에게만 전송한다.
대안적으로, 정보 제공 수단(IPM)은 Wi-Fi 또는 블루투스 또는 사람의 이동 통신 디바이스에 대한 임의의 다른 무선 기술 또는 무선 디바이스를 통해 사람에게 전송된 지향성 메시지에 의해 추가의 정보를 제공할 수 있다.
사람(A)은 프레젠테이션 보드(PB)에 나타낸 멀티미디어 자산을 관찰하고, 관찰은 캡처된 이미지들 상에 행해진 분석에 기초하여 이벤트 검출 수단(EDM)에 의해 검출되고, 후속하여 위치 결정 수단(LDM)은 사람의 지리적 위치를 결정한다. 또한 거기서 캡처된 이미지들에 기초하여, 프레젠테이션 보드 앞의 장면의 3차원 모델이 생성된다. 결정된 지리적 위치에 기초하여, 외부 정보 제공 수단(IPM)은, 지향성 정보 제공 제어 수단(IPCM)의 제어하에서, 이벤트에 관련된 사람의 지리적 위치에서 이벤트와 연관되는 추가의 정보를 제공하고, 추가의 정보는 멀티미디어 자산에 대한 배경 정보를 사람에게 말해주는 지향성 음성이다. 따라서, 음성 메시지는 주변의 다른 사람을 방해하지 않고 사람(A)인 사람에게만 올바르게 전송된다.
멀티미디어 자산이 광고인 경우, 관심 있는 사람은 수 개의 광고 내의 몇몇 더 많은 상세들을 판독하거나 도면을 보면서, 음성 메시지가 지역의 판매자들에 대한 정보와 같은 광고에 대한 추가의 정보를 사람에게 전송된다.
대안적으로, 이러한 이벤트는 영화, 정보 멀티미디어 자산, 광고, 또는 임의의 다른 종류의 멀티미디어 자산에 대한 관심 또는 심지어 프레젠테이션 보드에 나타낸 멀티미디어 자산이 아닌 특정한 물체에 대한 관심일 수 있다.
또 다른 대안적인 이벤트는 추가의 정보가 관련된 사람에게 제공되는 임의의 상황일 수 있거나, 또는 이러한 이벤트는 심각하거나 덜 심각한 법의 위반 또는 바람직한 행동일 수 있고, 경고 또는 정정과 같은 정보는 이러한 행동을 보이는 사람에게 제공될 것이다.
최종 결어는 본 발명의 실시예들이 기능 블록들에 관해 상기에 기술되었다는 것이다. 이들 블록들의 기능적인 기재로부터, 이들 블록들의 실시예들이 잘 알려진 전자 구성 요소들로 어떻게 제작될 수 있는지는 전자 디바이스들을 설계하는 기술 분야의 숙련자에게 명백할 것이다. 따라서, 기능 블록들의 콘텐트들의 상세 아키텍처는 제공되지 않는다.
본 발명의 원리들은 특정한 장치와 관련되어 상기에 기술되었지만, 본 기술은 단순히 예로서 행해지고, 첨부된 청구항에 규정된 본 발명의 범위를 제한하는 것이 아니라는 것이 명확하게 이해될 것이다.

Claims (12)

  1. 이벤트와 연관된 정보를 사람에게 제공하기 위한 방법에 있어서,
    a. 상기 이벤트에 관련된 사람을 검출하는 단계;
    b. 상기 이벤트에 관련된 상기 사람의 지리적 위치를 결정하는 단계; 및
    c. 상기 이벤트에만 관련된 상기 사람의 상기 지리적 위치에서 지향성 정보의 제공을 제어하는 단계를 포함하는 것을 특징으로 하는, 이벤트와 연관된 정보를 사람에게 제공하기 위한 방법.
  2. 제 2 항에 있어서,
    상기 지향성 정보 제공 제어 수단(IPCM)의 제어하에서, 단지 상기 이벤트에 관련된 상기 사람의 상기 지리적 위치에서만 상기 이벤트와 연관되는 상기 정보를 제공하는 단계를 추가로 포함하는 것을 특징으로 하는, 이벤트와 연관된 정보를 사람에게 제공하기 위한 방법.
  3. 이벤트와 연관된 정보를 사람에게 제공하기 위한 시스템에 있어서,
    a. 상기 이벤트에 관련된 사람을 검출하도록 적응된 이벤트 검출 수단(EDM); 및
    b. 상기 이벤트에 관련된 상기 사람의 지리적 위치를 결정하도록 적응된 위치 결정 수단(LDM); 및
    c. 단지 상기 이벤트에 관련된 상기 사람의 상기 지리적 위치에서만 상기 이벤트와 연관된 상기 정보의 제공을 제어하도록 적응된 지향성 정보 제공 제어 수단(IPCM)을 포함하는 것을 특징으로 하는, 이벤트와 연관된 정보를 사람에게 제공하기 위한 시스템.
  4. 제 3 항에 있어서,
    상기 시스템은, 상기 지향성 정보 제공 제어 수단(IPCM)의 제어하에서, 상기 이벤트에 관련된 상기 사람의 상기 지리적 위치에서만 상기 이벤트와 연관된 상기 정보를 제공하도록 적응된 정보 제공 수단(IPM)을 추가로 포함하는 것을 특징으로 하는, 이벤트와 연관된 정보를 사람에게 제공하기 위한 시스템.
  5. 제 3 항 또는 제 4 항에 있어서,
    상기 이벤트 검출 수단(EDM)은 상기 이벤트에 관련된 적어도 상기 사람을 포함하는 장면상의 이미지들에 기초하여 상기 이벤트에 관련된 사람을 검출하도록 적응되고, 상기 이미지들은 적어도 하나의 카메라에 의해 캡처되는 것을 특징으로 하는, 이벤트와 연관된 정보를 사람에게 제공하기 위한 시스템.
  6. 제 5 항에 있어서,
    상기 이벤트 검출 수단(EDM)은 상기 적어도 하나의 카메라에 의해 캡처되는 상기 장면을 포함하는 상기 이미지들로부터 결정된 복수의 사람들 중 한 사람의 얼굴 검출, 응시 검출, 머리 추적 중 적어도 하나에 기초하여 상기 이벤트에 관련된 사람을 검출하도록 적응되는 것을 특징으로 하는, 이벤트와 연관된 정보를 사람에게 제공하기 위한 시스템.
  7. 제 3 항에 있어서,
    상기 위치 결정 수단(LDM)은 상기 적어도 하나의 카메라에 의해 캡처되는 상기 장면을 포함하는 상기 이미지들에 기초하여 상기 이벤트에 관련된 상기 사람의 지리적 위치를 결정할 수 있는 것을 특징으로 하는, 이벤트와 연관된 정보를 사람에게 제공하기 위한 시스템.
  8. 이벤트와 연관된 정보를 사람에게 제공하기 위한 디바이스에 있어서,
    a. 상기 이벤트에 관련된 사람을 검출하도록 적응된 이벤트 검출 수단(EDM);
    b. 상기 이벤트에 관련된 상기 사람의 지리적 위치를 결정하도록 적응된 위치 결정 수단(LDM); 및
    c. 상기 이벤트에 관련된 상기 사람의 상기 지리적 위치에서만 상기 이벤트와 연관된 상기 정보의 제공을 제어하도록 적응된 정보 제공 제어 수단(IPCM)을 포함하는 것을 특징으로 하는, 이벤트와 연관된 정보를 사람에게 제공하기 위한 디바이스.
  9. 제 8 항에 있어서,
    d. 상기 지향성 정보 제공 제어 수단(IPCM)의 제어 하에서, 상기 이벤트에 관련된 상기 사람의 상기 지리적 위치에서 상기 이벤트와 연관된 상기 정보를 제공하도록 적응된 정보 제공 수단(IPM)을 추가로 포함하는 것을 특징으로 하는, 이벤트와 연관된 정보를 사람에게 제공하기 위한 디바이스.
  10. 제 8 항 또는 제 9 항에 있어서,
    상기 이벤트 검출 수단(EDM)은 적어도 상기 이벤트에 관련된 사람을 포함하는 장면상의 이미지들에 기초하여 상기 이벤트에 관련된 사람을 검출하도록 적응되고, 상기 이미지는 적어도 하나의 카메라에 의해 캡처되는 것을 특징으로 하는, 이벤트와 연관된 정보를 사람에게 제공하기 위한 디바이스.
  11. 제 10 항에 있어서,
    상기 이벤트 검출 수단(EDM)은 상기 적어도 하나의 카메라에 의해 캡처되는 상기 장면을 포함하는 상기 이미지들로부터 결정된 복수의 사람들 중 한 사람의 얼굴 검출, 응시 검출, 머리 추적 중 적어도 하나에 기초하여 상기 이벤트에 관련된 사람을 검출하도록 적응되는 것을 특징으로 하는, 이벤트와 연관된 정보를 사람에게 제공하기 위한 디바이스.
  12. 제 8 항에 있어서,
    상기 위치 결정 수단(LDM)은 상기 장면을 포함하는 상기 이미지들에 기초하여 상기 이벤트에 관련된 상기 사람의 지리적 위치를 결정할 수 있고, 상기 이미지들은 상기 적어도 하나의 카메라에 의해 캡쳐되는 것을 특징으로 하는, 이벤트와 연관된 정보를 사람에게 제공하기 위한 디바이스.
KR1020157006483A 2012-08-16 2013-08-08 이벤트와 연관된 정보를 사람에게 제공하기 위한 방법 KR20150045465A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP12306005.5 2012-08-16
EP20120306005 EP2699022A1 (en) 2012-08-16 2012-08-16 Method for provisioning a person with information associated with an event
PCT/EP2013/066599 WO2014026901A1 (en) 2012-08-16 2013-08-08 Method for provisioning a person with information associated with an event

Publications (1)

Publication Number Publication Date
KR20150045465A true KR20150045465A (ko) 2015-04-28

Family

ID=46796492

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020157006483A KR20150045465A (ko) 2012-08-16 2013-08-08 이벤트와 연관된 정보를 사람에게 제공하기 위한 방법

Country Status (6)

Country Link
US (1) US20150223017A1 (ko)
EP (1) EP2699022A1 (ko)
JP (2) JP2015531130A (ko)
KR (1) KR20150045465A (ko)
CN (1) CN104541523A (ko)
WO (1) WO2014026901A1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150346814A1 (en) * 2014-05-30 2015-12-03 Vaibhav Thukral Gaze tracking for one or more users
JP6555858B2 (ja) * 2014-08-01 2019-08-07 シャープ株式会社 機器、音声出力方法、音声出力プログラム、ネットワークシステム、サーバ、および通信機器
AU2014410456A1 (en) * 2014-11-05 2017-05-11 Quividi Process for rewarding the audience of a signage device
US10602556B2 (en) 2016-02-04 2020-03-24 Apple Inc. Displaying information based on wireless ranging

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2215017T3 (es) * 2000-10-16 2004-10-01 Alcatel Metodo y aparato para suministrar a un usuario de un terminal de comunicacion movil o a un grupo de usuarios un mensaje de informacion con informacion adaptada.
US20050053062A1 (en) * 2001-10-29 2005-03-10 Jan Kall Adapting the data rate and/or the amount of data of content to be transmitted separately for at least two radio access networks e.g. umts, geran
US7945775B2 (en) * 2001-10-29 2011-05-17 Nokia Corporation Method and equipment for controlling information provided to a user in a network
JP2003242059A (ja) * 2002-02-18 2003-08-29 Sharp Corp 情報配信装置、情報端末装置、情報配信システム、情報配信方法およびプログラムを記録した機械読取り可能な記録媒体
JP2005525597A (ja) * 2002-05-14 2005-08-25 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ 電気機器の対話制御
US20120306907A1 (en) * 2011-06-03 2012-12-06 Huston Charles D System and Method for Inserting and Enhancing Messages Displayed to a User When Viewing a Venue
US10460346B2 (en) * 2005-08-04 2019-10-29 Signify Holding B.V. Apparatus for monitoring a person having an interest to an object, and method thereof
ATE546958T1 (de) * 2006-03-31 2012-03-15 Koninkl Philips Electronics Nv Vorrichtung und verfahren zur datenverarbeitung
JP2008289088A (ja) * 2007-05-21 2008-11-27 Canon Inc データ表示制御装置、データ表示制御方法及びプログラム
JP2009111833A (ja) * 2007-10-31 2009-05-21 Mitsubishi Electric Corp 情報提示装置
JP2010015076A (ja) * 2008-07-07 2010-01-21 Seiko Epson Corp 表示システム、表示制御装置、および、表示制御方法
JP2010041167A (ja) * 2008-08-01 2010-02-18 Seiko Epson Corp 音声出力制御装置、音声出力装置、音声出力制御方法、及び、プログラム
JP5396769B2 (ja) * 2008-08-04 2014-01-22 セイコーエプソン株式会社 音声出力制御装置、音声出力装置、音声出力制御方法、及び、プログラム
JP2010039333A (ja) * 2008-08-07 2010-02-18 Seiko Epson Corp 広告装置、広告装置の制御方法及び制御プログラム
JP2011033993A (ja) * 2009-08-05 2011-02-17 Sharp Corp 情報提示装置、および情報提示方法
US9277021B2 (en) * 2009-08-21 2016-03-01 Avaya Inc. Sending a user associated telecommunication address
US8341534B2 (en) * 2010-03-05 2012-12-25 Palo Alto Research Center Incorporated System and method for flexibly taking actions in response to detected activities
TWI420440B (zh) * 2010-08-16 2013-12-21 Hon Hai Prec Ind Co Ltd 物品展示系統及方法
US20120200667A1 (en) * 2011-02-08 2012-08-09 Gay Michael F Systems and methods to facilitate interactions with virtual content

Also Published As

Publication number Publication date
JP2017126355A (ja) 2017-07-20
WO2014026901A1 (en) 2014-02-20
JP6359704B2 (ja) 2018-07-18
EP2699022A1 (en) 2014-02-19
CN104541523A (zh) 2015-04-22
US20150223017A1 (en) 2015-08-06
JP2015531130A (ja) 2015-10-29

Similar Documents

Publication Publication Date Title
CN110209952B (zh) 信息推荐方法、装置、设备及存储介质
CN111556294B (zh) 安全监测方法、装置、服务器、终端及可读存储介质
US9001252B2 (en) Image matching to augment reality
US20150094118A1 (en) Mobile device edge view display insert
US11132887B2 (en) Eyeglasses-type wearable terminal, control method thereof, and control program
CN106961655B (zh) 在无线通信系统中用于检测伪造通告器的装置和方法
JP2017538978A (ja) 警報方法および装置
JP2008017093A (ja) 監視システム、監視装置及び監視方法
CN108989665A (zh) 图像处理方法、装置、移动终端及计算机可读介质
CN104077029A (zh) 一种选座的提示方法及装置
JP6359704B2 (ja) イベントに関連付けられる情報を人に供給するための方法
CN108551525B (zh) 一种移动轨迹的状态确定方法和移动终端
US20160205355A1 (en) Monitoring installation and method for presenting a monitored area
CN108346179B (zh) Ar设备显示方法和装置
CN111131392A (zh) 处理消息的方法、装置、电子设备及介质
KR101397096B1 (ko) Ｑｒ 코드를 이용한 광고 콘텐츠 제공 기능을 구비한 단말 및 서버
WO2013076720A1 (en) A system and methods for personalizing an image
CN105657325A (zh) 一种视频通信的方法、装置和系统
US20230386259A1 (en) System and method for safe, private, and automated detection and reporting of domestic abuse
CN105744206A (zh) 一种视频通信的方法、装置和系统
CN106375727B (zh) 摄像设备使用状态的控制方法及装置
US20170280044A1 (en) Sensor management system, sensor management device, sensor device, sensor management method, and program
CN107357423B (zh) 一种信息显示方法和第一电子设备
KR20170000191A (ko) 단말기에서 부가 컨텐츠를 제공하는 방법 및 이를 이용하는 단말기
US20150106738A1 (en) System and method for processing image or audio data

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application