[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

TWI636381B - 互動顯示系統及互動顯示控制方法 - Google Patents

互動顯示系統及互動顯示控制方法 Download PDF

Info

Publication number
TWI636381B
TWI636381B TW106144684A TW106144684A TWI636381B TW I636381 B TWI636381 B TW I636381B TW 106144684 A TW106144684 A TW 106144684A TW 106144684 A TW106144684 A TW 106144684A TW I636381 B TWI636381 B TW I636381B
Authority
TW
Taiwan
Prior art keywords
interactive
display
interactive controller
mark
pointing
Prior art date
Application number
TW106144684A
Other languages
English (en)
Other versions
TW201917534A (zh
Inventor
張志嘉
王聖博
林郁欣
Original Assignee
財團法人工業技術研究院
創智智權管理顧問股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 財團法人工業技術研究院, 創智智權管理顧問股份有限公司 filed Critical 財團法人工業技術研究院
Priority to CN201810091477.3A priority Critical patent/CN109683774A/zh
Priority to US15/997,707 priority patent/US20190121450A1/en
Application granted granted Critical
Publication of TWI636381B publication Critical patent/TWI636381B/zh
Publication of TW201917534A publication Critical patent/TW201917534A/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G06F3/0325—Detection arrangements using opto-electronic means using a plurality of light emitters or reflectors or a plurality of detectors forming a reference frame from which to derive the orientation of the object, e.g. by triangulation or on the basis of reference deformation in the picked up image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G06F3/0317—Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F9/00—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0384—Wireless input, i.e. hardware and software details of wireless interface arrangements for pointing devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一種互動顯示系統及互動顯示控制方法，互動顯示系統包括互動控制器與互動顯示模組。互動控制器包括多個標記圖案。標記圖案呈現於互動控制器的表面上。互動顯示模組包括顯示器、影像擷取裝置與處理單元。影像擷取裝置朝標記圖案拍攝標記影像。處理單元耦接顯示器以及影像擷取裝置，處理單元獲取互動控制器的定位位置資訊，依據標記影像上標記圖案的相對位置關係計算互動控制器的指向角度，依據指向角度與定位位置資訊計算互動控制器的指向座標。顯示器在關聯於指向座標的位置上顯示標示物件。

Description

互動顯示系統及互動顯示控制方法
本發明是有關於一種互動顯示系統及互動顯示控制方法。
經營觀景地點或展覽地點的單位通常會製作信息看板、語音導覽...等信息提供媒介以供遊客使用，使其能更為深入了解這些景觀物件(如，藝術品、著名大樓、景點、海洋生物或是展示文物)。隨著科技的進步，多媒體信息提供媒介，例如電子顯示看板，也逐漸被廣泛應用。然而，上述這些信息提供媒介大多是依據預設且固定的方式來提供資訊給使用者，不易與使用者進行互動，更無法立即性地呈現使用者感興趣之景觀物件的相關信息。
雖然結合顯示技術與生物特徵追蹤技術或觸控技術的互動顯示方法已逐漸出現於各種應用上，但這些技術各自有其侷限性。例如，對於使用人眼追蹤技術進行互動顯示控制的應用環境來說，倘若被偵測使用者與人眼追蹤模組相距過近或過遠，將因為無法正確辨識使用者視線而無法正常運作，更無法同時偵測多 個使用者。此外，觸控技術需使用者觸控或接近觸控面板才能發生效用，較適於近距離的互動顯示控制。此外，利用攝影機擷取影像來識別人體動作的空間性肢體辨識技術也須於特定的偵測距離，且空間性肢體辨識演算法較為複雜而需耗費更多計算資源。將互動顯示技術導入到景觀物件的導覽應用上，如何準確偵測使用者的動作與觀賞企圖並對應提供適當的回應動作仍存在許多改善空間。
本發明實施例提供一種互動顯示系統及互動顯示控制方法，其可讓使用者藉由操控互動控制器來控制顯示器依據指向座標進行顯示，從而提高互動顯示系統對於使用者操控意圖的識別正確性。
本發明一實施例提出一種互動顯示系統，其包括互動控制器以及互動顯示模組。互動控制器包括多個標記圖案。這些標記圖案呈現於互動控制器的表面上。互動顯示模組包括顯示器、影像擷取裝置以及處理單元。影像擷取裝置朝上述標記圖案拍攝標記影像。處理單元耦接顯示器以及影像擷取裝置。處理單元獲取互動控制器的定位位置資訊，依據標記影像上標記圖案的相對位置關係計算互動控制器的指向角度，依據指向角度與定位位置資訊計算互動控制器的指向座標。顯示器在關聯於指向座標的位置上顯示標示物件。
本發明又一實施例提出一種互動顯示控制方法，其適用於包括互動控制器與顯示器的互動顯示系統。所述方法包括下列步驟。朝呈現於互動控制器上的多個標記圖案拍攝標記影像。獲取互動控制器的定位位置資訊。依據標記影像上標記圖案的相對位置關係計算互動控制器的指向角度。依據指向角度與定位位置資訊計算互動控制器的指向座標。於顯示器上，在關聯於指向座標的位置上顯示標示物件。
為讓本發明能更明顯易懂，下文特舉實施例，並配合所附圖式作詳細說明如下。
100、400、500、700‧‧‧互動顯示系統
110、130、510、710‧‧‧互動控制器
111、131、511‧‧‧通訊元件
112_1~112_n、132_1~132_n、512_1~512_5、712_1~712_n、812_1~812_3‧‧‧標記圖案
120、520、720‧‧‧互動顯示模組
121、521、721‧‧‧顯示器
123、523‧‧‧通訊裝置
122、522、722‧‧‧影像擷取裝置
124、524、724‧‧‧處理單元
125、525、725‧‧‧儲存裝置
U1‧‧‧使用者
C1、C2‧‧‧標示物件
513‧‧‧輸入元件
5241‧‧‧認證模組
5242、7241‧‧‧定位模組
5243、7242‧‧‧角度計算模組
5244、7243‧‧‧指向座標決定模組
Img1~Img4‧‧‧標記影像
P10‧‧‧中心參考點
Obj1‧‧‧目標物
P1‧‧‧延伸路徑
DF‧‧‧指向方向
S301~S305、S601~S608、S801~S807‧‧‧步驟
圖1是依照本發明實施例的一種互動顯示系統的方塊圖。
圖2是依照本發明實施例的一種互動顯示系統的示意圖。
圖3是依照本發明實施例的一種互動顯示控制方法的流程圖。
圖4是依照本發明實施例的一種互動顯示系統的方塊圖。
圖5是依照本發明實施例的一種互動顯示系統的示意圖。
圖6依照本發明實施例的一種互動顯示控制方法的流程圖。
圖7依照本發明實施例的一種互動顯示系統的方塊圖。
圖8依照本發明實施例的一種互動顯示控制方法的流程圖。
圖9A與圖9B依照本發明實施例的一種互動控制器與標示影 像的示意圖。
圖10A與圖10B依照本發明實施例的一種互動控制器與標示影像的示意圖。
圖11依照本發明實施例的一種計算指向座標與顯示標示物件的示意圖。
本發明的部份實施例接下來將會配合附圖來詳細描述，以下的描述所引用的元件符號，當不同附圖出現相同的元件符號將視為相同或相似的元件。這些實施例只是本發明的一部份，並未揭示所有本發明的可實施方式。更確切的說，這些實施例只是本發明中的互動顯示控制方法以及互動顯示系統的範例。
圖1是依照本發明實施例的一種互動顯示系統的方塊圖。圖2是依照本發明實施例的一種互動顯示系統的示意圖。請同時參照圖1與圖2，互動顯示系統100包括互動控制器110以及互動顯示模組120。如圖2所示，使用者U1可透過例如持握互動控制器110而與互動顯示模組120互動，以驅動互動顯示模組120依據使用者U1持握互動控制器110的手勢而提供對應的顯示效果與內容。然而，圖2僅為一種示範性說明，並非用以限定本發明。於另一實施例中，使用者U1也可透過例如無線遙控互動控制器110或其他控制方式，而與互動顯示模組120互動，本發明不在此設限。於本實施例中，互動控制器110包括通訊元件111與多個 標記圖案112_1~112_n。互動顯示模組120包括顯示器121、影像擷取裝置122、通訊裝置123以及處理單元124。
多個標記圖案112_1~112_n呈現於互動控制器110的一表面上，可例如以一預設配置而分佈呈現。於一實施例中，互動控制器110可以實施為一卡片式載體，而這些標記圖案112_1~112_n印製於上述卡片式載體上。標記圖案112_1~112_n可事先印製於未有電源供應的卡片式載體上。於一實施例中，互動控制器110可以為具有電源供應的一手持電子裝置，像是智慧型手機、平板電腦等，上述手持電子裝置的螢幕可顯示這些標記圖案112_1~112_n。於一實施例中，這些標記圖案112_1~112_n可印製於一可黏貼式載體上或顯示於一電子紙上，互動控制器110可以是貼附有上述可黏貼式載體(例如貼紙或電子紙)的物體。此外，本發明對於這些標記圖案112_1~112_n的數量並不限制。於一實施例中，這些標記圖案112_1~112_n的數量為三個以上，並基於這些標記圖案112_1~112_n的分佈位置而連結形成特定的幾何形狀。舉例而言，三個標記圖案112_1~112_n可分別為三角形的頂點，而四個標記圖案112_1~112_n可分別為四邊形的頂點，本發明對此並不限制。
於一實施例中，透過使用無線定位技術於互動顯示系統100中，互動控制器110的定位位置資訊可據以產生。上述定位位置資訊可以為互動控制器110的定位位置或互動控制器110與一參考物件之間的相對位置資訊。上述的無線定位技術可以為GPS 定位技術、紅外線定位技術、藍芽定位技術、超音波定位技術、Zigbee定位技術、WiFi定位技術、iBeacon定位技術、蜂巢通訊定位技術、超寬頻定位技術或無線射頻辨識(RFID)定位技術，本發明對此並不限制。
通訊元件111，可產生無線訊號，用以與互動顯示模組120進行通訊。通訊元件111支援的通訊標準可包括無線射頻識別(RFID)標準、藍芽(Bluetooth)標準、無線保真度(WiFi)標準、群峰(Zigbee)標準等或其組合。於一實施例中，通訊元件111可直接透過無線訊號的傳輸而將互動控制器110的定位位置資訊傳送至互動顯示模組120。舉例而言，互動控制器110可先基於上述定位技術其中之一而得知自身的定位位置資訊，並透過通訊元件111傳輸定位位置資訊給互動顯示模組120。於一實施例中，通訊元件111可傳輸用以定位的無線訊號給互動顯示模組120，致使互動顯示模組120可依據通訊元件111發射的無線訊號進行定位而獲取互動控制器110的定位位置資訊。舉例而言，通訊元件111可產生RFID訊號，互動顯示模組120可透過通訊裝置123接收RFID訊號。互動顯示模組120再依據上述RFID訊號進行定位而得知互動控制器110的定位位置資訊。
顯示器121用以顯示影像畫面，可依據互動控制器110的位置與擺放方式而顯示一標示物件。顯示器121例如是液晶顯示器(Liquid Crystal Display，LCD)、發光二極體(Light-Emitting Diode，LED)顯示器(其可包括無機發光二極體顯示器或有機發光 二極體顯示器)、投影顯示裝置(Projection Display)或其他種類的顯示器。於一實施例中，顯示器121可以為透明顯示器。上述透明顯示器是指顯示器本身具有一定程度的光線穿透性，能夠呈現出顯示器後方的背景。實施為透明顯示器的顯示器121可適用於建築物(如，觀景臺、水族館、博物館)中的觀景窗戶、展覽櫥窗、車輛玻璃兼顯示器...等多種應用。
影像擷取裝置122用以朝標記圖案112_1~112_n擷取標記影像，並且包括具有透鏡以及感光元件的攝像鏡頭。感光元件用以感測進入透鏡的光線強度，進而產生影像。感光元件可以例如是電荷耦合元件(charge coupled device，CCD)、互補性氧化金屬半導體(complementary metal-oxide semiconductor，CMOS)元件或其他元件，本發明不在此設限。
通訊裝置123用以與通訊元件111進行通訊，並接收通訊元件111產生的無線訊號。通訊裝置123支援的通訊標準可包括無線射頻識別(RFID)標準、藍芽(Bluetooth)標準、無線保真度(WiFi)標準、群峰(Zigbee)標準等或其組合。舉例而言，通訊裝置123可以是RFID雷達、WIFI存取點等等。
儲存裝置125用以儲存影像、程式等資料，其可以例如是任意型式的固定式或可移動式隨機存取記憶體(random access memory，RAM)、唯讀記憶體(read-only memory，ROM)、快閃記憶體(flash memory)、硬碟或其他類似裝置、積體電路及其組合。
處理單元124可耦接包括顯示器121、影像擷取裝置 122、通訊裝置123以及儲存裝置125。處理單元124可以是由至少一系統晶片(SOC)、場可編程閘陣列(field programmable gate array，FPGA)晶片、複雜可編程邏輯元件(complex programmable logic device，CPLD)、微處理器(Microprocessor)、中央處理單元(Central Processing Unit，CPU)，或其他具備運算能力的硬體元件來實現。
請參照圖2，影像擷取裝置122可朝顯示器121的顯示方向擷取/拍攝互動控制器110上的標記圖案112_1~112_n的影像而產生一標記影像。這些標記圖案112_1~112_n可為預先決定的預設配置而呈現於互動控制器110的表面上，處理單元124可藉由分析上述標記影像而得知互動控制器110的指向方向DF。於一實施例中，互動控制器110的指向方向可為呈現標記圖案112_1~112_n之表面的法線方向。另一方面，透過通訊元件111與通訊裝置123之間的無線訊號傳輸，處理單元124可獲取互動控制器110的定位位置資訊，例如圖2所示的座標位置(Xa,Ya,Za)。於是，處理單元124可依據互動控制器110的定位位置資訊以及指向方向DF來計算出投射於顯示器121上的指向座標(Xb,Yb,Zb)，並控制顯示器121在關聯於指向座標(Xb,Yb,Zb)的位置上顯示一標示物件C1。標示物件C1可以是游標、標記點、資訊顯示欄等顯示物件，本發明對此並不限制。
圖3是依照本發明實施例的一種互動顯示控制方法的流程圖。圖3所述的方法流程可結合圖1及圖2所示的互動顯示系 統100來實現。請同時參照圖1及圖3。
於步驟S301，影像擷取裝置122拍攝標記圖案112_1~112_n而產生一標記影像。此標記影像紀錄有標記圖案112_1~112_n的影像物件。於步驟S302，處理單元124獲取互動控制器110的定位位置資訊。此定位位置資訊可以是互動控制器110的定位座標或與顯示器121的顯示平面之間的距離。於步驟S303，處理單元124依據標記影像上標記圖案112_1~112_n的相對位置關係計算互動控制器110的指向角度。具體而言，標記影像上標記圖案112_1~112_n的相對位置關係是基於使用者U1例如以持握互動控制器110的手勢而定。藉由分析與比對標記影像上標記圖案112_1~112_n之間的相對位置關係與互動控制器110上標記圖案112_1~112_n的預設配置位置資訊，處理單元124可據以計算出互動控制器110的指向角度。於步驟S304，處理單元124依據指向角度與定位位置資訊計算互動控制器110的指向座標。具體而言，在具備指向角度與定位位置資訊的情況下，處理單元124可計算出互動控制器110上的一參考點沿互動控制器110表面的法線方向投射於顯示器平面上的指向座標，其上述互動控制器110表面為呈現標記圖案112_1~112_n且面向顯示器121的表面。於步驟S305，顯示器121在關聯於指向座標的位置上顯示標示物件。藉此，透過例如持握互動控制器110並控制互動控制器110之表面的面向方向，使用者U1可與互動顯示模組120進行互動，致使顯示器121依據互動控制器110的擺放狀態而對應提供顯示 效果及/或內容。本發明一實施例的互動顯示系統可提供一種高靈敏度的顯示互動，有利於彌補習知眼球追蹤技術或觸控技術受限於特定距離的不足。
然而，雖然前述實施例係以一個互動控制器110為例進行說明，但本發明並不限制對互動顯示系統中的互動控制器的數量。於一實施例中，互動控制器的數量可以是兩個以上，而顯示器也可對應於系統偵測到之互動控制器而對應顯示多個標示物件。圖4是依照本發明實施例的一種互動顯示系統的方塊圖。請參照圖4，互動顯示系統400包括互動控制器110、互動控制器130以及互動顯示模組120。互動控制器110以及互動顯示模組120的操作與功能相似於圖1實施例，於此不再贅述。需特別說明的是，互動顯示系統400更包括互動控制器130，且互動控制器130包括通訊元件131以及多個標記圖案132_1~132_n。
通訊元件131可與通訊裝置123進行通訊，而影像擷取裝置122拍攝標記圖案132_1~132_n而產生標記影像。於一實施例中，標記影像可同時紀錄有標記圖案112_1~112_n與標記圖案132_1~132_n的影像。處理單元124可依據另一互動控制器130的另一指向角度與另一定位位置資訊來計算互動控制器130的指向座標，而顯示器121更可在關聯於互動控制器130的指向座標的位置上顯示另一標示物件。也就是說，處理單元124除了可計算出互動控制器110的指向座標之外，處理單元124更可以依據相似的操作與計算方式獲取互動控制器130的指向座標。處理單 元124將依據不同使用者(使用者U1與其他使用者)分別例如以持握互動控制器110與互動控制器130的手勢來顯示對應的不同標示物件。也就是說，本發明的互動顯示系統可適用於多人互動之資訊顯示服務。
於一實施例中，互動控制器110更可以包括一輸入元件(未繪示)，用以接收使用者U1操作，致使互動顯示模組120可以依據響應於使用者U1操作的控制指令提供顯示功能。輸入元件可以是實體按鈕、觸控螢幕上顯示的虛擬按鈕或其他可以接收使用者U1操作的軟硬體裝置。互動顯示模組120的處理單元124可依據互動控制器110發出的控制指令來決定是否顯示標示物件或是否進一步顯示其他相關內容。於一實施例中，輸入元件可以為一無線射頻識別標籤，互動控制器110依據輸入元件所接收的無線射頻訊號的訊號狀態來產生控制指令。
以下將列舉一實施例以說明本發明之互動顯示系統利用RFID技術的範例。圖5是依照本發明實施例的一種互動顯示系統的示意圖。請參照圖5，互動顯示系統500包括互動控制器510以及互動顯示模組520。於本實施例中，互動控制器510包括通訊元件511、輸入元件513以及5個標記圖案512_1~512_5。於本實施例中，通訊元件511以及輸入元件513可以為RFID標籤，其由線圈天線與具備儲存功能的晶片而構成。當通訊元件511以及輸入元件513為被動式RFID標籤，通訊元件511以及輸入元件513可憑藉通訊裝置523發出的電磁波來回傳無線訊號。另外，通 訊元件511以及輸入元件513也可以為主動式RFID標籤，而具有主動產生與發出無線訊號的能力。當通訊元件511以及輸入元件513為主動式RFID標籤，互動控制器510可更包括供電模組(未繪示)來提供電力給主動式RFID標籤。互動控制器510的供電模組例如可包括壓電模組、電池、無線充電模組等等，本發明對此並不限制。
於圖5的範例中，標記圖案512_1~512_4排列成矩形而呈現於互動控制器510的表面上，而標記圖案512_5位於標記圖案512_1~512_4所形成之矩形的中心位置。亦即，各個標記圖案512_1~512_5與彼此之間的距離與相對位置關係由預設配置而決定。此外，於本範例中，各標記圖案512_1~512_5為尺寸與形狀相同的方塊狀圖案，但本發明對此並不限制。各標記圖案512_1~512_5的形狀與大小可視實際應用而設計之。
另一方面，互動顯示模組520包括顯示器521、影像擷取裝置522、通訊裝置523、儲存裝置525以及處理單元524。通訊裝置523用以與RFID標籤(亦即，通訊元件511以及輸入元件513)進行通訊，例如是RFID雷達或RFID讀取器。此外，在此將互動顯示系統500中的處理單元524區分為多個功能模塊進行說明，這些功能模組可以由軟體配合處理單元524來實現，也可直接由與這些功能模組具備相同功能的硬體電路以形成處理單元524來實現。處理單元524可視需求應用於本發明的各實施例。
輸入元件513可作為接收使用者U1輸入操作的元件。於 本實施例中，當使用者U1的手指置放於輸入元件513上，輸入元件513收發的RFID訊號將受到干擾。當輸入元件513收發的RFID訊號受到干擾時，互動控制器510可將其視為一種輸入訊號，而進一步讓互動顯示模組520接收到使用者U1下達的控制命令。舉例而言，藉由偵測輸入元件513所收發的RFID訊號的訊號強度，互動控制器510可判斷是否收到使用者U1下達的指令。之後，互動顯示模組520可依據使用者U1下達的控制命令與指向座標執行顯示互動功能。例如，唯有使用者U1將手指置放於輸入元件513上時，顯示器521將依據指向座標顯示標示物件。否則，顯示器521將不顯示標示物件。
圖6是依照本發明實施例的一種互動顯示控制方法的流程圖。圖6所述的方法流程可結合圖5所示的互動顯示系統500來實現。請同時參照圖5及圖6。
圖6依照本發明實施例的一種互動顯示控制方法的流程圖。請同時參照圖5與圖6，於步驟S601，通訊裝置523接收通訊元件511產生的無線訊號，在本實施例中以RFID訊號為例。於步驟S602，影像擷取裝置522拍攝標記圖案512_1~512_5而產生一標記影像。於步驟S603，認證模組5241依據RFID訊號判斷互動控制器510是否通過認證。
具體而言，處理單元524的認證模組5241可依據RFID標籤(通訊元件511)發送的無線訊號所攜帶的識別碼來判斷互動控制器510是否通過認證。通過認證的互動控制器510才具有控制 互動顯示模組520進行互動顯示的權限。當互動控制器510未通過認證，處理單元524不計算互動控制器510的指向座標。當互動控制器510通過認證，處理單元524可進一步執行指向座標的相關計算。於圖6的實施例中，若步驟S603判斷為是(通過認證)，於步驟S604，定位模組5242依據RFID訊號而獲取互動控制器510的定位位置資訊。定位模組5242可接收透過無線訊號所傳輸的定位位置資訊，或依據通訊裝置523所接收的無線訊號來定位互動控制器510，以獲取互動控制器510的定位位置資訊。否則(未通過認證)，回到步驟S601而持續偵測與接收RFID訊號。
接著，於步驟S605，角度計算模組5243依據標記影像上標記圖案512_1~512_5的相對位置關係計算互動控制器510的指向角度。於步驟S606，指向座標決定模組5244依據指向角度與定位位置資訊計算互動控制器510的指向座標。於步驟S607，指向座標決定模組5244判斷互動控制器510的指向座標是否存在。具體而言，處理單元524的指向座標決定模組5244可依據指向座標是否位於預設範圍內來判斷指向座標是否存在。上述預設範圍為顯示器521之顯示平面的顯示範圍。當判定指向座標位在顯示範圍之內代表該指向座標存在，而指向座標決定模組5244控制顯示器521在關聯於指向座標的位置上顯示標示物件。亦即，若步驟S607判斷為是，於步驟S608，顯示器521在關聯於指向座標的位置上顯示標示物件。否則，當判定指向座標位在顯示範圍之外代表指向座標不存在，指向座標決定模組5244控制顯示器521不顯 示標示物件，並再次執行圖6的流程。
需說明的是，圖6的流程僅用以示範性說明，本發明對於步驟S602~步驟S605的執行順序時機是不限制的。舉例而言，於一實施例中，步驟S603中的認證動作可於計算指向角度或獲取定位位置資訊的步驟之後執行。又或者，步驟S604與步驟S605可同時平行化執行。此外，於一實施例中，當定位位置資訊、指向角度與指向座標其中之一無法取得的時候，互動顯示模組520可從頭執行圖6所示的流程而持續偵測互動控制器510被使用者操控的狀態。
前述實施例係以利用通訊技術來偵測互動控制器的定位位置資訊。然而，於本發明的其他實施例中，互動控制器的定位位置資訊可透過影像擷取裝置與影像分析而產生，以下將列舉實施例以說明。圖7依照本發明實施例的一種互動顯示系統的方塊圖。請參照圖7，互動顯示系統700包括互動控制器710以及互動顯示模組720。互動控制器710包括多個標示圖案721_1~721_n，這些標示圖案721_1~721_n呈現於互動控制器710的表面。互動顯示模組720包括顯示器721、影像擷取裝置722、處理單元724，以及儲存裝置725。在此將互動顯示系統700中的處理單元724區分為多個功能模塊進行說明，這些功能模組可以由軟體配合處理單元724來實現，也可直接由與這些功能模組具備相同功能的硬體電路以形成處理單元724來實現。
圖8是依照本發明實施例的一種互動顯示控制方法的流 程圖。圖8所述的方法流程可結合圖7所示的互動顯示系統700來實現。請同時參照圖7及圖8。
於步驟S801，影像擷取裝置722朝標記圖案712_1~712_n拍攝標記影像。於步驟S802，定位模組7241依據標記影像上標記圖案712_1~712_n的尺寸計算互動控制器710的定位位置資訊。具體而言，影像擷取裝置722的位置是固定的且標記圖案712_1~712_n的實際尺寸是已知的，透過比對標記影像上標記圖案712_1~712_n的尺寸與標記圖案712_1~712_n的實際尺寸，定位模組7241可估測出互動控制器710與顯示器721的顯示平面之間的距離。此外，於一實施例中，若進一步依據上述距離與標記影像上標記圖案712_1~712_n的位置，定位模組7241可進一步計算出互動控制器710於一預設座標系統下的定位位置。
於步驟S803，定位模組7241判斷是否可計算出定位位置資訊。若步驟S803判斷為是，於步驟S804，角度計算模組7242依據標記影像上標記圖案712_1~712_n的相對位置關係計算互動控制器710的指向角度。若步驟S803判斷為否，回到步驟S801。於步驟S805，指向座標決定模組7243依據指向角度與定位位置資訊計算互動控制器710的指向座標。於步驟S806，指向座標決定模組7243判斷互動控制器的指向座標是否存在。於步驟S807，顯示器721在關聯於指向座標的位置上顯示標示物件。否則，當判定指向座標不存在，則再次執行圖8的流程。
需說明的是，圖8的流程僅用以示範性說明，本發明對 於步驟S802~步驟S804的執行順序時機是不限制的。此外，於一實施例中，當定位位置資訊、指向角度與指向座標其中之一無法取得的時候，互動顯示模組720可從頭執行圖8所示的流程而持續偵測互動控制器710被使用者操控的狀態。
以下將進一步說明如何依據標記影像上的標記圖案來計算出指向角度。當互動控制器表面的面向方向改變時，標記影像上標記圖案之間的相對位置關係也會改變。基於這些標記圖案於互動控制器上的位置是預先設置的，透過分析標記影像上這些標記圖案的相對位置關係，可進一步判斷呈現標記圖案的表面是否正對顯示平面或進一步計算出呈現標記圖案的表面的指向方向。上述的相對位置關係可以是這些標記圖案於標記影像上彼此相距的相對距離。於一實施例中，處理單元可依據第一標記圖案於標記影像上的第一位置與第二標記圖案於標記影像上的第二位置之間的第一相對距離計算出互動控制器的指向角度。舉例而言，假設標記圖案以構成正多邊形的方式而配置於互動控制器上，透過判斷標記影像上標記圖案之間的相對距離是否相等，處理單元可判斷出呈現標記圖案的表面是否正對顯示器。於一實施例中，處理單元更可透過比對實際距離與上述第一相對距離來計算指向角度，而實際距離為兩標記圖案於互動控制器上實際相距的距離。
以下以圖5的互動控制器510舉一範例來說明如何計算指向方向。圖9A與圖9B依照本發明實施例的一種互動控制器與標示影像的示意圖。請參照圖9A與圖9B，標記圖案512_1~512_5 是依據預設配置而呈現於互動控制器510的表面上，標記圖案512_1~512_5之間的相對位置關係與距離可以事先計算而儲存。也就是說，標記圖案512_1與標記圖案512_4之間的實際距離D3以及標記圖案512_1與標記圖案512_2之間的實際距離D1是預先紀錄且固定的資訊。標記圖案512_3與標記圖案512_4之間的實際距離D2以及標記圖案512_3與標記圖案512_2之間的實際距離D4是預先紀錄且固定的資訊。
請先參照圖9A，於一實施例中，當標記影像Img1上標記圖案512_1與標記圖案512_4之間的距離D3’相同於標記影像Img1上標記圖案512_2與標記圖案512_3之間的距離D4’，且標記圖案512_1與標記圖案512_2之間的距離D1’相同於標記影像Img1上標記圖案512_4與標記圖案512_3之間的距離D2’時，角度計算模組5243可判斷出互動控制器510正向顯示器521，亦即互動控制器510的指向方向垂直於顯示器521的顯示平面。在此情況下，藉由分析標記圖案512_5於標記影像Img1上與影像左邊際之間的距離比例P1%以及與影像下邊際之間的距離比例P2%，指向座標決定模組5244可依據上述距離比例而計算出互動控制器510的指向座標，從而控制顯示器521依據指向座標於顯示平面S1上顯示標示物件C2。上述距離比例P1%為標記圖案512_5於標記影像Img1上與影像左邊際之間的距離佔整個影像寬度的比例。上述距離比例P2%為標記圖案512_5於標記影像Img1上與影像下邊際之間的距離佔整個影像高度的比例。
請再參照圖9B，於一實施例中，當擷取到標記影像Img2時，角度計算模組5243可計算標記影像Img2上標記圖案512_1與標記圖案512_4之間的相對距離D3’，並計算標記影像Img2上標記圖案512_1與標記圖案512_2之間的相對距離D1’。之後，垂直指向角度θV與水平指向角度θH可依據實際距離D1、相對距離D1’、實際距離D3、相對距離D3’計算而得，如方程式(1)與(2)所示：θV=cos-1(D3’/D3).........(1)
θH=cos-1(D1’/D1)..........(2)
如圖9B所示，互動控制器510表面的法線方向DF1可根據垂直指向角度θV與水平指向角度θH而定。可注意到，互動控制器510表面的法線方向DF1於此可視為互動控制器510的指向方向DF。於此，垂直指向角度θV為呈現標記圖案512_1~512_5的表面的法線方向DF1與水平面H1之間的夾角，而水平指向角度θH為法線方向DF1投影於水平面H1上的投影方向v1與參考方向r1之間的夾角。上述參考方向r1為指向顯示器，並與顯示平面S1垂直的方向。亦即，參考方向r1可視為顯示平面S1的法線方向。由此可知，當互動控制器510上呈現標記圖案512_1~512_5的表面正對顯示平面時，代表互動控制器510的表面平行於顯示平面S1，則垂直指向角度θV與水平指向角度θH分別為0度。基於互動控制器510的定位位置資訊、垂直指向角度θV與水平指向角度θH，互動顯示模組520可獲取沿著指向方向投影至顯示平面 S1上的指向座標。
圖10A與圖10B依照本發明實施例的一種互動控制器與標示影像的示意圖。請參照圖10A與圖10B，標記圖案812_1~812_3是依據預設配置而呈現於互動控制器510的表面上，標記圖案812_1~812_3之間的相對位置關係與距離可以事先計算而儲存。標記圖案812_1~812_3可分別為三角形的頂點。
也就是說，標記圖案812_1與標記圖案812_2之間的實際距離D3、標記圖案812_1與標記圖案812_3之間的實際距離D2，以及標記圖案812_2與標記圖案812_3之間的實際距離D1是預先紀錄且固定的資訊。於本實施例中，標記圖案812_1~812_3所構成的三角形假設為等腰三角形，但本發明並不限制於此。
請先參照圖10A，當標記影像Img3上的相對距離D2’與相對距離D1’之間的比例以及相對距離D3’與相對距離D1’之間的比例都與一預設比例相同時，可判斷呈現標記圖案812_1~812_3的表面正對顯示平面。如此一來，透過平均標記影像Img3上三個標記圖案812_1~812_3的影像座標位置，可計算出中心參考點P10。與圖9A實施例相似，在呈現標記圖案812_1~812_3的表面正對顯示平面的情況下，代表互動控制器510的表面平行於顯示平面，藉由分析中心參考點P10與標記影像Img3之邊際之間的距離比例，互動控制器的指向座標可據以產生。
此外，請參照圖10B，基於實際距離D1、D2、D3，此三角形的實際高度H與實際底寬W(W=D1=d1+d2)是已知的。當擷 取到標記影像Img4時，可計算標記影像Img4上標記圖案812_1與標記圖案812_3之間的相對距離D2’，並計算標記影像Img4上標記圖案812_1與標記圖案812_2之間的相對距離D3’，並計算出標記影像Img4上標記圖案812_3與標記圖案812_2之間的相對距離D1’。標記影像Img4上三角形的相對高度H’與相對底寬W’(W’=D1’=d1’+d2’)可依據相對距離D1’、D2’、D3’而取得。接著，透過比對的實際高H與實際底W之間的比值與相對高H’與相對底W’之間的比值，垂直指向角度θV可據以推算。另外，透過比對的實際距離d1與實際距離d2之間的比值與相對距離d1’與相對距離d2’之間的比值，垂直指向角度θH可據以推算(如圖10B所示)。
於一實施例中，顯示器可為透明顯示器，在取得投射於顯示器平面上的指向座標之後，本發明的互動顯示系統更可以進一步辨識出指向方向所指示之透明顯示器後方的目標物件，並依據目標物件來顯示對應的標示資訊欄於透明顯示器上。以下將以圖1的互動顯示系統100與圖11為範例說明，圖11依照本發明實施例的一種計算指向座標與顯示標示物件的示意圖。請參照圖11，首先，處理單元124可藉由RFID定位技術獲取互動控制器110的定位座標(Xu,Yu,-D1)。接著，影像擷取裝置122朝互動控制器110擷取標示影像，處理單元124可依據標示影像計算互動控制器110上的一參考點(例如是標示圖案其中之一的中心點)得到投影座標(Xp,Yp,0)。之後，處理單元124可依據標示影像計算出指向角度，亦即垂直指向角度θV與水平指向角度θH，並依據指 向角度θV與水平指向角度θH計算出指向座標(Xt,Yt,0)。接著，處理單元124可基於指向座標(Xt,Yt,0)並沿著指向角度產生延伸路徑P1。於本實施例中，互動顯示系統100可更包括景觀感測裝置(未繪示)，景觀感測裝置可感測透明顯示器後方的景物，且各景物的座標位置可即時偵測與建立。處理單元124可比對延伸路徑P1與各景物的座標位置而辨識出目標座標(Xo,Yo,Zo)。之後，處理單元124可依據目標座標(Xo,Yo,Zo)所對應之目標物件的資訊從儲存裝置125當中取得目標物件的相關資訊，並控制顯示器121在關聯於指向座標(Xt,Yt,0)的位置上顯示該目標物件的相關資訊。
此外，本發明一實施例所述的互動顯示系統更可結合使用互動控制器之控制方式與其他多種識別感測技術(如，人眼視線追蹤、觸控、影像識別...等)來判斷使用者企圖觀看的景觀物或使用者想要顯示標記物件的位置，從而提高對於使用者操控企圖的識別正確性。
於本發明實施例中，互動控制器的表面上配置有多個標記圖案，而影像擷取裝置可朝互動控制器上的多個標記圖案擷取標記影像。於是，處理單元可透過分析標記影像來獲取使用者操作互動控制器所產生的指向座標，從而提高互動顯示系統對於使用者操控意圖的識別正確性。如此一來，使用者可輕易的透過控制互動控制器來控制顯示器顯示使用者感興趣的內容。
雖然本發明已以實施例揭露如上，然其並非用以限定本發明，任何所屬技術領域中具有通常知識者，在不脫離本發明的 精神和範圍內，當可作些許的更動與潤飾，故本發明的保護範圍當視後附的申請專利範圍及其均等範圍所界定者為準。

Claims (20)

  1. 一種互動顯示系統，包括： 一互動控制器，包括： 多個標記圖案，呈現於該互動控制器的一表面上；以及 一互動顯示模組，包括： 一顯示器； 一影像擷取裝置，拍攝該些標記圖案而產生一標記影像；以及 一處理單元，耦接該顯示器以及該影像擷取裝置，獲取該互動控制器的一定位位置資訊，依據該標記影像上該些標記圖案的相對位置關係計算該互動控制器的一指向角度，並依據該指向角度與該定位位置資訊計算該互動控制器的一指向座標， 其中，該顯示器在關聯於該指向座標的位置上顯示一標示物件。
  2. 如申請專利範圍第1項所述的互動顯示系統，其中該互動控制器更包括產生無線訊號的一通訊元件，該互動顯示模組更包括接收該無線訊號的一通訊裝置，該通訊裝置耦接至該處理單元， 其中該處理單元接收透過該無線訊號所傳輸的該定位位置資訊，或依據該通訊裝置所接收的該無線訊號來定位該互動控制器，以獲取該互動控制器的該定位位置資訊。
  3. 如申請專利範圍第1項所述的互動顯示系統，其中該互動控制器更包括產生無線訊號的一通訊元件，該互動顯示模組更包括接收該無線訊號的一通訊裝置，該通訊裝置耦接至該處理單元， 其中該處理單元依據該無線訊號所攜帶的識別碼來判斷該互動控制器是否通過認證；以及當該互動控制器未通過認證，該處理單元不計算該互動控制器的該指向座標。
  4. 如申請專利範圍第1項所述的互動顯示系統，其中藉由比對該標記影像上該些標記圖案的預設尺寸與該些標記圖案的實際尺寸，該處理單元估測出該互動控制器與該顯示器的顯示平面之間的距離，並依據該距離與該標記影像上該些標記圖案的位置計算出該定位位置資訊。
  5. 如申請專利範圍第1項所述的互動顯示系統，其中該互動控制器更包括用以接收一使用者操作的一輸入元件，該處理單元依據響應於該使用者操作的一控制指令來提供顯示內容給該顯示器。
  6. 如申請專利範圍第5項所述的互動顯示系統，其中該輸入元件為一無線射頻識別標籤，而該互動控制器依據該輸入元件所接收的無線射頻訊號的訊號狀態來產生該控制指令。
  7. 如申請專利範圍第1項所述的互動顯示系統，其中該處理單元依據該指向座標是否位於一預設範圍內來判斷該指向座標是否存在；當該指向座標存在，該處理單元控制該顯示器在關聯於該指向座標的位置上顯示該標示物件；以及當該指向座標不存在，該處理單元控制該顯示器不顯示該標示物件。
  8. 如申請專利範圍第1項所述的互動顯示系統，其中對應於該指向角度的一指向方向為垂直於呈現該些標記圖案之該表面的法線方向，該些標記圖案包括一第一標記圖案與一第二標記圖案，並且該處理單元依據該第一標記圖案於該標記影像上的第一位置與該第二標記圖案於該標記影像上的第二位置之間的第一相對距離計算該互動控制器的該指向角度。
  9. 如申請專利範圍第8項所述的互動顯示系統，其中該第一標記圖案與該第二標記圖案於該互動控制器上相距一實際距離，該處理單元透過比對該實際距離與該第一相對距離來計算該指向角度。
  10. 如申請專利範圍第8項所述的互動顯示系統，其中該處理單元基於該指向座標並依據該指向角度產生一延伸路徑，並獲取該延伸路徑上一目標物件所在的一目標座標，依據該目標座標控制該顯示器顯示與該目標物件相關的顯示內容。
  11. 如申請專利範圍第1項所述的互動顯示系統，更包括另一互動控制器，其中該影像擷取裝置拍攝該些標記圖案與該另一互動控制器的多個另一標記圖案而產生該標記影像，該處理單元依據該另一互動控制器的另一指向角度與另一定位位置資訊來計算該另一互動控制器的另一指向座標，而該顯示器更於關聯於該另一指向座標的位置上顯示另一標示物件。
  12. 一種互動顯示控制方法，適用於包括一互動控制器與一顯示器的一互動顯示系統，所述方法包括： 拍攝呈現於該互動控制器上的多個標記圖案而產生一標記影像； 獲取該互動控制器的一定位位置資訊； 依據該標記影像上該些標記圖案的相對位置關係計算該互動控制器的指向角度； 依據該指向角度與該定位位置資訊計算該互動控制器的一指向座標；以及 於該顯示器上，在關聯於該指向座標的位置上顯示一標示物件。
  13. 如申請專利範圍第12項所述的互動顯示控制方法，更包括： 接收該互動控制器產生的一無線訊號；以及 當該互動控制器未通過認證，不計算該該互動控制器的該指向座標。
  14. 如申請專利範圍第12項所述的互動顯示控制方法，更包括： 依據該指向座標是否位於一預設範圍內來判斷該指向座標是否存在；以及 當該指向座標不存在，不依據該指向座標顯示該標示物件。
  15. 如申請專利範圍第12項所述的互動顯示控制方法，其中獲取該互動控制器的該定位位置資訊的步驟包括： 接收該互動控制器產生的一無線訊號；以及 接收透過該無線訊號所傳輸的該定位位置資訊，或依據該通訊裝置所接收的該無線訊號來定位該互動控制器，以獲取該互動控制器的該定位位置資訊。
  16. 如申請專利範圍第12項所述的互動顯示控制方法，其中獲取該互動控制器的該定位位置資訊的步驟包括： 藉由比對該標記影像上該些標記圖案的預設尺寸與該些標記圖案的實際尺寸，估測出該互動控制器與該顯示器的顯示平面之間的距離；以及 依據該距離與該標記影像上該些標記圖案的位置計算出該定位位置資訊。
  17. 如申請專利範圍第12項所述的互動顯示控制方法，其中該些標記圖案包括一第一標記圖案與一第二標記圖案，且依據該標記影像上該些標記圖案的該相對位置關係計算該互動控制器的該指向角度的步驟包括： 依據該第一標記圖案於該標記影像上的第一位置與該第二標記圖案於該標記影像上的第二位置之間的第一相對距離計算該互動控制器的該指向角度，其中對應於該指向角度的指向方向為垂直於呈現該些標記圖案之該表面的法線方向。
  18. 如申請專利範圍第17項所述的互動顯示控制方法，其中依據該標記影像上該些標記圖案的該相對位置關係計算該互動控制器的該指向角度的步驟更包括： 比對一實際距離與該第一相對距離來計算該指向角度，其中該第一標記圖案與該第二標記圖案於該互動控制器上相距該實際距離。
  19. 如申請專利範圍第17項所述的互動顯示控制方法，更包括： 基於該指向座標並依據該指向角度產生一延伸路徑； 獲取該延伸路徑上一目標物件所在的一目標座標，並依據該目標座標控制該顯示器顯示與該目標物件相關的顯示內容。
  20. 如申請專利範圍第12項所述的互動顯示控制方法，其中該標記影像更紀錄有另一互動控制器的影像，所述方法更包括： 依據該另一互動控制器的另一指向角度與另一定位位置資訊來計算該另一互動控制器的另一指向座標；以及 於該顯示器上，於關聯於該另一指向座標的位置上顯示另一標示物件。
TW106144684A 2017-10-19 2017-12-20 互動顯示系統及互動顯示控制方法 TWI636381B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201810091477.3A CN109683774A (zh) 2017-10-19 2018-01-30 交互式显示系统及交互式显示控制方法
US15/997,707 US20190121450A1 (en) 2017-10-19 2018-06-05 Interactive display system and control method of interactive display

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201762574740P 2017-10-19 2017-10-19
US62/574,740 2017-10-19

Publications (2)

Publication Number Publication Date
TWI636381B true TWI636381B (zh) 2018-09-21
TW201917534A TW201917534A (zh) 2019-05-01

Family

ID=64453139

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106144684A TWI636381B (zh) 2017-10-19 2017-12-20 互動顯示系統及互動顯示控制方法

Country Status (3)

Country Link
US (1) US20190121450A1 (zh)
CN (1) CN109683774A (zh)
TW (1) TWI636381B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10769803B2 (en) 2018-11-16 2020-09-08 Industrial Technology Research Institute Sight vector detecting method and device

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112445320B (zh) * 2019-08-28 2024-10-29 财团法人工业技术研究院 互动显示方法与互动显示系统
TWI790738B (zh) 2020-11-20 2023-01-21 財團法人工業技術研究院 用於防止動暈之圖像顯示系統及圖像顯示方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7062134B2 (en) * 2003-08-28 2006-06-13 Brookhaven Science Associates Interactive display system having a scaled virtual target zone
US20130201105A1 (en) * 2012-02-02 2013-08-08 Raymond William Ptucha Method for controlling interactive display system
US20140115528A1 (en) * 2002-07-23 2014-04-24 Seiko Epson Corporation Display system, network interactive display device, terminal, and control program
US20140210799A1 (en) * 2006-06-16 2014-07-31 Ketab Technologies Limited Interactive Display System and Method
US20160188274A1 (en) * 2014-12-31 2016-06-30 Coretronic Corporation Interactive display system, operation method thereof, and image intermediary apparatus

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6720949B1 (en) * 1997-08-22 2004-04-13 Timothy R. Pryor Man machine interfaces and applications
US7394346B2 (en) * 2002-01-15 2008-07-01 International Business Machines Corporation Free-space gesture recognition for transaction security and command processing
US8019121B2 (en) * 2002-07-27 2011-09-13 Sony Computer Entertainment Inc. Method and system for processing intensity from input devices for interfacing with a computer program
US8323106B2 (en) * 2008-05-30 2012-12-04 Sony Computer Entertainment America Llc Determination of controller three-dimensional location using image analysis and ultrasonic communication
JP5089060B2 (ja) * 2006-03-14 2012-12-05 株式会社ソニー・コンピュータエンタテインメント エンタテインメントシステムおよびゲームコントローラ
US8781151B2 (en) * 2006-09-28 2014-07-15 Sony Computer Entertainment Inc. Object detection using video input combined with tilt angle information
US20080111789A1 (en) * 2006-11-09 2008-05-15 Intelligence Frontier Media Laboratory Ltd Control device with hybrid sensing system comprised of video-based pattern recognition and electronic signal transmission
CN101739120A (zh) * 2008-11-12 2010-06-16 华硕电脑股份有限公司 交互式显示方法及其相关显示装置
CN103365617B (zh) * 2012-04-01 2018-01-05 深圳市中科睿成智能科技有限公司 一种投影控制系统、装置及投影控制方法
KR20130137459A (ko) * 2012-06-07 2013-12-17 삼성전자주식회사 디스플레이 장치, 디스플레이 장치를 제어하기 위한 사용자 단말 및 그 제어 방법
KR20150117018A (ko) * 2014-04-09 2015-10-19 삼성전자주식회사 컴퓨팅 장치, 컴퓨팅 장치 제어 방법 및 다중 디스플레이 시스템
KR102407623B1 (ko) * 2014-09-29 2022-06-10 삼성전자주식회사 사용자 단말 장치 및 이의 제어 방법
CN105719586A (zh) * 2016-03-18 2016-06-29 京东方科技集团股份有限公司 透明显示方法和透明显示装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140115528A1 (en) * 2002-07-23 2014-04-24 Seiko Epson Corporation Display system, network interactive display device, terminal, and control program
US7062134B2 (en) * 2003-08-28 2006-06-13 Brookhaven Science Associates Interactive display system having a scaled virtual target zone
US20140210799A1 (en) * 2006-06-16 2014-07-31 Ketab Technologies Limited Interactive Display System and Method
US20130201105A1 (en) * 2012-02-02 2013-08-08 Raymond William Ptucha Method for controlling interactive display system
US20160188274A1 (en) * 2014-12-31 2016-06-30 Coretronic Corporation Interactive display system, operation method thereof, and image intermediary apparatus

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10769803B2 (en) 2018-11-16 2020-09-08 Industrial Technology Research Institute Sight vector detecting method and device
TWI704473B (zh) * 2018-11-16 2020-09-11 財團法人工業技術研究院 視線向量偵測方向與裝置

Also Published As

Publication number Publication date
CN109683774A (zh) 2019-04-26
TW201917534A (zh) 2019-05-01
US20190121450A1 (en) 2019-04-25

Similar Documents

Publication Publication Date Title
US20210157149A1 (en) Virtual wearables
KR102038638B1 (ko) 가상 현실에서 핸드 헬드 디바이스를 트랙킹하는 시스템
US20220358663A1 (en) Localization and Tracking Method and Platform, Head-Mounted Display System, and Computer-Readable Storage Medium
US11024069B2 (en) Optically challenging surface detection for augmented reality
EP2898399B1 (en) Display integrated camera array
US7374103B2 (en) Object localization
US20210405363A1 (en) Augmented reality experiences using social distancing
US11263818B2 (en) Augmented reality system using visual object recognition and stored geometry to create and render virtual objects
TWI636381B (zh) 互動顯示系統及互動顯示控制方法
WO2015159547A1 (ja) 情報処理システム、制御方法、及びプログラム記録媒体
CN115735179A (zh) 增强现实眼戴器与情绪共享
US20140125704A1 (en) System and method of visual layering
Tsun et al. A human orientation tracking system using Template Matching and active Infrared marker
Selvam et al. Augmented reality for information retrieval aimed at museum exhibitions using smartphones
WO2020244592A1 (zh) 物品取放检测系统、方法及装置
WO2021120217A1 (zh) 图像采集装置、图像采集方法及采集芯片
US20130155211A1 (en) Interactive system and interactive device thereof
CN113557492A (zh) 利用二维摄像头来辅助对象控制的方法、系统和非暂时性计算机可读记录介质
CN107743628A (zh) Led面发光的结构化光
CN116258810A (zh) 路面要素的渲染方法、装置、设备及存储介质
US20200302643A1 (en) Systems and methods for tracking
US20230394688A1 (en) Information processing apparatus, non-transitory computer readable medium, and method
Laberge Visual tracking for human-computer interaction