CN106802712A - 交互式扩增实境系统 - Google Patents
交互式扩增实境系统 Download PDFInfo
- Publication number
- CN106802712A CN106802712A CN201510843251.0A CN201510843251A CN106802712A CN 106802712 A CN106802712 A CN 106802712A CN 201510843251 A CN201510843251 A CN 201510843251A CN 106802712 A CN106802712 A CN 106802712A
- Authority
- CN
- China
- Prior art keywords
- signal
- virtual
- wearable
- display device
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 84
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 55
- 230000003993 interaction Effects 0.000 claims abstract description 64
- 230000000007 visual effect Effects 0.000 claims abstract description 53
- 230000005540 biological transmission Effects 0.000 claims abstract description 24
- 238000013507 mapping Methods 0.000 claims abstract description 12
- 230000009471 action Effects 0.000 claims description 14
- 230000008859 change Effects 0.000 claims description 13
- 238000001514 detection method Methods 0.000 claims description 10
- 239000011800 void material Substances 0.000 claims description 5
- 238000000034 method Methods 0.000 description 44
- 238000004891 communication Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 6
- 238000005520 cutting process Methods 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000036632 reaction speed Effects 0.000 description 1
- 230000035484 reaction time Effects 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/163—Wearable computers, e.g. on a belt
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
- H04W4/029—Location-based management or tracking services
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Hardware Design (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Graphics (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
Abstract
一种交互式扩增实境系统,包含穿戴式互动显示装置与云端数据库。穿戴式互动显示装置包含显示部件、定位部件、传输/接收模块与计算模块。定位部件定位穿戴式互动显示装置的位置与视野方向。云端数据库包含地图模块、管理模块与对象模块。地图模块根据传输/接收模块所传出的位置与视野方向产生虚拟地景讯号。管理模块产生虚拟事件讯号。对象模块产生虚拟对象讯号。虚拟地景讯号、虚拟事件讯号与虚拟对象讯号组合成虚拟环境讯号。计算模块透过传输/接收模块接收虚拟环境讯号,以视野方向与虚拟环境讯号,产生影像讯号显示于影像部件。
Description
技术领域
本发明是有关于一种扩增实境系统,特别是有关于交互式的扩增实境系统。
背景技术
传统的扩增实境系统应用,通常是藉由结合真实世界中周遭环境的实时影像与计算机产生的额外的感觉输入讯号,像是影像、声音、图片或全球卫星定位的影像等,提供用户不同于一般虚拟世界的真实感。此外,扩增实境系统的应用,可更扩及藉由计算装置的计算去修改真实世界中的视觉影像,增强用户对真实世界外的感知,且提供使用者除周遭环境外的更多信息。举例来说,扩增实境系统可在实时的对战中,藉由视觉影像提供用户像是游戏数值或统计等的扩增实境内容。甚至,随着智能型手机的普及,许多的扩增实境系统也可藉由智能型手机来显示用户周遭的真实世界与额外的扩增实境内容,像是产生虚拟的物体覆盖于真实世界的物体上或显示关于周遭环境的信息。
然而,相对来说,扩增实境于网络游戏的应用上较为贫乏,且多半应用于固定网络的游戏配件,作为定点使用,并无与全球卫星定位系统的结合。此外,智能型手机中的网络游戏于扩增实境上,因无法突破智能型手机的限制,仅能提供有限的操作模式以及视觉输出。由此可见,上述现有的架构,显然仍存在不便与缺陷,而有待加以进一步改进。为了解决上述问题,相关领域莫不费尽心思来谋求解决之道,但长久以来一直未见适用的方式被发展完成。因此,如何能有效解决上述问题,实属当前重要研发课题之一,也成为当前相关领域亟需改进的目标。
发明内容
本发明的一技术实施例是有关于一种交互式扩增实境系统,能提供用户扩增实境与真实世界结合的体验。
本发明的交互式扩增实境系统,包含穿戴式互动显示装置与云端数据库互相链接,穿戴式互动显示装置的定位部件提供穿戴式互动显示装置的位置以及视野方向,并发送至云端数据库,云端数据库根据穿戴式互动显示装置的位置以及视野方向产生相对应的虚拟环境讯号,包含像是虚拟地景、虚拟事件以及虚拟对象等,并发送至穿戴式互动显示装置,穿戴式互动显示装置再根据虚拟环境讯号产生影像讯号,并显示于穿戴式互动显示装置的显示部件上给用户感知。如此一来,使得交互式扩增实境系统可进一步扩展至与真实地图结合,并根据多种不同的虚拟地景、虚拟事件以及虚拟对象,改变用户所看到的影像,增加用户的不同体验。
本发明提供一种交互式扩增实境系统包含穿戴式互动显示装置以及云端数据库。穿戴式互动显示装置包含显示部件、定位部件、传输/接收模块以及计算模块。显示部件具有视野方向。定位部件配置用以根据穿戴式互动显示装置的位置以及显示部件的视野方向,产生位置讯号以及视野方向讯号。传输/接收模块配置用以传输位置讯号。云端数据库包含地图模块、管理模块以及对象模块。地图模块接收传输/接收模块所传出的位置讯号,并根据位置讯号产生对应的虚拟地景讯号。管理模块可根据虚拟地景讯号以及事件时间轴数据,产生虚拟事件讯号。对象模块可根据虚拟地景讯号、事件时间轴数据以及虚拟对象数据,产生对应的虚拟对象讯号。虚拟地景讯号、虚拟事件讯号以及虚拟对象讯号组合成虚拟环境讯号。计算模块透过传输/接收模块接收虚拟环境讯号,并可根据显示部件的视野方向讯号与虚拟环境讯号,产生影像讯号。显示部件可根据影像讯号,显示影像。
在本发明一或多个实施方式中,上述的定位部件可包含全球定位(global positioningsystem,GPS)单元。全球定位单元可根据穿戴式互动显示装置的位置,定位穿戴式互动显示装置的坐标,并可根据坐标,产生位置讯号。
在本发明一或多个实施方式中,上述的定位部件可包含方位单元以及水平仪单元。方位单元可根据显示部件的视野方向,定位显示部件的视野方位。水平仪单元可根据显示部件的视野方向,计算显示部件与水平面间的视野仰角。视野方向讯号包含视野方位以及视野仰角。
在本发明一或多个实施方式中,上述的云端数据库以穿戴式互动显示装置的位置讯号为中心,产生虚拟环境讯号。计算模块根据显示部件的视野方向延伸的三维空间,撷取虚拟环境讯号位于三维空间内的一部分。虚拟环境讯号对应三维空间的部分形成影像讯号,且显示部件显示的影像为虚拟环境讯号对应三维空间的部分。
在本发明一或多个实施方式中,上述的地图模块是结合地图数据以及虚拟地景数据,产生虚拟地景讯号。
在本发明一或多个实施方式中,上述的管理模块为事件与时间管理模块,可于虚拟地景讯号内依照事件时间轴数据,产生虚拟事件讯号,以根据虚拟事件讯号更新虚拟地景数据。
在本发明一或多个实施方式中,上述的虚拟对象数据可包含一或多个对象影像、一或多个对象状态、一或多个对象位置以及一或多个对象方向。一或多个对象状态其中之一、一或多个对象位置其中之一以及一或多个对象方向其中之一共同对应于一或多个对象影像其中之一。云端数据库会根据虚拟对象数据更新事件时间轴数据。
在本发明一或多个实施方式中,上述的穿戴式互动显示装置可还包含通讯模块,用以与另一穿戴式互动显示装置相连结。
在本发明一或多个实施方式中,上述的交互式扩增实境系统,可还包含穿戴式互动控制装置,与穿戴式互动显示装置连结。穿戴式互动控制装置包含体感侦测部件。体感侦测部件可根据动作讯号,发送对应动作讯号的控制讯号至穿戴式互动显示装置。
在本发明一或多个实施方式中,上述的穿戴式互动显示装置可还包含操作接口模块。操作接口模块配置用以产生窗体讯号。窗体讯号包含一或多个操作选择。窗体讯号可结合影像讯号,显示于显示部件的影像中。穿戴式互动显示装置可根据控制讯号自操作接口模块选择窗体讯号中一或多个操作选择。
在本发明一或多个实施方式中,上述的穿戴式互动显示装置的计算模块结合穿戴式互动控制装置的动作讯号以及虚拟环境讯号产生影像讯号,且穿戴式互动控制装置可藉由动作讯号变更虚拟环境讯号。
附图说明
为让本发明的上述和其他目的、特征、优点与实施例能更明显易懂,所附图式的说明如下:
图1绘示依据本发明多个实施方式的交互式扩增实境系统的组织简单方块图。
图2绘示依据本发明另外的多个实施方式的交互式扩增实境系统的组织简单方块图。
图3至图5绘示依据本发明多个实施方式的穿戴式互动显示装置于真实世界中使用时的简单示意图。除非有其他表示,在不同图式中相同的号码与符号通常被当作相对应的部件。该些图示的绘示为清楚表达该些实施方式的相关关联而非绘示该实际尺寸。
组件标号说明:
100:交互式扩增实境系统
120:穿戴式互动显示装置
130:显示部件
140:定位部件
142:全球定位单元
144:方位单元
146:水平仪单元
150:传输/接收模块
160:计算模块
170:云端数据库
172:地图模块
174:管理模块
176:对象模块
200:交互式扩增实境系统
220:穿戴式互动控制装置
222:体感侦测部件
240:通讯模块
260:操作接口模块
300:三维空间
320:目标地景
420:虚拟地景
440:虚拟事件
460:虚拟对象
520:虚拟控制装置
540:操作选择
A:视野方向
Φ1:立体角
具体实施方式
以下将以图式揭露本发明的多个实施方式,为明确说明起见,许多实务上的细节将在以下叙述中一并说明。然而,应了解到,这些实务上的细节不应用以限制本发明。也就是说,在本发明部分实施方式中,这些实务上的细节是非必要的。此外,为简化图式起见,一些习知惯用的结构与组件在图式中将以简单示意的方式绘示之。
于本文中,除非内文中对于冠词有所特别限定,否则『一』与『该』可泛指单一个或多个。将进一步理解的是,本文中所使用的『包含』、『包括』、『具有』及相似词汇,指明其所记载的特征、区域、整数、步骤、操作、组件与/或组件,但不排除其所述或额外的其一个或多个其它特征、区域、整数、步骤、操作、组件、组件,与/或其中的群组。
图1依据本发明多个实施方式绘示交互式扩增实境系统100的组织简单方块图。如图1所示,交互式扩增实境系统100包含穿戴式互动显示装置120以及云端数据库170。在多个实施方式中,穿戴式互动显示装置120可被使用者穿戴于头部,并至少遮盖用户眼睛前方的位置。穿戴式互动显示装置120包含显示部件130、定位部件140、传输/接收模块150以及计算模块160。显示部件130具有视野方向(参见图3)。在多个实施方式中,当穿戴式互动显示装置120被用户穿戴时,显示部件130位于用户眼睛前方的位置,并随着用户眼睛的方位定义视野方向。定位部件140根据穿戴式互动显示装置120的位置以及显示部件130的视野方向,产生位置讯号以及视野方向讯号。传输/接收模块150传输位置讯号至云端数据库170。在多个实施方式中,传输/接收模块150可藉由局域网络(LANs)、广域网(WANs)、覆盖(overlay)网络以及软件定义(software-defined)网络或其他合适的网络传输方式,传输位置讯号至云端数据库170。
进一步地,云端数据库170可根据所接收的传输/接收模块150传出的位置讯号,产生并发送虚拟环境讯号至穿戴式互动显示装置120。云端数据库170包含地图模块172、管理模块174以及对象模块176。地图模块172可根据位置讯号,产生对应的虚拟地景讯号。在多个实施方式中,虚拟地景讯号可为原始的地景数字化后的结果或以云端数据库170内的虚拟地景数据取代原始的地景。管理模块174可根据虚拟地景讯号以及事件时间轴数据,产生虚拟事件讯号。在多个实施方式中,管理模块174为事件与时间管理模块,虚拟事件讯号可依照不同的虚拟地景讯号以及事件时间轴数据加以产生,并可进一步根据虚拟事件讯号变更虚拟地景数据所包含的数字内容,以影响虚拟地景讯号的产生。对象模块176可根据虚拟地景讯号、事件时间轴数据以及虚拟对象数据,产生对应的虚拟对象讯号。在多个实施方式中,虚拟对象讯号的对象状态、对象位置或对象数量等,可进一步变更虚拟地景数据以及推进事件时间轴数据的阶段等的数字内容。虚拟环境讯号包含虚拟地景讯号、虚拟事件讯号以及虚拟对象讯号,关于虚拟环境讯号的呈现内容将如后详述。计算模块160透过传输/接收模块150接收虚拟环境讯号后,根据显示部件130的视野方向及依据其产生的视野方向讯号去撷取虚拟环境讯号,产生影像讯号。在多个实施方式中,计算模块160可为处理器(CPU)、芯片组(SOC)、图像处理器(GPU)或其他适合用以处理影像讯号的计算模块等。应了解到,此处所述的计算模块160代表任意数量的可用来执行软件、韧体以及硬件的实体上地及/或逻辑上地特定资源,被配置用以执行图像处理的计算。显示部件130可根据影像讯号,显示影像。在多个实施方式中,显示部件130可为液晶显示器(LCD)或其他合适的显示设备。
藉由穿戴式互动显示装置120与云端数据库170的链接,交互式扩增实境系统100可创造出虚拟世界的数字内容,并透过显示部件130显示,让用户感知。如此一来,使得交互式扩增实境系统100可进一步将扩增实境的内容,扩展至与真实世界中地图上的真实地景结合,并根据云端数据库170的地图模块172、管理模块174以及对象模块176来产生多种不同的虚拟地景讯号、虚拟事件讯号以及虚拟对象讯号的数字内容,合成虚拟环境讯号覆盖于真实地景上。进一步地,计算模块160透过定位部件140产生的视野方向讯号去撷取虚拟环境讯号的部分,产生影像讯号并呈现在显示部件130上。用户透过显示部件130所看到的影像为虚拟地景、虚拟事件以及虚拟对象共同组成的虚拟世界,故可改变使用者对真实世界的感知,增加使用者的不同体验,且虚拟事件可随着时间变化而改变虚拟地景以及虚拟对象,更增加用户体验的虚拟世界的多样性。
值得注意的是,在多个实施方式中,传输/接收模块150可包含一或多个通讯接口,但不限于此,通讯接口可具有不同的实体接口像是有线以及无线的局域网络的接口、宽带无线网络的接口,同样地,也可包含个人局域网络等合适的通讯接口,用以让传输/接收模块150与定位部件140、计算模块160以及云端数据库170互相链接。应了解到,本领域具有通常知识者,当可视实际需求,在不脱离本揭露的精神与范围的情况下,做同等的改动与修饰,只要传输/接收模块150能够接收定位部件140与云端数据库170的讯号,并发送让云端数据库170与计算模块160能够读取以及应用的讯号即可。
在多个实施方式中,定位部件140可包含全球定位单元142。全球定位单元142可根据穿戴式互动显示装置120的位置,定位穿戴式互动显示装置120的坐标,举例来说,像是东经122度15分47秒、北纬23度75分11秒等坐标信息,并可根据所定位的穿戴式互动显示装置120的坐标,产生位置讯号。在多个实施方式中,定位部件140可还包含方位单元144。在多个实施方式中,方位单元144可为电子罗盘、陀螺仪(gyroscope)或其他合适的电子定位组件。方位单元144可根据显示部件130的视野方向,定位显示部件130朝向的方位,像是北方、东偏北45度等。在多个实施方式中,定位部件140可还包含水平仪单元146。在多个实施方式中,水平仪单元146可为电子水平仪、陀螺仪或其他合适的电子水平仰角量测组件。水平仪单元146可根据显示部件130的视野方向,计算显示部件130与水平面间的视野仰角,像是仰角30度或仰角47度等。在多个实施方式中,定位部件140所发送的视野方向讯号可包含显示部件130的视野方位以及显示部件130与水平面之间的视野仰角。计算模块160可藉由视野方向讯号所包含的显示部件130的视野方位以及显示部件130与水平面之间的视野仰角,用以决定所切割(crop)的虚拟环境讯号的部分,并使用切割后的虚拟环境讯号的部分产生相对应的影像讯号,显示于显示部件130,将如后详述。
在多个实施方式中,云端数据库170以穿戴式互动显示装置120的位置讯号为中心,产生虚拟环境讯号。计算模块160根据显示部件130的视野方向延伸的三维空间,撷取虚拟环境讯号位于三维空间内的一部分。虚拟环境讯号对应三维空间的部分形成影像讯号,且显示部件130显示的影像为虚拟环境讯号对应三维空间的部分。
由于云端数据库170所产生的虚拟环境讯号为三维的影像讯号,并对应于真实世界中的空间位置。云端数据库170可包含真实世界中的地图数据以及对应地图数据所产生的虚拟地景讯号、虚拟事件讯号以及虚拟对象讯号。然而,此处所谓的虚拟环境讯号,仅为地图数据以及对应地图数据的虚拟地景讯号、虚拟事件讯号以及虚拟对象讯号的一部分而非全部。亦即,云端数据库170以穿戴式互动显示装置120的位置讯号为中心,将穿戴式互动显示装置120朝向任何视野方位以及视野仰角的三维空间内能看到的地图数据以及对应地图数据的虚拟地景讯号、虚拟事件讯号以及虚拟对象讯号组合成虚拟环境讯号,再传送至穿戴式互动显示装置120。藉此可节省云端数据库170与穿戴式互动显示装置120间互相传输的数据量,且可降低穿戴式互动显示装置120中计算模块160切割虚拟环境讯号产生影像的反应时间,让穿戴式互动显示装置120具有较为实时的反应速度,以提升穿戴式互动显示装置120中显示的虚拟世界的真实性。
在多个实施方式中,地图模块172用以结合地图数据以及虚拟地景数据,产生虚拟地景讯号。云端数据库170可根据虚拟事件讯号更新虚拟地景数据。如此一来,虚拟地景数据的数字内容可随不同的事件发生,而产生相对应的变化,举例来说,当虚拟事件讯号内默认虚拟地景发生火灾,则虚拟事件讯号产生的火灾会覆盖至对应的虚拟地景数据中,更新虚拟地景数据为虚拟地景发生火灾的情况。
在多个实施方式中,虚拟对象数据可包含一或多个对象影像、一或多个对象状态、一或多个对象位置以及一或多个对象方向。一或多个对象状态其中之一、一或多个对象位置其中之一以及一或多个对象方向其中之一共同对应于一或多个对象影像其中之一。云端数据库会根据虚拟对象数据更新事件时间轴数据。如此一来,虚拟事件数据的数字内容可随不同的虚拟对象数据变动发生,而产生相对应的变化,举例来说,当虚拟事件讯号内默认虚拟地景发生火灾,而用户以虚拟对象的灭火器扑灭火焰,则虚拟事件讯号产生的火灾事件会对应的停止,更新虚拟事件讯号至火灾事件停止的情况。
由于云端数据库170会藉由虚拟对象数据更新虚拟事件讯号,透过虚拟事件讯号更新虚拟地景讯号,以及虚拟地景讯号与虚拟事件讯号会影响虚拟对象数据的产生,故虚拟地景讯号、虚拟事件讯号以及虚拟对象数据彼此间为连动性地互相影响。也就是,变更虚拟地景讯号、虚拟事件讯号以及虚拟对象数据其中之一,会连带地使其他两者做出相对应的变动,让使用者更能在虚拟世界中获得与真实世界中类似的体验。
图2绘示依据本发明另外的多个实施方式的交互式扩增实境系统200的组织简单方块图。交互式扩增实境系统200除交互式扩增实境系统100内的组件外,交互式扩增实境系统200可还包含通讯模块240。但不限于此。通讯模块240可用以与另一穿戴式互动显示装置120相连结。如此一来,交互式扩增实境系统200可让用户组队,并让使用者组队的用户之间透过通讯模块240互相沟通,甚至,不同的使用者可一同进行、体验同一扩增实境。在多个实施方式中,通讯模块240可让用户透过语音、影像或其他合适的沟通方式与不同的使用者互相沟通。
在多个实施方式中,交互式扩增实境系统200可还包含穿戴式互动控制装置220。穿戴式互动控制装置220与穿戴式互动显示装置120连结。在多个实施方式中,穿戴式互动控制装置220可透过局域网络(LANs)、广域网(WANs)、覆盖(overlay)网络以及软件定义(software-defined)网络或其他合适的网络传输方式与穿戴式互动显示装置120连结。在多个实施方式中,穿戴式互动控制装置220可藉由有线或无线(wireless)的方式与穿戴式互动显示装置120连结。穿戴式互动控制装置220包含体感侦测部件222。体感侦测部件222可根据动作讯号,发送对应动作讯号的控制讯号至穿戴式互动显示装置120。在多个实施方式中,穿戴式互动控制装置220可穿戴于使用者的手上,且使用者可藉由手势来驱动体感侦测部件222产生动作讯号。在多个实施方式中,使用者可藉由多种不同的手势来驱动体感侦测部件222产生多种不同的动作讯号与手势相对应。
值得注意的是,此处所述的穿戴式互动控制装置220以及体感侦测部件222仅为示例,而非用以限制本发明,且穿戴式互动控制装置220不限于穿戴于手上或身体的其他部位,本领域具有通常知识者,可视实际需要,在不脱离本揭露的精神和范围下,做适度的修改或替代,只要在穿戴式互动控制装置220能够透过体感侦测部件222感知用户的动作以驱动穿戴式互动控制装置220,并发送控制讯号控制穿戴式互动显示装置120即可。
在多个实施方式中,穿戴式互动显示装置120可还包含操作接口模块260。操作接口模块260可产生窗体讯号。在多个实施方式中,窗体讯号可包含一或多个操作选择。在多个实施方式中,窗体讯号可结合影像讯号,显示于显示部件130的影像中。同时,穿戴式互动显示装置120可根据穿戴式互动控制装置220根据动作讯号产生的控制讯号,自操作接口模块260选择窗体讯号中一或多个操作选择。
在多个实施方式中,穿戴式互动显示装置120的计算模块260可结合穿戴式互动控制装置220的动作讯号以及虚拟环境讯号产生影像讯号,且穿戴式互动控制装置220可藉由动作讯号变更虚拟环境讯号。如此一来,使用者可透过穿戴式互动控制装置220与虚拟环境讯号中的虚拟对象讯号互动,并透过变动虚拟对象讯号更新虚拟事件讯号以及虚拟地景讯号。
图3依据本发明多个实施方式绘示穿戴式互动显示装置120于真实世界中使用时的简单示意图,其中穿戴式互动显示装置120可采用图1中的交互式扩增实境系统100或图2中的交互式扩增实境系统200。图4依据本发明多个实施方式绘示交互式扩增实境系统100于真实世界中使用时,用户透过显示部件130所见影像的简单示意图。如图3所示,使用者可透过交互式扩增实境系统100或交互式扩增实境系统200的穿戴式互动显示装置120朝向真实世界。此时,穿戴式互动显示装置120中的定位部件140根据穿戴式互动显示装置120的位置产生位置讯号。此处所谓的位置讯号,像是藉由全球定位单元142产生与穿戴式互动显示装置120所在位置相对应的坐标。同时地,定位部件140可根据穿戴式互动显示装置120的显示部件130所具有的视野方向A,产生视野方向讯号,并沿视野方向A张一预设立体角Φ1于真实世界的空间中,切割出三维空间300。此时,真实世界的三维空间300中,有目标地景320位于其中。
在图4中,使用者于交互式扩增实境系统100的穿戴式互动显示装置120的显示部件130所见的影像。云端数据库170以定位部件140所产生的位置讯号为中心,建构相对应的虚拟环境讯号。虚拟环境讯号可包含相对应于穿戴式互动显示装置120所在位置的虚拟地景讯号;对应虚拟地景讯号以及事件时间轴数据所产生的虚拟事件讯号;以及对应虚拟地景讯号、事件时间轴数据以及虚拟对象数据所产生的虚拟对象讯号。计算模块160根据图3中的三维空间300,切割虚拟环境讯号的部分,用以产生影像讯号。影像讯号与虚拟环境讯号被三维空间300切割的部分实质上相同。影像讯号发送至显示部件130产生影像。影像包含虚拟地景420、虚拟事件440以及虚拟对象460,分别实质上对应于至少部分的虚拟地景讯号、虚拟事件讯号以及虚拟对象讯号。
图5依据本发明多个实施方式绘示交互式扩增实境系统200于真实世界中使用时,用户透过显示部件130所见影像的简单示意图。如图5所示,使用者透过交互式扩增实境系统200的穿戴式互动显示装置120的显示部件130所见的影像。与前述图4中同样地,交互式扩增实境系统200经三维空间300切割部分的虚拟环境讯号影像,用以产生影像讯号。影像讯号与虚拟环境讯号被三维空间300切割的部分实质上相同。影像讯号发送至显示部件130产生影像。影像可包含虚拟地景420、虚拟事件440、虚拟对象460。然而,如图5所示,交互式扩增实境系统200的显示部件130所显示的影像可还包含穿戴式互动控制装置220的虚拟控制装置520以及结合操作接口模块260的窗体讯号所产生的操作选择540。用户可藉由穿戴式互动控制装置220与影像中的虚拟对象460互动,以变更虚拟对象讯号、虚拟事件讯号以及虚拟地景讯号。同时,用户也可于显示部件130的影像中,藉由穿戴式互动控制装置220与窗体讯号产生的操作选择540互动。
综上所述,本发明提供一种交互式扩增实境系统,让用户藉由感知显示部件的影像,且与显示部件的影像互动,更新虚拟环境讯号,进而变更显示部件的影像,能提供用户扩增实境与真实世界结合的体验。
虽然本发明已以实施方式揭露如上,然其并非用以限定本发明,任何熟习此技艺者,在不脱离本发明的精神和范围内,当可作各种的更动与润饰,因此本发明的保护范围当视权利要求范围所界定者为准。
Claims (10)
1.一种交互式扩增实境系统,其特征为,该系统包含:
一穿戴式互动显示装置,包含:
一显示部件,具有一视野方向;
一定位部件,配置用以根据该穿戴式互动显示装置的一位置以及该显示部件的该视野方向,产生一位置讯号以及一视野方向讯号;
一传输/接收模块,配置用以传输该位置讯号;以及
一计算模块;以及
一云端数据库,包含:
一地图模块,配置用以自该传输/接收模块接收该位置讯号,并根据该位置讯号产生一虚拟地景讯号;
一管理模块,根据该虚拟地景讯号以及一事件时间轴数据,产生一虚拟事件讯号;以及
一对象模块,根据该虚拟地景讯号、该事件时间轴数据以及一虚拟对象数据,产生一虚拟对象讯号,
其中该虚拟地景讯号、该虚拟事件讯号以及该虚拟对象讯号组成一虚拟环境讯号,
其中,该计算模块透过该传输/接收模块接收该虚拟环境讯号,并配置用以根据该视野方向讯号与该虚拟环境讯号,产生一影像讯号,以及该显示部件配置用以根据该影像讯号,显示一影像。
2.如权利要求1所述的交互式扩增实境系统,其特征为,该定位部件包含:
一全球定位(GPS)单元,配置用以根据该穿戴式互动显示装置的该位置,定位该穿戴式互动显示装置的一坐标,以及根据该坐标,产生该位置讯号。
3.如权利要求1所述的交互式扩增实境系统,其特征为,该定位部件包含:
一方位单元,配置用以根据该显示部件的该视野方向,定位该显示部件的一视野方位;以及
一水平仪单元,配置用以根据该显示部件的该视野方向,计算该显示部件与水平面间的一视野仰角,
其中该视野方向讯号包含该视野方位以及该视野仰角。
4.如权利要求1所述的交互式扩增实境系统,其特征为,该云端数据库以该穿戴式互动显示装置的该位置讯号为中心,产生该虚拟环境讯号,该计算模块为根据该显示部件的该视野方向延伸的一三维空间,撷取该虚拟环境讯号位于该三维空间内的一部分,该虚拟环境讯号的该部分形成该影像讯号,以及该显示部件显示的该影像为该虚拟环境讯号的该部分。
5.如权利要求1所述的交互式扩增实境系统,其特征为,该地图模块结合一地图数据以及一虚拟地景数据,产生该虚拟地景讯号,其中该云端数据库会根据该虚拟事件讯号更新该虚拟地景资料。
6.如权利要求1所述的交互式扩增实境系统,其特征为,该虚拟对象数据报含一或多个对象影像、一或多个对象状态、一或多个对象位置以及一或多个对象方向,该一或多个对象状态其中之一、该一或多个对象位置其中之一以及该一或多个对象方向其中之一共同对应于该一或多个对象影像其中之一,其中该云端数据库会根据该虚拟对象数据更新该事件时间轴资料。
7.如权利要求1所述的交互式扩增实境系统,其特征为,该穿戴式互动显示装置还包含一通讯模块,配置用以与另一该穿戴式互动显示装置相连结。
8.如权利要求1所述的交互式扩增实境系统,其特征为,该系统还包含一穿戴式互动控制装置,与该穿戴式互动显示装置连结,该穿戴式互动控制装置包含:
一体感侦测部件,配置用以根据一动作讯号,发送对应该动作讯号的一控制讯号至该穿戴式互动显示装置。
9.如权利要求8所述的交互式扩增实境系统,其特征为,该穿戴式互动显示装置还包含:
一操作接口模块,配置用以产生一窗体讯号,包含一或多个操作选择,该窗体讯号结合该影像讯号,显示于该显示部件的该影像中,且该穿戴式互动显示装置根据该控制讯号自该操作接口模块选择该窗体讯号中该一或多个操作选择。
10.如权利要求8所述的交互式扩增实境系统,其特征为,该穿戴式互动显示装置的该计算模块结合该穿戴式互动控制装置的该动作讯号以及该虚拟环境讯号产生该影像讯号,且该穿戴式互动控制装置配置用以藉由该动作讯号变更该虚拟环境讯号。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510843251.0A CN106802712A (zh) | 2015-11-26 | 2015-11-26 | 交互式扩增实境系统 |
US15/139,313 US20170154466A1 (en) | 2015-11-26 | 2016-04-26 | Interactively augmented reality enable system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510843251.0A CN106802712A (zh) | 2015-11-26 | 2015-11-26 | 交互式扩增实境系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106802712A true CN106802712A (zh) | 2017-06-06 |
Family
ID=58777029
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510843251.0A Withdrawn CN106802712A (zh) | 2015-11-26 | 2015-11-26 | 交互式扩增实境系统 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20170154466A1 (zh) |
CN (1) | CN106802712A (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11217020B2 (en) * | 2020-03-16 | 2022-01-04 | Snap Inc. | 3D cutout image modification |
US12020358B2 (en) | 2021-10-29 | 2024-06-25 | Snap Inc. | Animated custom sticker creation |
US11995757B2 (en) | 2021-10-29 | 2024-05-28 | Snap Inc. | Customized animation from video |
CN114327076B (zh) * | 2022-01-04 | 2024-08-13 | 上海三一重机股份有限公司 | 作业机械与作业环境的虚拟交互方法、装置及系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102495959A (zh) * | 2011-12-05 | 2012-06-13 | 无锡智感星际科技有限公司 | 一种基于位置映射的增强现实平台系统及应用方法 |
CN102763064A (zh) * | 2009-12-17 | 2012-10-31 | 诺基亚公司 | 用于基于设备方位而提供对设备显示器的控制的方法和装置 |
US20130120450A1 (en) * | 2011-11-14 | 2013-05-16 | Ig Jae Kim | Method and apparatus for providing augmented reality tour platform service inside building by using wireless communication device |
US20130201215A1 (en) * | 2012-02-03 | 2013-08-08 | John A. MARTELLARO | Accessing applications in a mobile augmented reality environment |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101944846B1 (ko) * | 2011-10-28 | 2019-02-01 | 매직 립, 인코포레이티드 | 증강 및 가상 현실을 위한 시스템 및 방법 |
US9677840B2 (en) * | 2014-03-14 | 2017-06-13 | Lineweight Llc | Augmented reality simulator |
-
2015
- 2015-11-26 CN CN201510843251.0A patent/CN106802712A/zh not_active Withdrawn
-
2016
- 2016-04-26 US US15/139,313 patent/US20170154466A1/en not_active Abandoned
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102763064A (zh) * | 2009-12-17 | 2012-10-31 | 诺基亚公司 | 用于基于设备方位而提供对设备显示器的控制的方法和装置 |
US20130120450A1 (en) * | 2011-11-14 | 2013-05-16 | Ig Jae Kim | Method and apparatus for providing augmented reality tour platform service inside building by using wireless communication device |
CN102495959A (zh) * | 2011-12-05 | 2012-06-13 | 无锡智感星际科技有限公司 | 一种基于位置映射的增强现实平台系统及应用方法 |
US20130201215A1 (en) * | 2012-02-03 | 2013-08-08 | John A. MARTELLARO | Accessing applications in a mobile augmented reality environment |
Also Published As
Publication number | Publication date |
---|---|
US20170154466A1 (en) | 2017-06-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6780642B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
CN105188516B (zh) | 用于增强和虚拟现实的系统与方法 | |
US10169917B2 (en) | Augmented reality | |
CN103635891B (zh) | 大量同时远程数字呈现世界 | |
WO2020036898A1 (en) | A cross reality system | |
CN117572954A (zh) | 用于增强现实的系统和方法 | |
CN106484115A (zh) | 用于增强和虚拟现实的系统和方法 | |
US20140302930A1 (en) | Rendering system, rendering server, control method thereof, program, and recording medium | |
CN110765620B (zh) | 飞行器视景仿真方法、系统、服务器及存储介质 | |
JP6333801B2 (ja) | 表示制御装置、表示制御プログラム、および表示制御方法 | |
US11798223B2 (en) | Potentially visible set determining method and apparatus, device, and storage medium | |
KR20170036704A (ko) | 헤드 마운트형 디스플레이 디바이스를 사용한 다중 유저 시선 투영 | |
CN105212418A (zh) | 基于红外夜视功能的增强现实智能头盔研制 | |
CN106062826A (zh) | 图像生成装置以及图像生成方法 | |
CN104603865A (zh) | 一种由移动中的用户佩戴的用于通过锚定虚拟对象充分增强现实的系统 | |
US20190259201A1 (en) | Systems and methods for generating or selecting different lighting data for a virtual object | |
CN106802712A (zh) | 交互式扩增实境系统 | |
EP3991142A1 (en) | Fast hand meshing for dynamic occlusion | |
CN111325822A (zh) | 热点图的显示方法、装置、设备及可读存储介质 | |
CN109126136A (zh) | 三维虚拟宠物的生成方法、装置、设备及存储介质 | |
CN104166929A (zh) | 一种基于时空场景的信息推送系统和方法 | |
KR102578119B1 (ko) | 모바일 디바이스와 연동하는 스마트 안경 작동 방법 | |
TW201721361A (zh) | 互動式擴增實境系統 | |
US20230141545A1 (en) | Device and method for providing augmented reality content | |
JP2022185235A (ja) | 通信システム、通信方法及び通信プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20170606 |