CN107632705A - 沉浸式交互方法、设备、系统及虚拟现实设备 - Google Patents

Abstract

本发明公开了一种沉浸式交互方法、设备、系统及虚拟现实设备。该沉浸式交互方法包括：接收交互发起者的建组连接请求；根据建组连接请求建立交互组及对应交互组的组链接地址；将组链接地址发送至交互发起者进行组链接地址向其他组内成员的分发；根据其他组内成员通过组链接地址发送的加入连接请求，将其他组内成员加入所述交互组中；获取交互组中组内成员提供的用于交互的背景场景信息；根据背景场景信息获取对应的背景场景；生成与交互组中每一组内成员一一对应的模拟人物；将每一模拟人物添加至背景场景中生成交互场景供每一组内成员呈现，以进行沉浸式交互。

Description

沉浸式交互方法、设备、系统及虚拟现实设备

技术领域

本发明涉及虚拟现实技术领域，更具体地，涉及一种沉浸式交互方法、一种沉浸式交互设备、一种沉浸式交互系统、及一种虚拟现实设备。

背景技术

随着互联网技术的飞速发展，人们现在可以通过QQ、微信等工具进行交互，例如视频聊天，但是该种交互通常只能看到对方的二维图像，交互各方无法获得感觉各方是处在同一空间中进行对话、游戏、运动、拥抱等交互的交互体验。

因此，发明人认为，有必要对上述现有技术中存在的问题进行改进。

发明内容

本发明的一个目的是提供一种通过网络进行交互的新技术方案。

根据本发明的第一方面，提供了一种沉浸式交互方法，其包括：

接收交互发起者的建组连接请求；

根据所述建组连接请求建立交互组及对应所述交互组的组链接地址；

将所述组链接地址发送至所述交互发起者进行所述组链接地址向其他组内成员的分发；

根据所述其他组内成员通过所述组链接地址发送的加入连接请求，将所述其他组内成员加入所述交互组中；

获取所述交互组中组内成员提供的用于交互的背景场景信息；

根据所述背景场景信息获取对应的背景场景；

生成与所述交互组中每一组内成员一一对应的模拟人物；

将每一模拟人物添加至所述背景场景中生成交互场景供每一组内成员呈现，以进行沉浸式交互。

可选的是，所述背景场景包括真实场景的实时全景视频；

所述根据所述背景场景信息获取对应的背景场景包括：

根据所述背景场景信息，查找安装在所述真实场景的全景摄像机装置；

通过查找到的全景摄像机装置获取所述真实场景的实时全景视频。

可选的是，所述背景场景还包括所述真实场景的实时温度、实时湿度、实时气味中的至少一种。

可选的是，所述背景场景包括虚拟全景视频；

所述根据所述背景场景信息获取对应的背景场景包括：

根据所述背景场景信息查找所述虚拟全景视频；

在未查找到所述虚拟全景视频的情况下，连接提供所述背景场景信息的组内成员下载所述虚拟全景视频。

可选的是，所述背景场景信息包含在所述建组连接请求中，所述获取所述交互组的组内成员提供的用于交互的背景场景信息包括：

从所述建组连接请求中获取所述背景场景信息。

可选的是，所述生成对应所述交互组中每一组内成员的模拟人物包括：

获取所述交互组中每一组内成员发送的个人信息，其中，所述个人信息包括所属组内成员的性别、身高、年龄、体重、照片中的至少一项；

根据所述每一组内成员的个人信息，生成对应每一组内成员的模拟人物。

可选的是，所述将每一模拟人物添加至所述背景场景中生成交互场景供每一组内成员呈现包括：

建立所述背景场景的场景坐标系；

在所述背景场景的场景坐标系中，将每一模拟人物以互不相同的起始登录坐标添加至所述背景场景中生成交互场景供每一组内成员呈现。

可选的是，所述沉浸式交互方法还包括：

获取每一组内成员发送的个人状态信息，其中，所述个人状态信息包括所属组内成员在本地现实场景的位置信息和身体姿态信息；

根据每一组内成员的个人状态信息更新对应模拟人物在所述交互场景中的个人状态；或者，将所有组内成员的个人状态信息发送至每一组内成员更新对应模拟人物在所述交互场景中的个人状态。

根据本发明的第二方面，提供了一种沉浸式交互设备，其包括：

建组请求接收模块，用于接收交互发起者的建组连接请求；

建组响应模块，用于根据所述建组连接请求建立交互组及对应所述交互组的组链接地址，并将所述组链接地址发送至所述交互发起者进行所述组链接地址向其他组内成员的分发；

加入响应模块，用于根据所述其他组内成员通过所述组链接地址发送的加入连接请求，将所述其他组内成员加入所述交互组中；

场景信息获取模块，用于获取所述交互组中组内成员提供的用于交互的背景场景信息；

场景获取模块，用于根据所述背景场景信息获取对应的背景场景；

模拟人物生成模块，用于生成与所述交互组中每一组内成员一一对应的模拟人物；以及，

交互场景提供模块，用于将每一模拟人物添加至所述背景场景中生成交互场景供每一组内成员呈现。

可选的是，所述背景场景包括真实场景的实时全景视频；

所述场景获取模块包括：

查找单元，用于根据所述背景场景信息，查找安装在所述真实场景的全景摄像机装置；以及，

实景获取单元，用于通过查找到的全景摄像机装置获取所述真实场景的实时全景视频。

可选的是，所述背景场景包括虚拟全景视频；

所述场景获取模块包括：

查找单元，用于根据所述背景场景信息查找所述虚拟全景视频；以及，

下载单元，用于在未查找到所述虚拟全景视频的情况下，连接提供所述背景场景信息的组内成员下载所述虚拟全景视频。

可选的是，所述模拟人物生成模块包括：

个人信息获取单元，用于获取所述交互组中每一组内成员发送的个人信息，其中，所述个人信息包括所属组内成员的性别、身高、年龄、体重、照片中的至少一项；以及，

模拟人物生成单元，用于根据所述每一组内成员的个人信息，生成与每一组内成员一一对应的模拟人物。

可选的是，所述交互场景生成模块包括：

坐标系建立单元，用于建立所述背景场景的场景坐标系；以及，

交互场景提供单元，用于在所述背景场景的场景坐标系中，将每一模拟人物以互不相同的起始登录坐标添加至所述背景场景中生成交互场景供每一组内成员呈现。

可选的是，所述沉浸式交互设备还包括：

个人状态获取模块，用于获取每一组内成员发送的个人状态信息，其中，所述个人状态信息包括所属组内成员在本地现实场景的位置信息和身体姿态信息；以及，

交互场景更新模块，用于根据每一组内成员的个人状态信息更新对应模拟人物在所述交互场景中的个人状态；或者，用于将所有组内成员的个人状态信息发送至每一组内成员更新对应模拟人物在所述交互场景中的个人状态。

根据本发明的第三方面，还提供了一种虚拟现实设备，其包括：

建组模块，用于在作为交互发起者时向后台的沉浸式交互设备发起建组连接请求；

组链接接收模块，用于接收所述沉浸式交互设备根据所述建组连接请求返回的组链接地址；

组链接发送模块，用于将所述组链接地址发送至其他组内成员，以供所述其他组内成员向所述沉浸式交互设备请求加入对应的交互组；

加入模块，用于在作为所述其他组内成员时接收所述交互发起者发送的组链接地址，并根据所述组链接地址向所述沉浸式交互设备发送加入对应交互组的加入连接请求；

场景信息提供模块，用于提供进行交互的背景场景信息供所述沉浸式交互设备获取对应的背景场景；以及，

呈现处理模块，用于呈现所述沉浸式交互设备提供的交互场景进行沉浸式交互，其中，所述沉浸式交互设备将与所述交互组中每一组内成员一一对应的模拟人物添加至所述背景场景中生成所述交互场景。

可选的是，所述虚拟现实设备还包括：

个人信息采集模块，用于向所述沉浸式交互设备发送个人信息数据，以供所述沉浸式交互设备根据所述个人信息数据生成对应的模拟人物添加至所述背景场景中。

可选的是，所述虚拟现实设备还包括：

个人状态采集模块，用于向所述沉浸式交互设备发送个人状态信息，以供所述沉浸式交互设备更新对应模拟人物在所述交互场景中的个人状态，其中，所述个人场景信息包括所述虚拟现实设备对应组内成员在本地现实场景的位置信息和身体姿态信息。

可选的是，所述虚拟现实设备还包括：

个人状态采集模块，用于向所述沉浸式交互设备发送个人状态信息，其中，所述个人场景信息包括所述虚拟现实设备对应组内成员在本地现实场景的位置信息和身体姿态信息；

场景更新模块，用于接收所述沉浸式交互设备提供的每一组内成员的个人状态信息，并根据每一组内成员的个人状态信息更新对应模拟人物在所述交互场景中的个人状态。

根据本发明的第四方面，还提供了一种沉浸式交互系统，其包括根据本发明第二方面所述的沉浸式交互设备、一套根据本发明第三方面所述的虚拟现实设备作为交互发起者、及至少一套根据本发明第三方面所述的虚拟现实设备作为其他组内成员。

本发明的发明人发现，在现有技术中，尚未存在一种沉浸式交互方法、设备、系统及虚拟现实设备，可以令用户足不出户，就能获得与亲朋好友在希望的场景中进行现场交互的沉浸式交互体验。因此，本发明所要实现的技术任务或者所要解决的技术问题是本领域技术人员从未想到的或者没有预期到的，故本发明是一种新的技术方案。

通过以下参照附图对本发明的示例性实施例的详细描述，本发明的其它特征及其优点将会变得清楚。

附图说明

被结合在说明书中并构成说明书的一部分的附图示出了本发明的实施例，并且连同其说明一起用于解释本发明的原理。

图1示出了可以实现本发明实施例的沉浸式交互方法的硬件配置的框图；

图2示出了根据本发明实施例的沉浸式交互系统的组成结构的例子的框图；

图3示出了根据本发明实施例的沉浸式交互方法的流程示意图；

图4示出了根据本发明另一实施例的沉浸式交互方法的流程示意图；

图5示出了本发明实施例的沉浸式交互设备的方框原理图；

图6示出了根据本发明另一实施例的沉浸式交互设备的方框原理图；

图7示出了根据本发明实施例的模拟人物生成模块的方框原理图；

图8示出了根据本发明实施例的虚拟现实设备的方框原理图。

具体实施方式

现在将参照附图来详细描述本发明的各种示例性实施例。应注意到：除非另外具体说明，否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本发明的范围。

以下对至少一个示例性实施例的描述实际上仅仅是说明性的，决不作为对本发明及其应用或使用的任何限制。

对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论，但在适当情况下，所述技术、方法和设备应当被视为说明书的一部分。

在这里示出和讨论的所有例子中，任何具体值应被解释为仅仅是示例性的，而不是作为限制。因此，示例性实施例的其它例子可以具有不同的值。

应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步讨论。

<硬件配置>

图1是示出可以实现本发明实施例的沉浸式交互方法的硬件配置的框图。

电子设备1000可以是便携式电脑、台式计算机、手机、平板电脑等，还可以是提供虚拟现实体验的虚拟现实设备，例如虚拟现实(VR)一体机、虚拟现实体验仓等。

如图1所示，电子设备1000可以包括处理器1100、存储器1200、接口装置1300、通信装置1400、显示装置1500、输入装置1600、扬声器1700、麦克风1800等等。其中，处理器1100可以是中央处理器CPU、微处理器MCU等。存储器1200例如包括ROM(只读存储器)、RAM(随机存取存储器)、诸如硬盘的非易失性存储器等。接口装置1300例如包括USB接口、耳机接口等。通信装置1400例如能够进行有线或无线通信，具体地可以包括Wifi通信、蓝牙通信、2G/3G/4G/5G通信等。显示装置1500例如是液晶显示屏、触摸显示屏等。输入装置1600例如可以包括触摸屏、键盘、体感输入等。用户可以通过扬声器1700和麦克风1800输入/输出语音信息。

图1所示的电子设备仅仅是说明性的并且决不意味着对本发明、其应用或使用的任何限制。应用于本发明的实施例中，电子设备1000的所述存储器1200用于存储指令，所述指令用于控制所述处理器1100进行操作以执行本发明实施例提供的任一种沉浸式交互方法。本领域技术人员应当理解，尽管在图1中对电子设备1000示出了多个装置，但是，本发明可以仅涉及其中的部分装置，例如，电子设备1000只涉及处理器1100和存储装置1200。技术人员可以根据本发明所公开方案设计指令。指令如何控制处理器进行操作，这是本领域公知，故在此不再详细描述。

<实施例>

本发明实施例的总体构思是提供一种用于通过网络进行交互的新方案，不同于现有技术中交互各方只能分别在各自所在的空间中进行视频聊天，通过本发明实施例，可以令交互各方获得就如同在同一空间中进行交互的沉浸式体验，实现更丰富的交互，提升用户的交互体验。

<系统>

在本发明实施例中，提供一种沉浸式交互系统，如图2所示，该沉浸式交互系统包括沉浸式交互设备5000、至少两套虚拟现实设备、网络2100。

沉浸式交互设备5000可以是后台服务器，其可以具有以上电子设备1000的硬件配置结构。

至少两套虚拟现实设备可以具有以上电子设备1000的硬件配置结构。

至少两套虚拟现实设备中的一套虚拟现实设备8000A作为交互发起者，请求沉浸式交互设备5000分配一个组链接地址，以使交互各方通过该组链接地址建立一个交互组。

至少两套虚拟现实设备中的其他虚拟现实设备8000B作为其他组内成员，通过该组链接地址请求沉浸式交互设备5000加入对应的交互组。

沉浸式交互设备5000与至少两套虚拟现实设备8000A、8000B各方通过实施根据本发明实施例的沉浸式交互方法，实现交互组中组内成员在选择的同一背景场景中进行沉浸式交互的目的。

背景场景可以包括虚拟全景视频，例如明朝皇宫的虚拟全景视频。

进一步地，背景场景还可以包括虚拟场景的实时温度、实时湿度、实时气味中的至少一种。

背景场景也可以包括真实场景的实时全景视频，例如三亚海滩的实时全景视频。

进一步地，背景场景还可以包括真实场景的实时温度、实时湿度、实时气味中的至少一种。

对于真实场景的实时全景视频，可以通过在真实场景安装全景摄像头装置2200采集实时全景视频。

以上网络2100用于沉浸式交互设备5000、虚拟现实设备8000A、虚拟现实设备8000B、全景摄像机装置2200其中任意两者连接进行通信，根据应用场景，可以是无线网络也可以是有线网络，可以是广域网也可以是局域网。

<方法>

图3示出了根据本发明实施例的沉浸式交互方法的流程示意图。

在该实施例中，实施本发明沉浸式交互方法的沉浸式交互系统包括沉浸式交互设备3000、一套虚拟现实设备8000A作为交互发起者、另一套虚拟现实设备8000B。

以图3所示实施例为例，说明本发明沉浸式交互方法包括如下步骤：

步骤S8110，作为交互发起者的虚拟现实设备8000A向沉浸式交互设备3000发起建组连接请求。

在该步骤S8110之前，交互各方(在本实施例中为虚拟现实设备8000A和虚拟现实设备8000B)可以预先进行沟通，以确定一个交互组及确定交互所在的背景场景。

该沟通可以在交互各方之间以语音的方式进行，例如可以通过虚拟现实设备的运营商网络通信(带电话卡的虚拟现实设备)、虚拟现实设备的实时通讯软件(例如微信)、手机等进行语音通话。

例如，张三的虚拟现实设备8000A上有一个明朝皇宫的虚拟全景视频，张三通过语音通话与李四(对应虚拟现实设备8000B)说，我这里有一个明朝皇宫的虚拟全景视频，我们一起去欣赏明朝皇宫的歌舞笙箫，进而确定了交互组中组内成员包括张三的虚拟现实设备8000A和李四的虚拟现实设备8000B，并确定了交互的背景场景为明朝皇宫的虚拟场景。然后，张三作为交互发起者通过虚拟现实设备8000A向沉浸式交互设备3000A发送建组连接请求。

又例如，张三、李四都很想去三亚度假，一直没有时间，但是现在三亚某个沙滩上安装了全景摄像机装置，如图2中全景摄像机装置2200，而且该全景摄像机装置2200通过网络2100进行了联网。因此，张三、李四沟通好一起去三亚该沙滩进行沉浸式交互，进而确定了交互组中组内成员包括张三的虚拟现实设备8000A和李四的虚拟现实设备8000B，并确定了交互的背景场景为三亚沙滩的真实场景。然后，张三就可以向沉浸式交互设备3000发送建组连接请求。

步骤S3010，沉浸式交互设备3000接收交互发起者的建组连接请求。

步骤S3020，沉浸式交互设备3000根据接收到的建组连接请求，建立交互组及对应该交互组的组链接地址。

该组链接地址与交互组一一对应配置，不同交互组即使选择相同的背景场景也将被分配不同的组链接地址。

交互组中各组内成员例如可以通过该组链接地址作为标识与沉浸式交互设备3000进行通信，以明确通信对方所在的交互组，进而确定所需处理和提供的各种数据。

步骤S3030，沉浸式交互设备3000将组链接地址发送至交互发起者，在本实施例中为虚拟现实设备8000A，进行组链接地址向其他组内成员的分发。

步骤S8120，虚拟现实设备8000A接收沉浸式交互设备根据建组连接请求返回的组链接请求。

步骤S8130，虚拟现实设备8000A在接收到返回的组链接地址后，将组链接地址发送至其他组内成员，即发送至虚拟现实设备8000B。

步骤S8210，作为其他组内成员的虚拟现实设备8000B接收交互发起者发送的组链接地址。

步骤S8220，虚拟现实设备8000B在接收到组链接地址后，根据该组链接地址向沉浸式交互设备3000发送加入对应交互组的加入连接请求。

步骤S3040，沉浸式交互设备3000接收到虚拟现实设备8000B通过组链接地址发送的加入连接请求后，将虚拟现实设备8000B加入对应的交互组中。

此时，该交互组中组内成员包括虚拟现实设备A和虚拟现实设备B。之后，还可以有另外的虚拟现实设备通过获得组链接地址而申请沉浸式交互这边3000将其加入该交互组中。

步骤S3050，沉浸式交互设备3000获取交互组中组内成员提供的用于交互的背景场景信息。

该背景场景信息可以由交互发起者提供，也可以由其他组内成员提供。

以背景场景信息由交互发起者提供为例，该背景场景信息可以直接包含在建组连接请求中。对应地，在该步骤S3050中，沉浸式交互设备3000从建组连接请求中获取该背景场景信息。

以背景场景信息由其他组内成员提供为例，该背景场景信息可以直接包含在对应的加入连接请求中。对应地，在该步骤S3050中，沉浸式交互设备3000从加入连接请求中获取该背景场景信息。

该背景场景信息也可以由组内成员通过单独的数据包发送至沉浸式交互设备3000，而并不局限于包含在建组连接请求中或者加入连接请求中。

该背景场景信息例如可以包括场景类型和场景ID。

场景类型反映选择的背景场景是虚拟场景还是真实场景。

场景ID为唯一标识对应场景的信息，以供沉浸式交互设备3000能够根据该场景ID通过网络查找到对应的数据源。该场景ID例如是网络连接地址。

在场景类型为虚拟场景的情况下，该背景场景信息还可以进一步包括本地存储地址，以在沉浸式交互设备3000根据场景ID未查找到虚拟全景视频的情况下，连接提供背景场景信息的组内成员从本地存储地址下载该虚拟全景视频。

步骤S3060，沉浸式交互设备3000根据获取到的背景场景信息获取对应的背景场景。

在背景场景包括真实场景的实时全景视频的实施例中，该步骤S3060中根据背景场景信息获取对应的背景场景可以进一步包括：

步骤S3061，根据背景场景信息查找安装在真实场景的全景摄像机装置。

该全景摄像机装置包括全景摄像机及至少一个处理器，全景摄像机将采集到图像发送至处理器进行处理形成真实场景的实时全景视频。

该至少一个处理器中的第一个处理器与每一全景摄像机例如通过MIPI总线连接。

在全景摄像机装置包括两个以上(包括两个)处理器的实施例中，该第一个处理器与其他处理器之间可以进行有线连接，也可以通过通信装置进行无线连接，各处理器通过分工得到真实场景的实时全景视频。

步骤S3062，通过查找到的全景摄像机装置获取真实场景的实时全景视频。

进一步地，在背景场景包括真实场景的实时全景视频的实施例中，该背景场景还可以包括真实场景的实时温度、实时湿度、实时气味中的至少一种。

例如，可以通过设置于真实场景中的温度传感器获取真实场景的实时温度，这样，虚拟现实设备8000A、8000B便可在呈现交互场景时按照该实时温度设置各自所在的个人环境的环境温度，令用户得到实时的温度体验，提高沉浸感。

又例如，可以通过设置于真实场景中的湿度传感器获取真实场景的实时湿度，这样，虚拟现实设备8000A、8000B便可在呈现交互场景时按照实时湿度设置各自所在的个人环境的环境温度，令用户得到实时的湿度体验，提高沉浸感。

又例如，可以通过设置于真实场景中的气味传感器获取真实场景的实时气味，这样，虚拟现实设备8000A、8000B便可在呈现交互场景时按照实时气味例如通过气味生成器在各自所在的个人环境产生对应的气味，令用户得到实时的气味体验。

在背景场景包括虚拟全景视频的实施例中，该步骤S3060中根据背景场景信息获取对应的背景场景可以进一步包括：根据背景场景信息查找虚拟全景视频，如果沉浸式交互设备的本地数据库存储有该虚拟全景视频，则直接从本地数据库中获取该虚拟全景视频；如果在本地数据库中未查找到该虚拟全景视频，则连接提供背景场景信息的组内成员下载该虚拟全景视频。

在背景场景包括虚拟全景视频的实施例中，该背景场景还可以进一步包括与虚拟全景视频配套的体感信息，该体感信息包括温度、湿度、气味中的至少一种，该体感信息根据播放时间与虚拟全景视频建立对应关系。这些体感信息例如可以记录在虚拟全景视频的配置文件中。

步骤S3070，沉浸式交互设备3000生成与交互组中每一组内成员一一对应的模拟人物。

该模拟人物可以是沉浸式交互设备3000预设的人物设置，沉浸式交互设备3000可以从预设的人物设置中随机分配代表每一组内成员的模拟人物；或者，沉浸式交互设备3000也可以与每一组内成员建立通信，以要求每一组内成员选择代表自己的模拟人物。

为了提高沉浸感体验，该模拟人物可以根据组内成员的真实个人信息生成，以使模拟人物具有与对应组内成员基本相同的形体特征、样貌特征等，进而使得模拟人物能够更加真实地模拟所代表的组内成员进行沉浸式交互。

为此，该步骤S3070中沉浸式交互设备3000生成与交互组中每一组内成员一一对应的模拟人物可以进一步包括：

步骤S3071，沉浸式交互设备3000获取交互组中每一组内成员发送的个人信息，其中，该个人信息包括所属组内成员的性别、身高、年龄、体重、照片中的至少一项。

对应地，每一组内成员的虚拟现实设备需要采集个人信息，并向沉浸式交互设备3000发送该个人信息，以供沉浸式交互设备3000根据个人信息数据生成对应的模拟人物。

该个人信息可以包含在建组连接请求或者加入连接请求中发送，也可以通过单独的数据包发送。

步骤S3072，沉浸式交互设备3000根据每一组内成员的个人信息，生成对应每一组内成员的模拟人物。

该模拟人物可以是根据每一组内成员的个人信息生成的3D影像。

步骤S3080，沉浸式交互设备3000将每一模拟人物添加至背景场景中生成交互场景。

在生成交互场景时，沉浸式交互设备3000可以针对背景场景建立场景坐标系，该场景坐标系可以是世界坐标系，这样，代表每一组内成员的模拟人物在背景场景中的起始登录位置、运动、姿态等均将以该场景坐标系为基准进行设置。

例如，在背景场景包括真实场景视频的实施例中，场景坐标系的坐标原点(0,0,0)可以设置为在全景摄像机所在的位置。

这样，该步骤S3080可以进一步包括：

步骤S3081，建立背景场景的场景坐标系。

步骤S3082，在背景场景的场景坐标系中，将每一模拟人物以互不相同的起始登录坐标添加至背景场景中生成交互场景供每一组内成员呈现。

根据该步骤S3082，可以使得每一模拟人物在背景场景中具有互不相同的起始位置。

例如，代表张三的虚拟现实设备第一个进入交互组，沉浸式交互设备3000服务器设置场景坐标系的坐标原点(0，0，0)作为代表张三的模拟恩物的起始登陆点，进而可以根据张三的个人信息在对应的起始登录点投影出张三的3d影像。接着，李四第二个进入该交互组，沉浸式交互设置3000会判断背景场景中有哪些坐标点已经被占用，然后选择一个没有被占用的坐标点(1，0，0)让李四登陆，进而可以根据李四的个人信息在对应的起始登录点投影出李四的3d影像。

步骤S3090，沉浸式交互设备3000将交互场景发送至每一组内成员进行呈现，以实现沉浸式交互。

步骤S8140，虚拟现实设备A呈现沉浸式交互设备3000提供的交互场景进行沉浸式交互。

步骤S8230，虚拟现实设备B呈现沉浸式交互设备3000提供的交互场景进行沉浸式交互。

这样，根据本发明实施例，交互各方通过呈现相同的交互场景可以感受到在同一背景场景中进行交互的沉浸式体验。

图4示出了根据本发明另一实施例的沉浸式交互方法的流程示意图。

图4所示实施例在图3所示实施例的基础上，使得交互组中每一组内成员的真实的个人状态都能在交互场景中得以体现，进而提高沉浸感。

步骤S3100，沉浸式交互设备3000获取每一组内成员发送的个人状态信息，其中，该个人状态信息包括所属组内成员在本地现实场景的位置信息和身体姿态信息。

该身体姿态信息可以包括动作、姿势等。

该个人状态信息还可以包括所属组内成员在本地现实场景输出的语音信息，以实现语言上的交互。

该种语言交互也可以配合其他交互手段实现，例如通过虚拟现实设备进行语音通话等。

对应地，每一组内成员需要采集个人状态信息，并将个人状态信息发送至沉浸式交互设备3000。

个人状态信息的位置信息和身体姿态信息可以是基于沉浸式交互设备3000建立的场景坐标系的数据。

该个人状态信息可以通过虚拟现实设备的体感装置采集。

这些体感装置例如包括九轴运动传感器(包括三轴加速度计、三轴陀螺仪、三轴磁强计)、双目摄像头、用于感应组内成员脚步动作的触觉反馈鞋、用于感应组内成员手部动作的VR手套等等。

步骤S3110，沉浸式交互设备3000根据每一组内成员的个人状态信息更新对应模拟人物在交互场景中的个人状态。或者，沉浸式交互设备3000将所有组内成员的个人状态信息发送至每一组内成员，以使每一组内成员完成各模拟人物在所述交互场景中的个人状态的更新操作。

当背景场景和组内成员中的任一者的状态发生变化时，该交互场景均将发生变化，需要进行更新呈现。该呈现不仅包括视频播放、还可以包括语音呈现、接触交互的呈现等，该接触交互的呈现例如是通过VR手套向组内成员施力，以实现握手的沉浸式体验。

例如，一组内成员在本地现实场景中走动、身体姿态变化使得其个人场景信息发生变化，可以根据变化后的所述个人场景信息更新交互场景，以生成变化后的交互场景进行呈现。

该更新交互场景的操作可以由沉浸式交互设备3000实施，也可以由每一组内成员的虚拟现实设备实施。

<装置>

图5示出了根据本发明实施例的沉浸式交互设备的方框原理图。

根据图5所示，本实施例的沉浸式交互设备包括建组请求接收模块3100、建组响应模块3200、加入响应模块3300、场景信息获取模块3400、场景获取模块3500、模拟人物生成模块3600、及交互场景提供模块3700。

该建组请求接收模块3100用于接收交互发起者(或者称之为作为交互发起者的虚拟现实设备)的建组连接请求。

该建组响应模块3200用于根据所述建组连接请求建立交互组及对应所述交互组的组链接地址，并将所述组链接地址发送至所述交互发起者进行所述组链接地址向其他组内成员的分发。

该加入响应模块3300用于根据其他组内成员通过该组链接地址发送的加入连接请求，以将其他组内成员加入交互组中。

该场景信息获取模块3400用于获取交互组中组内成员提供的用于交互的背景场景信息。

该场景信息获取模块3400例如从建组连接请求中获取背景场景信息。

该场景获取模块3500用于根据背景场景信息获取对应的背景场景。

该模拟人物生成模块3600用于生成与所述交互组中每一组内成员一一对应的模拟人物。

该交互场景提供模块3700用于将每一模拟人物添加至所述背景场景中生成交互场景供每一组内成员呈现。

以上背景场景可以包括真实场景的实时全景视频。对此，以上场景获取模块3500可以进一步包括查找单元和实景获取单元(图中未示出)。该查找单元用于根据所述背景场景信息，查找安装在所述真实场景的全景摄像机装置。该实景获取单元用于通过查找到的全景摄像机装置获取所述真实场景的实时全景视频。

以上背景场景也可以包括虚拟全景视频。对此，以上场景获取模块3500可以进一步包括查找单元和下载单元(图中未示出)。该查找单元用于根据所述背景场景信息例如从本地数据库中查找该虚拟全景视频。该下载单元用于在未查找到虚拟全景视频的情况下，连接提供背景场景信息的组内成员下载该虚拟全景视频、及用于在查找到虚拟全景视频的情况下，直接从本地数据库中获取该虚拟全景视频。

根据图7所示，以上模拟人物生成模块3600可以进一步包括个人信息获取单元3610和模拟人物生成单元3620。个人信息获取单元3610用于获取交互组中每一组内成员发送的个人信息，其中，个人信息包括所属组内成员的性别、身高、年龄、体重、照片中的至少一项。模拟人物生成单元3620用于根据每一组内成员的个人信息，生成与每一组内成员一一对应的模拟人物。

以上交互场景提供模块3700可以进一步包括坐标系建立单元和交互场景提供单元(图中未示出)。该坐标系建立单元用于建立所述背景场景的场景坐标系。该交互场景提供单元用于在背景场景的场景坐标系中，将每一模拟人物以互不相同的起始登录坐标添加至背景场景中生成交互场景供每一组内成员呈现。

图6示出了根据本发明另一实施例的沉浸式交互设备的方框原理图。

根据图6所示，该实施例的沉浸式交互设备在图5所示实施例的基础上还包括个人状态获取模块3800和交互场景更新模块3900。

该个人状态获取模块3800用于获取每一组内成员发送的个人状态信息，其中，所述个人状态信息包括所属组内成员在本地现实场景的位置信息和身体姿态信息。

该交互场景更新模块3900用于根据每一组内成员的个人状态信息更新对应模拟人物在所述交互场景中的个人状态；或者，用于将所有组内成员的个人状态信息发送至每一组内成员更新对应模拟人物在所述交互场景中的个人状态。

图8示出了根据本发明实施例的虚拟现实设备的方框原理图。

根据图8所示，该实施例的虚拟现实设备8000包括建组模块8100、组链接接收模块8200、组链接发送模块8300、加入模块8400、场景信息提供模块8500、及呈现处理模块8600。

该建组模块8100用于在作为交互发起者时向沉浸式交互设备3000发起建组连接请求。

该组链接接收模块8200用于接收沉浸式交互设备根据建组连接请求返回的组链接地址。

该组链接发送模块8300用于将组链接地址发送至其他组内成员，以供其他组内成员向沉浸式交互设备请求加入对应的交互组。

该加入模块8400用于在作为其他组内成员时接收交互发起者发送的组链接地址，并根据组链接地址向沉浸式交互设备发送加入对应交互组的加入连接请求。

该场景信息提供模块8500用于提供进行交互的背景场景信息供沉浸式交互设备3000获取对应的背景场景。

该呈现处理模块8600用于呈现沉浸式交互设备提供的交互场景进行沉浸式交互，其中，沉浸式交互设备8600将与交互组中每一组内成员一一对应的模拟人物添加至背景场景中生成交互场景。

虚拟现实设备8000可以通过显示装置、各种体感装置、扬声器等语音装置实施呈现处理模块8600的处理结果。

该虚拟现实设备8000还可以进一步包括个人信息采集模块(图中未示出)，该个人信息采集模块用于向沉浸式交互设备3000发送个人信息，以供沉浸式交互设备300根据该个人信息生成对应的模拟人物添加至背景场景中生成交互场景。

该虚拟现实设备8000还可以进一步包括个人状态采集模块(图中未示出)，该个人状态采集模块用于向沉浸式交互设备3000发送个人状态信息，以供沉浸式交互设备3000更新对应模拟人物在交互场景中的个人状态，其中，个人场景信息包括虚拟现实设备对应组内成员在本地现实场景的位置信息和身体姿态信息。

该虚拟现实设备8000也可以进一步包括个人状态采集模块和场景更新模块(图中未示出)，该个人状态采集模块用于向沉浸式交互设备发送个人状态信息，其中，个人场景信息包括虚拟现实设备对应组内成员在本地现实场景的位置信息和身体姿态信息。场景更新模块用于接收沉浸式交互设备提供的每一组内成员的个人状态信息，并根据每一组内成员的个人状态信息更新对应模拟人物在交互场景中的个人状态。

本领域技术人员应当明白，可以通过各种方式来实现以上沉浸式交互设备3000、虚拟现实设备8000。例如，可以通过指令配置处理器来实现沉浸式交互设备3000、虚拟现实设备8000。例如，可以将指令存储在ROM中，并且当启动设备时，将指令从ROM读取到可编程器件中来实现沉浸式交互设备3000、虚拟现实设备8000。例如，可以将沉浸式交互设备3000和虚拟现实设备8000固化到专用器件(例如ASIC)中。可以将沉浸式交互设备3000和虚拟现实设备8000分成相互独立的单元，或者可以将它们合并在一起实现。沉浸式交互设备3000、虚拟现实设备8000可以通过上述各种实现方式中的一种来实现，或者可以通过上述各种实现方式中的两种或更多种方式的组合来实现。

本领域技术人员公知的是，随着诸如大规模集成电路技术的电子信息技术的发展和软件硬件化的趋势，要明确划分计算机系统软、硬件界限已经显得比较困难了。因为，任何操作可以软件来实现，也可以由硬件来实现。任何指令的执行可以由硬件完成，同样也可以由软件来完成。对于某一机器功能采用硬件实现方案还是软件实现方案，取决于价格、速度、可靠性、存储容量、变更周期等非技术性因素。因此，对于电子信息技术领域的普通技术人员来说，更为直接和清楚地描述一个技术方案的方式是描述该方案中的各个操作。在知道所要执行的操作的情况下，本领域技术人员可以基于对所述非技术性因素的考虑直接设计出期望的产品。

本发明可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质，其上载有用于使处理器实现本发明的各个方面的计算机可读程序指令。

计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身，诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如，通过光纤电缆的光脉冲)、或者通过电线传输的电信号。

这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备，或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令，并转发该计算机可读程序指令，以供存储在各个计算/处理设备中的计算机可读存储介质中。

用于执行本发明操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码，所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等，以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中，通过利用计算机可读程序指令的状态信息来个性化定制电子电路，例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA)，该电子电路可以执行计算机可读程序指令，从而实现本发明的各个方面。

这里参照根据本发明实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本发明的各个方面。应当理解，流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合，都可以由计算机可读程序指令实现。

这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器，从而生产出一种机器，使得这些指令在通过计算机或其它可编程数据处理装置的处理器执行时，产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中，这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作，从而，存储有指令的计算机可读介质则包括一个制造品，其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。

也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上，使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤，以产生计算机实现的过程，从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。

附图中的流程图和框图显示了根据本发明的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分，所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。对于本领域技术人员来说公知的是，通过硬件方式实现、通过软件方式实现以及通过软件和硬件结合的方式实现都是等价的。

以上已经描述了本发明的各实施例，上述说明是示例性的，并非穷尽性的，并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择，旨在最好地解释各实施例的原理、实际应用或对市场中的技术改进，或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。本发明的范围由所附权利要求来限定。

Claims (10)

1.一种沉浸式交互方法，其特征在于，包括：

接收交互发起者的建组连接请求；

根据所述建组连接请求建立交互组及对应所述交互组的组链接地址；

将所述组链接地址发送至所述交互发起者进行所述组链接地址向其他组内成员的分发；

根据所述其他组内成员通过所述组链接地址发送的加入连接请求，将所述其他组内成员加入所述交互组中；

获取所述交互组中组内成员提供的用于交互的背景场景信息；

根据所述背景场景信息获取对应的背景场景；

生成与所述交互组中每一组内成员一一对应的模拟人物；

将每一模拟人物添加至所述背景场景中生成交互场景供每一组内成员呈现，以进行沉浸式交互。

2.根据权利要求1所述的沉浸式交互方法，其特征在于，所述背景场景包括真实场景的实时全景视频；

所述根据所述背景场景信息获取对应的背景场景包括：

根据所述背景场景信息，查找安装在所述真实场景的全景摄像机装置；

通过查找到的全景摄像机装置获取所述真实场景的实时全景视频。

3.根据权利要求2所述的沉浸式交互方法，其特征在于，

所述背景场景还包括所述真实场景的实时温度、实时湿度、实时气味中的至少一种。

4.根据权利要求1所述的沉浸式交互方法，其特征在于，所述背景场景包括虚拟全景视频；

所述根据所述背景场景信息获取对应的背景场景包括：

根据所述背景场景信息查找所述虚拟全景视频；

在未查找到所述虚拟全景视频的情况下，连接提供所述背景场景信息的组内成员下载所述虚拟全景视频。

5.根据权利要求1所述的沉浸式交互方法，其特征在于，所述背景场景信息包含在所述建组连接请求中，所述获取所述交互组的组内成员提供的用于交互的背景场景信息包括：

从所述建组连接请求中获取所述背景场景信息。

6.根据权利要求1所述的沉浸式交互方法，其特征在于，所述生成对应所述交互组中每一组内成员的模拟人物包括：

获取所述交互组中每一组内成员发送的个人信息，其中，所述个人信息包括所属组内成员的性别、身高、年龄、体重、照片中的至少一项；

根据所述每一组内成员的个人信息，生成对应每一组内成员的模拟人物。

7.根据权利要求1所述的沉浸式交互方法，其特征在于，所述将每一模拟人物添加至所述背景场景中生成交互场景供每一组内成员呈现包括：

建立所述背景场景的场景坐标系；

在所述背景场景的场景坐标系中，将每一模拟人物以互不相同的起始登录坐标添加至所述背景场景中生成交互场景供每一组内成员呈现。

8.一种沉浸式交互设备，其特征在于，包括：

建组请求接收模块，用于接收交互发起者的建组连接请求；

建组响应模块，用于根据所述建组连接请求建立交互组及对应所述交互组的组链接地址，并将所述组链接地址发送至所述交互发起者进行所述组链接地址向其他组内成员的分发；

加入响应模块，用于根据所述其他组内成员通过所述组链接地址发送的加入连接请求，将所述其他组内成员加入所述交互组中；

场景信息获取模块，用于获取所述交互组中组内成员提供的用于交互的背景场景信息；

场景获取模块，用于根据所述背景场景信息获取对应的背景场景；

模拟人物生成模块，用于生成与所述交互组中每一组内成员一一对应的模拟人物；以及，

交互场景提供模块，用于将每一模拟人物添加至所述背景场景中生成交互场景供每一组内成员呈现。

9.一种虚拟现实设备，其特征在于，包括：

建组模块，用于在作为交互发起者时向后台的沉浸式交互设备发起建组连接请求；

组链接接收模块，用于接收所述沉浸式交互设备根据所述建组连接请求返回的组链接地址；

组链接发送模块，用于将所述组链接地址发送至其他组内成员，以供所述其他组内成员向所述沉浸式交互设备请求加入对应的交互组；

加入模块，用于在作为所述其他组内成员时接收所述交互发起者发送的组链接地址，并根据所述组链接地址向所述沉浸式交互设备发送加入对应交互组的加入连接请求；

场景信息提供模块，用于提供进行交互的背景场景信息供所述沉浸式交互设备获取对应的背景场景；以及，

呈现处理模块，用于呈现所述沉浸式交互设备提供的交互场景进行沉浸式交互，其中，所述沉浸式交互设备将与所述交互组中每一组内成员一一对应的模拟人物添加至所述背景场景中生成所述交互场景。

10.一种沉浸式交互系统，其特征在于，包括根据权要求8所述的沉浸式交互设备、一套根据权利要求9所述的虚拟现实设备作为交互发起者、及至少一套根据权利要求9所述的虚拟现实设备作为其他组内成员。