CN115396688A - 一种基于虚拟场景的多人互动网络直播方法及系统 - Google Patents

Abstract

本发明提供了一种基于虚拟场景的多人互动网络直播方法及系统，其方法包括：构建基于直播设备的虚拟场景；确定每个观看设备的默认观看位置，并从虚拟场景中获取与默认观看位置匹配的第一虚拟位置；记录每个观看设备的观看位置移动轨迹，并按照观看位置移动轨迹向对应观看设备匹配相应的虚拟观看轨迹；当捕捉到当下时刻存在对应观看用户的直播互动请求时，按照直播互动请求确定需要渲染模式以及相应的语音对象、视频对象；基于需要渲染模式对语音对象在虚拟观看轨迹中的语音轨道进行第一渲染以及对视频对象在虚拟观轨迹中的视频轨道进行第二渲染，实现多人互动网络直播。满足用户交互体验，为实现多人互动网络直播提供有效基础。

Description

一种基于虚拟场景的多人互动网络直播方法及系统

技术领域

本发明涉及网络交互技术领域，特别涉及一种基于虚拟场景的多人互动网络直播方法及系统。

背景技术

常见的网络交互平台上，比如，抖音、快手等平台上，一般是用户直播间通过聊天的方式、送礼物的方式又或者是语音接入的方式来实现用户与直播之间的交互，且常见的多人交互是语音或者视频交互，该方式并不能满足用户的互动体验；

而虚拟场景可以让交互的用户能够在不同的位置来采用不同的方式实现直播交互。

因此，本发明提出一种基于虚拟场景的多人互动网络直播方法及系统。

发明内容

本发明提供一种基于虚拟场景的多人互动网络直播方法及系统，用以通过记录不同观看设备的虚拟观看轨迹以及确定不同请求中的语音对象以及视频对象的轨道进行渲染，提高了直播互动效果，满足用户交互体验，为实现多人互动网络直播提供有效基础。

本发明提供一种基于虚拟场景的多人互动网络直播方法，包括：

步骤1：构建基于直播设备的虚拟场景；

步骤2：确定每个观看设备的默认观看位置，并从所述虚拟场景中获取与所述默认观看位置匹配的第一虚拟位置；

步骤3：记录每个观看设备的观看位置移动轨迹，并按照所述观看位置移动轨迹向对应观看设备匹配相应的虚拟观看轨迹；

步骤4：当捕捉到当下时刻存在对应观看用户的直播互动请求时，按照所述直播互动请求确定需要渲染模式以及相应的语音对象、视频对象；

步骤5：基于所述需要渲染模式对语音对象在虚拟观看轨迹中的语音轨道进行第一渲染以及对视频对象在虚拟观轨迹中的视频轨道进行第二渲染，实现多人互动网络直播。

优选的，构建基于直播设备的虚拟场景，包括：

确定直播设备中每个场景单元的单元位置分布；

按照单元位置分布，确定每个场景单元的渲染场景；

确定相邻渲染场景之间的场景缝隙，当所述场景缝隙贴合时，判定不需要对所述相邻渲染场景进行优化；

否则，确定所述相邻场景中第一场景的第一覆盖角度以及第二场景的第二覆盖角度，并确定所述第一场景的第一可调整角度以及第二场景的第二可调整角度；

当所述第一可调整角度以及第二可调整角度都为0时，获取与所述场景缝隙连接的第一场景中的第一边缘画面以及获取与所述场景缝隙连接的第二场景中的第二边缘画面；

构建基于所述第一边缘画面以及第二边缘画面的第一过渡画面，并将所述第一过渡画面存储在新增设的第一场景单元中；

当所述第一可调整角度为0以及第二可调整角度不为0时，对第二场景进行角度扩大调整，若角度调整后不存在场景缝隙，此时，保持调整后的第二场景不变；

若角度调整后仍存在新的场景缝隙，此时，按照所述新的场景缝隙与预设场景缝隙的第一比值，确定是否需要进行过渡场景的获取；

当所述第一比值小于预设比值时，从所述第一场景与角度扩大调整后的第二场景中获取边缘颜色，并将中间颜色作为对场景缝隙的填充；

当所述第一比值大于或等于预设比值时，获取第二过渡画面，将所述第二过渡画面存储在新增设的第二场景单元中；

基于对场景的调整结构，构建得到虚拟场景。

优选的，构建基于所述第一边缘画面以及第二边缘画面的第一过渡画面，包括：

构建所述第一边缘画面的第一画面矩阵，同时，构建所述第二边缘画面的第二画面矩阵；

提取所述第一画面矩阵的最后一列向量以及所述第二画面矩阵中的第一列向量；

将所述最后一列向量与第一列向量中的同个行位置元素进行匹配，分别获取每个匹配组合中两个元素的像素差；

当所述像素差为0时，则将对应匹配组合中的过渡线条按照对应两个元素的像素值进行渲染；

当所述像素差不为0时，判断所述像素差是否在取均值渲染范围内，若在，获取对应匹配组合中两个元素的像素均值对对应过渡线条进行渲染；

若所述像素差不在取均值渲染范围内，提取对应匹配对中第一元素的行向量以及第二元素的行向量，并基于向量分析模型对两个行向量进行过渡分析，获取得到渲染像素值，并按照所述渲染像素值对对应过渡线条进行渲染；

基于渲染结果，获取得到初始画面；

对所述初始画面进行像素平滑处理，构建得到过渡画面。

优选的，确定每个观看设备的默认观看位置，并从所述虚拟场景中获取与所述默认观看位置匹配的第一虚拟位置，包括：

捕捉所述观看设备是否进入虚拟场景，若进入，将进入时刻对应的位置视为默认观看位置；

建立所述默认观看位置与所述虚拟场景中每个虚拟位置的位置联系，并获取得到与所述默认观看位置匹配的第一虚拟位置。

优选的，记录每个观看设备的观看位置移动轨迹，并按照所述观看位置移动轨迹向对应观看设备匹配相应的虚拟观看轨迹，包括：

基于位移传感器记录对应观看设备的观看位置移动轨迹；

基于观看设备与虚拟场景的观看映射关系，获取与所述观看位置移动轨迹一致的虚拟观看轨迹。

优选的，当捕捉到当下时刻存在对应观看用户的直播互动请求时，按照所述直播互动请求确定需要渲染模式以及相应的语音对象、视频对象，包括：

确定当下时刻存在的直播互动请求的请求数量；

当所述请求数量超过直播连接数量上限时，对与直播互动请求匹配的观看设备的用户账号的信息浏览记录进行爬取；

按照爬取结果，确定对应用户账号的账号习惯；

根据所述账号习惯确定与对应直播内容的紧密程度；

将所述紧密程度从大到小排序，从所有直播互动请求中筛选与直播连接数量上限一致的观看设备进行连接；

对每个连接观看设备的直播互动请求进行请求解析，并从结果-模式数据库中，确定与请求解析结果匹配的需要渲染模式；

同时，对每个连接观看设备的直播互动请求进行请求拆分，并从拆分-对象数据库中，确定与每个拆分请求匹配的请求对象；

确定所述需要渲染模式的渲染条件，并将渲染条件与请求对象进行一一匹配，向每个请求对象匹配对应的渲染内容；

其中，所述请求对象包括：语音对象以及视频对象。

优选的，基于所述需要渲染模式对语音对象在虚拟观看轨迹中的语音轨道进行第一渲染，包括：

确定每个语音对象对应的语音渲染内容；

基于语音对象预测模型，预测每个语音对象基于虚拟场景的第一出现时刻以及语音轨道；

按照对应语音对象的语音渲染内容确定第一渲染线程，并在所述第一渲染线程上设置第一出现时刻的触发点；

捕捉按照对应渲染线程在匹配的语音轨道上进行实时渲染的实际渲染结果，且与预设渲染结果进行比较，确定第一渲染差异；

基于所述第一渲染差异优化所述语音轨道。

优选的，对视频对象在虚拟观轨迹中的视频轨道进行第二渲染，包括：

确定每个视频对象对应的视频渲染内容；

基于视频对象预测模型，预测每个视频对象基于虚拟场景的第二出现时刻以及视频轨道；

按照对应视频对象的视频渲染内容确定第二渲染线程，并在所述第二渲染线程上设置第二出现时刻的触发点；

捕捉按照对应渲染线程在匹配的视频轨道上进行实时渲染的实际渲染结果，且与预设渲染结果进行比较，确定第二渲染差异；

基于所述第二渲染差异优化所述视频轨道。

优选的，根据所述账号习惯确定与对应直播内容的紧密程度，包括：

根据直播标签以及直播内容的内容信息，得到直播偏向；

根据所述账号习惯，确定对应观看设备的习惯偏向；

确定每个习惯偏向与所有直播偏向的第一紧密因子集合；

其中，

表示第i个习惯偏向

的第一紧密因子集合；

表示第i个习惯偏向

与第j个直播偏向

的相似度；sim表示相似度符号；m1表示直播偏向的总个数；

根据所有第一紧密因子集合，计算紧密程度Y；

其中，

表示第i个习惯偏向

与所有直播偏向

的最大相似度；

表示第i个习惯偏向

的偏向权重,n1表示对应习惯偏向的个数。

本发明提供一种基于虚拟场景的多人互动网络直播系统，包括：

场景构建模块，用于构建基于直播设备的虚拟场景；

位置确定模块，用于确定每个观看设备的默认观看位置，并从所述虚拟场景中获取与所述默认观看位置匹配的第一虚拟位置；

轨迹确定模块，用于记录每个观看设备的观看位置移动轨迹，并按照所述观看位置移动轨迹向对应观看设备匹配相应的虚拟观看轨迹；

对象确定模块，用于当捕捉到当下时刻存在对应观看用户的直播互动请求时，按照所述直播互动请求确定需要渲染模式以及相应的语音对象、视频对象；

渲染模块，用于基于所述需要渲染模式对语音对象在虚拟观看轨迹中的语音轨道进行第一渲染以及对视频对象在虚拟观轨迹中的视频轨道进行第二渲染，实现多人互动网络直播。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。

附图说明

附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：

图1为本发明实施例中一种基于虚拟场景的多人互动网络直播方法的流程图；

图2为本发明实施例中一种基于虚拟场景的多人互动网络直播系统的结构图。

具体实施方式

以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。

本发明提供一种基于虚拟场景的多人互动网络直播方法，如图1所示，包括：

步骤1：构建基于直播设备的虚拟场景；

步骤2：确定每个观看设备的默认观看位置，并从所述虚拟场景中获取与所述默认观看位置匹配的第一虚拟位置；

步骤3：记录每个观看设备的观看位置移动轨迹，并按照所述观看位置移动轨迹向对应观看设备匹配相应的虚拟观看轨迹；

步骤4：当捕捉到当下时刻存在对应观看用户的直播互动请求时，按照所述直播互动请求确定需要渲染模式以及相应的语音对象、视频对象；

步骤5：基于所述需要渲染模式对语音对象在虚拟观看轨迹中的语音轨道进行第一渲染以及对视频对象在虚拟观轨迹中的视频轨道进行第二渲染，实现多人互动网络直播。

该实施例中，虚拟场景是基于计算机仿真系统实现的，且该方法中虚拟场景是基于对直播进行模拟创造的交互场景。

该实施例中，默认观看位置指的是观看用户进入该直播间时，观看设备进入直播间那个时刻的位置即为默认观看位置，且在默认观看位置对应的观看设备所看到的内容为指定的虚拟场景中a位置的内容，那么以a位置作为对应的第一虚拟位置，且在移动观看设备的过程中所观看到的虚拟内容也是不一样的，因此，可以匹配得到相关的虚拟观看轨迹。

该实施例中，在观看直播的过程中，如果基于观看设备向发送直播互动请求，此时，就需要通过对请求进行拆分以及解析，来确定对应的语音对象、视频对象和需要渲染模式。

该实施例中，需要渲染模式是基于与解析结果相关的数据库匹配得到的，且该数据库是包括解析结果以及与解析结果匹配的渲染模式在内的，因此，可以确定出对应的渲染模式，且该渲染模式是针对语音对象以及视频对象的渲染，主要是为了满足用户的体验效果。

该实施例中，语音对象指的是在交互过程中，不同时刻的语音段采用不同的音色输出等都可以视为对应的渲染，视频对象指的是交互过程中不同时刻的是频段采用不同的玄幻方式进行播出，此也可视为对应的渲染。

该实施例中，语音渲染主要集中音色、音调、配音等方面，比如，视频中出现某个固定动作，那么就可以针对该固定动作来匹配发出相关的配音提醒等。

该实施例中，视频渲染主要集中在特效等方面，比如，视频中某个固定动作的出现，会进行放大播放处理，或者重复播放处理等。

该实施例中，语音轨道指的是可以实现对应语音对象进行有效渲染的轨道，且视频轨道指的是可以实现对应视频对象进行有效渲染的轨道。

上述技术方案的有益效果是：通过记录不同观看设备的虚拟观看轨迹以及确定不同请求中的语音对象以及视频对象的轨道进行渲染，提高了直播互动效果，满足用户交互体验，为实现多人互动网络直播提供有效基础。

本发明提供一种基于虚拟场景的多人互动网络直播方法，构建基于直播设备的虚拟场景，包括：

确定直播设备中每个场景单元的单元位置分布；

按照单元位置分布，确定每个场景单元的渲染场景；

确定相邻渲染场景之间的场景缝隙，当所述场景缝隙贴合时，判定不需要对所述相邻渲染场景进行优化；

否则，确定所述相邻场景中第一场景的第一覆盖角度以及第二场景的第二覆盖角度，并确定所述第一场景的第一可调整角度以及第二场景的第二可调整角度；

当所述第一可调整角度以及第二可调整角度都为0时，获取与所述场景缝隙连接的第一场景中的第一边缘画面以及获取与所述场景缝隙连接的第二场景中的第二边缘画面；

构建基于所述第一边缘画面以及第二边缘画面的第一过渡画面，并将所述第一过渡画面存储在新增设的第一场景单元中；

当所述第一可调整角度为0以及第二可调整角度不为0时，对第二场景进行角度扩大调整，若角度调整后不存在场景缝隙，此时，保持调整后的第二场景不变；

若角度调整后仍存在新的场景缝隙，此时，按照所述新的场景缝隙与预设场景缝隙的第一比值，确定是否需要进行过渡场景的获取；

当所述第一比值小于预设比值时，从所述第一场景与角度扩大调整后的第二场景中获取边缘颜色，并将中间颜色作为对场景缝隙的填充；

当所述第一比值大于或等于预设比值时，获取第二过渡画面，将所述第二过渡画面存储在新增设的第二场景单元中；

基于对场景的调整结构，构建得到虚拟场景。

该实施例中，场景单元是设备中硬件的一部分，且在构建虚拟场景的过程中是基于不同单元的单元位置分布来构建得到的。

该实施例中，渲染场景是每个场景单元就预先设置好的，比如，场景单元1是针对区域1的内容进行拍摄，并拍摄所存储的内容进行场景渲染，进而来得到对应直播的一部分，所以，将所有场景单元的渲染场景结合起来可以得到对应的虚拟场景，且该虚拟场景在构建的过程中，由于每个场景单元覆盖的范围可能是不衔接的，因此，来对相邻渲染场景的场景缝隙进行分析。

该实施例中，在对场景缝隙进行分析的过程中，如果贴合也就是相邻渲染场景之间不存在缝隙，此时，就不需要对相邻渲染场景进行优化。

该实施例中，如果相邻渲染场景之间存在缝隙，那么就需要对两个场景的覆盖角度以及调整角度进行分析，来对中间的过渡画面进行确定，在确定可调整角度的过程中，需要判断对应覆盖角度是否为最大覆盖角度，如果是，则判定可调整角度为0。

该实施例中，比如，单元1与单元2为相邻设置，第一场景为单元1确定的，第二场景为单元2确定的，且第一边缘画面为场景中的最后5列像素对应的画面，第二边缘画面为场景中的前5列像素对应的画面，那么第一过渡画面就可以是基于画面确定模块确定得到的，且画面确定模块是基于不同的列像素的组合以及两者之间的过渡画面为样本训练得到的，因此，可以得到第一过渡画面，且新增设的第一场景单元是设置在单元1和单元2之间的，为了对缝隙进行填充。

该实施例中，对于一个可调整角度为0，一个可调整角度不为0的情况进行分析，来对仍需要调整的缝隙与预设缝隙的比值的确定，来确定是否需要获取过渡场景，也就是对缝隙进行填充的场景。

该实施例中，预设比值是预先设置好的，边缘颜色指的是第一场景中的最后一列像素点的颜色以及第二场景中第一列像素点的颜色，进而通过两者像素值来取均值，得到中间颜色，实现对缝隙的填充。

该实施例中，第二过渡画面指的是基于与获取第一过渡画面的方式类似，实现填充。

上述技术方案的有益效果是：通过确定相邻渲染场景之间的场景缝隙，来对缝隙进行分析，且通过对可调整角度的确定，来采用不同的方式对缝隙进行填充，实现对场景的合理渲染，为后续进行直播交互提供有效基础。

本发明提供一种基于虚拟场景的多人互动网络直播方法，构建基于所述第一边缘画面以及第二边缘画面的第一过渡画面，包括：

构建所述第一边缘画面的第一画面矩阵，同时，构建所述第二边缘画面的第二画面矩阵；

提取所述第一画面矩阵的最后一列向量以及所述第二画面矩阵中的第一列向量；

将所述最后一列向量与第一列向量中的同个行位置元素进行匹配，分别获取每个匹配组合中两个元素的像素差；

当所述像素差为0时，则将对应匹配组合中的过渡线条按照对应两个元素的像素值进行渲染；

当所述像素差不为0时，判断所述像素差是否在取均值渲染范围内，若在，获取对应匹配组合中两个元素的像素均值对对应过渡线条进行渲染；

若所述像素差不在取均值渲染范围内，提取对应匹配对中第一元素的行向量以及第二元素的行向量，并基于向量分析模型对两个行向量进行过渡分析，获取得到渲染像素值，并按照所述渲染像素值对对应过渡线条进行渲染；

基于渲染结果，获取得到初始画面；

对所述初始画面进行像素平滑处理，构建得到过渡画面。

该实施例中，第一画面矩阵比如是最后5列元素对应的得到的，第二画面矩阵比如是前5列元素对应得到的。

该实施例中，最后一列向量指的是第一画面矩阵中的最后一列，第一列向量指的是第二画面矩阵中的首列，其中，位置匹配值的是最后一列向量与第一列向量之间的同个位置的元素构成的，最后一列向量与第一列向量包含的行元素个数是一样的，所以，同个行位置对应的元素即可构成匹配组合。

该实施例中，像素差指的是两个元素之间的像素差，且过渡线条指的是匹配组合中元素1的位置到元素2的位置连线，对该连线进行渲染。

该实施例中，取均值渲染范围是预先设定好的，比如是在[0,25]，主要是为了确定差值是否过大，以此，来确定采用何种方式渲染合适。

该实施例中，行向量指的是对应画面矩阵中的行向量。

该实施例中，向量分析模型是预先训练好的，且是基于不同的向量组合以及向量对应的像素值、且针对不同的向量组合匹配得渲染向量为样本训练得到的，因此，可以得到渲染像素值，进而得到初始画面。

该实施例中，像素平滑处理主要指的是对每个连接线的像素值进行处理，让其像素值较为接近。

上述技术方案的有益效果是：通过构建矩阵，并分别对不同的列向量进行提取及匹配，来采用不同像素差对应的方式实现对过渡线条的合理渲染，保证过渡画面的合理性，为后续进行场景渲染以及直播交互提供有效基础。

本发明提供一种基于虚拟场景的多人互动网络直播方法，确定每个观看设备的默认观看位置，并从所述虚拟场景中获取与所述默认观看位置匹配的第一虚拟位置，包括：

捕捉所述观看设备是否进入虚拟场景，若进入，将进入时刻对应的位置视为默认观看位置；

建立所述默认观看位置与所述虚拟场景中每个虚拟位置的位置联系，并获取得到与所述默认观看位置匹配的第一虚拟位置。

上述技术方案的有益效果是：通过确定默认观看位置与第一虚拟位置，便于为观看设备匹配渲染轨道提供有效基础，间接提高虚拟体验效果。

本发明提供一种基于虚拟场景的多人互动网络直播方法，记录每个观看设备的观看位置移动轨迹，并按照所述观看位置移动轨迹向对应观看设备匹配相应的虚拟观看轨迹，包括：

基于位移传感器记录对应观看设备的观看位置移动轨迹；

基于观看设备与虚拟场景的观看映射关系，获取与所述观看位置移动轨迹一致的虚拟观看轨迹。

上述技术方案的有益效果是：通过获取虚拟观看轨迹，便于对轨道进行合理渲染，提高虚拟体验效果。

本发明提供一种基于虚拟场景的多人互动网络直播方法，当捕捉到当下时刻存在对应观看用户的直播互动请求时，按照所述直播互动请求确定需要渲染模式以及相应的语音对象、视频对象，包括：

确定当下时刻存在的直播互动请求的请求数量；

当所述请求数量超过直播连接数量上限时，对与直播互动请求匹配的观看设备的用户账号的信息浏览记录进行爬取；

按照爬取结果，确定对应用户账号的账号习惯；

根据所述账号习惯确定与对应直播内容的紧密程度；

将所述紧密程度从大到小排序，从所有直播互动请求中筛选与直播连接数量上限一致的观看设备进行连接；

对每个连接观看设备的直播互动请求进行请求解析，并从结果-模式数据库中，确定与请求解析结果匹配的需要渲染模式；

同时，对每个连接观看设备的直播互动请求进行请求拆分，并从拆分-对象数据库中，确定与每个拆分请求匹配的请求对象；

确定所述需要渲染模式的渲染条件，并将渲染条件与请求对象进行一一匹配，向每个请求对象匹配对应的渲染内容；

其中，所述请求对象包括：语音对象以及视频对象。

该实施例中，同个时刻下存在的接入数量是可以统计在内的，因此，在统计到请求数量之后，可以与直播连接数量上限进行比较，以此，来筛选哪些请求可以连接成功。

该实施例中，通过对浏览记录爬取来确定账号习惯，进而确定是否与直播内容匹配，进而实现对账号的筛选。

该实施例中，结果-模式数据库是包括不同的解析结果以及与解析结果匹配的渲染模式在内的。

该实施例中，拆分-对象数据库是包括不同的拆分结果以及与拆分结果匹配的对象在内的。

该实施例中，渲染条件与请求对象的匹配，主要是为了可以对请求对象进行渲染，来保证虚拟渲染的可靠性。

该实施例中，语音对象可以是不同的语音段、针对不同动作行为所匹配的语音信号等，视频对象可以是不同的直播内容图像等。

上述技术方案的有益效果是：通过确定请求数量并与上限进行比较，可以有效的根据账号习惯以及紧密程度来对请求进行筛选，且通过获取渲染模式以及请求对象，可以有效的实现对对象的渲染，提高虚拟体验。

本发明提供一种基于虚拟场景的多人互动网络直播方法，基于所述需要渲染模式对语音对象在虚拟观看轨迹中的语音轨道进行第一渲染，包括：

确定每个语音对象对应的语音渲染内容；

基于语音对象预测模型，预测每个语音对象基于虚拟场景的第一出现时刻以及语音轨道；

按照对应语音对象的语音渲染内容确定第一渲染线程，并在所述第一渲染线程上设置第一出现时刻的触发点；

捕捉按照对应渲染线程在匹配的语音轨道上进行实时渲染的实际渲染结果，且与预设渲染结果进行比较，确定第一渲染差异；

基于所述第一渲染差异优化所述语音轨道。

该实施例中，语音对象预测模型是预先训练好的，是基于不同的语音对象以及在不同语音轨道的出现时刻为样本训练得到的。

该实施例中，语音渲染内容就是为了对某些特定行为的语音渲染、对某些语音段的渲染等。

该实施例中，第一渲染线程指的是对语音渲染的方式，按照该方式一步一步实现渲染。

该实施例中，第一渲染差异是实际与标准的差异，便于实现对轨道的优化。

上述技术方案的有益效果是：通过确定语音渲染内容，并根据模型进行预测，可以有效确定处渲染差异，实现对轨道的优化，保证虚拟的真实性。

本发明提供一种基于虚拟场景的多人互动网络直播方法，对视频对象在虚拟观轨迹中的视频轨道进行第二渲染，包括：

确定每个视频对象对应的视频渲染内容；

基于视频对象预测模型，预测每个视频对象基于虚拟场景的第二出现时刻以及视频轨道；

按照对应视频对象的视频渲染内容确定第二渲染线程，并在所述第二渲染线程上设置第二出现时刻的触发点；

捕捉按照对应渲染线程在匹配的视频轨道上进行实时渲染的实际渲染结果，且与预设渲染结果进行比较，确定第二渲染差异；

基于所述第二渲染差异优化所述视频轨道。

该实施例中，视频对象预测模型是预先训练好的，是基于不同的视频对象以及在不同视频轨道的出现时刻为样本训练得到的。

该实施例中，视频渲染内容就是为了对某些特定行为的视频渲染、对某些视频段的渲染等。

该实施例中，第二渲染线程指的是对视频渲染的方式，按照该方式一步一步实现渲染。

该实施例中，第二渲染差异是实际与标准的差异，便于实现对轨道的优化。

上述技术方案的有益效果是：通过确定视频渲染内容，并根据模型进行预测，可以有效确定处渲染差异，实现对轨道的优化，保证虚拟的真实性。

本发明提供一种基于虚拟场景的多人互动网络直播方法，根据所述账号习惯确定与对应直播内容的紧密程度，包括：

根据直播标签以及直播内容的内容信息，得到直播偏向；

根据所述账号习惯，确定对应观看设备的习惯偏向；

确定每个习惯偏向与所有直播偏向的第一紧密因子集合；

其中，

表示第i个习惯偏向

的第一紧密因子集合；

表示第i个习惯偏向

与第j个直播偏向

的相似度；sim表示相似度符号；m1表示直播偏向的总个数；

根据所有第一紧密因子集合，计算紧密程度Y；

其中，

表示第i个习惯偏向

与所有直播偏向

的最大相似度；

表示第i个习惯偏向

的偏向权重,n1表示对应习惯偏向的个数。

该实施例中，直播偏向指的是直播类型，比如，娱乐、卖货、卖货类型等。

上述技术方案的有益效果是：基于习惯偏向确定紧密因子集合，并计算得到紧密程度，为后续确定请求提供有效筛选基础。

本发明提供一种基于虚拟场景的多人互动网络直播系统，如图2所示，包括：

场景构建模块，用于构建基于直播设备的虚拟场景；

位置确定模块，用于确定每个观看设备的默认观看位置，并从所述虚拟场景中获取与所述默认观看位置匹配的第一虚拟位置；

轨迹确定模块，用于记录每个观看设备的观看位置移动轨迹，并按照所述观看位置移动轨迹向对应观看设备匹配相应的虚拟观看轨迹；

对象确定模块，用于当捕捉到当下时刻存在对应观看用户的直播互动请求时，按照所述直播互动请求确定需要渲染模式以及相应的语音对象、视频对象；

渲染模块，用于基于所述需要渲染模式对语音对象在虚拟观看轨迹中的语音轨道进行第一渲染以及对视频对象在虚拟观轨迹中的视频轨道进行第二渲染，实现多人互动网络直播。

上述技术方案的有益效果是：通过记录不同观看设备的虚拟观看轨迹以及确定不同请求中的语音对象以及视频对象的轨道进行渲染，提高了直播互动效果，满足用户交互体验，为实现多人互动网络直播提供有效基础。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种基于虚拟场景的多人互动网络直播方法，其特征在于，包括：

步骤1：构建基于直播设备的虚拟场景；

步骤2：确定每个观看设备的默认观看位置，并从所述虚拟场景中获取与所述默认观看位置匹配的第一虚拟位置；

步骤3：记录每个观看设备的观看位置移动轨迹，并按照所述观看位置移动轨迹向对应观看设备匹配相应的虚拟观看轨迹；

步骤4：当捕捉到当下时刻存在对应观看用户的直播互动请求时，按照所述直播互动请求确定需要渲染模式以及相应的语音对象、视频对象；

步骤5：基于所述需要渲染模式对语音对象在虚拟观看轨迹中的语音轨道进行第一渲染以及对视频对象在虚拟观轨迹中的视频轨道进行第二渲染，实现多人互动网络直播。

2.如权利要求1所述的基于虚拟场景的多人互动网络直播方法，其特征在于，构建基于直播设备的虚拟场景，包括：

确定直播设备中每个场景单元的单元位置分布；

按照单元位置分布，确定每个场景单元的渲染场景；

确定相邻渲染场景之间的场景缝隙，当所述场景缝隙贴合时，判定不需要对所述相邻渲染场景进行优化；

否则，确定所述相邻场景中第一场景的第一覆盖角度以及第二场景的第二覆盖角度，并确定所述第一场景的第一可调整角度以及第二场景的第二可调整角度；

当所述第一可调整角度以及第二可调整角度都为0时，获取与所述场景缝隙连接的第一场景中的第一边缘画面以及获取与所述场景缝隙连接的第二场景中的第二边缘画面；

构建基于所述第一边缘画面以及第二边缘画面的第一过渡画面，并将所述第一过渡画面存储在新增设的第一场景单元中；

当所述第一可调整角度为0以及第二可调整角度不为0时，对第二场景进行角度扩大调整，若角度调整后不存在场景缝隙，此时，保持调整后的第二场景不变；

若角度调整后仍存在新的场景缝隙，此时，按照所述新的场景缝隙与预设场景缝隙的第一比值，确定是否需要进行过渡场景的获取；

当所述第一比值小于预设比值时，从所述第一场景与角度扩大调整后的第二场景中获取边缘颜色，并将中间颜色作为对场景缝隙的填充；

当所述第一比值大于或等于预设比值时，获取第二过渡画面，将所述第二过渡画面存储在新增设的第二场景单元中；

基于对场景的调整结构，构建得到虚拟场景。

3.如权利要求2所述的基于虚拟场景的多人互动网络直播方法，其特征在于，构建基于所述第一边缘画面以及第二边缘画面的第一过渡画面，包括：

构建所述第一边缘画面的第一画面矩阵，同时，构建所述第二边缘画面的第二画面矩阵；

提取所述第一画面矩阵的最后一列向量以及所述第二画面矩阵中的第一列向量；

将所述最后一列向量与第一列向量中的同个行位置元素进行匹配，分别获取每个匹配组合中两个元素的像素差；

当所述像素差为0时，则将对应匹配组合中的过渡线条按照对应两个元素的像素值进行渲染；

当所述像素差不为0时，判断所述像素差是否在取均值渲染范围内，若在，获取对应匹配组合中两个元素的像素均值对对应过渡线条进行渲染；

若所述像素差不在取均值渲染范围内，提取对应匹配对中第一元素的行向量以及第二元素的行向量，并基于向量分析模型对两个行向量进行过渡分析，获取得到渲染像素值，并按照所述渲染像素值对对应过渡线条进行渲染；

基于渲染结果，获取得到初始画面；

对所述初始画面进行像素平滑处理，构建得到过渡画面。

4.如权利要求1所述的基于虚拟场景的多人互动网络直播方法，其特征在于，确定每个观看设备的默认观看位置，并从所述虚拟场景中获取与所述默认观看位置匹配的第一虚拟位置，包括：

捕捉所述观看设备是否进入虚拟场景，若进入，将进入时刻对应的位置视为默认观看位置；

建立所述默认观看位置与所述虚拟场景中每个虚拟位置的位置联系，并获取得到与所述默认观看位置匹配的第一虚拟位置。

5.如权利要求1所述的基于虚拟场景的多人互动网络直播方法，其特征在于，记录每个观看设备的观看位置移动轨迹，并按照所述观看位置移动轨迹向对应观看设备匹配相应的虚拟观看轨迹，包括：

基于位移传感器记录对应观看设备的观看位置移动轨迹；

基于观看设备与虚拟场景的观看映射关系，获取与所述观看位置移动轨迹一致的虚拟观看轨迹。

6.如权利要求1所述的基于虚拟场景的多人互动网络直播方法，其特征在于，当捕捉到当下时刻存在对应观看用户的直播互动请求时，按照所述直播互动请求确定需要渲染模式以及相应的语音对象、视频对象，包括：

确定当下时刻存在的直播互动请求的请求数量；

当所述请求数量超过直播连接数量上限时，对与直播互动请求匹配的观看设备的用户账号的信息浏览记录进行爬取；

按照爬取结果，确定对应用户账号的账号习惯；

根据所述账号习惯确定与对应直播内容的紧密程度；

将所述紧密程度从大到小排序，从所有直播互动请求中筛选与直播连接数量上限一致的观看设备进行连接；

对每个连接观看设备的直播互动请求进行请求解析，并从结果-模式数据库中，确定与请求解析结果匹配的需要渲染模式；

同时，对每个连接观看设备的直播互动请求进行请求拆分，并从拆分-对象数据库中，确定与每个拆分请求匹配的请求对象；

确定所述需要渲染模式的渲染条件，并将渲染条件与请求对象进行一一匹配，向每个请求对象匹配对应的渲染内容；

其中，所述请求对象包括：语音对象以及视频对象。

7.如权利要求1所述的基于虚拟场景的多人互动网络直播方法，其特征在于，基于所述需要渲染模式对语音对象在虚拟观看轨迹中的语音轨道进行第一渲染，包括：

确定每个语音对象对应的语音渲染内容；

基于语音对象预测模型，预测每个语音对象基于虚拟场景的第一出现时刻以及语音轨道；

按照对应语音对象的语音渲染内容确定第一渲染线程，并在所述第一渲染线程上设置第一出现时刻的触发点；

捕捉按照对应渲染线程在匹配的语音轨道上进行实时渲染的实际渲染结果，且与预设渲染结果进行比较，确定第一渲染差异；

基于所述第一渲染差异优化所述语音轨道。

8.如权利要求1所述的基于虚拟场景的多人互动网络直播方法，其特征在于，对视频对象在虚拟观轨迹中的视频轨道进行第二渲染，包括：

确定每个视频对象对应的视频渲染内容；

基于视频对象预测模型，预测每个视频对象基于虚拟场景的第二出现时刻以及视频轨道；

按照对应视频对象的视频渲染内容确定第二渲染线程，并在所述第二渲染线程上设置第二出现时刻的触发点；

捕捉按照对应渲染线程在匹配的视频轨道上进行实时渲染的实际渲染结果，且与预设渲染结果进行比较，确定第二渲染差异；

基于所述第二渲染差异优化所述视频轨道。

9.如权利要求6所述的基于虚拟场景的多人互动网络直播方法，其特征在于，根据所述账号习惯确定与对应直播内容的紧密程度，包括：

根据直播标签以及直播内容的内容信息，得到直播偏向；

根据所述账号习惯，确定对应观看设备的习惯偏向；

确定每个习惯偏向与所有直播偏向的第一紧密因子集合；

其中，

表示第i个习惯偏向

的第一紧密因子集合；

表示第i个习惯偏向

与第j个直播偏向

的相似度；sim表示相似度符号；m1表示直播偏向的总个数；

根据所有第一紧密因子集合，计算紧密程度Y；

其中，

表示第i个习惯偏向

与所有直播偏向

的最大相似度；

表示第i个习惯偏向

的偏向权重,n1表示对应习惯偏向的个数。

10.一种基于虚拟场景的多人互动网络直播系统，其特征在于，包括：

场景构建模块，用于构建基于直播设备的虚拟场景；

位置确定模块，用于确定每个观看设备的默认观看位置，并从所述虚拟场景中获取与所述默认观看位置匹配的第一虚拟位置；

轨迹确定模块，用于记录每个观看设备的观看位置移动轨迹，并按照所述观看位置移动轨迹向对应观看设备匹配相应的虚拟观看轨迹；

对象确定模块，用于当捕捉到当下时刻存在对应观看用户的直播互动请求时，按照所述直播互动请求确定需要渲染模式以及相应的语音对象、视频对象；

渲染模块，用于基于所述需要渲染模式对语音对象在虚拟观看轨迹中的语音轨道进行第一渲染以及对视频对象在虚拟观轨迹中的视频轨道进行第二渲染，实现多人互动网络直播。

Images