CN112040270B - 一种直播方法、装置、设备和存储介质 - Google Patents

Abstract

本发明公开了一种直播方法、装置、设备和存储介质。该方法包括：接收第一客户端发送的第一操作；响应于第一操作，创建直播间，直播间中登入有第二客户端；接收第一客户端发送的第二操作；响应于第二操作，确定业务服务器；接收业务服务器发送的目标直播视频数据，目标直播视频数据包括第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，第一虚拟对象用于表示第一客户端采集的主播动作数据，第二虚拟对象用于表示第二客户端产生的观众行为数据；将目标直播视频数据发送至第二客户端进行播放。该方法解决了不同主播客户端对于特效的需求不一致，导致直播平台开发的特效数量多、使用少的问题。

Description

一种直播方法、装置、设备和存储介质

技术领域

本发明实施例涉及直播的技术，尤其涉及一种直播方法、装置、设备和存储介质。

背景技术

随着互联网的快速发展，以及人们对于视频需求量的增长，基于视频应用产生的网络流量已经占到互联网总流量的大部分。

目前，主播端上传视频直播数据到直播服务器，直播服务器再按照观众需求，提供对应的直播数据到观众端。

为了丰富主播直播的内容，主播可以选择直播服务器提供的一些特效进行加载。当选择加载的特效多时，由于生成特效的功能组件都集中在同一个直播服务器中，这会导致该直播服务器的耦合高，负载高。负载高的直播服务器会影响特效的生成效果，导致直播间出现残缺的特效或者不出现特效。

发明内容

本发明实施例提供一种直播方法、装置、设备和存储介质，以解决不同主播客户端对于特效的需求不一致，导致直播平台开发的特效数量多、使用少的问题。

第一方面，本发明实施例提供了、一种直播方法，其特征在于，应用于直播服务器，所述方法包括：

接收第一客户端发送的第一操作；

响应于所述第一操作，创建直播间，所述直播间中登入有第二客户端；

接收所述第一客户端发送的第二操作；

响应于所述第二操作，确定业务服务器；

接收所述业务服务器发送的目标直播视频数据，所述目标直播视频数据包括所述第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，所述第一虚拟对象用于表示所述第一客户端采集的主播动作数据，所述第二虚拟对象用于表示所述第二客户端产生的观众行为数据；

将所述目标直播视频数据发送至所述第二客户端进行播放。

第二方面，本发明实施例还提供了一种直播方法，其特征在于，应用于业务服务器，所述方法包括：

连接直播服务器，所述直播服务器用于为第一客户端创建直播间，所述直播间中登入有第二客户端；

接收所述第一客户端采集的原始视频数据；

接收所述第一客户端采集的主播动作数据，和/或，接收所述直播服务器发送的、所述第二客户端在所述直播间产生的观众行为数据；

生成目标直播视频数据，所述目标直播视频数据包括所述第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，所述第一虚拟对象用于表示所述主播动作数据，所述第二虚拟对象用于表示所述观众行为数据；

将所述目标直播视频数据发送至直播服务器，以发送至所述第二客户端进行播放。

第三方面，本发明实施例还提供了一种直播装置。该装置包括：第一操作接收模块，用于接收第一客户端发送的第一操作；

直播间创建模块，用于响应于所述第一操作，创建直播间，所述直播间中登入有第二客户端；

第二操作接收模块，用于接收所述第一客户端发送的第二操作；

业务服务器确定模块，用于响应于所述第二操作，确定业务服务器；

目标直播视频数据接收模块，用于接收所述业务服务器发送的目标直播视频数据，所述目标直播视频数据包括所述第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，所述第一虚拟对象用于表示所述第一客户端采集的主播动作数据，所述第二虚拟对象用于表示所述第二客户端产生的观众行为数据；

客户端发送模块，用于将所述目标直播视频数据发送至所述第二客户端进行播放。

第四方面，本发明实施例还提供了一种直播装置。该装置包括：

直播服务器连接模块，用于连接直播服务器，所述直播服务器用于为第一客户端创建直播间，所述直播间中登入有第二客户端；

原始视频数据采集模块，用于接收所述第一客户端采集的原始视频数据；

数据接收模块，用于接收所述第一客户端采集的主播动作数据，和/或，接收所述直播服务器发送的、所述第二客户端在所述直播间产生的观众行为数据；

目标直播视频数据生成模块，用于生成目标直播视频数据，所述目标直播视频数据包括所述第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，所述第一虚拟对象用于表示所述主播动作数据，所述第二虚拟对象用于表示所述观众行为数据；

直播服务器发送模块，用于将所述目标直播视频数据发送至直播服务器，以发送至所述第二客户端进行播放。

第五方面，本发明实施例还提供了一种电子设备，其特征在于，包括：

一个或多个处理器；

存储器，用于存储一个或多个程序；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如任一方面所述的一种直播方法。

第六方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如任一方面所述的一种直播方法。

本发明实施例提供了如下方法：接收第一客户端发送的第一操作；响应于第一操作，创建直播间，直播间中登入有第二客户端；接收第一客户端发送的第二操作；响应于第二操作，确定业务服务器；接收业务服务器发送的目标直播视频数据，目标直播视频数据包括第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，第一虚拟对象用于表示第一客户端采集的主播动作数据，第二虚拟对象用于表示第二客户端产生的观众行为数据；将目标直播视频数据发送至第二客户端进行播放。通过该方法将生成特效的功能组件分配到多个服务器上，降低了各个功能组件之间的耦合，也降低了直播服务器的负载。进一步的，提高了直播间加载的特效的稳定性，即使某一直播间加载大量特效，也可以保证直播间特效的完整和及时。

附图说明

图1为本发明实施例一提供的一种直播方法的流程图；

图2A为本发明实施例二提供的一种直播方法的流程图；

图2B为本发明实施例二提供的一种目标直播视频数据的画面；

图3为本发明实施例三提供的一种直播方法的流程图；

图4A为本发明实施例四提供的一种直播方法的流程图；

图4B为本发明实施例四提供的一种直播方法的示意图；

图5为本发明实施例五提供的一种直播装置；

图6为本发明实施例六提供的一种直播装置；

图7为本发明实施例七提供的一种电子设备的结构示意图。

具体实施方式

下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。

实施例一

图1为本发明实施例一提供的一种直播方法的流程图。本实施例适用于业务服务器获取直播服务器中部分数据，合成为目标直播视频数据后发回给直播服务器，以供直播服务器向观众客户端进行分发的场景。该方法应用于直播服务器中。该方法可以由一种直播方法的装置来执行，该装置可以由软件和/或硬件的方式实现。参考图1，该方法具体包括：

S101、接收第一客户端发送的第一操作。

客户端是为观众用户提供本地服务的程序。除了一些只在本地运行的应用程序之外，一般安装在普通的客户机上，需要与服务端互相配合运行。本实施例中的客户端可以安装在手机、平板电脑、计算机或任何一种可以配合服务器执行该方法的电子设备上。本实施例中的第一客户端与后文提到的第二客户端是针对用户身份做的区别。可以理解为第一客户端为主播用户使用账号登录的客户端，第二客户端为观众用户使用账号登录的客户端。

第一操作是第一客户端口向直播服务器发送的操作指令。可以是第一客户端向直播服务器发送请求直播页面数据和直播业务组件的信息，并且加载直播间的操作。

在一可行的实现方式中，第一客户端登陆后与直播服务器建立连接。第一客户端向直播服务器发送第一操作。

S102、响应于所述第一操作，创建直播间。

创建直播间从技术层面可以认为是指：为主播用户创建与之关联的直播间框架和基础的直播间业务界面，此时认为完成创建直播间的操作。

创建直播间从应用可以认为是指：直播服务器为主播用户创建了一个房间，主播用户可以在房间里面进行直播活动，观众用户可以通过访问该房间来观看主播的直播活动。

当直播页面数据均加载于第一客户端后，即完成了直播间的加载，但是直播间加载完成之后，不一定会直接进行渲染，一般情况下是需要调用所述直播业务组件加载与所述直播间适配的直播业务界面后，一起渲染至屏幕，主播用户可以获知渲染至屏幕的直播间的完整的直播业务界面。当然，与直播间关联的观众用户也可以获知渲染至屏幕的直播间的完整的直播业务界面。

在一可行的实现方式中，直播服务器响应第一客户端的第一操作，为第一客户端的主播用户创建直播间。根据第二客户端的观众用户的登入行为，确定直播间中登入的第二客户端对应的观众用户。

其中，登入行为可以是观众用户在直播平台主页中点击进入某一直播间、在直播平台主页中搜索某一直播间并点击进入该直播间或者通过链接直接进入某一直播间。

S103、接收所述第一客户端发送的第二操作。

第二操作是第一客户端在直播间中选择特殊效果的操作。

其中，特殊效果是由不同的业务服务器进行处理和渲染的。当第一客户端选择一种或多种特效后，可以确定该特效关联的业务服务器。

在一可行的实现方式中，当直播服务器响应第一操作创建直播间后，接收第一客户端针对直播间中特殊效果的选择而生成的第二操作。

S104、响应于所述第二操作，确定业务服务器。

业务服务器的数量可以为一个或者多个，同时，业务服务器是独立于直播服务器。业务服务器可以独立于直播平台，也可以是直播平台内的。一个业务服务器可以实现一种或多种特效。业务服务器实现不同的特效时需要从直播服务器获得的数据不同。

在一可行的实现方式中，根据第一客户端针对直播间中特殊效果的选择而生成的第二操作，确定该特殊效果对应的业务服务器。直播服务器与该业务服务器建立长连接。由于特殊效果需要通过业务服务器进行处理和渲染。因此业务服务器直接对第一客户端采集的原始直播视频数据结合第一客户端选择的特殊效果进行处理和渲染。

预先建立特效标识与业务服务器之间的映射关系，在确定第二操作的特效标识之后，通过这个映射关系去选择业务服务器。

S105、接收所述业务服务器发送的目标直播视频数据。

一方面，直播服务器通知第一客户端，第一客户端获知业务服务器的信息，如IP地址、端口等，然后第一客户端采集原始视频数据以及传感数据，发送至业务服务器。

另一方面，直播服务器通知业务服务器，第一客户端的信息，如主播ID等，使得业务服务器会去对该第一客户端做特效，以及，采集第二客户端的数据，发送给业务服务器。

业务服务器做特效，以及，将特效的之后的视频传给直播服务器。

目标直播视频数据包括所述第一客户端采集的原始直播视频数据，和通过业务服务器处理的特殊效果。

其中，特殊效果可以包括第一虚拟对象和第二虚拟对象。第一虚拟对象要求主播客户端安装有动作传感器，动作传感器采集主播用户动作后，将该动作映射到主播用户选择的虚拟形象上，以使得虚拟形象按照主播的动作进行行动。第二虚拟对象是主播用户选择的、用于对第二客户端产生的观众行为数据进行展示的虚拟对象。如可以对观众用户产生的弹幕信息进行整合展示、可以对观众用户的送行为进行整合展示、可以对特殊的观众用户进行入场特效的添加等。

在一可行的实现方式中，直播服务器接收业务服务器整合后的直播视频数据。

S106、将所述目标直播视频数据发送至所述第二客户端进行播放。

在一可行的实现方式中，直播服务器将目标直播视频数据分发到登入直播间的第二客户端，第二客户端接收该目标直播视频数据后，对该目标直播视频数据渲染至屏幕，以供观众用户观看。

本发明实施例提供了如下方法：接收第一客户端发送的第一操作；响应于第一操作，创建直播间，直播间中登入有第二客户端；接收第一客户端发送的第二操作；响应于第二操作，确定业务服务器；接收业务服务器发送的目标直播视频数据，目标直播视频数据包括第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，第一虚拟对象用于表示第一客户端采集的主播动作数据，第二虚拟对象用于表示第二客户端产生的观众行为数据；将目标直播视频数据发送至第二客户端进行播放。通过该方法实现了减少直播平台开发特效投入的人力成本，同时有提供了大量个性化的组件供主播客户端选择。

实施例二

图2A为本发明实施例二提供的一种直播方法的流程图。本实施例在实施例一的基础上进行了细化，详细描述了将观众行为数据发送至业务服务器的具体过程。参考图2A，包括：

S201、接收第一客户端发送的第一操作。

S202、响应于所述第一操作，创建直播间。直播间中登入有第二客户端。

S203、接收所述第一客户端发送的第二操作。

S204、响应于所述第二操作，确定业务服务器。

步骤S201-步骤S204可参考实施例一中的步骤S101-步骤S104的解释。

在一可行的实现方式中，主播用户所在的第一客户端连接直播服务器，发起第一操作。直播服务器响应该第一操作为该主播用户创建直播间，观众用户所在的第二客户端可以通过各种方式登入该直播间，以观看直播间进行的直播。主播用户所在的第一客户端选择一特殊效果添加到直播间中，直播服务器相应于该添加特殊效果的第二操作，确定该特殊效果对应的业务服务器。

S205、确定所述业务服务器订阅的行为类型。

确定业务服务器后，该业务服务器与直播服务器建立长连接。业务服务器根据主播用户选择的特殊效果的不同，需要从直播服务器中获取的数据也不一样。

为了节约网络资源，业务服务器并不需要直播服务器采集的所有可提供的数据，而是只需要部分数据。因此确定业务服务器所需的部分数据对应的行为类型。

在一可行的实现方式中，直播服务器确定与之建立长连接的业务服务器订阅的行为类型，即确定业务服务器需要直播服务器提供的数据的类型。

S206、采集所述第二客户端在所述直播间产生的、属于所述行为类型的观众行为数据。

直播服务器提供通用的订阅接口。直播服务器将所有可以提供的数据都组装成一个订阅，每当有业务服务器接如，直接将该业务服务器添加事件到服务文件里面，服务重新加载文件后，即可提供此数据接口，供业务服务器订阅与获取数据。

这样减少了直播平台开发特殊效果的压力。提供数据接口可以满足主播和其他业务服务器开发小众的特殊效果服务的需求。

在一可行的实现方式中，直播服务器根据业务服务器所需的行为类型，从采集的所有数据中确定出第二客户端在该应用该特殊效果的直播间产生的观众行为数据。同时，从这些观众行为数据中筛选出属于业务服务器所需要的行为类型的观众行为数据。

其中，观众行为数据可以包括：观众在直播间中发弹幕产生的弹幕消息；特殊的观众用户进入直播间产生的高级用户进场消息；观众在直播间中向主播送礼产生的送礼消息；主播进行抽奖，某个观众中奖时，产生的观众上电视中奖等。

S207、将所述观众行为数据发送至所述业务服务器。

在一可行的实现方式中，直播服务器根据业务服务器的订阅行为将其需要的观众行为数据返送至该业务服务器。

由于业务服务器不是直播平台所拥有的服务器，为了防止直播服务器中的观众行为数据被滥用和观众用户的隐私泄露，需要在将观众行为数据发送至业务服务器时，对业务服务器进行权限验证，当业务服务器通过权限验证后，才向业务服务器发送观众行为数据。

具体的，可以在直播服务器中增加一个鉴权模块，保证只有有权限的业务服务器才能够获取到所需要的观众行为数据。可以设立JWT(JSON Web Tokens)鉴权，JWT的三个部分依次如下Header.Payload.Signature:Header(头部，Header部分是一个JSON对象，描述JWT的元数据)，Payload(负载，Payload部分也是一个JSON对象，用来存放实际需要传递的数据)，Signature(签名),Signature部分是对前两部分的签名，防止数据篡改。

首先，使用HMACSHA256算法算出签名。其次，将算出的签名使用Base64URL算法转成字符串，对应的上面Header以及Payload(假设secret为123456)生成签名：b_SzsgUdAycx0IMNdDGvKXj5wFZhotNWA8i7-wxP7sg。最后把Header、Payload、Signature三个部分拼成一个字符串，每个部分之间用"."(点)分隔，对应的就是完整的token。

S208、接收所述业务服务器发送的目标直播视频数据。

目标直播视频数据包括所述第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象。

其中，第一客户端采集的原始直播视频数据是指主播用户使用的图像采集设备(尤其是摄像头)采集到的视频数据。

第一虚拟对象用于表示所第一客户端采集的主播动作数据。第一虚拟对象包括虚拟背景、第一虚拟形象。虚拟背景可以通过主播用户的选择直接适配产生。第一虚拟形象要求主播客户端安装有动作传感器，动作传感器采集主播用户动作后，将该动作映射到主播用户选择的虚拟形象上，以使得虚拟形象按照主播的动作进行行动。

第二虚拟对象用于表示第二客户端产生的观众行为数据。所述第二虚拟对象包括第二虚拟形象。第二虚拟形象可以是主播用户选择的一种画风，如可爱风格、搞笑风格、暴漫风格等，在该容器中可以按照画风将虚拟物品转化为虚拟形象。

观众行为数据包括观众用户发布的弹幕数据和/或观众用户发送至主播用户的虚拟物品。弹幕数据用于写入所述虚拟背景中，虚拟物品用于转换为类型匹配的第二虚拟形象。

在一可行的实现方式中，图2B为本发明实施例二提供的一种目标直播视频数据的画面。

目标直播视频数据包括原始直播视频数据21，第一虚拟对象和第二虚拟对象24。第一虚拟对象包括虚拟背景22、第一虚拟形象23。主播用户选择书房的场景，该场景中包括书架、书桌、落地灯和黑板等背景。业务服务器对第一客户端采集的图像进行抠图处理后获得原始直播视频数据21，即主播的形象。第一虚拟形象23可以是主播选择的虚拟对象，也可以是主播端的另一个真实的人佩戴动作传感器后生成的第一虚拟形象23。主播用户将观众用户发布的弹幕数据选择在虚拟背景22中的黑板区域进行显示，通过调整显示区域的大小，使得呈现在黑板上显示弹幕的效果。主播用户将观众用户发送至主播用户的虚拟物品选择在虚拟背景22中的书桌区域进行显示，通过调整显示区域的大小，使得产生在书桌上显示第二虚拟对象24的效果。

在上述实施例的基础上还包括：将弹幕数据发送至第二客户端，第二客户端用于在目标直播视频数据上显示弹幕数据。如图2B中的弹幕信息25所示。

S209、将所述目标直播视频数据发送至所述第二客户端进行播放。

直接通过业务服务器合成各类资源为目标直播视频数据，可以分担直播服务器的压力，避免了低效的数据传输。保证了数据传输和处理的高效、及时。

实施例三

图3为本发明实施例三提供的一种直播方法的流程图。本实施例适用于业务服务器获取直播服务器中部分数据，合成为目标直播视频数据后发回给直播服务器，以供直播服务器向观众客户端进行分发的场景。该方法应用于业务服务器中。该方法可以由一种直播方法的装置来执行，该装置可以由软件和/或硬件的方式实现。参考图3，该方法具体包括：

S301、连接直播服务器。

服务器一般可以需要响应服务请求，并进行处理。直播服务器是属于直播平台的服务器，可以响应主播用户所在的第一客户端以及观众用户所在的第二客户端的各种请求，并对客户端产生的信息进行存储。业务服务器是不属于直播平台的服务器，需要通过获取直播服务器的部分数据信息进行处理，或者通过连接直播服务器进行业务处理。

其中，直播服务器用于为主播用户所在的第一客户端创建直播间，直播间中登入有观众用户所在的第二客户端。

在一可行的实现方式中，当主播用户在直播间中选择一个特殊效果后，该直播效果会触发其对应的业务服务器连接直播服务器，并对直播服务器进行访问。

S302、接收所述第一客户端采集的原始视频数据。

第一客户端关联有图像采集设备，如摄像头等。图像采集设备可以在主播用户允许的情况下进行图像采集。此时采集的图像数据为原始视频数据。

在一可行的实现方式中，业务服务器接收第一客户端关联的图像采集设备采集的主播用户的图像数据。

S303、接收所述第一客户端采集的主播动作数据，和/或，接收所述直播服务器发送的、所述第二客户端在所述直播间产生的观众行为数据。

第一客户端关联有动作采集设备，如动作传感器等。动作传感器可以采集主播用户动作，将该动作映射到主播用户选择的虚拟形象上，以使得虚拟形象按照主播的动作进行行动。

观众行为数据可以包括：观众在直播间中发弹幕产生的弹幕消息；特殊的观众用户进入直播间产生的高级用户进场消息；观众在直播间中向主播送礼产生的送礼消息；主播进行抽奖，某个观众中奖时，产生的观众上电视中奖等。

观众行为数据要求是登入为主播用户所创建的直播间的观众用户的数据。

在一可行的实现方式中，业务服务器在接收第一客户端采集的原始视频数据的基础上，接收主播动作数据和观众行为数据中的一种或两种生成特殊效果。

S304、生成目标直播视频数据。

目标直播视频数据包括所述第一客户端采集的原始直播视频数据，和通过业务服务器处理的特殊效果。

其中，特殊效果可以包括第一虚拟对象和第二虚拟对象。第一虚拟对象要求主播客户端安装有动作传感器，动作传感器采集主播用户动作后，将该动作映射到主播用户选择的虚拟形象上，以使得虚拟形象按照主播的动作进行行动。第二虚拟对象是主播用户选择的、用于对第二客户端产生的观众行为数据进行展示的虚拟对象。如可以对观众用户产生的弹幕信息进行整合展示、可以对观众用户的送行为进行整合展示、可以对特殊的观众用户进行入场特效的添加等。

在一可行的实现方式中，业务服务器在接收到的原始视频数据的基础上结合主播动作数据和观众行为数据中的一种或两种生成目标直播视频数据。

S305、将所述目标直播视频数据发送至直播服务器，以发送至所述第二客户端进行播放。

在一可行的实现方式中，业务服务器将包含特殊效果的目标直播视频数据发送至直播服务器，直播服务器将目标直播视频数据分发到登入直播间的第二客户端，第二客户端接收该目标直播视频数据后，对该目标直播视频数据渲染至屏幕，以供观众用户观看。

本发明实施例提供了如下方法：连接直播服务器，直播服务器用于为第一客户端创建直播间，直播间中登入有第二客户端；接收第一客户端采集的原始视频数据；接收第一客户端采集的主播动作数据，和/或，接收直播服务器发送的、第二客户端在直播间产生的观众行为数据；生成目标直播视频数据，目标直播视频数据包括第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，第一虚拟对象用于表示主播动作数据，第二虚拟对象用于表示观众行为数据；将目标直播视频数据发送至直播服务器，以发送至第二客户端进行播放。通过该方法实现了减少直播平台开发特效投入的人力成本，同时有提供了大量个性化的组件供主播客户端选择。

实施例四

图4A为本发明实施例四提供的一种直播方法的流程图。本市实施例在实施例三的基础上进行了细化，详细描述了收所述直播服务器发送的、所述第二客户端在直播间产生的观众行为数据的具体过程。参考图4A，包括：

S401、连接直播服务器。

直播服务器用于为第一客户端创建直播间，直播间中登入有第二客户端。

S402、接收所述第一客户端采集的原始视频数据。

步骤S401-步骤S402可参考实施例三中的步骤S301-步骤S302的解释。

在一可行的实现方式中，当主播用户通过直播服务器创建直播间并在直播间中选择一个特殊效果后，该直播效果会触发其对应的业务服务器连接直播服务器，并对直播服务器进行访问。其中，业务服务器接收第一客户端关联的图像采集设备采集的主播用户的图像数据。其中，直播间中还登入有观众用户所在的第二客户端。

S403、接收所述第一客户端采集的主播动作数据，和/或，接收所述直播服务器发送的观众行为数据。

第一客户端关联有动作采集设备，如动作传感器等。动作传感器可以采集主播用户动作，将该动作映射到主播用户选择的虚拟形象上，以使得虚拟形象按照主播的动作进行行动。

观众行为数据可以包括：观众在直播间中发弹幕产生的弹幕消息；特殊的观众用户进入直播间产生的高级用户进场消息；观众在直播间中向主播送礼产生的送礼消息；主播进行抽奖，某个观众中奖时，产生的观众上电视中奖等。其中，观众行为数据要求是登入为主播用户所创建的直播间的观众用户的数据。

在接收所述直播服务器发送的观众行为数据之前，业务服务器向直播服务器订阅行为类型。

为了节约网络资源，业务服务器并不需要直播服务器采集的所有可提供的数据，而是只需要部分数据。因此确定业务服务器所需的部分数据对应的行为类型。

在一可行的实现方式中，直播服务器确定与之建立长连接的业务服务器订阅的行为类型，即确定业务服务器需要直播服务器提供的数据的类型。

在接收所述直播服务器发送的观众行为数据之前，业务服务器需要通过直播服务器的权限验证。以保证只有有权限的业务服务器才能够获取到所需要的观众行为数据。

S404、生成目标直播视频数据。

目标直播视频数据包括所述第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象。

其中，第一客户端采集的原始直播视频数据是指主播用户使用的图像采集设备(尤其是摄像头)采集到的视频数据。

第一虚拟对象用于表示所第一客户端采集的主播动作数据。第一虚拟对象包括虚拟背景、第一虚拟形象。虚拟背景可以通过主播用户的选择直接适配产生。第一虚拟形象要求主播客户端安装有动作传感器，动作传感器采集主播用户动作后，将该动作映射到主播用户选择的虚拟形象上，以使得虚拟形象按照主播的动作进行行动。

第二虚拟对象用于表示第二客户端产生的观众行为数据。所述第二虚拟对象包括第二虚拟形象。第二虚拟形象可以是主播用户选择的一种画风，如可爱风格、搞笑风格、暴漫风格等，在该容器中可以按照画风将虚拟物品转化为虚拟形象。

观众行为数据包括观众用户发布的弹幕数据和/或观众用户发送至主播用户的虚拟物品。弹幕数据用于写入所述虚拟背景中，虚拟物品用于转换为类型匹配的第二虚拟形象。

S405、将所述目标直播视频数据发送至直播服务器，以发送至所述第二客户端进行播放。

直接通过业务服务器合成各类资源为目标直播视频数据，可以分担直播服务器的压力，避免了低效的数据传输。保证了数据传输和处理的高效、及时。

图4B为本发明实施例四提供的一种直播方法的示意图。参考图4B：

第一客户端10向直播服务器11发送第一操作，该第一操作请求直播服务器11为第一客户端10创建直播间12。第二客户端13登入该直播间12中。

第一客户端10向直播服务器11发送第二操作，通过该第二操作从直播服务器11中选择特效，该特效对应有业务服务器14。

直播服务器11与业务服务器14建立连接，业务服务器14接收第一客户端10采集的原始视频数据、接收第一客户端10采集的主播动作数据，和/或，接收直播服务器11发送的、第二客户端13在直播间12产生的观众行为数据。

业务服务器14根据接收到的原始视频数据，结合主播动作数据和/或观众行为数据生成目标直播视频数据，并将该目标直播视频数据发送给直播服务器11。

接收业务服务器14发送的目标直播视频数据，将目标直播视频数据发送至第二客户端13进行播放。

实施例五

图5为本发明实施例五提供的一种直播装置。该装置包括：第一操作接收模块51、直播间创建模块52、第二操作接收模块53、业务服务器确定模块54、目标直播视频数据接收模块55和客户端发送模块56。其中，

第一操作接收模块51，用于接收第一客户端发送的第一操作；

直播间创建模块52，用于响应于所述第一操作，创建直播间，所述直播间中登入有第二客户端；

第二操作接收模块53，用于接收所述第一客户端发送的第二操作；

业务服务器确定模块54，用于响应于所述第二操作，确定业务服务器；

目标直播视频数据接收模块55，用于接收所述业务服务器发送的目标直播视频数据，所述目标直播视频数据包括所述第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，所述第一虚拟对象用于表示所述第一客户端采集的主播动作数据，所述第二虚拟对象用于表示所述第二客户端产生的观众行为数据；

客户端发送模块56，用于将所述目标直播视频数据发送至所述第二客户端进行播放。

本发明实施例提供了如下方法：接收第一客户端发送的第一操作；响应于第一操作，创建直播间，直播间中登入有第二客户端；接收第一客户端发送的第二操作；响应于第二操作，确定业务服务器；接收业务服务器发送的目标直播视频数据，目标直播视频数据包括第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，第一虚拟对象用于表示第一客户端采集的主播动作数据，第二虚拟对象用于表示第二客户端产生的观众行为数据；将目标直播视频数据发送至第二客户端进行播放。通过该方法实现了减少直播平台开发特效投入的人力成本，同时有提供了大量个性化的组件供主播客户端选择。

在上述实施例的基础上，还包括订阅发送模块，用于：

确定所述业务服务器订阅的行为类型；

采集所述第二客户端在所述直播间产生的、属于所述行为类型的观众行为数据；

将所述观众行为数据发送至所述业务服务器。

在上述实施例的基础上，所述订阅发送模块还用于：

对所述业务服务器进行权限验证；

若所述业务服务器通过权限验证，则向所述业务服务器发送所述观众行为数据。

在上述实施例的基础上，所述第一虚拟对象包括虚拟背景、第一虚拟形象，所述第二虚拟对象包括第二虚拟形象；

所述观众行为数据包括观众用户发布的弹幕数据和/或观众用户发送至主播用户的虚拟物品；

所述弹幕数据用于写入所述虚拟背景中；

所述主播动作数据用于生成动作匹配的第一虚拟形象；

所述虚拟物品用于转换为类型匹配的第二虚拟形象。

在上述实施例的基础上，还包括弹幕显示模块，用于：

将所述弹幕数据发送至所述第二客户端，所述第二客户端用于在所述目标直播视频数据上显示所述弹幕数据。

本实施例提供的一种直播装置可用于执行实施例一、实施例二提供的一种直播方法，具有相应的功能和有益效果。

实施例六

图6为本发明实施例六提供的一种直播装置。该装置包括：

直播服务器连接模块61、原始视频数据采集模块62、数据接收模块63、目标直播视频数据生成模块64和直播服务器发送模块65。其中：

直播服务器连接模块61，用于连接直播服务器，所述直播服务器用于为第一客户端创建直播间，所述直播间中登入有第二客户端；

原始视频数据采集模块62，用于接收所述第一客户端采集的原始视频数据；

数据接收模块63，用于接收所述第一客户端采集的主播动作数据，和/或，接收所述直播服务器发送的、所述第二客户端在所述直播间产生的观众行为数据；

目标直播视频数据生成模块64，用于生成目标直播视频数据，所述目标直播视频数据包括所述第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，所述第一虚拟对象用于表示所述主播动作数据，所述第二虚拟对象用于表示所述观众行为数据；

直播服务器发送模块65，用于将所述目标直播视频数据发送至直播服务器，以发送至所述第二客户端进行播放。

本发明实施例提供了如下方法：连接直播服务器，直播服务器用于为第一客户端创建直播间，直播间中登入有第二客户端；接收第一客户端采集的原始视频数据；接收第一客户端采集的主播动作数据，和/或，接收直播服务器发送的、第二客户端在直播间产生的观众行为数据；生成目标直播视频数据，目标直播视频数据包括第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，第一虚拟对象用于表示主播动作数据，第二虚拟对象用于表示观众行为数据；将目标直播视频数据发送至直播服务器，以发送至第二客户端进行播放。通过该方法实现了减少直播平台开发特效投入的人力成本，同时有提供了大量个性化的组件供主播客户端选择。

在上述实施例的基础上，所述数据接收模块63还用于：

接收所述直播服务器发送的观众行为数据，所述观众行为数据产生于在所述直播间的所述第二客户端、且属于所述行为类型。

在上述实施例的基础上，所述接收所述直播服务器发送的观众行为数据，包括：

接收所述直播服务器在所述业务服务器通过权限验证时发送的观众行为数据。

在上述实施例的基础上，所述第一虚拟对象包括虚拟背景、第一虚拟形象，所述第二虚拟对象包括第二虚拟形象；

所述观众行为数据包括观众用户发布的弹幕数据和/或观众用户发送至主播用户的虚拟物品。

在上述实施例的基础上，目标直播视频数据生成模块64还用于：

生成虚拟背景；

将所述弹幕数据写入所述虚拟背景中；

将所述虚拟背景合成至所述原始直播视频数据中；

和/或，

确定所述虚拟物品映射的第二虚拟形象；

将所述第二虚拟形象合成至所述原始直播视频数据中。

在上述实施例的基础上，所述目标直播视频数据生成模块64还用于：

确定第一虚拟形象；

按照所述主播动作数据拟合所述第一虚拟形象；

将所述第一虚拟形象合成至所述原始直播视频数据中。

本实施例提供的一种直播装置可用于执行实施例三、实施例四提供的一种直播方法，具有相应的功能和有益效果。

实施例七

图7为本发明实施例七提供的一种电子设备的结构示意图。如图7所示，该电子设备包括处理器70、存储器71、通信模块72、输入装置73和输出装置74；电子设备中处理器70的数量可以是一个或多个，图7中以一个处理器70为例；电子设备中的处理器70、存储器71、通信模块72、输入装置73和输出装置74可以通过总线或其他方式连接，图7中以通过总线连接为例。

存储器71作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本实施例中的一种直播方法对应的模块(例如，一种直播装置中的第一操作接收模块51、直播间创建模块52、第二操作接收模块53、业务服务器确定模块54、目标直播视频数据接收模块55和客户端发送模块56)如本实施例中的一种直播方法对应的模块(例如，一种直播装置中的直播服务器连接模块61、原始视频数据采集模块62、数据接收模块63、目标直播视频数据生成模块64和直播服务器发送模块65)。处理器70通过运行存储在存储器71中的软件程序、指令以及模块，从而执行电子设备的各种功能应用以及数据处理，即实现上述的一种直播方法。

存储器71可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据电子设备的使用所创建的数据等。此外，存储器71可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器71可进一步包括相对于处理器70远程设置的存储器，这些远程存储器可以通过网络连接至电子设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

通信模块72，用于与显示屏建立连接，并实现与显示屏的数据交互。输入装置73可用于接收输入的数字或字符信息，以及产生与电子设备的用户设置以及功能控制有关的键信号输入。

本实施例提供的一种电子设备，可执行本发明任一实施例提供的一种直播方法，具体相应的功能和有益效果。

实施例八

本发明实施例八还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种直播方法，该方法包括：

接收第一客户端发送的第一操作；

响应于所述第一操作，创建直播间，所述直播间中登入有第二客户端；

接收所述第一客户端发送的第二操作；

响应于所述第二操作，确定业务服务器；

接收所述业务服务器发送的目标直播视频数据，所述目标直播视频数据包括所述第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，所述第一虚拟对象用于表示所述第一客户端采集的主播动作数据，所述第二虚拟对象用于表示所述第二客户端产生的观众行为数据；

将所述目标直播视频数据发送至所述第二客户端进行播放。

或，

连接直播服务器，所述直播服务器用于为第一客户端创建直播间，所述直播间中登入有第二客户端；

接收所述第一客户端采集的原始视频数据；

接收所述第一客户端采集的主播动作数据，和/或，接收所述直播服务器发送的、所述第二客户端在所述直播间产生的观众行为数据；

生成目标直播视频数据，所述目标直播视频数据包括所述第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，所述第一虚拟对象用于表示所述主播动作数据，所述第二虚拟对象用于表示所述观众行为数据；

将所述目标直播视频数据发送至直播服务器，以发送至所述第二客户端进行播放。

当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的方法操作,还可以执行本发明任一实施例所提供的一种直播方法中的相关操作。

通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机电子设备(可以是个人计算机，服务器，或者网络电子设备等)执行本发明各个实施例所述的方法。

值得注意的是，上述一种直播装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。

注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (15)

1.一种直播方法，其特征在于，应用于直播服务器，所述方法包括：

接收第一客户端发送的第一操作；

响应于所述第一操作，创建直播间，所述直播间中登入有第二客户端；

接收所述第一客户端发送的第二操作；

响应于所述第二操作，确定业务服务器；

接收所述业务服务器发送的目标直播视频数据，所述目标直播视频数据包括所述第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，所述第一虚拟对象用于表示所述第一客户端采集的主播动作数据，所述第二虚拟对象用于表示所述第二客户端产生的观众行为数据；

将所述目标直播视频数据发送至所述第二客户端进行播放。

2.根据权利要求1所述的方法，其特征在于，还包括：

确定所述业务服务器订阅的行为类型；

采集所述第二客户端在所述直播间产生的、属于所述行为类型的观众行为数据；

将所述观众行为数据发送至所述业务服务器。

3.根据权利要求2所述的方法，其特征在于，所述将所述观众行为数据发送至所述业务服务器，包括：

对所述业务服务器进行权限验证；

若所述业务服务器通过权限验证，则向所述业务服务器发送所述观众行为数据。

4.根据权利要求1或2所述的方法，其特征在于，所述第一虚拟对象包括虚拟背景、第一虚拟形象，所述第二虚拟对象包括第二虚拟形象；

所述观众行为数据包括观众用户发布的弹幕数据和/或观众用户发送至主播用户的虚拟物品；

所述弹幕数据用于写入所述虚拟背景中；

所述主播动作数据用于生成动作匹配的第一虚拟形象；

所述虚拟物品用于转换为类型匹配的第二虚拟形象。

5.根据权利要求4所述的方法，其特征在于，还包括：

将所述弹幕数据发送至所述第二客户端，所述第二客户端用于在所述目标直播视频数据上显示所述弹幕数据。

6.一种直播方法，其特征在于，应用于业务服务器，所述方法包括：

基于第一客户端在直播间中的第二操作触发连接直播服务器，所述直播服务器用于为第一客户端创建直播间，所述直播间中登入有第二客户端；

接收所述第一客户端采集的原始视频数据；

接收所述第一客户端采集的主播动作数据，和/或，接收所述直播服务器发送的、所述第二客户端在所述直播间产生的观众行为数据；

生成目标直播视频数据，所述目标直播视频数据包括所述第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，所述第一虚拟对象用于表示所述主播动作数据，所述第二虚拟对象用于表示所述观众行为数据；

将所述目标直播视频数据发送至直播服务器，以发送至所述第二客户端进行播放。

7.根据权利要求6所述的方法，其特征在于，所述业务服务器向所述直播服务器订阅行为类型；

所述接收所述直播服务器发送的、所述第二客户端在所述直播间产生的观众行为数据，包括：

接收所述直播服务器发送的观众行为数据，所述观众行为数据产生于在所述直播间的所述第二客户端、且属于所述行为类型。

8.根据权利要求7所述的方法，其特征在于，所述接收所述直播服务器发送的观众行为数据，包括：

接收所述直播服务器在所述业务服务器通过权限验证时发送的观众行为数据。

9.根据权利要求6-8中任一项所述的方法，其特征在于，

所述第一虚拟对象包括虚拟背景、第一虚拟形象，所述第二虚拟对象包括第二虚拟形象；

所述观众行为数据包括观众用户发布的弹幕数据和/或观众用户发送至主播用户的虚拟物品。

10.根据权利要求9所述的方法，其特征在于，所述生成目标直播视频数据，包括：

生成虚拟背景；

将所述弹幕数据写入所述虚拟背景中；

将所述虚拟背景合成至所述原始直播视频数据中；

和/或，

确定所述虚拟物品映射的第二虚拟形象；

将所述第二虚拟形象合成至所述原始直播视频数据中。

11.根据权利要求9所述的方法，其特征在于，所述生成目标直播视频数据，包括：

确定第一虚拟形象；

按照所述主播动作数据拟合所述第一虚拟形象；

将所述第一虚拟形象合成至所述原始直播视频数据中。

12.一种直播装置，其特征在于，应用于直播服务器，所述装置包括：

第一操作接收模块，用于接收第一客户端发送的第一操作；

直播间创建模块，用于响应于所述第一操作，创建直播间，所述直播间中登入有第二客户端；

第二操作接收模块，用于接收所述第一客户端发送的第二操作；

业务服务器确定模块，用于响应于所述第二操作，确定业务服务器；

目标直播视频数据接收模块，用于接收所述业务服务器发送的目标直播视频数据，所述目标直播视频数据包括所述第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，所述第一虚拟对象用于表示所述第一客户端采集的主播动作数据，所述第二虚拟对象用于表示所述第二客户端产生的观众行为数据；

客户端发送模块，用于将所述目标直播视频数据发送至所述第二客户端进行播放。

13.一种直播装置，其特征在于，应用于业务服务器，所述装置包括：

直播服务器连接模块，用于基于第一客户端在直播间中的第二操作触发连接直播服务器，所述直播服务器用于为第一客户端创建直播间，所述直播间中登入有第二客户端；

原始视频数据采集模块，用于接收所述第一客户端采集的原始视频数据；

数据接收模块，用于接收所述第一客户端采集的主播动作数据，和/或，接收所述直播服务器发送的、所述第二客户端在所述直播间产生的观众行为数据；

目标直播视频数据生成模块，用于生成目标直播视频数据，所述目标直播视频数据包括所述第一客户端采集的原始直播视频数据，第一虚拟对象和/或第二虚拟对象，所述第一虚拟对象用于表示所述主播动作数据，所述第二虚拟对象用于表示所述观众行为数据；

直播服务器发送模块，用于将所述目标直播视频数据发送至直播服务器，以发送至所述第二客户端进行播放。

14.一种电子设备，其特征在于，包括：

一个或多个处理器；

存储器，用于存储一个或多个程序；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-11任一所述的一种直播方法。

15.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-11任一所述的一种直播方法。

Images