CN112333537B - 视频整合方法、装置及计算机可读存储介质 - Google Patents

Abstract

本发明公开了一种视频整合方法，该视频整合方法包括：获取视频，并检测所述视频中是否存在人物移动；若所述视频中出现人物移动，则获取所述视频中的人物图像；对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面；根据时间顺序将所有所述降帧人物图像和所述背景画面进行叠加整合得到整合视频。本发明还公开了一种视频整合装置和一种计算机可读存储介质。本发明能够实现依据视频中人物的动态行为整合视频内容的功能，减小视频存储的大小，缩短视频的播放时间，实现根据识别视频中关键人物的行为整合视频内容的功能。

Description

视频整合方法、装置及计算机可读存储介质

技术领域

本发明涉及视频处理技术领域，尤其涉及视频整合方法、装置及计算机可读存储介质。

背景技术

随着电子设备和物联网技术发展，智能家居悄悄的改变人们的生活，越来越多的终端设备接入到家庭，人们可以通过移动终端或者固定终端连接摄像头观看家里或者其它地方发生的情况，摄像头会推送一段视频给移动终端或者固定终端，由于推送的视频内存较大，会容易导致传输网络卡顿，推送的视频会大量占用移动终端或者固定终端的内存，会容易导致推送的视频无法正常播放，也会浪费用户浏览视频的时间。

发明内容

本发明的主要目的在于提出一种视频整合方法、装置及计算机可读存储介质，旨在实现依据视频中人物的动态行为整合视频内容的功能，减小视频存储的大小，缩短视频的播放时间，旨在实现根据识别视频中关键人物的行为整合视频内容的功能。

为实现上述目的，本发明提供一种视频整合方法，所述视频整合方法包括如下步骤：

获取视频，并检测所述视频中是否存在人物移动；

若所述视频中出现人物移动，则获取所述视频中的人物图像；

对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面；

根据时间顺序将所有所述降帧人物图像和所述背景画面进行叠加整合得到整合视频。

可选地，所述检测所述视频中是否存在人物移动的步骤，包括：

读取所述视频的帧画面；

根据预设的帧差算法，检测相邻所述帧画面是否符合第一条件，其中所述第一条件为：相邻所述帧画面中存在像素移动的第一目标面积与所述帧画面的总面积的第一比值大于预设第一阈值；

若相邻所述帧画面符合第一条件，则判定所述视频中存在人物移动；

若相邻所述帧画面不符合第一条件，则判定所述视频中不存在人物移动。

可选地，所述对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面的步骤之前，包括：

根据所述帧画面，检测所述人物移动的持续时长是否大于或等于预设时长；

若所述持续时长大于或等于预设时长，则执行：对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面。

可选地，所述根据所述帧画面，检测所述人物移动的持续时长是否大于或等于预设时长的步骤，包括：

检测两个间隔预设时长的所述帧画面是否满足第二条件，其中所述第二条件为两个间隔预设时长的帧图像存在像素移动的第二目标面积与所述帧画面的总面积的第二比值是否大于预设第二阈值；

若两个间隔预设时长的所述帧画面符合第二条件，则判定持续时长大于或等于预设时长；

若两个间隔预设时长的所述帧画面不符合第二条件，则判定持续时长小于预设时长。

可选地，所述根据所述帧图像，检测所述人物移动的持续时长是否大于或等于预设时长的步骤之后，包括：

若所述持续时长小于预设时长，则获取下一时段的视频。

可选地，所述对所述人物图像进行降帧处理得到降帧人物图像的步骤，包括：

将两个间隔预设数值帧数的所述人物图像进行比对；

筛选出相似度超过预设第三阈值的两个间隔预设数值帧数的所述人物图像，生成降帧人物图像。

可选地，所述对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面的步骤之前，包括：

根据人物轮廓算法获取所述帧画面中人物数量；

根据所述人物数量得到所述预设数值，其中所述人物数量与所述预设数值成正比。

可选地，所述根据所述降帧人物图像在所述视频中获取背景画面的步骤，包括：

将与所述降帧人物图像对应的所述帧画面筛选出，生成筛选帧画面；

将相邻所述筛选帧画面进行比对，筛选出相似度超过预设第四阈值的相邻所述筛选帧画面，生成背景画面。

此外，为实现上述目的，本发明还提供一种视频整合装置，所述视频整合装置包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的视频整合程序，所述视频整合程序被所述处理器执行时实现如上所述的视频整合方法的步骤。

此外，为实现上述目的，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有视频整合程序，所述视频整合程序被处理器执行时实现如上所述的视频整合方法的步骤。

本发明提供了一种视频整合方法、装置及计算机可读存储介质，获取视频，并检测所述视频中是否存在人物移动；若所述视频中出现人物移动，则获取所述视频中的人物图像；对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面；根据时间顺序将所有所述降帧人物图像和所述背景画面进行叠加整合得到整合视频。通过上述方式，本发明通过判断视频中是否出现了人物移动和根据人物的图像进行降帧，能够实现依据视频中人物的动态行为整合视频内容的功能，减小视频存储的大小，缩短视频的播放时间，实现根据识别视频中关键人物的行为整合视频内容的功能。

附图说明

图1是本发明实施例方案涉及的硬件运行环境的终端结构示意图；

图2为多个帧画面、人物图像、筛选帧画面或背景按照时间顺序存储的示意图；

图3为本发明视频整合方法第一实施例的流程示意图；

图4为本发明视频整合方法第二实施例的流程示意图；

图5为本发明视频整合方法第三实施例的流程示意图；

图6为本发明视频整合方法第四实施例的流程示意图；

图7为本发明视频整合方法第五实施例的流程示意图；

图8为本发明视频整合方法第六实施例的流程示意图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。

本发明实施例的主要解决方案是：获取视频，并检测所述视频中是否存在人物移动；若所述视频中出现人物移动，则获取所述视频中的人物图像；对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面；根据时间顺序将所有所述降帧人物图像和所述背景画面进行叠加整合得到整合视频。

随着电子设备和物联网技术发展，智能家居悄悄改变生活的发展，越来越多的终端设备接入到家庭，人们可以通过移动终端或者固定终端连接摄像头观看家里或者其它地方发生的情况，摄像头会推送一段视频给移动终端或者固定终端，由于推送的视频内存较大，会容易导致传输网络卡顿，推送的视频会大量占用移动终端或者固定终端的内存，会容易导致推送的视频无法正常播放，也会浪费用户浏览视频的时间。

本发明旨在实现依据视频中人物的动态行为整合视频内容的功能，减小视频存储的大小，缩短视频的播放时间，旨在实现根据识别视频中关键人物的行为整合视频内容的功能。

如图1所示，图1是本发明实施例方案涉及的硬件运行环境的终端结构示意图。

本发明实施例终端可以是PC，也可以是智能手机、平板电脑等具有显示功能的可移动式终端设备。

如图1所示，该终端可以包括：处理器1001，例如CPU，网络接口1004，用户接口1003，存储器1005，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。

优选地，终端还可以包括摄像头、RF(Radio Frequency，射频)电路，传感器、音频电路、WiFi模块等等。其中，传感器比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示屏的亮度，接近传感器可在移动终端移动到耳边时，关闭显示屏和/或背光。作为运动传感器的一种，重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别移动终端姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；当然，移动终端还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。

本领域技术人员可以理解，图1中示出的终端结构并不构成对终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

如图1所示，作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及视频整合程序。

在图1所示的终端中，网络接口1004主要用于连接后台服务器，与后台服务器进行数据通信；用户接口1003主要用于连接客户端(用户端)，与客户端进行数据通信；而处理器1001可以用于调用存储器1005中存储的视频整合程序，并执行以下操作：

获取视频，并检测所述视频中是否存在人物移动；

若所述视频中出现人物移动，则获取所述视频中的人物图像；

对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面；

根据时间顺序将所有所述降帧人物图像和所述背景画面进行叠加整合得到整合视频。

进一步地，处理器1001可以调用存储器1005中存储的视频整合程序，还执行以下操作：

读取所述视频的帧画面；

根据预设的帧差算法，检测相邻所述帧画面是否符合第一条件，其中所述第一条件为：相邻所述帧画面中存在像素移动的第一目标面积与所述帧画面的总面积的第一比值大于预设第一阈值；

若相邻所述帧画面符合第一条件，则判定所述视频中存在人物移动；

若相邻所述帧画面不符合第一条件，则判定所述视频中不存在人物移动。

进一步地，处理器1001可以调用存储器1005中存储的视频整合程序，还执行以下操作：

根据所述帧画面，检测所述人物移动的持续时长是否大于或等于预设时长；

若所述持续时长大于或等于预设时长，则执行：对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面。

进一步地，处理器1001可以调用存储器1005中存储的视频整合程序，还执行以下操作：

检测两个间隔预设时长的所述帧画面是否满足第二条件，其中所述第二条件为两个间隔预设时长的帧图像存在像素移动的第二目标面积与所述帧画面的总面积的第二比值是否大于预设第二阈值；

若两个间隔预设时长的所述帧画面符合第二条件，则判定持续时长大于或等于预设时长；

若两个间隔预设时长的所述帧画面不符合第二条件，则判定持续时长小于预设时长。

进一步地，处理器1001可以调用存储器1005中存储的视频整合程序，还执行以下操作：

若所述持续时长小于预设时长，则获取下一时段的视频。

进一步地，处理器1001可以调用存储器1005中存储的视频整合程序，还执行以下操作：

根据人物轮廓算法获取所述帧画面中人物数量；

根据所述人物数量得到所述预设数值，其中所述人物数量与所述预设数值成正比。

进一步地，处理器1001可以调用存储器1005中存储的视频整合程序，还执行以下操作：

将两个间隔预设数值帧数的所述人物图像进行比对；

筛选出相似度超过预设第三阈值的两个间隔预设数值帧数的所述人物图像，生成降帧人物图像。

进一步地，处理器1001可以调用存储器1005中存储的视频整合程序，还执行以下操作：

将与所述降帧人物图像对应的所述帧画面筛选出，生成筛选帧画面；

将相邻所述筛选帧画面进行比对，筛选出相似度超过预设第四阈值的相邻所述筛选帧画面，生成背景画面。

基于上述硬件结构，提出本发明视频整合方法实施例。

本发明视频整合方法。

参照图3，图3为本发明视频整合方法第一实施例的流程示意图。

本发明实施例中，该视频整合方法应用于视频整合装置，所述视频整合方法包括：

步骤S10，获取视频，并检测所述视频中是否存在人物移动；

在本实施例中，视频整合装置在对视频整合时，先获取视频，再根据帧差算法检测视频中是否存在人物移动。其中，视频整合装置可以是视频处理的装置，视频整合装置可以是摄像头，视频整合装置还可以是与摄像头连接的处理视频的装置；视频整合装置也可以是PC，也可以是智能手机、平板电脑等具有处理视频功能的终端设备。其中，帧差算法可以是将相邻两帧视频画面进行比对，检测相邻两帧视频画面的像素点有什么差异的方法。帧差算法还可以是先将相邻三帧视频画面进行比对，其中，先将第一张帧视频画面和第二帧视频画面进行比对，得到第一像素点差异画面；再将第二帧视频画面与第三帧视频画面进行对比，得到第二像素点差异画面；再将第一像素点差异画面和第二像素点差异画面进行比对，得到第三像素点差异画面的方法。其中，帧差算法获取视频中的帧画面可以是随机选取的相邻的帧画面；帧差算法获取视频中的帧画面还可以是视频中时间排序最先的相邻的帧画面。其中，视频中的人物是否出现移动可以是视频中的像素点发生了大面积的移动，像素点的移动比例超过了预设比例阈值，进而根据人物轮廓检测算法检测出像素点出现移动的画面是人物的图像。其中，预设比例阈值可以是50％，还可以是30％。

步骤S10获取视频，并检测所述视频中是否存在人物移动之前，可以包括：

步骤a，获取摄像头拍摄视频，根据预设截取时长对所述摄像头拍摄视频进行裁剪，得到所述视频。

在本实施例中，当摄像头拍摄到房间内的视频之后，视频整合装置根据预设截取时长对所述摄像头拍摄视频进行裁剪，得到用于整合的视频。

步骤S10检测所述视频中是否存在人物移动之后，可以包括：

步骤b，若所述视频中未存在人物移动，则获取下一时段的视频。

在本实施例中，当视频整合装置在检测到视频中未存在人物移动时，视频整合装置获取下一时段的视频。

步骤S20，若所述视频中出现人物移动，则获取所述视频中的人物图像；

在本实施例中，视频整合装置在根据帧差算法检测到视频中出现人物移动，则视频整合装置根据人物轮廓算法获取视频中每个帧画面对应的人物图像。其中，人物轮廓算法是检测图像中是否符合人物轮廓的算法；其中，人物图像是包含每一帧的帧画面中分别包含的人物图像，人物图像是根据视频的帧画面的时间先后顺序依次排列的。人物图像是一个多个人物图像的合集。其中，人物图像可以是包括人物全身的图像，人物图像也可以是人物的头像。

步骤S30，对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面；

在本实施例中，视频整合装置在获取到视频中的人物图像之后，视频整合装置对所述人物图像进行降帧处理得到降帧人物图像，视频整合装置根据降帧人物图像在视频中查找与降帧人物图像同一时间的帧画面，生成背景画面。其中，降帧人物图像是通过降帧方法将人物图像进行降帧而得到的。

步骤S30对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面之前，可以包括：

步骤c1，根据人物轮廓算法获取所述帧画面中人物数量；

在本实施例中，视频整合装置得到人物图像的合集之后，视频整合装置根据人物轮廓算法获取所述帧画面中所包含的人物数量。

步骤c2，根据所述人物数量得到所述预设数值，其中所述人物数量与所述预设数值成正比。

在本实施例中，视频整合装置在得到了帧画面中包含的人物数量之后，视频整合装置根据人物数量得到预设数值，其中所述人物数量与所述预设数值成正比。其中，预设数值可以等于人物数量，预设数值可以等于人物数量的倍数。视频整合装置对人物图像的降帧处理的倍数可以根据人物数量来确定，人物数量越多，预设数值越大，对人物图像的降帧幅度越大。

步骤S40，根据时间顺序将所有所述降帧人物图像和所述背景画面进行叠加整合得到整合视频。

在本实施例中，视频整合装置在得到降帧人物图像和背景画面之后，视频整合装置根据时间顺序将所有降帧人物图像和所有背景画面进行叠加整合得到整合视频，也即视频整合装置根据降帧人物图像的时间信息和背景画面的时间信息按照时间顺序将所有降帧人物图像和所有背景画面依次进行叠加整合得到整合视频。其中，降帧人物图像的时间信息是视频整合装置在视频中获取每一帧人物图像时，保留的视频帧画面的时间信息。背景画面的时间信息是视频整合装置根据降帧人物图像对应的时间信息而得到的。

本实施例通过上述方案，获取视频，并检测所述视频中是否存在人物移动；若所述视频中出现人物移动，则获取所述视频中的人物图像；对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面；根据时间顺序将所有所述降帧人物图像和所述背景画面进行叠加整合得到整合视频。由此，通过判断视频中是否出现了人物移动和根据人物的图像进行降帧，实现了依据视频中人物的动态行为整合视频内容的功能，减小了视频存储的大小，缩短了视频的播放时间，实现了根据识别视频中关键人物的行为整合视频内容的功能。

进一步地，参照图4，图4为本发明视频整合方法第二实施例的流程示意图。基于上述图3所示的实施例，步骤S10检测所述视频中是否存在人物移动，可以包括：

步骤S11，读取所述视频的帧画面；

在本实施例中，视频整合装置在获取到视频之后，读取视频中的所有帧画面。其中，帧画面是一个视频所有视频画面的合集。

步骤S12，根据预设的帧差算法，检测相邻所述帧画面是否符合第一条件，其中所述第一条件为：相邻所述帧画面中存在像素移动的第一目标面积与所述帧画面的总面积的第一比值大于预设第一阈值；

在本实施例中，视频整合装置在获取了帧画面之后，视频整合装置根据预设的帧差算法，检测相邻帧画面是否符合第一条件，其中第一条件为：相邻所述帧画面中存在像素移动的第一目标面积与所述帧画面的总面积的第一比值大于预设第一阈值。其中预设第一阈值可以是用户设置的，用于衡量视频中是否存在人物移动。其中前后帧画面可以是随机抽取的，也可以是帧画面合集中的第一张帧画面和第二张帧画面。其中，预设第一阈值可以设为33.33％。

具体的，如图2所示，视频整合装置在获取到视频的帧画面之后，视频整合装置获取帧画面的第2张帧画面和第1张帧画面，视频整合装置检测帧画面合集的第2张帧画面相对于第1张帧画面像素移动的比例是否超过了整张帧画面的面积的三分之一。视频整合装置获取帧画面的第5张帧画面和第4张帧画面，视频整合装置检测帧画面合集的第5张帧画面相对于第4张帧画面像素移动的比例是否超过了整张帧画面的面积的三分之一。

步骤S13，若相邻所述帧画面符合第一条件，则判定所述视频中存在人物移动；

在本实施例中，视频整合装置在将相邻帧画面进行比较之后，当视频整合装置判断相邻帧画面符合第一条件，则判定视频中存在人物移动。例如，如图2所示，第1张帧画面中的手臂在帧画面的左边，第2张帧画面中的手臂在帧画面的右边，帧画面的面积为100个像素，其中有40个像素在移动，当视频整合装置获取到这样的第1张帧画面和第2张帧画面之后，对第1张帧画面和第2张帧画面进行检测之后，视频整合装置获取到像素移动比例为40％，像素移动比例超过33.33％，则视频整合装置判定相邻所述帧画面符合第一条件，则视频整合装置判定视频中存在人物移动。

步骤S14，若相邻所述帧画面不符合第一条件，则判定所述视频中不存在人物移动。

在本实施例中，视频整合装置在将相邻帧画面进行比较之后，当视频整合装置判断相邻帧画面不符合第一条件，则判定视频中不存在人物移动。例如，如图2所示，第1张帧画面中的手臂在帧画面的左边，第2张帧画面中的手臂在帧画面的右边，帧画面的面积为100个像素，其中有30个像素在移动，当视频整合装置获取到这样的第1张帧画面和第2张帧画面之后，视频整合装置对第1张帧画面和第2张帧画面进行检测之后，视频整合装置获取到像素移动比例为30％，像素移动比例未超过33.33％，相邻所述帧画面不符合第一条件，则视频整合装置判定视频中存在人物移动。

本实施例通过上述方案，读取所述视频的帧画面；根据预设的帧差算法，检测相邻所述帧画面是否符合第一条件，其中所述第一条件为：相邻所述帧画面中存在像素移动的第一目标面积与所述帧画面的总面积的第一比值大于预设第一阈值；若相邻所述帧画面符合第一条件，则判定所述视频中存在人物移动；若相邻所述帧画面不符合第一条件，则判定所述视频中不存在人物移动。由此，通过判断视频中是否出现了人物移动和根据人物的图像进行降帧，实现了依据视频中人物的动态行为整合视频内容的功能，减小了视频存储的大小，缩短了视频的播放时间，实现了根据识别视频中关键人物的行为整合视频内容的功能。

进一步地，参照图5，图5为本发明视频整合方法第三实施例的流程示意图。基于上述图3或图4所示的实施例，步骤S30对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面之前，或者，S20获取所述视频中的人物图像之后，可以包括：

步骤S50，根据所述帧画面，检测所述人物移动的持续时长是否大于或等于预设时长；

在本实施例中，视频整合装置在获取到帧画面之后，视频整合装置根据帧画面，检测人物移动的持续时长是否大于或等于预设时长。其中，人物移动时长为人物在视频中移动的时间长度；其中，预设时长为用户预先设置的，可以是2分钟，可以是10分钟，还可以是20分钟。

步骤S50根据所述帧画面，检测所述人物移动的持续时长是否大于或等于预设时长，可以包括：

步骤S51，根据所述帧画面，检测人物移动的持续时长与所述视频的总时长的比值是否大于或者等于预设时长比值。

在本实施例中，视频整合装置在获取到人物图像之后，视频整合装置根据人物图像检测人物移动的持续时长与视频的总时长的比值大于或者等于预设时长比值。

步骤S50根据所述人物图像检测所述人物移动时长是否大于或等于预设时长之后，可以包括：

步骤d，若所述持续时长小于预设时长，则获取下一时段的视频。

在本实施例中，当视频整合装置在检测到人物移动的持续时长小于预设时长时，视频整合装置获取下一时段的视频。

步骤S60，若所述持续时长大于或等于预设时长，则执行：对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面。

在本实施例中，当视频整合装置在检测到人物移动的持续时长大于或等于预设时长时，执行步骤S30。

步骤S60若所述持续时长大于或等于预设时长，则执行：对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面，可以包括：

步骤S61，若持续时长与所述视频的总时长的比值大于或者等于预设时长比值，则执行：对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面。

作为一种实施方式，当视频整合装置在检测到人物移动的持续时长与所述视频的总时长的比值大于或者等于预设时长比值，执行步骤S30。

本实施例通过上述方案，获取视频，并检测所述视频中是否存在人物移动；若所述视频中出现人物移动，则获取所述视频中的人物图像；根据所述帧画面，检测所述人物移动的持续时长是否大于或等于预设时长；若所述持续时长大于或等于预设时长；对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面；根据时间顺序将所有所述降帧人物图像和所述背景画面进行叠加整合得到整合视频。由此，通过视频中人物移动时长的判断，实现了将人物活动时间短的视频跳过，节省了视频整合的时间。

进一步地，参照图6，图6为本发明视频整合方法第四实施例的流程示意图。基于上述图5所示的实施例，步骤S50根据所述帧画面，检测所述人物移动的持续时长是否大于或等于预设时长，可以包括：

步骤S51，检测两个间隔预设时长的所述帧画面是否满足第二条件，其中所述第二条件为两个间隔预设时长的帧图像存在像素移动的第二目标面积与所述帧画面的总面积的第二比值是否大于预设第二阈值；

在本实施例中，视频整合装置在获取到帧画面之后，视频整合装置检测两个间隔预设时长的所述帧画面是否满足第二条件，其中所述第二条件为两个间隔预设时长的帧图像存在像素移动的第二目标面积与所述帧画面的总面积的第二比值是否大于预设第二阈值。其中，预设第二阈值可以设定为50％，也可以设定为60％。

步骤S52，若两个间隔预设时长的所述帧画面符合第二条件，则判定持续时长大于或等于预设时长；

在本实施例中，视频整合装置将两个间隔预设时长的帧画面进行比对之后，若视频整合装置判断两个间隔预设时长的所述帧画面符合第二条件，则视频整合装置判定持续时长大于或等于预设时长。

步骤S53，若两个间隔预设时长的所述帧画面不符合第二条件，则判定持续时长小于预设时长。

在本实施例中，视频整合装置将两个间隔预设时长的帧画面进行比对之后，若视频整合装置判断两个间隔预设时长的所述帧画面不符合第二条件，则视频整合装置判定持续时长小于预设时长。

本实施例通过上述方案，获取视频，并检测所述视频中是否存在人物移动；若所述视频中出现人物移动，则获取所述视频中的人物图像；检测两个间隔预设时长的所述帧画面是否满足第二条件，其中所述第二条件为两个间隔预设时长的帧图像存在像素移动的第二目标面积与所述帧画面的总面积的第二比值是否大于预设第二阈值；若两个间隔预设时长的所述帧画面符合第二条件，则判定持续时长大于或等于预设时长；若两个间隔预设时长的所述帧画面不符合第二条件，则判定持续时长小于预设时长；若所述持续时长大于或等于预设时长；对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面；根据时间顺序将所有所述降帧人物图像和所述背景画面进行叠加整合得到整合视频。由此，通过视频中人物移动时长的判断，实现了将人物活动时间短的视频跳过，节省了视频整合的时间。

进一步地，参照图7，图7为本发明视频整合方法第五实施例的流程示意图。基于上述图3、图4、图5或图6所示的实施例，步骤S30对所述人物图像进行降帧处理得到降帧人物图像，可以包括：

步骤S31，将两个间隔预设数值帧数的所述人物图像进行比对；

在本实施例中，视频整合装置在获取到视频或帧画面中的人物图像之后，视频整合装置将两个间隔预设数值帧数的人物图像进行比对，也即将两个间隔预设数值帧数的人物图像中的相对应的像素点进行比较；其中，预设数值可以是预先进行设置的，也可以是依据人物图像中的人物个数来得到的。

步骤S31将两个间隔预设数值的所述人物图像进行比对，可以包括：

步骤S311，将两个间隔预设数值帧数的所述人物图像中相对应的像素点做像素差值；

在本实施例中，视频整合装置在获取到视频或帧画面中的人物图像之后，视频整合装置将两个间隔预设数值帧数的人物图像中的相对应的像素点做像素差值；其中，像素点做像素差值可以是两个图像的对应点的像素值进行相减。

具体的，第1张人物图像有A、B、C、D四个像素点，第2张人物图像有A1、B1、C1、D1四个像素点，其中，A与A1在图片中处于相同的，也即A与A1相对应；B与B1在图片中处于相同的，也即B与B1相对应；C与C1在图片中处于相同的，也即C与C1相对应；D与D1在图片中处于相同的，也即D与D1相对应。A点的像素值为{R:255,G:00,B:00}，B点的像素值{R:255,G:123,B:00}，C点的像素值为{R:255,G:00,B:215}，D点的像素值为{R:00,G:00,B:215}。A1点的像素值为{R:255,G:00,B:00}，B1点的像素值{R:255,G:122,B:00}，C1点的像素值为{R:255,G:00,B:215}，D1点的像素值为{R:00,G:00,B:215}。将A与A1做像素差值，B与B1做像素差值，C与C1做像素差值，D与D1做像素差值。

步骤S32，筛选出相似度超过预设第三阈值的两个间隔预设数值帧数的所述人物图像，生成降帧人物图像。

在本实施例中，视频整合装置将两个间隔预设数值的人物图像进行比对之后，视频整合装置筛选出相似度超过预设第三阈值的两个间隔预设数值帧数的人物图像，生成降帧人物图像。其中，降帧人物图像是满足相似度超过预设第三阈值的两个间隔预设数值帧数的人物图像的合集。预设相似阈值可以是进行设置的，预设第三阈值可以设置为50％，预设第三阈值也可以设置为60％。

步骤S32筛选出相似度超过预设第三阈值的两个间隔预设数值帧数的所述人物图像，生成降帧人物图像，可以包括：

步骤S321，筛选出两个间隔预设数值帧数的所述人物图像中相对应的像素点的像素差值为零的像素点占所述人物图像的总像素点比值超过预设第三阈值帧数的人物图像，生成降帧人物图像。

在本实施例中，视频整合装置将两个间隔预设数值帧数的人物图像中的相对应的像素点做像素差值之后，视频整合装置筛选出两个间隔预设数值帧数的所述人物图像中相对应的像素点的像素差值为零的像素点占所述人物图像的总像素点比值超过预设第三阈值的人物图像，生成降帧人物图像。其中，预设第三阈值可以设置为50％，预设第三阈值也可以设置为60％。

具体的，将A与A1做像素差值为零，B与B1做像素差值{R:00,G:1,B:00}，C与C1做像素差值0，D与D1做像素差值0。其中第一人物图像与第二人物图像的像素点有25％像素差值不为零，视频整合装置将第1张人物图像和第2张人物图像筛选出，生成降帧人物图像，依次类推，得到包含多张图片的降帧人物图像。

本实施例通过上述方案，将两个间隔预设数值帧数的所述人物图像进行比对；筛选出相似度超过预设第三阈值的两个间隔预设数值帧数的所述人物图像，生成降帧人物图像。由此，通过判断视频中是否出现了人物移动和根据人物的图像进行降帧，实现了依据视频中人物的动态行为整合视频内容的功能，减小了视频存储的大小，缩短了视频的播放时间，实现了根据识别视频中关键人物的行为整合视频内容的功能。

进一步地，参照图8，图8为本发明视频整合方法第六实施例的流程示意图。基于上述图3、图4、图5或图6所示的实施例，步骤S30根据所述降帧人物图像在所述视频中获取背景画面，可以包括：

步骤S33，将与所述降帧人物图像对应的所述帧画面筛选出，生成筛选帧画面；

在本实施例中，视频整合装置在得到降帧人物图像之后，获取降帧人物图像的时间标记，根据降帧人物图像的时间标记查找同一个时间标记的帧画面，将与降帧人物图像同一个时间标记的帧画面筛选出，生成筛选帧画面。

步骤S34，将相邻所述筛选帧画面进行比对，筛选出相似度超过预设第四阈值的相邻所述筛选帧画面，生成背景画面。

在本实施例中，视频整合装置得到筛选帧画面之后，视频整合装置相邻所述筛选帧画面进行比对，筛选出相似度超过预设第四阈值的相邻所述筛选帧画面，生成背景画面。其中，预设第四阈值可以是认为进行设置的，是用于筛选出在播放人物图像时，画面不显得突兀的而进行设置的，预设第四阈值可以设置为50％，预设第四阈值也可以设置为60％。

具体的，第3张筛选帧画面有E、F、G、H四个像素点，第4张筛选帧画面有E1、F1、G1、H1四个像素点，其中，E与E1在图片中处于相同的，也即E与E1相对应；F与F1在图片中处于相同的，也即F与F1相对应；G与G1在图片中处于相同的，也即G与G1相对应；H与H1在图片中处于相同的，也即H与H1相对应。E点的像素值为{R:255,G:00,B:00}，F点的像素值{R:255,G:123,B:00}，G点的像素值为{R:255,G:00,B:215}，H点的像素值为{R:00,G:00,B:215}。E1点的像素值为{R:255,G:00,B:00}，F1点的像素值{R:255,G:123,B:00}，G1点的像素值为{R:255,G:00,B:215}，H1点的像素值为{R:00,G:00,B:200}。将E与E1做像素差值，F与F1做像素差值，G与G1做像素差值，H与H1做像素差值。将E与E1做像素差值为零，F与F1做像素差值0，G与G1做像素差值0，H与H1做像素差值{R:00,G:00,B:15}。其中第3张筛选帧画面与第4张筛选帧画面的像素点有25％像素差值不为零，视频整合装置将第3张筛选帧画面和第4张筛选帧画面生成降帧人物图像。

本实施例通过上述方案，将与所述降帧人物图像对应的所述帧画面筛选出，生成筛选帧画面；将相邻所述筛选帧画面进行比对，筛选出相似度超过预设第四阈值的相邻所述筛选帧画面，生成背景画面。由此，通过判断视频中是否出现了人物移动和根据人物的图像进行降帧，实现了依据视频中人物的动态行为整合视频内容的功能，减小了视频存储的大小，缩短了视频的播放时间，实现了根据识别视频中关键人物的行为整合视频内容的功能。

本发明还提供一种视频整合装置。

本发明视频整合装置包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的视频整合程序，所述视频整合程序被所述处理器执行时实现如上所述的视频整合方法的步骤。

其中，在所述处理器上运行的视频整合程序被执行时所实现的方法可参照本发明视频整合方法各个实施例，此处不再赘述。

本发明还提供一种计算机可读存储介质。

本发明计算机可读存储介质上存储有视频整合程序，所述视频整合程序被处理器执行时实现如上所述的视频整合方法的步骤。

其中，在所述处理器上运行的视频整合程序被执行时所实现的方法可参照本发明视频整合方法各个实施例，此处不再赘述。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。

上述本发明实施例序号仅为了描述，不代表实施例的优劣。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (9)

1.一种视频整合方法，其特征在于，所述视频整合方法包括如下步骤：

获取视频，并检测所述视频中是否存在人物移动；

所述检测所述视频中是否存在人物移动的步骤，包括：

读取所述视频的帧画面；根据预设的帧差算法，检测相邻所述帧画面是否符合第一条件，其中所述第一条件为：相邻所述帧画面中存在像素移动的第一目标面积与所述帧画面的总面积的第一比值大于预设第一阈值；若相邻所述帧画面符合第一条件，则判定所述视频中存在人物移动；

若所述视频中出现人物移动，则获取所述视频中的人物图像；

对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面；

所述对所述人物图像进行降帧处理得到降帧人物图像的步骤，包括：

将两个间隔预设数值帧数的所述人物图像进行比对；筛选出两个间隔预设数值帧数的所述人物图像中相对应的像素点的像素差值为零的像素点占所述人物图像的总像素点比值超过预设第三阈值帧数的人物图像，生成降帧人物图像；

根据时间顺序将所有所述降帧人物图像和所述背景画面进行叠加整合得到整合视频。

2.如权利要求1所述的视频整合方法，其特征在于，所述检测所述视频中是否存在人物移动的步骤之后，还包括：

若相邻所述帧画面不符合第一条件，则判定所述视频中不存在人物移动。

3.如权利要求2所述的视频整合方法，其特征在于，所述对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面的步骤之前，包括：

根据所述帧画面，检测所述人物移动的持续时长是否大于或等于预设时长；

若所述持续时长大于或等于预设时长，则执行：对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面的步骤。

4.如权利要求3所述的视频整合方法，其特征在于，所述根据所述帧画面，检测所述人物移动的持续时长是否大于或等于预设时长的步骤，包括：

检测两个间隔预设时长的所述帧画面是否满足第二条件，其中所述第二条件为两个间隔预设时长的帧图像存在像素移动的第二目标面积与所述帧画面的总面积的第二比值是否大于预设第二阈值；

若两个间隔预设时长的所述帧画面符合第二条件，则判定持续时长大于或等于预设时长；

若两个间隔预设时长的所述帧画面不符合第二条件，则判定持续时长小于预设时长。

5.如权利要求3所述的视频整合方法，其特征在于，所述根据所述帧画面，检测所述人物移动的持续时长是否大于或等于预设时长的步骤之后，包括：

若所述持续时长小于预设时长，则获取下一时段的视频。

6.如权利要求1所述的视频整合方法，其特征在于，所述对所述人物图像进行降帧处理得到降帧人物图像，并根据所述降帧人物图像在所述视频中获取背景画面的步骤之前，包括：

根据人物轮廓算法获取所述帧画面中人物数量；

根据所述人物数量得到所述预设数值，其中所述人物数量与所述预设数值成正比。

7.如权利要求1或6所述的视频整合方法，其特征在于，所述根据所述降帧人物图像在所述视频中获取背景画面的步骤，包括：

将与所述降帧人物图像对应的所述帧画面筛选出，生成筛选帧画面；

将相邻所述筛选帧画面进行比对，筛选出相似度超过预设第四阈值的相邻所述筛选帧画面，生成背景画面。

8.一种视频整合装置，其特征在于，所述视频整合装置包括：存储器、处理器及存储在所述存储器上并在所述处理器上运行的视频整合程序，所述视频整合程序被所述处理器执行时实现如权利要求1至7中任一项所述的视频整合方法的步骤。

9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有视频整合程序，所述视频整合程序被处理器执行时实现如权利要求1至7中任一项所述的视频整合方法的步骤。