CN108307127A - 视频处理方法及计算机存储介质、终端 - Google Patents
视频处理方法及计算机存储介质、终端 Download PDFInfo
- Publication number
- CN108307127A CN108307127A CN201810032473.8A CN201810032473A CN108307127A CN 108307127 A CN108307127 A CN 108307127A CN 201810032473 A CN201810032473 A CN 201810032473A CN 108307127 A CN108307127 A CN 108307127A
- Authority
- CN
- China
- Prior art keywords
- image
- sound
- video
- special efficacy
- effect
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Circuits (AREA)
Abstract
本发明涉及软件应用领域,具体涉及一种视频处理方法及计算机存储介质、终端,所述方法包括:获取待处理的视频;从所述视频中识别出待处理的图像;根据所述图像的特点,获取具有声音的特效;根据所述特效处理所述图像,生成包含特效的视频。本发明通过从视频中识别出待处理的图像,将视频中的背景与主体画面进行分离然后根据图像的特点获取具有声音的特效,根据所述特效处理所述图像,生成包含声音特效的视频,使得制作出的具有特效的视频的效果更多样、生动、炫酷,不需使用专业的视频编辑软件,简单、快速地制作出更具视觉效果的视频。
Description
技术领域
本发明涉及软件应用处理领域,具体涉及一种视频处理方法及计算机存储介质、终端。
背景技术
随着互联网技术的快速发展,越来越多的人们利用基于互联网的社交应用及平台与其他社交用户分享自己的作品,尤其是UGC(User Generated Content,用户原创内容)概念的不断深化和流媒体技术的发展,人们乐于通过移动终端录制视频作品然后上传到应用及平台上与他人分享,应用上集中展示了不同用户发布的视频,其他用户通过应用即可浏览、观看视频作品,为了制作更有趣的视频,应用会为用户提供简单的视频滤镜制作不同的视频特效,如“黑白滤镜”、“老电影滤镜”,而目前应用提供的滤镜往往只是对视频颜色的处理,很少有与视频的背景画面、视频中的主体动作进行结合,在移动终端上难以简单、快速地制作出更具视觉效果的视频。
发明内容
为克服以上技术问题,特别是现有技术无法简单、快速地制作出更具视觉效果的视频的问题,特提出以下技术方案:
第一方面,本发明提供了一种视频处理方法,包括:
获取待处理的视频;
从所述视频中识别出待处理的图像;
根据所述图像的特点,获取具有声音的特效;
根据所述特效处理所述图像,生成包含特效的视频。
具体的,所述获取待处理的视频;从所述视频中识别出待处理的图像,包括:
获取待处理的纯色背景的视频;以所述纯色背景作为参考,从所述视频中识别出在纯色背景上出现的图像,把该图像作为待处理的图像;或
获取待处理的静态背景的视频;以所述静态背景作为参考,从所述视频中识别出在静态背景上出现的图像,把该图像作为待处理的图像。
可选的,所述根据所述图像的特点,获取具有声音的特效,包括:
识别出图像的特点,从本终端应用特效库中,获取所述特点匹配的具有声音的特效;或
识别出图像的特点,从应用服务器中,获取所述特点对应的应用当前热门的具有声音的特效。
进一步的,所述特效包含图形效果及声音;所述根据所述图像的特点,获取具有声音的特效,包括:
根据图像的特点匹配相应的图形效果;
根据用户的指令选择声音;
由所述图形效果和所述声音组成特效。
进一步的,所述特效包含两种以上图形效果和两种以上声音;所述根据所述特效处理所述图像,生成包含特效的视频,包括:
从所述特效的所述两种以上图形效果中,选择与识别出的图像的特点相匹配的图形效果;.
从所述特效的所述两种以上声音中,选择与识别出的图像的特点相匹配的声音;
根据所选择的图形效果处理所述图像,在根据图形效果处理所述图像时添加所选择的声音,生成包含所述图形效果和声音的视频。
进一步的,所述特效包含图形效果和两种以上音调的声音;所述根据所述特效处理所述图像,生成包含特效的视频,包括:
获取所述图像的帧变化,从所述特效的所述两种以上音调的声音中,根据所述帧变化选择相匹配的音调的声音;
根据所选择的图形效果处理所述图像,在根据图形效果处理所述图像时添加所选择的声音,生成包含所述图形效果和声音的视频。
进一步的,所述特效包含与图像播放位置的对应关系;所述根据所述特效处理所述图像,包括:
根据所述对应关系,获取图像的当前播放位置对应的特效,使用所述特效处理当前播放位置的图像。
较佳的,所述特效包含图形效果及声音,所述图形效果包括对所述图像变换大小、变换方向及根据预定的路径移动所述图像的图形效果,所述声音为所述图形效果相匹配的声音;所述根据所述特效处理所述图像,包括:
根据所述图形效果变换所述图像的大小、方向及根据预定的路径移动所述图像,并在相应的图形效果处匹配相应的声音。
第二方面,本发明还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现上述的视频处理方法。
第三方面,本发明还提供了一种终端,所述终端包括一个或多个处理器、存储器、一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行上述的视频处理方法。
本发明与现有技术相比,具有以下有益效果:
本发明通过从视频中识别出待处理的图像,将视频中的背景与主体画面进行分离,然后根据图像的特点获取具有声音的特效,根据所述特效处理所述图像,生成包含特效的视频,使得制作出的具有特效的视频的效果更多样、生动、炫酷,并且不需使用专业的视频编辑软件,简单、快速地制作出更具视觉效果的视频。
此外,本发明通过识别待处理的图像的特点所获取的特效中还包含两种以上图形效果和两种以上声音,同一特效包含多种不同表现效果,并且根据图像的特点选择不同的图形效果和声音的特效进行处理,从而产生不同的效果的视频,使得合成的具有特效的视频更加符合现实、自然,同时满足不同用户的使用需求。
再者,本发明还可对识别出的图像进行大小变换、方向旋转、移动等图形处理,在特定时间段出现的图像进行对应的图形处理,同时匹配对应的声音,减少对视频全部时间段进行特效处理所耗费的资源,提高视频的合成效率;同时根据图像的帧变化匹配不同的声音跟图形效果,以增强视频的主题,提高视频的趣味性。
本发明附加的方面和优点将在下面的描述中部分给出,这些将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为本发明视频处理方法一实施例流程示意图;
图2为本发明视频处理方法另一实施例流程示意图;
图3为本发明终端的一实施例结构示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能解释为对本发明的限制。
本技术领域技术人员可以理解,除非特意声明,这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是,本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作。
本技术领域技术人员可以理解,除非另外定义,这里使用的所有术语(包括技术术语和科学术语),具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是,诸如通用字典中定义的那些术语,应该被理解为具有与现有技术的上下文中的意义一致的意义,并且除非像这里一样被特定定义,否则不会用理想化或过于正式的含义来解释。
本领域技术人员应当理解,本发明所称的“应用”、“应用程序”、“应用软件”以及类似表述的概念,是业内技术人员所公知的相同概念,是指由一系列计算机指令及相关数据资源有机构造的适于电子运行的计算机软件。除非特别指定,这种命名本身不受编程语言种类、级别,也不受其赖以运行的操作系统或平台所限制。理所当然地,此类概念也不受任何形式的终端所限制。
在一种实施例中,本发明提供一种视频处理方法,如图1所示,该方法包括:
S100:获取待处理的视频。
S200:从所述视频中识别出待处理的图像。
本实施例的应用场景为视频应用,应用提供快捷制作视频特效的功能,当用户利用应用进行录制视频时,应用首先指导用户录制背景画面,然后待背景画面确定后指导用户录制主体画面,视频录制完成后用户选择对视频作特效处理,该视频即为待处理的视频。本实施例的应用继而获取该待处理的视频,然后从所述待处理的视频中识别出待处理的图像,也即所述主体画面。
具体的,本实施例中,所述获取待处理的视频;从所述视频中识别出待处理的图像的一种实现方式为:获取待处理的纯色背景的视频;以所述纯色背景作为参考,从所述视频中识别出在纯色背景上出现的图像,把该图像作为待处理的图像。
在录制视频时,用户首先录制纯色背景,然后在纯色背景下录制了主体画面,应用以所述纯色背景作为参考,从在纯色背景下录制了主体画面的视频中,减去开始时录制的纯色背景的成分,从而识别出视频中的主体画面,也即识别出待处理视频中的待处理图像。
所述获取待处理的视频;从所述视频中识别出待处理的图像的另一种实现方式为:获取待处理的静态背景的视频;以所述静态背景作为参考,从所述视频中识别出在静态背景上出现的图像,把该图像作为待处理的图像。
在录制视频时,用户首先录制静态背景,然后在静态背景下录制了主体画面,静态背景不变化,应用从在静态背景下录制了主体画面的视频中,减去开始时录制的静态背景的相同成分,从而识别出视频中的主体画面,也即识别出待处理视频中的待处理的图像。本实施例中所述主体画面随着视频录制的时间而变化,本实施例的待处理的图像包含至少两帧连续的图片。
S300:根据所述图像的特点,获取具有声音的特效。
在识别出待处理的图像后,待处理的图像即为视频中的主体画面,本实施例根据主体画面的特点获取相应具有声音的特效,应用首先识别出待处理的图像的特点,即主体画面是什么,在做什么,进一步的,识别图像的特点还包括识别出主体画面的色彩,然后以特效能够与所述图像的特点较自然地结合作为选取特效的因素之一获取相应的具有声音的特效,所述特效不仅包含声音效果、还包含处理所述图像的图形效果。例如,识别出的图像的特点是“人物跳舞”,获取具有声音的特效为“舞台”跟“鼓声”;识别出的图像的特点是“动物奔跑”,获取具有声音的特效为“草原”跟“动物奔跑声”。进一步的,为了后续图像与特效的更好结合,本实施例还根据图像的大小控制作用在图像上的图形效果的大小、远近、颜色,例如根据人物的大小缩放舞台的大小,根据动物的大小控制草原的远近。
S400:根据所述特效处理所述图像,生成包含特效的视频。
在获取了具有声音的特效后,根据特效包含的图形效果处理每一帧的图像,进而得到包含特定图形效果的图像的视频帧,然后将所述视频帧与所述特效包含的声音效果合成,生成具有声音的特效的视频。
本实施例通过从视频中识别出待处理的图像,将视频中的背景与主体画面进行分离,然后根据图像的特点获取具有声音的特效,根据所述特效处理所述图像,生成包含特效的视频,让制作出的具有特效的视频的效果更多样、生动、炫酷,并且不需使用专业的视频编辑软件,简单、快速地制作出更具视觉效果的视频。
进一步的,本发明的实施例中,所述根据所述图像的特点,获取具有声音的特效的一种实现方式是识别出图像的特点,从本终端应用特效库中,获取所述特点匹配的具有声音的特效;当识别出视频中的主体画面后,从本终端应用的特效库中选取相匹配的具有声音的特效素材,本终端应用的特效库的特效素材是由预先从应用服务器中获取或在应用安装时内置于应用中,通过本地特效库能够快速地获取所述具有声音的特效,从而更快地生成包含所述特效的视频。
所述根据所述图像的特点,获取具有声音的特效的另一种实现方式是识别出图像的特点,从应用服务器中,获取所述特点对应的应用当前热门的具有声音的特效;当识别出视频中的主体画面后,从应用服务器中获取应用当前热门的具有声音的特效,当某一特效受欢迎或临近某一节日时,为了满足大多数用户想要录制相同主题视频的需求,应用从服务器中获取应用当前热门的具有声音的特效对图像进行处理,例如应用服务器中上线了“庆祝新年”相关的特效,临近新年时大多数用户想要通过录制视频拜年,当应用识别出所述图像的特点是“人物作揖”时,匹配到应用当前热门的特效为“庆祝新年”海报与“新年贺词”声音,从而为用户快速合成在新年海报前讲述新年贺词的拜年视频。
本发明的实施例中,所述特效包含图形效果及声音,所述根据所述图像的特点,获取具有声音的特效,包括:
根据图像的特点匹配相应的图形效果;根据用户的指令选择声音;由所述图形效果和所述声音组成特效。
当特效包含对图像的图形效果及声音时,在识别出图像的特点后,由应用自动为图像匹配相应的图形效果,同时应用为用户提供多种声音进行自定义选择,当用户选定某一声音后,应用响应于用户的选择指令选择对应声音,然后由所述图形处理跟声音组成特效,根据所述图形效果对所述图像进行处理后,合成具有图形效果的视频帧,再将所述声音与所述视频帧合成,生成具有图形效果跟声音的特效的视频。
进一步的,如图2所示,本发明的一种实施例,所述特效包含两种以上图形效果和两种以上声音,此时,所述根据所述特效处理所述图像,生成包含特效的视频,包括:
S401:从所述特效的所述两种以上图形效果中,选择与识别出的图像的特点相匹配的图形效果;.
S402:从所述特效的所述两种以上声音中,选择与识别出的图像的特点相匹配的声音;
S403:根据所选择的图形效果处理所述图像,在根据图形效果处理所述图像时添加所选择的声音,生成含所述图形效果和声音的视频。
在识别出视频中的图像后,不同视频的图像的特点各不相同,如图像是人物,识别图像的特点包括识别人物的年龄、性别等,本实施例中,同一特效包含了两种以上的图形效果和两种以上声音,对于同一特效,当识别出不同的图像的特点,选择该特效不同的图形效果与声音,然后根据所选择的图形效果处理所述图像,在根据图形效果处理所述图像时添加所选择的声音,进而生成包含所述图形效果和声音的视频。例如,特效为“穿新年衣服”图形效果跟“讲新年贺词”声音,当识别出的图像的特点是“一位成年人”时,选择与图像的特点相匹配的图形效果为“成年人的新年衣服”,相匹配的声音为“成年人声音讲新年贺词”,而当识别出的图像的特点是“一位儿童”时,选择与图像的特点相匹配的图形效果为“儿童的新年衣服”,相匹配的声音效果为“儿童声音讲新年贺词”。本实施例中,一个相同主题的特效包含多种(两种以上)图形效果跟声音,当识别出不同的图像特点时,选用不同的图形效果跟声音,使得合成的具有特效的视频更加符合现实、自然,同时满足不同用户的使用需求。
进一步的,当识别出的图像特点包括两个以上的不同主体时,为不同的主体选择不同的图形效果跟声音。例如,特效为“穿新年衣服”图形效果跟“讲新年贺词”声音,当识别出的图像的特点是“一位成年人跟一位儿童”时,为成年人匹配的图形效果为“成年人的新年衣服”,匹配的声音为“成年人声音讲新年贺词”,为儿童匹配的图形效果为“儿童的新年衣服”,匹配的声音效果为“儿童声音讲新年贺词”,进而在生成的具有特效的视频中,同时存在成年人跟儿童声音讲新年贺词,从而达到更好的视觉、听觉效果。
进一步的,本发明的一种实施例,所述特效包含图形效果和两种以上音调的声音;所述根据所述特效处理所述图像,生成包含特效的视频,包括:
获取所述图像的帧变化,从所述特效的所述两种以上音调的声音中,根据所述帧变化选择相匹配的音调的声音;
根据所选择的图形效果处理所述图像,在根据图形效果处理所述图像时添加所选择的声音,生成包含所述图形效果和声音的视频。
在识别出视频中的图像后,计算所述图像的帧变化,本实施例按照预设取帧间隔选取特定的图像的帧,然后根据SSIM(Structural Similarity Index,结构相似性)计算所选取的相邻帧的帧变化,当SSIM值越大时,表示两帧图片的画面越接近,当SSIM值越小时,表示两帧图片的画面相差越大。本实施例中,当两帧图像的SSIM值小于预置值时,确定该两帧图像的变化大,此时选择相匹配的音调的声音,例如特效中包含高、低音调的声音,当出现选定的两帧图像的SSIM值小于预置值时,将声音从地音调的声音切换选择为高音调的声音,然后在根据图形效果处理所述图像时添加所选择的声音,生成包含所述图形效果和声音的视频。例如,识别出的图像的特点是“手臂的上下摇摆”,当手臂的上下摇摆速率较小时,所选取的两帧图像的SSIM值较大,此时视频的特效的声音为低音调的声音,当手臂的上下摇摆速率较大时,所选取的两帧图像的SSIM值相应减小,当所选取的两帧图像的SSIM值小于预置值时,此刻视频的特效的声音切换为高音调的声音。进一步的,本实施例还根据图像的帧变化调整图形效果的表现程度,当所选取的两帧图像的SSIM值较大时,图形效果的表现程度较小,当所选取的两帧图像的SSIM值较轻时,图形效果的表现程度较重,例如伴随着“手臂的上下摇摆”添加的图形效果是星星,当手臂的上下摇摆速率较小,星星数量较少,当手臂的上下摇摆速率增大时,星星数量随之增多,以此更好地表现视频内容。
进一步的,本发明的实施例中,所述特效还包含与图像播放位置的对应关系;当所述特效包含了与图像播放位置的对应关系时,所述根据所述特效处理所述图像,包括:
根据所述对应关系,获取图像的当前播放位置对应的特效,使用所述特效处理当前播放位置的图像。
由于待处理的图像并非出现在整个视频的所有时间段,或者待处理的图像在整个视频的不同时间段的表现主题不同,当应用识别出待处理的图像后,根据特效包含与图像播放位置的对应关系对所述图像进行处理,所述图像播放位置为图像在视频中的时间点位置,当视频中的图像出现时,所述特效的图形效果相应地对所述图像进行处理,当图像消失时,所述图形效果相应地消失或更换,同样的,当图像出现时,所述特效具有的声音与特效的图形效果相匹配出现,当图像消失时,所述声音相应地消失或更换,以此合成出更加自然的具有特效的视频。例如识别出的图像是“人物”,获取的特效是“外星人入侵”,特效“外星人入侵”包含“飞碟飞来->飞碟发射光束->飞碟收回光束->飞碟飞走”的图形效果及相应的声音,当图像“人物”在视频中出现后,所述特效“外星人入侵”才开始实现,在不同时间段匹配不同的图形效果跟声音,以此合成出更加自然的具有特效的视频。
进一步的,本发明的一种实施例,所述特效包含图形效果及声音,所述图形效果包括对所述图像变换大小、变换方向及根据预定的路径移动所述图像的图形效果,所述声音为所述图形效果相匹配的声音;所述根据所述特效处理所述图像,包括:
根据所述图形效果变换所述图像的大小、方向及根据预定的路径移动所述图像,并在相应的图形效果处匹配相应的声音。
本实施例中,所获取的特效还可以对识别出的待处理的图像进行大小变换、方向旋转、移动等处理,即特效中包含对所述图像变换大小、变换方向及移动的图形效果,同时还包含与所述图形效果相匹配的声音,在根据图形效果处理所述图像时,根据所述图形效果变化所述图像的大小、方向及根据所述移动路径移动所述图像,并在处理所述图像时添加相应的声音。例如识别出的图像是“人物”,获取的特效是“外星人入侵”,特效“外星人入侵”包含“飞碟飞来->飞碟发射光束->飞碟收回光束->飞碟飞走”的图形效果及相应的声音,在“飞碟发射光束->飞碟收回光束”的期间内将识别出的图像“人物”吸进飞碟,在此期间内将识别出的图像“人物”逐渐变小,并且按顺时针方向旋转,同时沿着预定的路径向飞碟移动,最后被吸进飞碟中,同时,在根据图形效果处理图像的过程中匹配相应的声音效果,通过对待处理的图像进行大小变换、方向旋转、移动等处理,同时匹配相应的声音,从而制作出更加生动、活跃的视频。
在另一种实施例中,本发明提供了一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现上述实施例所述的视频处理方法。其中,所述计算机可读存储介质包括但不限于任何类型的盘(包括软盘、硬盘、光盘、CD-ROM、和磁光盘)、ROM(Read-Only Memory,只读存储器)、RAM(Random AcceSS Memory,随即存储器)、EPROM(EraSable Programmable Read-Only Memory,可擦写可编程只读存储器)、EEPROM(Electrically EraSable Programmable Read-Only Memory,电可擦可编程只读存储器)、闪存、磁性卡片或光线卡片。也就是,存储设备包括由设备(例如,计算机、手机)以能够读的形式存储或传输信息的任何介质,可以是只读存储器,磁盘或光盘等。
本发明实施例提供的一种计算机可读存储介质,可实现获取待处理的视频;从所述视频中识别出待处理的图像;根据所述图像的特点,获取具有声音的特效;根据所述特效处理所述图像,生成包含特效的视频。通过从视频中识别出待处理的图像,将视频中的背景与主体画面进行分离,然后根据图像的特点获取具有声音的特效,根据所述特效处理所述图像,生成包含特效的视频,让制作出的具有特效的视频的效果更多样、生动、炫酷,并且不需使用专业的视频编辑软件,简单、快速地制作出更具视觉效果的视频。此外,本发明提供的计算机可读存储介质还可实现识别待处理的图像的特点所获取的特效中还包含两种以上图形效果和两种以上声音,同一特效包含多种不同表现效果,并且根据图像的特点选择不同的图形效果和声音的特效进行处理,从而产生不同的效果的视频,使得合成的具有特效的视频更加符合现实、自然,同时满足不同用户的使用需求。另外,本发明提供的计算机可读存储介质还可实现对识别出的图像进行大小变换、方向旋转、移动等图形处理,在特定时间段出现的图像进行对应的图形处理,同时匹配对应的声音,减少对视频全部时间段进行特效处理所耗费的资源,提高视频的合成效率;同时根据图像的帧变化匹配不同的声音跟图形效果,以增强视频的主题,提高视频的趣味性。
本发明实施例提供的计算机可读存储介质可以实现上述视频处理方法的实施例,具体功能实现请参见方法实施例中的说明,在此不再赘述。
此外,在又一种实施例中,本发明还提供一种终端,如图3所示,所述终端可以包括一个或者一个以上的处理器301,还包括存储器302、WiFi(wireless fidelity,无线保真)电路303、RF(Radio Frequency,射频)电路304、音频电路305、传感器306、输出设备307、输入设备304、电源309,处理器301是终端的控制中心,利用各种接口和线路连接以上各部分。本领域技术人员可以理解,图3中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
WiFi电路303可为用户提供无线局域网或互联网访问;其可包括天线、WiFi模块等。RF电路304可收发信息,或在通话过程中信号的接收和发送;其可包括天线、至少一个放大器、调谐器、一个或多个振荡器、耦合器、双工器等。音频电路305可将接收到的音频数据转换成电信号,传输到扬声器,也可将传声器收集的声音信号转换为音频数据,发给处理器301处理;其可设置扬声器、传声器、耳机接口等。传感器306可用于感应外界信号,并发给处理器301处理;其可包括运动传感器、光传感器等。输出设备307可用于显示各种信号;其可为采用LCD(Liquid Crystal Display,液晶显示器)、OLED(Organic Light-EmittingDiode,有机发光二极管)等形式来配置显示面板。输入设备304可用于输入数字和字符等信息;其可为物理按键、触控面板等。电源309可为终端各部分供电,通过电源管理系统与处理器309逻辑连接;其可包括一个或一个以上的直流或交流电源、充电系统、电源状态指示器等组件。存储器302可用于存储软件程序以及模块;其可为计算机可读存储介质,具体的为硬盘、闪存等。处理器是终端的控制中心,通过运行或执行存储在存储器302内的软件程序和/或模块,以及调用存储在存储器302的数据,执行终端各种功能、处理终端数据。
作为一个实施例,终端包括:一个或多个处理器301,存储器302,一个或多个应用程序,其中所述一个或多个应用程序被存储在存储器302中并被配置为由所述一个或多个处理器301执行,所述一个或多个程序配置用于执行以上实施例所述的视频处理方法。
本发明实施例提供的一种终端,可实现获取待处理的视频;从所述视频中识别出待处理的图像;根据所述图像的特点,获取具有声音的特效;根据所述特效处理所述图像,生成包含特效的视频。通过从视频中识别出待处理的图像,将视频中的背景与主体画面进行分离,然后根据图像的特点获取具有声音的特效,根据所述特效处理所述图像,生成包含特效的视频,让制作出的具有特效的视频的效果更多样、生动、炫酷,并且不需使用专业的视频编辑软件,简单、快速地制作出更具视觉效果的视频。此外,本发明提供的终端还可实现识别待处理的图像的特点所获取的特效中还包含两种以上图形效果和两种以上声音,同一特效包含多种不同表现效果,并且根据图像的特点选择不同的图形效果和声音的特效进行处理,从而产生不同的效果的视频,使得合成的具有特效的视频更加符合现实、自然,同时满足不同用户的使用需求。另外,本发明提供的终端还可实现对识别出的图像进行大小变换、方向旋转、移动等图形处理,在特定时间段出现的图像进行对应的图形处理,同时匹配对应的声音,减少对视频全部时间段进行特效处理所耗费的资源,提高视频的合成效率;同时根据图像的帧变化匹配不同的声音跟图形效果,以增强视频的主题,提高视频的趣味性。
本发明实施例提供的终端可以实现上述提供的视频处理方法的实施例,具体功能实现请参见方法实施例中的说明,在此不再赘述。
以上所述仅是本发明的部分实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种视频处理方法,其特征在于,包括:
获取待处理的视频;
从所述视频中识别出待处理的图像;
根据所述图像的特点,获取具有声音的特效;
根据所述特效处理所述图像,生成包含特效的视频。
2.根据权利要求1所述的方法,其特征在于,所述获取待处理的视频;从所述视频中识别出待处理的图像,包括:
获取待处理的纯色背景的视频;以所述纯色背景作为参考,从所述视频中识别出在纯色背景上出现的图像,把该图像作为待处理的图像;或
获取待处理的静态背景的视频;以所述静态背景作为参考,从所述视频中识别出在静态背景上出现的图像,把该图像作为待处理的图像。
3.根据权利要求1所述的方法,其特征在于,所述根据所述图像的特点,获取具有声音的特效,包括:
识别出图像的特点,从本终端应用特效库中,获取所述特点匹配的具有声音的特效;或
识别出图像的特点,从应用服务器中,获取所述特点对应的应用当前热门的具有声音的特效。
4.根据权利要求1所述的方法,其特征在于,所述特效包含图形效果及声音;所述根据所述图像的特点,获取具有声音的特效,包括:
根据图像的特点匹配相应的图形效果;
根据用户的指令选择声音;
由所述图形效果和所述声音组成特效。
5.根据权利要求1所述的方法,其特征在于,所述特效包含两种以上图形效果和两种以上声音;所述根据所述特效处理所述图像,生成包含特效的视频,包括:
从所述特效的所述两种以上图形效果中,选择与识别出的图像的特点相匹配的图形效果;.
从所述特效的所述两种以上声音中,选择与识别出的图像的特点相匹配的声音;
根据所选择的图形效果处理所述图像,在根据图形效果处理所述图像时添加所选择的声音,生成包含所述图形效果和声音的视频。
6.根据权利要求1所述的方法,其特征在于,所述特效包含图形效果和两种以上音调的声音;所述根据所述特效处理所述图像,生成包含特效的视频,包括:
获取所述图像的帧变化,从所述特效的所述两种以上音调的声音中,根据所述帧变化选择相匹配的音调的声音;
根据所选择的图形效果处理所述图像,在根据图形效果处理所述图像时添加所选择的声音,生成包含所述图形效果和声音的视频。
7.根据权利要求1所述的方法,其特征在于,所述特效包含与图像播放位置的对应关系;所述根据所述特效处理所述图像,包括:
根据所述对应关系,获取图像的当前播放位置对应的特效,使用所述特效处理当前播放位置的图像。
8.根据权利要求7所述的方法,其特征在于,所述特效包含图形效果及声音,所述图形效果包括对所述图像变换大小、变换方向及根据预定的路径移动所述图像的图形效果,所述声音为所述图形效果相匹配的声音;所述根据所述特效处理所述图像,包括:
根据所述图形效果变换所述图像的大小、方向及根据预定的路径移动所述图像,并在相应的图形效果处匹配相应的声音。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现权利要求1至8任一项所述的视频处理方法。
10.一种终端,其特征在于,包括:
一个或多个处理器;
存储器;
一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个应用程序配置用于执行根据权利要求1至8任一项所述的视频处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810032473.8A CN108307127A (zh) | 2018-01-12 | 2018-01-12 | 视频处理方法及计算机存储介质、终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810032473.8A CN108307127A (zh) | 2018-01-12 | 2018-01-12 | 视频处理方法及计算机存储介质、终端 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108307127A true CN108307127A (zh) | 2018-07-20 |
Family
ID=62868972
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810032473.8A Pending CN108307127A (zh) | 2018-01-12 | 2018-01-12 | 视频处理方法及计算机存储介质、终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108307127A (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109495695A (zh) * | 2018-11-29 | 2019-03-19 | 北京字节跳动网络技术有限公司 | 运动物体视频特效添加方法、装置、终端设备及存储介质 |
CN109710255A (zh) * | 2018-12-24 | 2019-05-03 | 网易(杭州)网络有限公司 | 特效处理方法、特效处理装置、电子设备及存储介质 |
CN111507143A (zh) * | 2019-01-31 | 2020-08-07 | 北京字节跳动网络技术有限公司 | 表情图像效果生成方法、装置和电子设备 |
CN112395530A (zh) * | 2019-08-19 | 2021-02-23 | 北京字节跳动网络技术有限公司 | 数据内容的输出方法、装置、电子设备及计算机可读介质 |
CN112533058A (zh) * | 2019-09-17 | 2021-03-19 | 西安中兴新软件有限责任公司 | 视频处理方法、装置、设备及计算机可读存储介质 |
CN112804578A (zh) * | 2021-01-28 | 2021-05-14 | 广州虎牙科技有限公司 | 氛围特效生成方法、装置、电子设备和存储介质 |
WO2022017006A1 (zh) * | 2020-07-22 | 2022-01-27 | Oppo广东移动通信有限公司 | 视频处理方法、装置、终端设备及计算机可读存储介质 |
CN115350477A (zh) * | 2022-08-15 | 2022-11-18 | 北京字跳网络技术有限公司 | 游戏音效播放方法、装置、存储介质以及电子设备 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8612185B2 (en) * | 2009-10-15 | 2013-12-17 | Electronics And Telecommunications Research Institute | Device, system and method for simulating and saving information of metadata regarding film production |
CN103795897A (zh) * | 2014-01-21 | 2014-05-14 | 深圳市中兴移动通信有限公司 | 自动生成背景音乐的方法和装置 |
CN104486558A (zh) * | 2014-12-31 | 2015-04-01 | 厦门美图之家科技有限公司 | 一种模拟拍摄场景的视频处理方法和装置 |
CN104780339A (zh) * | 2015-04-16 | 2015-07-15 | 美国掌赢信息科技有限公司 | 一种即时视频中的表情特效动画加载方法和电子设备 |
CN106204426A (zh) * | 2016-06-30 | 2016-12-07 | 广州华多网络科技有限公司 | 一种视频图像处理方法和装置 |
CN106385591A (zh) * | 2016-10-17 | 2017-02-08 | 腾讯科技(上海)有限公司 | 视频处理方法及视频处理装置 |
CN107027053A (zh) * | 2017-05-08 | 2017-08-08 | 深圳Tcl数字技术有限公司 | 音频播放方法、终端及计算机可读存储介质 |
-
2018
- 2018-01-12 CN CN201810032473.8A patent/CN108307127A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8612185B2 (en) * | 2009-10-15 | 2013-12-17 | Electronics And Telecommunications Research Institute | Device, system and method for simulating and saving information of metadata regarding film production |
CN103795897A (zh) * | 2014-01-21 | 2014-05-14 | 深圳市中兴移动通信有限公司 | 自动生成背景音乐的方法和装置 |
CN104486558A (zh) * | 2014-12-31 | 2015-04-01 | 厦门美图之家科技有限公司 | 一种模拟拍摄场景的视频处理方法和装置 |
CN104780339A (zh) * | 2015-04-16 | 2015-07-15 | 美国掌赢信息科技有限公司 | 一种即时视频中的表情特效动画加载方法和电子设备 |
CN106204426A (zh) * | 2016-06-30 | 2016-12-07 | 广州华多网络科技有限公司 | 一种视频图像处理方法和装置 |
CN106385591A (zh) * | 2016-10-17 | 2017-02-08 | 腾讯科技(上海)有限公司 | 视频处理方法及视频处理装置 |
CN107027053A (zh) * | 2017-05-08 | 2017-08-08 | 深圳Tcl数字技术有限公司 | 音频播放方法、终端及计算机可读存储介质 |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109495695A (zh) * | 2018-11-29 | 2019-03-19 | 北京字节跳动网络技术有限公司 | 运动物体视频特效添加方法、装置、终端设备及存储介质 |
CN109710255A (zh) * | 2018-12-24 | 2019-05-03 | 网易(杭州)网络有限公司 | 特效处理方法、特效处理装置、电子设备及存储介质 |
CN109710255B (zh) * | 2018-12-24 | 2022-07-12 | 网易(杭州)网络有限公司 | 特效处理方法、特效处理装置、电子设备及存储介质 |
CN111507143A (zh) * | 2019-01-31 | 2020-08-07 | 北京字节跳动网络技术有限公司 | 表情图像效果生成方法、装置和电子设备 |
CN111507143B (zh) * | 2019-01-31 | 2023-06-02 | 北京字节跳动网络技术有限公司 | 表情图像效果生成方法、装置和电子设备 |
US12020469B2 (en) | 2019-01-31 | 2024-06-25 | Beijing Bytedance Network Technology Co., Ltd. | Method and device for generating image effect of facial expression, and electronic device |
CN112395530A (zh) * | 2019-08-19 | 2021-02-23 | 北京字节跳动网络技术有限公司 | 数据内容的输出方法、装置、电子设备及计算机可读介质 |
CN112533058A (zh) * | 2019-09-17 | 2021-03-19 | 西安中兴新软件有限责任公司 | 视频处理方法、装置、设备及计算机可读存储介质 |
WO2022017006A1 (zh) * | 2020-07-22 | 2022-01-27 | Oppo广东移动通信有限公司 | 视频处理方法、装置、终端设备及计算机可读存储介质 |
CN112804578A (zh) * | 2021-01-28 | 2021-05-14 | 广州虎牙科技有限公司 | 氛围特效生成方法、装置、电子设备和存储介质 |
CN115350477A (zh) * | 2022-08-15 | 2022-11-18 | 北京字跳网络技术有限公司 | 游戏音效播放方法、装置、存储介质以及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108307127A (zh) | 视频处理方法及计算机存储介质、终端 | |
CN108234825A (zh) | 视频处理方法及计算机存储介质、终端 | |
Hjorth et al. | Gaming in social, locative and mobile media | |
US10091454B2 (en) | Recording events in a virtual world | |
CN110119815A (zh) | 模型训练方法、装置、存储介质及设备 | |
Vernallis et al. | The Oxford handbook of sound and image in digital media | |
CN108377334A (zh) | 短视频拍摄方法、装置及电子终端 | |
JP2019521449A (ja) | 永続的コンパニオンデバイス構成及び配備プラットフォーム | |
EP2291816A2 (en) | User avatar available across computing applications and devices | |
CN109985382A (zh) | 剧情节点的脚本执行方法、装置、设备及存储介质 | |
CN108282612A (zh) | 视频处理方法及计算机存储介质、终端 | |
Bozdog et al. | Worlds at our fingertips: reading (in) what remains of edith finch | |
CN110732136B (zh) | 局外环境下局内行为的预览方法、装置、终端及存储介质 | |
JP2020162882A (ja) | サーバシステムおよびプレイデータコミュニティシステム | |
CN113965542B (zh) | 应用程序中的声音消息显示方法、装置、设备及存储介质 | |
WO2023230423A1 (en) | Combining content in a preview state | |
WO2022006118A1 (en) | Modifying computer simulation video template based on feedback | |
WO2022006124A1 (en) | Generating video clip of computer simulation from multiple views | |
CN107551546A (zh) | 一种游戏视频的生成方法和装置 | |
US20220297015A1 (en) | Selection of video widgets based on computer simulation metadata | |
KR102254865B1 (ko) | 이야기 생성을 위한 카드세트 및 이를 이용한 이야기 생성 방법 | |
CN114307174A (zh) | 对局数据的分享方法、装置、设备及介质 | |
US11554324B2 (en) | Selection of video template based on computer simulation metadata | |
US20240357286A1 (en) | Enhance virtual audio capture in augmented reality (ar) experience recordings | |
WO2018183812A1 (en) | Persistent companion device configuration and deployment platform |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180720 |