本申请实施例涉及多媒体领域,尤其涉及一种视频帧提取方法、装置、电子设备和存储介质。
背景技术:
随着多媒体技术的不断发展,越来越多的用户选择在网络上观看视频。而视频帧对于视频有着重要的作用,例如:视频播放的提供方在将视频上传到网络之前通常需要对视频的内容进行审核,防止涉黄涉暴的视频被上传,一般会通过提取并审核视频中的若干视频帧从而实现对视频内容的审核;又如:视频的提供方会提取视频中的某一视频帧作为封面以提高用户的点击意愿;又如:视频播放的提供者会提取视频中的若干视频帧,为用户提供拖动预览功能,以提高用户的观看体验。通常,视频或视频播放的提供方根据经验进行进行视频帧的提取,提取方式较为单一。
技术实现要素:
有鉴于此,第一方面,本申请实施例提供了一种视频帧提取方法,包括:
获取视频帧的应用方式,视频帧的应用方式包括封面,审核以及拖动预览;
当视频帧的应用方式为封面时,提取目标视频中的一个视频帧;
当视频帧的应用方式为审核时,根据目标视频的第一信息提取第一数量的视频帧,第一信息包括目标视频的场景类型,目标视频的场景类型至少包括综艺娱乐,教育以及游戏直播,第一数量由目标视频的场景类型确定;
当视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,第二数量由目标视频的时长确定。
可选地,在一种具体地实施方式中,当视频帧的应用方式为封面时,提取目标视频中的一个视频帧,包括:提取目标视频中包含第一元素类中的所有元素,且画质最高的视频帧,第一元素类为目标视频中出现频率大于第一阈值的元素的集合,第一阈值为使第一元素类至少包括一种元素的值。
可选地,在一种具体地实施方式中,根据目标视频的变化频率确定第一信息。
可选地,在一种具体地实施方式中,根据目标视频的变化频率确定第一信息,包括:
等间隔提取目标视频中的视频帧;
将等间隔提取的视频帧中的关键帧的比例作为目标视频的变化频率;
根据目标视频的变化频率确定第一信息。
可选地,在一种具体地实施方式中,第一数量由目标视频的场景类型确定,包括:
当目标视频的场景类型为综艺娱乐时,第一数量至少为12帧;
当目标视频的场景类型为教育时,第一数量至少为8帧;
当目标视频的场景类型为游戏直播时,第一数量至少为24帧。
可选地,在一种具体地实施方式中,第二数量由目标视频的时长确定,包括:
当目标视频的时长大于10秒时,将目标时长的时长与10秒的商向上取整的结果作为第二数量;
当目标视频的时长小于10s时,第二数量大于或等于2且小于或等于目标视频中视频帧的数量。
可选地,在一种具体地实施方式中,当视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,包括:
根据目标视频的时长和第二数量确定第二视频帧提取间隔;
根据第二视频帧提取间隔提取第二数量的视频帧。
可选地,在一种具体地实施方式中,当视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,包括:
将目标视频分为第二数量段子视频;
提取各段子视频中的关键帧并各自组成动态图片,得到第二数量的视频帧;
第二方面,本申请实施例提供了一种视频帧提取装置,包括:
获取模块,获取模块用于获取视频帧的应用方式,视频帧的应用方式包括封面,审核以及拖动预览;
封面提取模块,封面提取模块用于当视频帧的应用方式为封面时,提取目标视频中的一个视频帧;
审核提取模块,审核提取模块用于当视频帧的应用方式为审核时,根据目标视频的第一信息提取第一数量的视频帧,第一信息包括目标视频的场景类型,目标视频的场景类型至少包括综艺娱乐,教育以及游戏直播,第一数量由目标视频的场景类型确定;
预览提取模块,预览提取模块用于当视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,第二数量由目标视频的时长确定。
可选地,在一种具体地实施方式中,审核提取模块还用于根据目标视频的变化频率确定第一信息。
可选地,在一种具体地实施方式中,审核提取模块还用于根据目标视频的变化频率确定第一信息,包括:
等间隔提取目标视频中的视频帧;
将等间隔提取的视频帧中的关键帧的比例作为目标视频的变化频率;
根据目标视频的变化频率确定第一信息。
第三方面,本申请实施例提供了一种电子设备,,包括存储器和处理器,存储器上存储有可执行程序,处理器运行可执行程序时执行如下步骤:
获取视频帧的应用方式,视频帧的应用方式包括封面,审核以及拖动预览;
当视频帧的应用方式为封面时,提取目标视频中的一个视频帧;
当视频帧的应用方式为审核时,根据目标视频的第一信息提取第一数量的视频帧,第一信息包括目标视频的场景类型,目标视频的场景类型至少包括综艺娱乐,教育以及游戏直播,第一数量由目标视频的场景类型确定;
当视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,第二数量由目标视频的时长确定。
可选地,在一种具体地实施方式中,还包括:
根据目标视频的变化频率确定第一信息。
可选地,在一种具体地实施方式中,根据目标视频的变化频率确定第一信息,包括:
等间隔提取目标视频中的视频帧;
将等间隔提取的视频帧中的关键帧的比例作为目标视频的变化频率;
根据目标视频的变化频率确定第一信息。
第四方面,本申请实施例提供了一种存储介质,存储介质上存储有计算机程序,在处理器执行计算机程序时,实现如第一方面任一项的方法。
6、根据权利要求1所述的视频帧提取方法,其特征在于,所述第二数量由所述目标视频的时长确定,包括:
当所述目标视频的时长大于10秒时,将所述目标时长的时长与10秒的商向上取整的结果作为第二数量;
当所述目标视频的时长小于10s时,第二数量大于或等于2且小于或等于所述目标视频中视频帧的数量。
10、根据权利要求9所述的视频帧提取装置,其特征在于,所述审核提取模块还用于根据所述目标视频的变化频率确定第一信息。
11、根据权利要求10所述的视频帧提取装置,其特征在于,所述审核提取模块还用于根据所述目标视频的变化频率确定第一信息,包括:
等间隔提取所述目标视频中的视频帧;
将所述等间隔提取的视频帧中的关键帧的比例作为所述目标视频的变化频率;
根据所述目标视频的变化频率确定第一信息。
13、根据权利要求12所述的电子设备,其特征在于,还包括:
根据所述目标视频的变化频率确定第一信息。
14、根据权利要求12所述的电子设备,其特征在于,根据所述目标视频的变化频率确定第一信息,包括:
等间隔提取所述目标视频中的视频帧;
将所述等间隔提取的视频帧中的关键帧的比例作为所述目标视频的变化频率;
根据所述目标视频的变化频率确定第一信息。
本申请实施例提供的视频帧提取方法、装置、电子设备和存储介质,根据视频帧不同的应用方式采用不同的方法进行视频帧的提取,使得提取的视频帧更加实用,更加贴近用户需求。
附图说明
后文将参照附图以示例性而非限制性的方式详细描述本申请实施例的一些具体实施例。附图中相同的附图标记标示了相同或类似的部件或部分。本领域技术人员应该理解,这些附图未必是按比值绘制的。附图中:
图1为本申请实施例提供的一种视频帧提取方法的流程图;
图2为本申请实施例提供的一种确定第一信息的方法的流程图;
图3为本申请实施例提供的一种视频帧提取装置的的示意图;
图4为本申请实施例提供的一种电子设备的示意图。
具体实施方式
下面结合本申请实施例附图进一步说明本申请实施例的具体实现。
实施例一
请参阅图1,本申请实施例提供了一种视频帧提取方法,包括:
s101:获取视频帧的应用方式,视频帧的应用方式包括封面,审核以及拖动预览;
具体地,视频帧的应用方式为封面是指将提取的视频帧作为目标视频的封面;视频帧的应用方式为审核是指通过审核提取的视频帧是否违规或违法判断对应的目标视频是否违规或违法;视频帧的应用方式为拖动预览是指提取目标视频中具有代表性的视频帧,使用户能够提前预览这些具有代表性的视频帧从而大概了解视频内容。
s102a:当视频帧的应用方式为封面时,提取目标视频中的一个视频帧;
一般来说,选取视频中最能够表现目标视频的内容的视频帧作为封面能够提高目标用户的点击意愿。可选地,在一种具体地实施方式中,当视频帧的应用方式为封面时,提取目标视频中的一个视频帧,包括:提取目标视频中包含第一元素类中的所有元素,且画质最高的视频帧,第一元素类为目标视频中出现频率大于第一阈值的元素的集合,第一阈值为使第一元素类至少包括一种元素的值。
详细来说,目标视频的元素可以为人物,可以通过ai图象识别得到目标视频中的各个人物出现的频率,在一个优选地实施方式中,将出现频率最高的人物作为主要人物,将出现频率第二高的人物作为次要人物,第一阈值介于次要人物的出现频率与第三高的出现频率之间,提取目标视频中同时包含主要人物和次要人物,且画质最高即分辨率最高的视频帧,作为目标视频的封面。如此,有利于得到目标视频中最能够代表目标视频的内容的视频帧,有利于提高目标用户的点击意愿。当然,目标视频中的元素也可以为景物或物体,本申请对此不做限制。
s102b:当视频帧的应用方式为审核时,根据目标视频的第一信息提取第一数量的视频帧,第一信息包括目标视频的场景类型,目标视频的场景类型至少包括综艺娱乐,教育以及游戏直播,第一数量由目标视频的场景类型确定;
具体地,可以采用多种方式确定目标视频的场景类型,例如,可以基于语音识别技术,识别目标视频中的语音,并对关键字进行提取,得到语音内容,从而根据目标视频的语音内容确定视频的场景类型;又例如,可以基于图像处理技术,识别目标视频中的图象信息,根据图象信息对目标视频进行分类,从而确定目标视频的场景类型;再例如,还可以基于人脸识别技术,通过识别目标视频中的人物信息,判断目标视频的场景类型。
可选地,在一种具体地实施方式中,根据目标视频的变化频率确定第一信息。
请参阅图2,可选地,在一种具体地实施方式中,根据目标视频的变化频率确定第一信息,包括:
等间隔提取目标视频中的视频帧;
将等间隔提取的视频帧中的关键帧的比例作为目标视频的变化频率;
根据目标视频的变化频率确定第一信息。
具体地,目标视频的关键帧是指目标视频中的角色或者物体运动或变化中的关键动作所处的那一帧。
可以建立详细来说,可以预先建立变化频率与第一信息的映射关系,例如,将变化频率位于[a,b]区间的目标视频的场景类型与综艺娱乐建立映射关系,将变化频率位于[c,d]区间的目标视频的场景类型与教育建立映射关系,变化频率位于[e,f]区间的目标视频的场景类型与游戏直播建立映射关系,a,b,c,d,e,f均为表示频率的数值,可以为人为根据需要预设,本申请对此不做限定。如此,将目标视频的场景类型与目标视频的变化频率关联,根据不同的变化频率确定不同的场景类型,有利于提高审核结果的准确性。
可选地,在一种具体地实施方式中,第一数量由目标视频的场景类型确定,包括:
当目标视频的场景类型为综艺娱乐时,第一数量至少为12帧;
当目标视频的场景类型为教育时,第一数量至少为8帧;
当目标视频的场景类型为游戏直播时,第一数量至少为24帧。
如此,使得选出的目标视频的视频帧代表性较高,能够较为全面的反映视频内容,有利于提高审核结果的准确性。
需要说明的是,当视频帧的应用方式为审核时,还可以采用其它类型的提取视频帧的方式,例如,基于ai图像识别提取主要人物,次要人物,按照用户预设的权重,计算主要人物,次要人物分别需要的图片个数,分别进行提取包含主要人物以及次要人物的视频帧。例如用户设置的主要人物权重为3,次要人物权重为1,第一数量为8,则主要人物的图片为6张,次要人物的图片为2张。还可以基于ai图像识别,通过机器学习实现对视频帧内容的风险性进行打分,例如涉黄涉爆的帧分数可以设置为最高,最终按照分数从高到低,提取分数前十或前二十的视频帧进行审核,当然,也可以提取其他数量,这里只是示例性说明,并不代表本申请局限于此。
s102c:当视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,第二数量由目标视频的时长确定。
具体地,可以建立目标视频的时长与与第二数量的映射关系,并且映射关系满足目标视频的时长与第二数量正相关,目标视频的时长越长,第二数量越大,优选地,第二数量与目标视频的时长成正比例函数关系或一次函数关系。如此,将所要提取的视频帧数量与目标视频的时长关联,根据不同时长的视频提取不同数量的视频帧作为拖动预览的视频帧,有利于更完整和真实地向用户展示视频的内容。
可选地,在一种具体地实施方式中,第二数量由目标视频的时长确定,包括:
当目标视频的时长大于10秒时,将目标时长的时长与10秒的商向上取整的结果作为第二数量;
当目标视频的时长小于10s时,第二数量大于或等于2且小于或等于目标视频中视频帧的数量。
如此,有利于更完整和真实地向用户展示视频的内容。
可选地,在一种具体地实施方式中,当视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,包括:
根据目标视频的时长和第二数量确定第二视频帧提取间隔;
根据第二视频帧提取间隔提取第二数量的视频帧。
具体地,可以将目标视频的时长与第二数量的商作为第二视频帧提取间隔,根据第二视频帧提取间隔等间隔地提取视频帧,如此得到的第二数量的视频帧能够更完整和真实地向用户展示视频的内容。
需要特别说明的是,可以将第二数量的视频帧合并为一张大图,以节省传输资源。
可选地,在一种具体地实施方式中,当视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,包括:
将目标视频分为第二数量段子视频;
提取各段子视频中的关键帧并各自组成动态图片,得到第二数量的视频帧。
优选地,可以等间隔地将目标视频分为第二数量段子视频,提取各段子视频中的至少一张关键帧,并各自组成动态图片,所述动态图片可以为gif格式,也可以为其他格式,本申请对此不做限制。如此,用户进行拖动预览时,预览效果是动态的,对用户更加友好,有利于提高用户的点击意愿。
在一种具体地实施方式中,还可以将目标视频以10秒为间隔分为多段子视频,每个10秒的子视频片段,截取前两秒的所有关键帧,提取保持为gif图,得到第二数量的视频帧。如此,用户进行拖动预览时,预览效果是动态的,对用户更加友好,有利于提高用户的点击意愿。
实施例二
请参阅图3,本申请实施例提供了一种视频帧提取装置20,包括:
获取模块201,获取模块201用于获取视频帧的应用方式,视频帧的应用方式包括封面,审核以及拖动预览;
具体地,视频帧的应用方式为封面是指将提取的视频帧作为目标视频的封面;视频帧的应用方式为审核是指通过审核提取的视频帧是否违规或违法判断对应的目标视频是否违规或违法;视频帧的应用方式为拖动预览是指提取目标视频中具有代表性的视频帧,使用户能够提前预览这些具有代表性的视频帧从而大概了解视频内容。
封面提取模块202,封面提取模块202用于当视频帧的应用方式为封面时,提取目标视频中的一个视频帧;
一般来说,选取视频中最能够表现目标视频的内容的视频帧作为封面能够提高目标用户的点击意愿。可选地,在一种具体地实施方式中,当视频帧的应用方式为封面时,提取目标视频中的一个视频帧,包括:提取目标视频中包含第一元素类中的所有元素,且画质最高的视频帧,第一元素类为目标视频中出现频率大于第一阈值的元素的集合,第一阈值为使第一元素类至少包括一种元素的值。
详细来说,目标视频的元素可以为人物,可以通过ai图象识别得到目标视频中的各个人物出现的频率,在一个优选地实施方式中,将出现频率最高的人物作为主要人物,将出现频率第二高的人物作为次要人物,第一阈值介于次要人物的出现频率与第三高的出现频率之间,提取目标视频中同时包含主要人物和次要人物,且画质最高即分辨率最高的视频帧,作为目标视频的封面。如此,有利于得到目标视频中最能够代表目标视频的内容的视频帧,有利于提高目标用户的点击意愿。当然,目标视频中的元素也可以为景物或物体,本申请对此不做限制。
审核提取模块203,审核提取模块203用于当视频帧的应用方式为审核时,根据目标视频的第一信息提取第一数量的视频帧,第一信息包括目标视频的场景类型,目标视频的场景类型至少包括综艺娱乐,教育以及游戏直播,第一数量由目标视频的场景类型确定;
具体地,可以采用多种方式确定目标视频的场景类型,例如,可以基于语音识别技术,识别目标视频中的语音,并对关键字进行提取,得到语音内容,从而根据目标视频的语音内容确定视频的场景类型;又例如,可以基于图像处理技术,识别目标视频中的图象信息,根据图象信息对目标视频进行分类,从而确定目标视频的场景类型;再例如,还可以基于人脸识别技术,通过识别目标视频中的人物信息,判断目标视频的场景类型。
可选地,在一种具体地实施方式中,审核提取模块203还用于根据目标视频的变化频率确定第一信息。
可选地,在一种具体地实施方式中,审核提取模块203还用于根据目标视频的变化频率确定第一信息,包括:
等间隔提取目标视频中的视频帧;
将等间隔提取的视频帧中的关键帧的比例作为目标视频的变化频率;
根据目标视频的变化频率确定第一信息。
具体地,具体地,目标视频的关键帧是指目标视频中的角色或者物体运动或变化中的关键动作所处的那一帧。
可以建立详细来说,可以预先建立变化频率与第一信息的映射关系,例如,将变化频率位于[a,b]区间的目标视频的场景类型与综艺娱乐建立映射关系,将变化频率位于[c,d]区间的目标视频的场景类型与教育建立映射关系,变化频率位于[e,f]区间的目标视频的场景类型与游戏直播建立映射关系,a,b,c,d,e,f均为表示频率的数值,可以为人为根据需要预设,本申请对此不做限定。如此,将目标视频的场景类型与目标视频的变化频率关联,根据不同的变化频率确定不同的场景类型,有利于提高审核结果的准确性。
可选地,在一种具体地实施方式中,第一数量由目标视频的场景类型确定,包括:
当目标视频的场景类型为综艺娱乐时,第一数量至少为12帧;
当目标视频的场景类型为教育时,第一数量至少为8帧;
当目标视频的场景类型为游戏直播时,第一数量至少为24帧。
如此,使得选出的目标视频的视频帧代表性较高,能够较为全面的反映视频内容,有利于提高审核结果的准确性。
预览提取模块204,预览提取模块204用于当视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,第二数量由目标视频的时长确定。
具体地,可以建立目标视频的时长与与第二数量的映射关系,并且映射关系满足目标视频的时长与第二数量正相关,目标视频的时长越长,第二数量越大,优选地,第二数量与目标视频的时长成正比例函数关系或一次函数关系。如此,将所要提取的视频帧数量与目标视频的时长关联,根据不同时长的视频提取不同数量的视频帧作为拖动预览的视频帧,有利于更完整和真实地向用户展示视频的内容。
可选地,在一种具体地实施方式中,第二数量由目标视频的时长确定,包括:
当目标视频的时长大于10秒时,将目标时长的时长与10秒的商向上取整的结果作为第二数量;
当目标视频的时长小于10s时,第二数量大于或等于2且小于或等于目标视频中视频帧的数量。
如此,有利于更完整和真实地向用户展示视频的内容。
可选地,在一种具体地实施方式中,当视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,包括:
根据目标视频的时长和第二数量确定第二视频帧提取间隔;
根据第二视频帧提取间隔提取第二数量的视频帧。
具体地,可以将目标视频的时长与第二数量的商作为第二视频帧提取间隔,根据第二视频帧提取间隔等间隔地提取视频帧,如此得到的第二数量的视频帧能够更完整和真实地向用户展示视频的内容。
需要特别说明的是,可以将第二数量的视频帧合并为一张大图,以节省传输资源。
可选地,在一种具体地实施方式中,当视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,包括:
将目标视频分为第二数量段子视频;
提取各段子视频中的关键帧并各自组成动态图片,得到第二数量的视频帧。
优选地,可以等间隔地将目标视频分为第二数量段子视频,提取各段子视频中的至少一张关键帧,并各自组成动态图片,所述动态图片可以为gif格式,也可以为其他格式,本申请对此不做限制。如此,用户进行拖动预览时,预览效果是动态的,对用户更加友好,有利于提高用户的点击意愿。
在一种具体地实施方式中,还可以将目标视频以10秒为间隔分为多段子视频,每个10秒的子视频片段,截取前两秒的所有关键帧,提取保持为gif图,得到第二数量的视频帧。如此,用户进行拖动预览时,预览效果是动态的,对用户更加友好,有利于提高用户的点击意愿。
实施例三
请参阅图4,本申请实施例提供了一种电子设备30,包括存储器301和处理器302,存储器301上存储有可执行程序,处理器302运行可执行程序时执行如下步骤:
获取视频帧的应用方式,视频帧的应用方式包括封面,审核以及拖动预览;
具体地,视频帧的应用方式为封面是指将提取的视频帧作为目标视频的封面;视频帧的应用方式为审核是指通过审核提取的视频帧是否违规或违法判断对应的目标视频是否违规或违法;视频帧的应用方式为拖动预览是指提取目标视频中具有代表性的视频帧,使用户能够提前预览这些具有代表性的视频帧从而大概了解视频内容。
当视频帧的应用方式为封面时,提取目标视频中的一个视频帧;
一般来说,选取视频中最能够表现目标视频的内容的视频帧作为封面能够提高目标用户的点击意愿。可选地,在一种具体地实施方式中,当视频帧的应用方式为封面时,提取目标视频中的一个视频帧,包括:提取目标视频中包含第一元素类中的所有元素,且画质最高的视频帧,第一元素类为目标视频中出现频率大于第一阈值的元素的集合,第一阈值为使第一元素类至少包括一种元素的值。
详细来说,目标视频的元素可以为人物,可以通过ai图象识别得到目标视频中的各个人物出现的频率,在一个优选地实施方式中,将出现频率最高的人物作为主要人物,将出现频率第二高的人物作为次要人物,第一阈值介于次要人物的出现频率与第三高的出现频率之间,提取目标视频中同时包含主要人物和次要人物,且画质最高即分辨率最高的视频帧,作为目标视频的封面。如此,有利于得到目标视频中最能够代表目标视频的内容的视频帧,有利于提高目标用户的点击意愿。当然,目标视频中的元素也可以为景物或物体,本申请对此不做限制。
当视频帧的应用方式为审核时,根据目标视频的第一信息提取第一数量的视频帧,第一信息包括目标视频的场景类型,目标视频的场景类型至少包括综艺娱乐,教育以及游戏直播,第一数量由目标视频的场景类型确定;
具体地,可以采用多种方式确定目标视频的场景类型,例如,可以基于语音识别技术,识别目标视频中的语音,并对关键字进行提取,得到语音内容,从而根据目标视频的语音内容确定视频的场景类型;又例如,可以基于图像处理技术,识别目标视频中的图象信息,根据图象信息对目标视频进行分类,从而确定目标视频的场景类型;再例如,还可以基于人脸识别技术,通过识别目标视频中的人物信息,判断目标视频的场景类型。
可选地,在一种具体地实施方式中,根据目标视频的变化频率确定第一信息。
可选地,在一种具体地实施方式中,根据目标视频的变化频率确定第一信息,包括:
等间隔提取目标视频中的视频帧;
将等间隔提取的视频帧中的关键帧的比例作为目标视频的变化频率;
根据目标视频的变化频率确定第一信息。
具体地,具体地,目标视频的关键帧是指目标视频中的角色或者物体运动或变化中的关键动作所处的那一帧。
可以建立详细来说,可以预先建立变化频率与第一信息的映射关系,例如,将变化频率位于[a,b]区间的目标视频的场景类型与综艺娱乐建立映射关系,将变化频率位于[c,d]区间的目标视频的场景类型与教育建立映射关系,变化频率位于[e,f]区间的目标视频的场景类型与游戏直播建立映射关系,a,b,c,d,e,f均为表示频率的数值,可以为人为根据需要预设,本申请对此不做限定。如此,将目标视频的场景类型与目标视频的变化频率关联,根据不同的变化频率确定不同的场景类型,有利于提高审核结果的准确性。
可选地,在一种具体地实施方式中,第一数量由目标视频的场景类型确定,包括:
当目标视频的场景类型为综艺娱乐时,第一数量至少为12帧;
当目标视频的场景类型为教育时,第一数量至少为8帧;
当目标视频的场景类型为游戏直播时,第一数量至少为24帧。
如此,使得选出的目标视频的视频帧代表性较高,能够较为全面的反映视频内容,有利于提高审核结果的准确性。
当视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,第二数量由目标视频的时长确定。
具体地,可以建立目标视频的时长与与第二数量的映射关系,并且映射关系满足目标视频的时长与第二数量正相关,目标视频的时长越长,第二数量越大,优选地,第二数量与目标视频的时长成正比例函数关系或一次函数关系。如此,将所要提取的视频帧数量与目标视频的时长关联,根据不同时长的视频提取不同数量的视频帧作为拖动预览的视频帧,有利于更完整和真实地向用户展示视频的内容。
可选地,在一种具体地实施方式中,第二数量由目标视频的时长确定,包括:
当目标视频的时长大于10秒时,将目标时长的时长与10秒的商向上取整的结果作为第二数量;
当目标视频的时长小于10s时,第二数量大于或等于2且小于或等于目标视频中视频帧的数量。
如此,有利于更完整和真实地向用户展示视频的内容。
可选地,在一种具体地实施方式中,当视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,包括:
根据目标视频的时长和第二数量确定第二视频帧提取间隔;
根据第二视频帧提取间隔提取第二数量的视频帧。
具体地,可以将目标视频的时长与第二数量的商作为第二视频帧提取间隔,根据第二视频帧提取间隔等间隔地提取视频帧,如此得到的第二数量的视频帧能够更完整和真实地向用户展示视频的内容。
需要特别说明的是,可以将第二数量的视频帧合并为一张大图,以节省传输资源。
可选地,在一种具体地实施方式中,当视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,包括:
将目标视频分为第二数量段子视频;
提取各段子视频中的关键帧并各自组成动态图片,得到第二数量的视频帧。
优选地,可以等间隔地将目标视频分为第二数量段子视频,提取各段子视频中的至少一张关键帧,并各自组成动态图片,所述动态图片可以为gif格式,也可以为其他格式,本申请对此不做限制。如此,用户进行拖动预览时,预览效果是动态的,对用户更加友好,有利于提高用户的点击意愿。
在一种具体地实施方式中,还可以将目标视频以10秒为间隔分为多段子视频,每个10秒的子视频片段,截取前两秒的所有关键帧,提取保持为gif图,得到第二数量的视频帧。如此,用户进行拖动预览时,预览效果是动态的,对用户更加友好,有利于提高用户的点击意愿。
实施例四
本申请实施例提供了一种存储介质,存储介质上存储有计算机程序,在处理器执行计算机程序时,实现如实施例一任一项的方法。
本申请实施例提供的视频帧提取方法、装置,电子设备和存储介质,根据视频帧不同的应用方式采用不同的方法进行视频帧的提取,使得提取的视频帧更加实用,更加贴近用户需求。
本申请实施例的存储介质以多种形式存在,包括但不限于:
(1)移动通信设备:这类设备的特点是具备移动通信功能,并且以提供话音、数据通信为主要目标。这类终端包括:智能手机(例如iphone)、多媒体手机、功能性手机,以及低端手机等。
(2)超移动个人计算机设备:这类设备属于个人计算机的范畴,有计算和处理功能,一般也具备移动上网特性。这类终端包括:pda、mid和umpc设备等,例如ipad。
(3)便携式娱乐设备:这类设备可以显示和播放多媒体内容。该类设备包括:音频、视频播放器(例如ipod),掌上游戏机,电子书,以及智能玩具和便携式车载导航设备。
(4)其他具有数据交互功能的电子设备。
至此,已经对本主题的特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作可以按照不同的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序,以实现期望的结果。在某些实施方式中,多任务处理和并行处理可以是有利的。
在20世纪90年代,对于一个技术的改进可以很明显地区分是硬件上的改进(例如,对二极管、晶体管、开关等电路结构的改进)还是软件上的改进(对于方法流程的改进)。然而,随着技术的发展,当今的很多方法流程的改进已经可以视为硬件电路结构的直接改进。设计人员几乎都通过将改进的方法流程编程到硬件电路中来得到相应的硬件电路结构。因此,不能说一个方法流程的改进就不能用硬件实体模块来实现。例如,可编程逻辑器件(programmablelogicdevice,pld)(例如现场可编程门阵列(fieldprogrammablegatearray,fpga))就是这样一种集成电路,其逻辑功能由用户对器件编程来确定。由设计人员自行编程来把一个数字系统“集成”在一片pld上,而不需要请芯片制造厂商来设计和制作专用的集成电路芯片。而且,如今,取代手工地制作集成电路芯片,这种编程也多半改用“逻辑编译器(logiccompiler)”软件来实现,它与程序开发撰写时所用的软件编译器相类似,而要编译之前的原始代码也得用特定的编程语言来撰写,此称之为硬件描述语言(hardwaredescriptionlanguage,hdl),而hdl也并非仅有一种,而是有许多种,如abel(advancedbooleanexpressionlanguage)、ahdl(alterahardwaredescriptionlanguage)、confluence、cupl(cornelluniversityprogramminglanguage)、hdcal、jhdl(javahardwaredescriptionlanguage)、lava、lola、myhdl、palasm、rhdl(rubyhardwaredescriptionlanguage)等,目前最普遍使用的是vhdl(very-high-speedintegratedcircuithardwaredescriptionlanguage)与verilog。本领域技术人员也应该清楚,只需要将方法流程用上述几种硬件描述语言稍作逻辑编程并编程到集成电路中,就可以很容易得到实现该逻辑方法流程的硬件电路。
控制器可以按任何适当的方式实现,例如,控制器可以采取例如微处理器或处理器以及存储可由该(微)处理器执行的计算机可读程序代码(例如软件或固件)的计算机可读介质、逻辑门、开关、专用集成电路(applicationspecificintegratedcircuit,asic)、可编程逻辑控制器和嵌入微控制器的形式,控制器的例子包括但不限于以下微控制器:arc625d、atmelat91sam、microchippic18f26k20以及siliconelabsc8051f320,存储器控制器还可以被实现为存储器的控制逻辑的一部分。本领域技术人员也知道,除了以纯计算机可读程序代码方式实现控制器以外,完全可以通过将方法步骤进行逻辑编程来使得控制器以逻辑门、开关、专用集成电路、可编程逻辑控制器和嵌入微控制器等的形式来实现相同功能。因此这种控制器可以被认为是一种硬件部件,而对其内包括的用于实现各种功能的装置也可以视为硬件部件内的结构。或者甚至,可以将用于实现各种功能的装置视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
上述实施例阐明的系统、装置、模块或单元,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。一种典型的实现设备为计算机。具体的,计算机例如可以为个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任何设备的组合。
为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本申请时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(cpu)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(ram)和/或非易失性内存等形式,如只读存储器(rom)或闪存(flashram)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(pram)、静态随机存取存储器(sram)、动态随机存取存储器(dram)、其他类型的随机存取存储器(ram)、只读存储器(rom)、电可擦除可编程只读存储器(eeprom)、快闪记忆体或其他内存技术、只读光盘只读存储器(cd-rom)、数字多功能光盘(dvd)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitorymedia),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白,本申请的实施例可提供为方法、系统或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。
本申请可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定事务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本申请,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行事务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。
1.一种视频帧提取方法,其特征在于,包括:
获取视频帧的应用方式,所述视频帧的应用方式包括封面,审核以及拖动预览;
当所述视频帧的应用方式为封面时,提取目标视频中的一个视频帧;
当所述视频帧的应用方式为审核时,根据目标视频的第一信息提取第一数量的视频帧,所述第一信息包括所述目标视频的场景类型,所述目标视频的场景类型至少包括综艺娱乐,教育以及游戏直播,所述第一数量由所述目标视频的场景类型确定;
当所述视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,所述第二数量由所述目标视频的时长确定。
2.根据权利要求1所述的视频帧提取方法,其特征在于,当所述视频帧的应用方式为封面时,提取目标视频中的一个视频帧,包括:提取目标视频中包含第一元素类中的所有元素,且画质最高的视频帧,所述第一元素类为所述目标视频中出现频率大于第一阈值的元素的集合,所述第一阈值为使第一元素类至少包括一种元素的值。
3.根据权利要求1所述的视频帧提取方法,其特征在于,所述方法还包括:
根据所述目标视频的变化频率确定第一信息。
4.根据权利要求3所述的视频帧提取方法,其特征在于,根据所述目标视频的变化频率确定第一信息,包括:
等间隔提取所述目标视频中的视频帧;
将所述等间隔提取的视频帧中的关键帧的比例作为所述目标视频的变化频率;
根据所述目标视频的变化频率确定第一信息。
5.根据权利要求1所述的视频帧提取方法,其特征在于,所述第一数量由所述目标视频的场景类型确定,包括:
当所述目标视频的场景类型为综艺娱乐时,所述第一数量至少为12帧;
当所述目标视频的场景类型为教育时,所述第一数量至少为8帧;
当所述目标视频的场景类型为游戏直播时,所述第一数量至少为24帧。
6.根据权利要求1所述的视频帧提取方法,其特征在于,当所述视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,包括:
根据所述目标视频的时长和第二数量确定第二视频帧提取间隔;
根据所述第二视频帧提取间隔提取第二数量的视频帧。
7.根据权利要求1所述的视频帧提取方法,其特征在于,当所述视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,包括:
将所述目标视频分为第二数量段子视频;
提取各段子视频中的关键帧并各自组成动态图片,得到第二数量的视频帧。
8.一种视频帧提取装置,其特征在于,包括:
获取模块,所述获取模块用于获取视频帧的应用方式,所述视频帧的应用方式包括封面,审核以及拖动预览;
封面提取模块,所述封面提取模块用于当所述视频帧的应用方式为封面时,提取目标视频中的一个视频帧;
审核提取模块,所述审核提取模块用于当所述视频帧的应用方式为审核时,根据目标视频的第一信息提取第一数量的视频帧,所述第一信息包括所述目标视频的场景类型,所述目标视频的场景类型至少包括综艺娱乐,教育以及游戏直播,所述第一数量由所述目标视频的场景类型确定;
预览提取模块,所述预览提取模块用于当所述视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,所述第二数量由所述目标视频的时长确定。
9.一种电子设备,其特征在于,包括存储器和处理器,所述存储器上存储有可执行程序,所述处理器运行所述可执行程序时执行如下步骤:
获取视频帧的应用方式,所述视频帧的应用方式包括封面,审核以及拖动预览;
当所述视频帧的应用方式为封面时,提取目标视频中的一个视频帧;
当所述视频帧的应用方式为审核时,根据目标视频的第一信息提取第一数量的视频帧,所述第一信息包括所述目标视频的场景类型,所述目标视频的场景类型至少包括综艺娱乐,教育以及游戏直播,所述第一数量由所述目标视频的场景类型确定;
当所述视频帧的应用方式为拖动预览时,根据目标视频的时长提取第二数量的视频帧,所述第二数量由所述目标视频的时长确定。
10.一种存储介质,其特征在于,所述存储介质上存储有计算机程序,在处理器执行计算机程序时,实现如权利要求1-8任一项所述的方法。
技术总结