视频处理方法、电子设备及介质与流程

文档序号:19605621发布日期:2020-01-03 13:30阅读:178来源:国知局
视频处理方法、电子设备及介质与流程

本发明实施例涉及视频处理技术领域,尤其涉及一种视频处理方法、电子设备及介质。



背景技术:

目前,电子设备在播放视频时,相同的视频对于所有用户都会播放相同的内容,如果视频中存在用户感兴趣的或者不想看到的内容时,用户只能手动拖动视频的进度条,来改变视频的播放进程,从而达到反复观看想看的内容以及跳过不想看的内容的目的,使得视频的调整方式较为单一,用户观看视频的体验不佳。



技术实现要素:

本发明实施例提供一种视频处理方法、电子设备及介质,以解决现有技术中视频的调整方式较为单一的问题。

为了解决上述技术问题,本发明是这样实现的:

第一方面,本发明实施例提供了一种视频处理方法,包括:

获取待播放的目标视频中包含预设的目标对象的目标图像帧;

按照目标对象关联的目标处理方式,对目标图像帧进行处理,得到处理后的目标视频。

第二方面,本发明实施例提供了一种电子设备,包括:

图像获取模块,用于获取待播放的目标视频中包含预设的目标对象的目标图像帧;

视频处理模块,用于按照目标对象关联的目标处理方式,对目标图像帧进行处理,得到处理后的目标视频。

第三方面,本发明实施例提供了一种电子设备,包括处理器、存储器及存储在存储器上并可在处理器上运行的计算机程序,计算机程序被处理器执行时实现如第一方面所述的视频处理方法的步骤。

第四方面,本发明实施例提供了一种计算机可读存储介质,计算机可读存储介质上存储计算机程序,计算机程序被处理器执行时实现如第一方面所述的视频处理方法的步骤。

在本发明实施例中,能够先识别待播放的目标视频中包含预设的目标对象的目标图像帧,然后利用目标对象关联的预设处理方式对目标图像帧进行处理,得到处理后的目标视频,并播放处理后的目标视频,以使电子设备能够在播放目标视频之前,自动根据用户需求对目标视频中的目标图像帧进行处理,得到满足用户需求的处理后的目标视频,从而能够实现对不同的目标对象,采用对应的处理方式,对视频的调整方式更多样化,使视频播放过程能够满足用户的个性化需求。

附图说明

图1为本发明一个实施例提供的视频处理方法的流程示意图;

图2为本发明一个实施例的视频播放流程的流程示意图;

图3为本发明一个实施例的对象处理设置界面的界面示意图;

图4为本发明另一个实施例的视频播放流程的流程示意图;

图5为本发明一个实施例的对象处理提示界面的界面示意图;

图6为本发明一个实施例提供的电子设备的结构示意图;

图7为实现本发明各个实施例的一种电子设备的硬件结构示意图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

现有的电子设备在播放视频时,相同的视频对于所有用户都会播放相同的内容,尤其是在一个视频中,如果存在用户感兴趣的或者不想看到的特定对象时,电子设备无法对视频中的特定对象进行识别和处理,导致视频的调整方式较为单一,使得用户观看视频的体验不佳。

为了解决现有技术问题,本发明实施例提供了一种视频处理方法、电子设备及介质。下面首先对本发明实施例所提供的视频处理方法进行介绍。

图1示出了本发明一个实施例提供的视频处理方法的流程示意图。如图1所示,该视频处理方法包括:

步骤110、获取待播放的目标视频中包含预设的目标对象的目标图像帧;

其中,预设的目标对象即可以为用户指定的对象,也可以为电子设备中预先设置好的对象,还可以为基于用户所选择的对象类型或者对象特征,在电子设备预先设置好的对象中检测得到的对象。

步骤120、按照目标对象关联的目标处理方式,对目标图像帧进行处理,得到处理后的目标视频。

在本发明实施例中,能够先识别待播放的目标视频中包含预设的目标对象的目标图像帧,然后利用目标对象关联的预设处理方式对目标图像帧进行处理,得到处理后的目标视频,并播放处理后的目标视频,以使电子设备能够在播放目标视频之前,自动根据用户需求对目标视频中的目标图像帧进行处理,得到满足用户需求的处理后的目标视频,从而能够实现对不同的目标对象,采用对应的的处理方式,对视频的调整方式更多样化,使视频播放过程能够满足用户的个性化需求。

在本发明实施例中,待播放的目标视频可以是利用视频播放应用软件播放的网络视频或者本地视频。

在本发明一些实施例的步骤110中,获取待播放的目标视频中包含预设的目标对象的目标图像帧的具体方法可以包括:

获取视频播放请求,其中,视频播放请求包括待播放的目标视频;

响应于视频播放请求,对目标视频的图像帧进行图像识别,获取包含目标对象的目标图像帧。

由此,电子设备可以在获取到针对待播放的目标视频的视频播放请求后,直接响应于视频播放请求,自动对目标视频的图像帧进行图像识别,获取包含目标对象的目标图像帧,以便自动对所获取的目标图像帧进行处理,无需用户针对目标视频进行其他操作,从而可以提高用户操作的便利性,增强电子设备处理目标视频的智能性。

在本发明另一些实施例的步骤110中,获取待播放的目标视频中包含预设的目标对象的目标图像帧的具体方法也可以包括:

获取用户输入的视频处理请求,其中,视频处理请求包括待播放的目标视频;

响应于视频处理请求,对目标视频的图像帧进行图像识别,获取包含目标对象的目标图像帧。

此时,电子设备可以将播放视频和处理视频两个过程独立处理和进行,以满足用户对视频处理的多样性需求。

在本发明实施例中,预设的目标对象和目标对象关联的目标处理方式可以由视频处理服务提供方统一设置,也可以由用户设置。其中,预设的目标对象和目标对象关联的目标处理方式可以在设置好后,关联存储于电子设备内。

在预设的目标对象和目标对象关联的目标处理方式为用户设置的情况下,可以由用户在电子设备处理目标视频之前预先设置,例如,用户可以在输入视频播放请求或视频处理请求之前设置预设的目标对象和目标对象关联的目标处理方式,再例如,用户可以在输入视频播放请求或视频处理请求之后,且电子设备处理目标视频之前设置预设的目标对象和目标对象关联的目标处理方式。

因此,在本发明一些实施例中,在步骤110之前还可以包括:

显示对象处理设置界面;

接收在对象处理设置界面输入的第二输入;

根据第二输入,确定目标对象和目标对象关联的目标处理方式。

其中,对象处理设置界面用于接收用户输入的目标对象和目标对象对应的目标处理方式。电子设备在接收到目标对象和目标对象对应的目标处理方式之后,可以将目标对象和目标对象对应的目标处理方式关联存储。

在一些情况下,用户可以在输入视频播放请求或视频处理请求之前,输入预设触发操作,使电子设备在接收到预设触发操作后,显示对象处理设置界面。在另一些情况下,用户在输入视频播放请求或视频处理请求之后,电子设备可以响应于视频播放请求或视频处理请求,自动显示对象处理设置界面。

因此,在本发明实施例中,用户可以根据自己的需求,通过对象处理设置界面对目标对象和目标对象关联的目标处理方式进行设置,从而满足了视频处理的个性化需求。

在本发明实施例中,目标对象可以为用户自己设置的特定对象,例如,某种物品、某种动物、某种植物和某个人物等中的至少一个;目标处理方式也可以为用户自己设置的特定方式,例如,用增强现实(augmentedreality,ar)图像替换、用特定图像覆盖、模糊处理、剪裁处理和直接将对应的图像帧删除等中的至少一种。其中,模糊处理可以为马赛克处理,从而能够实现在播放视频时,按照用户的需求对特定内容进行修改或者删减。

在本发明实施例中,用户针对对象处理设置界面的第二输入可以为文字、图像、视频或者音频,电子设备可以根据接收到的文字、图像、视频或者音频判断用户所输入的目标对象。

以用户输入图像为例,用户可以在对象处理设置界面直接输入电子设备的本地图像或者输入在互联网中下载的互联网图像,也可以在对象处理设置界面选择拍照功能,通过拍照的方式获取拍摄图像。当用户输入图像之后,电子设备可以对图像进行图像识别,从而确定用户所输入的目标对象。

需要说明的是,用户针对对象处理设置界面的第二输入还可以为基于多个显示的可选对象的选择操作,在此不做限制。

在本发明一些实施例中,用户输入的音频可以为用户朗读目标对象的名称的录音,也可以为目标对象对应的特定声音的录音。例如,如果用户想要设置“狗”为目标对象,用户可以录制自己读“狗”的录音,并输入至对象处理设置界面,用户也可以录一段狗叫声,并将狗叫声输入对象处理设置界面。

由此,本发明实施例能够以灵活的方式接收用户所输入的目标对象和目标对象关联的目标处理方式,从而为个性化的视频处理提供处理依据。

在用户以文字或者音频输入目标对象时,电子设备可以首先查找到目标对象对应的参考图像,然后利用目标视频中的每个图像帧与所查找到的参考图像进行图像的相似度,确定相似度符合预定相似度阈值的目标图像帧。在用户以图像或者视频方式输入目标对象时,电子设备可以直接将图像或者视频中的任一帧图像作为参考图像,然后利用目标视频中的每个图像帧与所查找到的参考图像进行图像的相似度,确定相似度符合预定相似度阈值的目标图像帧。

或者,在用户输入文字、图像、视频或者音频后,电子设备可以识别用户输入的目标对象,并且查找目标对象对应的对象识别模型,从而利用对象识别模型,识别目标视频中预设的目标对象的目标图像帧。

在本发明实施例中,在步骤110中所获取的目标图像帧可以为一帧、两帧或者两帧以上,在此不做限制。

在本发明实施例中,电子设备可以在播放目标视频之前,基于目标对象对目标视频的全部图像帧进行图像识别,以识别出目标视频中的全部目标图像帧。电子设备也可以播放目标视频的过程中,基于目标对象对目标视频中即将播放的若干帧图像帧进行图像识别,以识别出即将播放的若干帧图像帧中的目标图像帧。

第一种情况

电子设备在播放目标视频之前识别出目标视频中的全部目标图像帧的情况下,目标对象的数量可以为一种或者多种,在目标对象为多种时,每个目标对象可以设有一个关联的目标处理方式,每个目标对象也可以设有多个关联的目标处理方式,多个目标对象还可以关联相同的目标处理方式。

在目标对象的数量为多个的情况下,如果识别到的目标图像帧中包含多个目标对象,可以根据用户的选择,处理识别到的多个目标对象中的部分或全部目标对象对应的目标图像帧。

在每个目标对象设有多个关联的目标处理方式的情况下,可以根据用户的选择,在多个目标处理方式中选择每个目标对象对应的一个目标处理方式,用于对于目标图像帧进行处理。

在这些实施例中,步骤120具体可以包括;

显示对象处理提示界面,其中,对象处理提示界面用于显示目标图像帧所包含的至少一个目标对象和目标对象关联的至少一个目标处理方式;

接收在处理提示界面输入的第一输入;

响应于第一输入,在至少一个目标对象中确定待处理目标对象,以及在至少一种目标处理方式中确定待执行处理方式;

按照待处理目标对象和待执行处理方式,对目标图像帧进行处理,得到处理后的所述目标视频。

具体地,在识别到目标视频中包含目标图像帧的情况下,电子设备可以自动显示对象处理提示界面,对象处理提示界面可以显示识别到目标图像帧中所包含的至少一个目标对象和每个目标对象和目标对象关联的至少一个目标处理方式,用户可以在至少一个目标对象和至少一种目标处理方式中进行选择,并将选择结果作为针对对象处理提示界面的第一输入,使电子设备响应于第一输入,确定用户选择的待处理目标对象和待处理目标对象对应的待执行处理方式,以对目标图像帧进行处理,得到处理后的目标视频。

以预设的目标对象为“蛇”、“老鼠”和“蜘蛛”,目标处理方式为删除目标图像帧为例,当电子设备检测到目标视频中包含“蛇”和“老鼠”中至少一种目标对象的目标图像帧,则生成对象处理提示界面,对象处理提示界面可以包括“删除蛇”和“删除老鼠”的选项,以供用户进行选择,在用户选择“删除蛇”的情况下,则删除包含“蛇”的目标图像帧,在用户选择“删除老鼠”的情况下,则删除包含“老鼠”的目标图像帧。

以预设的目标对象为“蛇”、“老鼠”和“蜘蛛”,每个目标对象对关联的目标处理方式为删除目标图像帧和模糊处理为例,当电子设备检测到目标视频中包含“蛇”和“老鼠”中至少一种目标对象的目标图像帧,则生成对象处理提示界面,对象处理提示界面可以包括对识别到的目标对象“蛇”和“老鼠”进行选择的选项,以及目标对象“蛇”关联的目标处理方式“删除”和“模糊”的选项、目标对象“老鼠”关联的目标处理方式“删除”和“模糊”的选项,以供用户进行选择。

在上述示例中,可以将识别到的目标视频中的目标对象对应的图像显示在对象处理提示界面上,使用户可以根据对所识别到的目标对象对应的图像的接受程度进行选择。

需要说明的是,虽然是在播放目标视频之前,识别目标视频的目标图像帧,但是对于目标视频的处理可以是在播放过程中进行处理,也可以是在播放目标视频之前进行处理的,在此不做限制。

由此,在本发明实施例中,可以根据用户的选择,在识别到目标图像帧的情况下,在目标图像帧所包含的至少一个目标对象中选择待处理目标对象以及目标对象关联的至少一个目标处理方式选择待执行处理方式,从而进一步提高视频处理的智能性和灵活性。

第二种情况

电子设备在播放目标视频的过程中识别出即将播放的若干帧图像帧中的目标图像帧的情况下,目标对象的数量可以为一种或者多种,每个目标对象可以设有一个关联的目标处理方式,多个目标对象也可以设有相同的目标处理方式。

具体地,在识别到目标图像帧的情况下,无论目标图像帧包含多少个目标对象,都可以直接根据目标对象及其关联的目标处理方式,处理部分或全部的目标图像帧。

由于在播放目标视频的过程中进行视频处理,可以达到边播放视频边进行视频处理的目的,减少用户等待视频播放的时间。

在本发明实施例中,步骤120可以通过多种方式实现。

第一种方式

在第一种方式中,可以利用替代对象替换或者覆盖目标对象,使用户能够基于自己的喜好,修改视频内容。

其中,步骤120的具体方法可以包括:

获取目标对象关联的替代对象;

采用替代对象替换或者覆盖目标图像帧中的目标对象,得到处理后的目标视频。

其中,替代对象为目标对象对应的增强现实ar对象、2d对象或3d对象。

在一些实施例中,替代对象为目标对象对应的ar对象。ar技术能够使一些虚拟的东西能在现实世界中体现出来,让人能感知和体验到一些原本只在网络或计算机上存在的东西。此时,用户可以通过在电子设备的显示屏上增加用于观看ar对象的贴膜或者佩戴用于观看ar对象的眼镜观看带有ar对象的视频。

在本发明实施例中,替代对象可以为预先设置于电子设备内的ar对象,以供用户选择,并在选择后与目标对象关联存储。替代对象也可以为用户自己从互联网上下载、自己拍摄或者自己制作的2d或者3d图像。替代对象还可以为根据电子设备根据目标对象所生成的ar对象、2d对象或3d对象,例如,可以利用2d的目标对象生成3d的目标对象。再例如,利用原始的目标对象生成卡通的目标对象。

在本发明实施例中,替代对象可以为静态对象,也可以为动态对象。当替代对象为动态对象时,替代对象在动态对象中的姿态可以与目标对象在对应的目标图像帧中的姿态相匹配。

在本发明实施例中,采用替代对象替换或者覆盖目标图像帧中的目标对象的具体方法可以为:对目标图像帧进行图像识别,从而识别出包含目标对象的第一图像区域和不包含目标对象的第二图像区域,然后利用替代对象替换或者覆盖第一图像区域。

在本发明一些实施例中,由于利用替代对象替换或者覆盖目标对象后,容易出现替换或者覆盖不完全、边沿衔接及过渡不自然等问题,因此,在利用替代对象替换或者覆盖目标图像帧中的目标对象之后,为了保证包含替代对象的目标图像帧的图像质量,步骤120还可以包括:

确定替代对象中的第一待融合区域和目标图像帧中的第二待融合区域;

对第一待融合区域和第二待融合区域进行图像融合处理,得到处理后的目标视频。

具体地,可以通过数字图像处理技术中的图像融合处理技术,确定替代对象中的第一待融合区域和目标图像帧中的第二待融合区域,并对第一待融合区域进行适当的缩放、裁剪等处理,然后对处理后的第一待融合区域和第二待融合区域进行平滑、模糊等处理,使替代对象和第二图像区域的过渡衔接更平滑自然,从而使替代对象更好地融入目标图像帧中。

第二种方式

在第二种方式中,可以利用目标对象对应的音频数据对目标视频的音频进行处理,使用户能够基于自己的喜好,修改视频内容。

其中,步骤120的具体方法可以包括:

获取目标对象关联的音频数据;

确定目标视频中目标图像帧对应的目标音频帧;

在目标音频帧中添加音频数据,得到处理后的目标视频。

以目标对象为“狗”为例,当电子设备在目标视频中检测到包含目标对象“狗”的目标图像帧,可以获取目标对象“狗”对应的音频数据,例如“狗叫声”,然后,在目标视频中每一个目标图像帧对应的目标音频帧添加“狗叫声”,从而得到处理后的目标视频。

在本发明实施例中,第二种方式可以单独使用,也可以与第一种方式进行组合使用。

继续以目标对象为“狗”为例,当电子设备在目标视频中检测到包含目标对象“狗”的目标图像帧,首先可以用一个“狗”的ar对象替换目标图像帧中的目标对象“狗”,然后,可以获取目标对象“狗”对应的音频数据“狗叫声”,在目标视频中每一个目标图像帧对应的目标音频帧中添加目标视频“狗叫声”,从而得到处理后的目标视频。

此时,用户在观看视频时,可以在手机屏幕上看到一个虚拟的“狗”,同时还能够听到“狗叫声”,使得用户可以通过ar的视觉、听觉等效果来营造一种能够使用户近距离接触目标对象“狗”的场景,让用户感觉到目标对象“狗”就在自己身边。

第三种方式

在第三种方式中,可以对目标对象进行模糊处理,以修改视频内容,使用户避免观看到自己不喜欢的对象。

其中,步骤120的具体方法可以包括:

对目标图像帧中的目标对象进行模糊处理,得到处理后的目标视频。

例如,当目标对象为“蛇”、“蜘蛛”和“老鼠”时,用户可以对这些目标对象进行模糊处理,从而避免看到不喜欢的对象。其中,模糊处理可以为马赛克处理或者模糊滤镜处理。

第四种方式

在第四种方式中,可以直接删除包含目标对象的目标图像帧,以修改视频内容,使得在视频播放时,能够自动跳过包含用户不喜欢的对象的画面。

其中,步骤120的具体方法可以包括:

删除目标视频中的目标图像帧,得到处理后的目标视频。

第五种方式

在第五种方式中,可以删除目标对象对应的图像区域,以修改视频内容,使用户避免观看到自己不喜欢的对象,但依然不错过目标图像帧中的其他内容。

其中,步骤120的具体方法可以包括:

去除目标图像帧中目标对象对应的图像区域,得到处理后的目标视频。

其中,如果目标对象位于目标图像帧的左侧边缘,则目标对象对应的图像区域可以为包括目标对象的全部左侧边缘区域;如果目标对象位于目标图像帧的左上角,则目标对象对应的图像区域可以为包括目标对象的左上角区域,具体地,左上角区域可以为三角形或者类三角形。

在本发明实施例中,在目标图像帧的帧数为至少两帧的情况下,可以根据目标对象关联的目标处理方式对至少两帧目标图像帧的全部或者部分进行处理,以得到处理后的目标视频。

在一些实施例中,可以获取每帧目标图像帧对应的时间戳,然后,在至少两帧目标图像帧中,确定时间戳属于预设播放时间范围的目标图像帧,并且按照目标对象关联的目标处理方式,对所确定的目标图像帧进行处理,得到处理后的目标视频。

例如,用户可以设定预设播放时间范围为视频的前30分钟,此时,电子设备只选择在目标视频的前30分钟内的目标图像帧,作为待处理目标图像帧,并对所选择的待处理目标图像帧进行处理,得到处理后的目标视频,而不对其他播放时间范围内的目标图像帧进行处理。

在另一些实施例中,可以获取每帧目标图像帧对应的时间戳,然后,在至少两帧目标图像帧中,按照时间戳顺序,由首个时间戳开始得到预设数量的目标图像帧,并且按照目标对象关联的目标处理方式,对所得到的目标图像帧进行处理,得到处理后的目标视频。

例如,用户可以设定预设数量为10,此时,电子设备只选择前10帧出现的目标图像帧,作为待处理目标图像帧,并对所选择的待处理目标图像帧进行处理,得到处理后的目标视频,而不对其他目标图像帧进行处理。

因此,用户可以根据喜好对目标视频中的部分或者全部目标图像帧进行更加灵活的视频处理,使得视频处理方式更加灵活多样,处理得到的目标视频更加个性化。

图2示出了本发明一个实施例的视频播放流程的流程示意图。如图2所示,电子设备进行视频播放的具体流程可以包括如下步骤:

步骤201、显示对象处理设置界面,其中,如图3所示,对象处理设置界面具有对象添加功能和处理方式添加功能,能够使用户添加目标对象和目标对象关联的的目标处理方式;

步骤202、接收用户输入的目标对象和目标对象关联的目标处理方式,其中,如图3所示,目标对象为“袋鼠”,目标处理方式为“替换为ar对象”,具体地,用户可以点击对象添加功能按钮,并输入文字“袋鼠”,然后点击处理方式添加功能按钮,选择“替换为ar对象”的处理方式选项;

步骤203、接收视频播放请求,其中,视频播放请求包括用户所选择的待播放的目标视频;

步骤204、检测目标视频中是否有包含“袋鼠”的目标图像帧,如果有则执行步骤205,如果没有则执行步骤207;

步骤205、利用“袋鼠”的ar对象,替换目标图像帧中的目标对象“袋鼠”,生成处理后的目标视频;

步骤206、播放处理后的目标视频;

步骤207、正常播放目标视频。

因此,本发明实施例,通过在待播放的目标视频中检测用户设置的目标对象,并按照用户设置的目标对象关联的的目标处理方式对包含有目标对象的目标图像帧进行处理,能够让用户获得更好的观看体验。例如,有些动物比较可爱、受人喜欢或者生活中难以实际接触到,本发明实施例能够使用户跟这些可爱的动物有更多、更近距离的接触。

图4示出了本发明另一个实施例的视频播放流程的流程示意图。如图4所示,电子设备进行视频播放的具体流程可以包括如下步骤:

步骤301、显示对象处理设置界面;

步骤302、接收用户输入的目标对象和目标对象关联的目标处理方式,其中,目标对象为“蛇”和“老鼠”,目标处理方式为“删除画面”,具体地,“删除画面”即为删除带有“蛇”和“老鼠”的目标图像帧;

步骤303、接收视频播放请求,其中,视频播放请求包括用户所选择的待播放的目标视频;

步骤304、检测目标视频中是否有包含“蛇”和“老鼠”中任一种的目标图像帧,如果有则执行步骤305,如果没有则执行步骤309;

步骤305、显示对象处理提示界面,其中,如图5所示,对象处理提示界面可以包括“删除蛇”和“删除老鼠”的选项,以供用户进行选择;

步骤306、接收用户输入的选择结果,其中,如图5所示,选择结果可以包括由待处理目标对象以及待执行处理方式构成的选项“删除蛇”;

步骤307、删除带有“蛇”的目标图像帧,生成处理后的目标视频;

步骤308、播放处理后的目标视频;

步骤309、正常播放目标视频。

因此,本发明实施例,可以按用户的喜好删除一些包含目标对象的不想看的视频内容。例如,有些人会害怕一些特定的动物,如蛇、老鼠、蜘蛛等,所以不想看到有这些动物的图片或者视频内容,本发明实施例能够使用户避免观看到视频中带有这些动物的画面。

图6示出了本发明一个实施例提供的电子设备的结构示意图。如图6所示,该电子设备包括:

目标识别模块410,用于获取待播放的目标视频中包含预设的目标对象的目标图像帧;

目标处理模块420,用于按照目标对象关联的目标处理方式,对目标图像帧进行处理,得到处理后的目标视频。

在本发明实施例中,能够先识别待播放的目标视频中包含预设的目标对象的目标图像帧,然后利用目标对象关联的预设处理方式对目标图像帧进行处理,得到处理后的目标视频,并播放处理后的目标视频,以使电子设备能够在播放目标视频之前,自动根据用户需求对目标视频中的目标图像帧进行处理,得到满足用户需求的处理后的目标视频,从而能够实现对不同的目标对象,采用对应的的处理方式,对视频的调整方式更多样化,使视频播放过程能够满足用户的个性化需求。

在本发明实施例中,待播放的目标视频可以是利用视频播放应用软件播放的网络视频或者本地视频。

在本发明一些实施例中,目标识别模块410具体用于:获取视频播放请求,其中,视频播放请求包括待播放的目标视频;响应于视频播放请求,对目标视频的图像帧进行图像识别,获取包含目标对象的目标图像帧。

由此,电子设备可以在获取到针对待播放的目标视频的视频播放请求后,直接响应于视频播放请求,自动对目标视频的图像帧进行图像识别,获取包含目标对象的目标图像帧,以便自动对所获取的目标图像帧进行处理,无需用户针对目标视频进行其他操作,从而可以提高用户操作的便利性,增强电子设备处理目标视频的智能性。

在本发明一些实施例中,电子设备还可以包括对象设置模块,用于:显示对象处理设置界面;接收在对象处理设置界面输入的第二输入;根据第二输入,确定目标对象和目标对象关联的目标处理方式。

在本发明实施例中,用户针对对象处理设置界面的第二输入可以为文字、图像、视频或者音频,电子设备可以根据接收到的文字、图像、视频或者音频判断用户所输入的目标对象。

由此,本发明实施例能够以灵活的方式接收用户所输入的目标对象和目标对象关联的目标处理方式,从而为个性化的视频处理提供处理依据。

在本发明实施例中,电子设备可以在播放目标视频之前,基于目标对象对目标视频的全部图像帧进行图像识别,以识别出目标视频中的全部目标图像帧。电子设备也可以播放目标视频的过程中,基于目标对象对目标视频中即将播放的若干帧图像帧进行图像识别,以识别出即将播放的若干帧图像帧中的目标图像帧。

电子设备在播放目标视频之前识别出目标视频中的全部目标图像帧的情况下,目标处理模块420可以具体用于:显示对象处理提示界面,其中,对象处理提示界面用于显示目标图像帧所包含的至少一个目标对象和目标对象关联的至少一个目标处理方式;接收在处理提示界面输入的第一输入;响应于第一输入,在至少一个目标对象中确定待处理目标对象,以及在至少一种目标处理方式中确定待执行处理方式;按照待处理目标对象和待执行处理方式,对目标图像帧进行处理,得到处理后的所述目标视频。

由此,在本发明实施例中,可以根据用户的选择,在识别到目标图像帧的情况下,在目标图像帧所包含的至少一个目标对象中选择待处理目标对象以及目标对象关联的至少一个目标处理方式选择待执行处理方式,从而进一步提高视频处理的智能性和灵活性。

在本发明实施例中,目标处理模块420可以通过多种方式实现按照目标对象关联的目标处理方式对目标图像帧进行处理。

第一种方式

在第一种方式中,可以利用替代对象替换或者覆盖预设目标对象,使用户能够基于自己的喜好,修改视频内容。

其中,目标处理模块420可以获取目标对象关联的替代对象,并采用替代对象替换或者覆盖目标图像帧中的目标对象,得到处理后的目标视频。其中,替代对象为目标对象对应的增强现实ar对象、2d对象或3d对象。

在一些实施例中,替代对象为目标对象对应的ar对象。ar技术能够使一些虚拟的东西能在现实世界中体现出来,让人能感知和体验到一些原本只在网络或计算机上存在的东西。此时,用户可以通过在电子设备的显示屏上增加用于观看ar对象的贴膜或者佩戴用于观看ar对象的眼镜观看带有ar对象的视频。

在本发明一些实施例中,目标处理模块420还可以用于:在采用替代对象替换或者覆盖目标图像帧中的目标对象之后,确定替代对象中的第一待融合区域和目标图像帧中的第二待融合区域,并且对第一待融合区域和第二待融合区域进行图像融合处理,得到处理后的目标视频,从而使替代对象更好地融入目标图像帧中。

第二种方式

在第二种方式中,可以利用目标对象对应的音频数据对目标视频的音频进行处理,使用户能够基于自己的喜好,修改视频内容。

其中,目标处理模块420可以获取目标对象关联的音频数据,然后确定目标视频中目标图像帧对应的目标音频帧,并在目标音频帧中添加音频数据,得到处理后的目标视频。

在本发明实施例中,第二种方式可以单独使用,也可以与第一种方式进行组合使用。

以目标对象为“狗”为例,当目标识别模块410检测到包含目标对象“狗”的目标图像帧后,目标处理模块420首先可以用一个“狗”的ar对象替换目标图像帧中的目标对象“狗”,然后,可以获取目标对象“狗”对应的音频数据“狗叫声”,在目标视频中每一个目标图像帧对应的目标音频帧中添加目标视频“狗叫声”,从而得到处理后的目标视频。

此时,用户在观看视频时,可以在手机屏幕上看到一个虚拟的“狗”,同时还能够听到“狗叫声”,使得用户可以通过ar的视觉、听觉等效果来营造一种能够使用户近距离接触目标对象“狗”的场景,让用户感觉到目标对象“狗”就在自己身边。

第三种方式

在第三种方式中,可以对目标对象进行模糊处理,以修改视频内容,使用户避免观看到自己不喜欢的对象。

其中,目标处理模块420可以对目标图像帧中的目标对象进行模糊处理,得到处理后的目标视频。

例如,当目标对象为“蛇”、“蜘蛛”和“老鼠”时,用户可以对这些目标对象进行模糊处理,从而避免看到不喜欢的对象。其中,模糊处理可以为马赛克处理或者模糊滤镜处理。

第四种方式

在第四种方式中,可以直接删除包含目标对象的目标图像帧,以修改视频内容,使得在视频播放时,能够自动跳过包含用户不喜欢的对象的画面。

其中,目标处理模块420可以删除目标视频中的目标图像帧,得到处理后的目标视频。

第五种方式

在第五种方式中,可以删除目标对象对应的图像区域,以修改视频内容,使用户避免观看到自己不喜欢的对象,但依然不错过目标图像帧中的其他内容。

其中,目标处理模块420可以去除目标图像帧中目标对象对应的图像区域,得到处理后的目标视频。

在本发明实施例中,在目标图像帧的帧数为至少两帧的情况下,目标处理模块420可以根据目标对象关联的目标处理方式对至少两帧目标图像帧的全部或者部分进行处理,以得到处理后的目标视频。

在一些实施例中,目标处理模块420可以具体用于:获取每帧目标图像帧对应的时间戳,然后,在至少两帧目标图像帧中,确定时间戳属于预设播放时间范围的目标图像帧,并且按照目标对象关联的目标处理方式,对所确定的目标图像帧进行处理,得到处理后的目标视频。

在另一些实施例中,目标处理模块420可以具体用于:获取每帧目标图像帧对应的时间戳,然后,在至少两帧目标图像帧中,按照时间戳顺序,由首个时间戳开始得到预设数量的目标图像帧,并且按照目标对象关联的目标处理方式,对所得到的目标图像帧进行处理,得到处理后的目标视频。

由于,用户可以根据喜好对目标视频中的部分或者全部目标图像帧进行更加灵活的视频处理,使得视频处理方式更加灵活多样,处理得到的目标视频更加个性化。

本发明实施例提供的电子设备能够实现图1至图5的方法实施例中电子设备实现的各个过程,为避免重复,这里不再赘述。

图7为实现本发明各个实施例的一种电子设备的硬件结构示意图。如图7所示,该电子设备500包括但不限于:射频单元501、网络模块502、音频输出单元503、输入单元504、传感器505、显示单元506、用户输入单元507、接口单元508、存储器509、处理器510、以及电源511等部件。本领域技术人员可以理解,图7中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。

其中,处理器510,用于:获取待播放的目标视频中包含预设的目标对象的目标图像帧;按照目标对象关联的目标处理方式,对目标图像帧进行处理,得到处理后的目标视频。

在本发明实施例中,能够先识别待播放的目标视频中包含预设的目标对象的目标图像帧,然后利用目标对象关联的预设处理方式对目标图像帧进行处理,得到处理后的目标视频,并播放处理后的目标视频,以使电子设备能够在播放目标视频之前,自动根据用户需求对目标视频中的目标图像帧进行处理,得到满足用户需求的处理后的目标视频,从而能够实现对不同的目标对象,采用对应的的处理方式,对视频的调整方式更多样化,使视频播放过程能够满足用户的个性化需求。

应理解的是,本发明实施例中,射频单元501可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器510处理;另外,将上行的数据发送给基站。通常,射频单元501包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元501还可以通过无线通信系统与网络和其他设备通信。

电子设备通过网络模块502为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。

音频输出单元503可以将射频单元501或网络模块502接收的或者在存储器509中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元503还可以提供与电子设备500执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元503包括扬声器、蜂鸣器以及受话器等。

输入单元504用于接收音频或视频信号。输入单元504可以包括图形处理器(graphicsprocessingunit,gpu)5041和麦克风5042,图形处理器5041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元506上。经图形处理器5041处理后的图像帧可以存储在存储器509(或其它存储介质)中或者经由射频单元501或网络模块502进行发送。麦克风5042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元501发送到移动通信基站的格式输出。

电子设备500还包括至少一种传感器505,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板5061的亮度,接近传感器可在电子设备500移动到耳边时,关闭显示面板5061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别电子设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器505还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。

显示单元506用于显示由用户输入的信息或提供给用户的信息。显示单元506可包括显示面板5061,可以采用液晶显示器(liquidcrystaldisplay,lcd)、有机发光二极管(organiclight-emittingdiode,oled)等形式来配置显示面板5061。

用户输入单元507可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元507包括触控面板5071以及其他输入设备5072。触控面板5071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板5071上或在触控面板5071附近的操作)。触控面板5071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器510,接收处理器510发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板5071。除了触控面板5071,用户输入单元507还可以包括其他输入设备5072。具体地,其他输入设备5072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。

进一步的,触控面板5071可覆盖在显示面板5061上,当触控面板5071检测到在其上或附近的触摸操作后,传送给处理器510以确定触摸事件的类型,随后处理器510根据触摸事件的类型在显示面板5061上提供相应的视觉输出。虽然在图7中,触控面板5071与显示面板5061是作为两个独立的部件来实现电子设备的输入和输出功能,但是在某些实施例中,可以将触控面板5071与显示面板5061集成而实现电子设备的输入和输出功能,具体此处不做限定。

接口单元508为外部装置与电子设备500连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(i/o)端口、视频i/o端口、耳机端口等等。接口单元508可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到电子设备500内的一个或多个元件或者可以用于在电子设备500和外部装置之间传输数据。

存储器509可用于存储软件程序以及各种数据。存储器509可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器509可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

处理器510是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器509内的软件程序和/或模块,以及调用存储在存储器509内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。处理器510可包括一个或多个处理单元;优选的,处理器510可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器510中。

电子设备500还可以包括给各个部件供电的电源511(比如电池),优选的,电源511可以通过电源管理系统与处理器510逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

另外,电子设备500包括一些未示出的功能模块,在此不再赘述。

优选的,本发明实施例还提供一种电子设备,包括处理器510,存储器509,存储在存储器509上并可在所述处理器510上运行的计算机程序,该计算机程序被处理器510执行时实现上述视频处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。

本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述视频处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(read-onlymemory,简称rom)、随机存取存储器(randomaccessmemory,简称ram)、磁碟或者光盘等。

需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如rom/ram、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。

上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。

当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1