一种播放视频的方法及电子设备与流程

文档序号:31015352发布日期:2022-08-05 18:42阅读:122来源:国知局
一种播放视频的方法及电子设备与流程

1.本技术涉及电子技术领域,尤其涉及一种播放视频的方法及电子设备。


背景技术:

2.视频拍摄过程中可能用到多种拍摄技巧,例如视频拍摄过程常伴有镜头的移动和变换,我们通常称之为“运镜”。常见的运镜方式可以包括推、拉、摇、移等,不同的运镜方式在视频中的效果表现为画面的缩放、被拍摄主体的靠近或远离、平移和旋转等,进而可以增加视频的气氛和情感。
3.在播放视频的过程中,用户点击待播放的目标视频后,该目标视频通常可以在弹出的窗口中展示出来,例如弹出的窗口可以占据该显示屏的特定显示区域,或者弹出的窗口在显示屏上全屏显示等。该播放视频的过程中,视频展开方式单一,用户体验差。


技术实现要素:

4.本技术提供了一种播放视频的方法及电子设备,该电子设备可以包括手机、平板、电脑等包含显示屏的设备,该方法可以为用户提供一种连贯的沉浸式体验,提高了用户的视觉体验。
5.第一方面,提供了一种播放视频的方法,应用于包括显示屏的电子设备,该方法包括:显示视频列表界面,所述视频列表界面包括一个或多个视频片段的缩略图;接收用户对第一视频片段的缩略图的播放操作,其中,所述第一视频片段是所述一个或多个视频片段中的任意一个;响应于所述播放操作,获取所述第一视频片段在第一时长内对应的第一运镜类型;根据所述第一运镜类型,以第一展开方式展开所述第一视频片段的播放窗口,且在所述播放窗口中播放所述第一视频片段。
6.通过上述方法,本技术实施例可以应用于视频播放过程,通过检测目标视频的片头的特定时长内使用的不同的运镜类型,并根据目标视频的运镜类型匹配相关联的开场动画,即在该目标视频的播放过程中,以相关联的展开方式展开该目标视频的播放窗口,呈现给用户不同的视觉效果。具体地,该目标视频的播放窗口可以具有动态变化效果,同时可以伴随着背景图片的尺寸大小、透明度等动态变化过程,可以进一步为用户提供一种连贯的沉浸式体验,提高了用户的视觉体验。
7.应理解,本技术实施例将“以第一展开方式展开所述第一视频片段的播放窗口,且在所述播放窗口中播放所述第一视频片段的过程”称为“开场动画的播放过程”,该开场动画的播放效果与该目标视频的片头特定时长的片段具有的播放效果相关联,即对于不同的拍摄方式,可以具有不同的开场动画播放效果。换言之,在本技术中,用户选中的目标视频会在视频播放窗口中进行播放,该视频播放窗口可以以不同的展开方式(该展开过程称为“开场动画”)呈现给用户,并最终以固定尺寸的视频播放窗口播放该目标视频,避免了现有方案中视频播放窗口只能通过弹出固定窗口的方式。
8.还应理解,在视频播放窗口展开的过程中,该视频播放窗口播放的内容可以是该
目标视频的片头特定时长(即第一时长)的画面,或者说该“开场动画”播放的内容是该目标视频的片头前s秒的内容,或者前n帧的内容,“第一时长”可以是所述第一视频片段的片头前s秒或者所述第一视频片段的片头前n帧画面对应的时长。其中,s和n可以为预设的固定值或者用户设置的值,本技术实施例对开场动画的时长不作限定。
9.还应理解,本技术实施例中将播放“开场动画”的窗口称为“播放窗口”,该播放窗口可以和播放目标视频的播放窗口为同一个窗口,即开场动画可以理解为播放目标视频的播放窗口的形态变化过程;或者,该播放窗口可以和播放目标视频的播放窗口为不同的窗口,开场动画播放结束后跳转至播放目标视频的播放窗口继续播放该目标视频,本技术实施例对此不作限定。
10.还应理解,本技术实施例中“目标视频的片头特定时长的片段具有的播放效果”可以理解为在拍摄该目标视频的过程中,片头特定时长内,拍摄者使用了不同的运镜方式等拍摄技巧之后,播放过程中可以呈现给用户的播放效果。
11.结合第一方面,在第一方面的某些实现方式中,该第一展开方式包括该第一视频片段的播放窗口的尺寸大小的变化方式;和/或该第一视频片段的播放窗口的位置变化方式。
12.结合第一方面和上述实现方式,在第一方面的某些实现方式中,该方法还包括:获取该视频列表界面上该一个或多个视频片段中每个视频片段在该第一时长内对应的运镜类型信息,以及该响应于该播放操作,确定该第一视频片段在第一时长内对应的第一运镜类型,包括:响应于该播放操作,从该一个或多个视频片段中确定该第一视频片段,并将该第一视频片段在该第一时长内对应的运镜类型信息确定为该第一运镜类型。
13.结合第一方面和上述实现方式,在第一方面的某些实现方式中,该每个视频片段在该第一时长内对应的运镜类型信息是该电子设备进行实时运镜检测或者周期性运镜检测的方式获取的信息;和/或该每个视频片段在该第一时长内对应的运镜类型信息是该每个视频片段的标签详情中携带的信息。
14.可选地,对于本地视频,电子设备可以对本地存储的视频进行实时运镜检测,或者周期性运镜检测,例如电子设备利用夜间(例如24:00-06:00之间)用户休息时间对电子设备本地存储的视频进行运镜检测,以获取每一个视频的运镜类型信息,以降低对用户使用电子设备的影响。
15.或者,用户点击了第一视频片段之后,电子设备启动检测该第一视频片段的运镜类型信息,而不需要额外检测其他视频片段的运镜类型,从而降低电子设备的数据处理过程,降低电子设备的功耗等。
16.又或者,每个视频片段在所述第一时长内对应的运镜类型信息是所述每个视频片段的标签详情中携带的信息,即每个视频片段都具有各自独有的标签信息,该标签信息中可以携带了运镜类型信息等。
17.对于视频应用的在线视频等,电子设备可以根据用户的选中操作,实时检测用户选中的目标视频片段的运镜类型信息,或者在电子设备缓存某个视频片段时,就启动电子设备检测该缓存的视频片段的运镜类型信息,本技术实施例对此不作限定。
18.具体地,在对第一视频片段进行运镜检测的过程中,可以通过视频数据中的时序像素变化以及基于关键帧匹配的结构化运动,同时提取视频片段中对应的底层特征和高层
特征,针对不同场景的拍摄过程中的不同镜头运动模式,优先通过视频中结构化关键点(高层特征)的运动检测,进行有效的镜头运动的判断,进而确定该第一视频片段的前n秒的运镜类型。如果场景过于复杂导致关键点检测和匹配误差较大时,可以通过时序像素变化直方图(底层特征),进行有效的镜头运动的判断,进而确定该第一视频片段的前n秒的运镜类型。该过程可以适用于更多拍摄场景下使用了不同运镜技巧的视频,提高了视频的运镜检测的准确性。
19.结合第一方面和上述实现方式,在第一方面的某些实现方式中,该方法还包括:将对该视频列表界面截图得到的图片,作为该第一视频片段的播放窗口的背景图片;以及,以第一展开方式展开所述第一视频片段的播放窗口,包括:在该背景图片上,以所述第一展开方式展开所述第一视频片段的播放窗口。
20.应理解,以所述视频列表界面截图得到的图片作为所述第一视频片段的播放窗口的背景图片,并匹配该开场动画的播放效果对背景图片进行缩放处理,该过程可以减少手机的数据处理量,保证手机的运行性能。
21.另一种可能的实现方式中,在按照第一展开方式展开该第一视频片段的播放窗口的过程中,电子设备还可以直接缩放所述视频列表界面上的背景元素,并将缩放后的背景元素作为所述第一视频片段的播放窗口的背景。示例性的,手机如果直接缩放背景元素本身,即手机分别缩放视频列表界面上视频片段的缩略图,且手机还需要控制每一个视频片段的排布顺序和每一个视频片段自在该背景界面上的位移变化过程,保证缩放背景元素之后可以凸显开场动画的播放效果。
22.结合第一方面和上述实现方式,在第一方面的某些实现方式中,在以所述第一展开方式展开该第一视频片段的播放窗口的过程中,该背景图片的尺寸大小保持不变,和/或该背景图片的透明度保持不变;或者该背景图片的尺寸大小按照第一预设规则变化,和/或该背景图片的透明度按照第二预设规则变化。
23.可选地,第一视频片段的播放窗口的尺寸大小的变化可以是长度、宽度中的至少一项的变化。
24.可选地,在第一视频片段的播放窗口的展开过程中,第一视频片段的播放窗口的背景图片也是动态变化的。具体地,第一视频片段的播放窗口的背景图片的显示尺寸、透明度可以动态变化。
25.示例性的,在第一视频片段的播放窗口的展开过程中,该播放窗口的背景图片可以是保持不变的,或者该播放窗口的背景图片也可以是动态变化的。例如,背景图片也可以随着播放窗口的增大而放大显示,或者随着播放窗口的缩小而缩小显示。应理解,本技术实施例对背景图片的放大速率或者缩小速率不作限定。
26.或者,示例性的,在第一视频片段的播放窗口的展开过程中,该播放窗口的背景图片的透明度可以逐渐由高变低、或者由低变高。
27.通过上述方案,在第一视频片段的播放窗口的展开过程中,同时伴随着背景图片的逐渐放大或缩小,以及伴随着背景图片的透明度的动态变化,用户可以更加深刻形象的体验到视频画面中的拍摄主体的变化过程,提高了用户的视觉体验。
28.结合第一方面和上述实现方式,在第一方面的某些实现方式中,在以所述第一展开方式展开该第一视频片段的播放窗口的过程中,该第一视频片段的播放窗口初始化显示
位置是根据该第一视频片段的缩略图的位置确定的。
29.通过上述方案,该第一视频片段的播放窗口初始化显示位置可以根据用户点击的缩略图的位置变化而变化,更符合用户的使用习惯,提高了用户体验。
30.结合第一方面和上述实现方式,在第一方面的某些实现方式中,该第一时长是该第一视频片段的片头前s秒或者该第一视频片段的片头前n帧画面对应的时长。
31.结合第一方面和上述实现方式,在第一方面的某些实现方式中,该第一视频片段的播放窗口包括画面显示区域和/或菜单控制区域中。
32.一种可能的实现方式中,如果用户选中的待播放的第一视频片段的片头特定时长的拍摄过程中使用了“推运镜”的拍摄技巧,那么,开场动画的播放过程中,第一视频片段的播放窗口对应的尺寸也可以具有由小变大的动态变化效果,且第一视频片段的播放窗口中播放的第一视频片段也具有镜头从较大的场景逐渐转换为局部特写的场景,被拍摄的主体从小变大的视觉效果。
33.可选地,在本技术实施例中,当镜头位置不变,被拍摄的主体处于由远及近的运动状态时,虽然该过程没有用到推运镜,且被拍摄的主体所处的场景范围不变,但是被拍摄的主体也可以呈现出由小变大的动态变化效果,将该场景也可以划分到“推运镜”的范畴,并在视频播放过程中匹配和“推运镜”相关联的图4所示的播放效果,此处不再赘述。
34.通过上述过程,对于片头特定时长内使用了“推运镜”拍摄技巧的目标视频,在用户点击播放之后,以开场动画的形式展示给用户,在开场动画的播放过程中,播放窗口具有由小变大的动态变化效果,且播放窗口中播放的目标视频也从较大的场景逐渐转换为局部特写的场景,被拍摄的主体从小变大。因此,该开场动画的播放过程可以进一步为用户提供一种连贯的沉浸式体验,即用户可以更加深刻形象的体验到被拍摄的主体由远及近的行驶过程,提高了用户的视觉体验。
35.另一种可能的实现方式中,如果用户选中的待播放的第一视频片段的片头特定时长的拍摄过程中使用了“拉运镜”的拍摄技巧,那么,开场动画的播放过程中,第一视频片段的播放窗口对应的尺寸也可以具有由大变小的动态变化效果,且第一视频片段的播放窗口中播放的视频从局部特写的场景逐渐转换为较大的场景,被拍摄的主体从大变小的视觉效果。
36.可选地,当镜头位置不变,被拍摄的主体——汽车处于由近及远的运动状态时,虽然该过程没有用到拉运镜,且被拍摄的主体所处的场景范围不变,但是被拍摄的主体也可以呈现出由大变小的动态变化效果,将该场景也可以划分到“拉运镜”的范畴,并在视频播放过程中匹配和“拉运镜”相关联的播放效果,此处不再赘述。
37.通过上述过程,对于片头特定时长内使用了“拉运镜”拍摄技巧的目标视频,在用户点击播放之后,以开场动画的形式展示给用户。在开场动画的播放过程中,播放窗口具有由大变小的动态变化效果,且播放窗口中播放的目标视频也从局部特写的场景逐渐转换为较大的场景,被拍摄的主体从大变小。因此,该开场动画的播放过程可以进一步为用户提供一种连贯的沉浸式体验,即用户可以更加深刻形象的体验到被拍摄的主体由近及远的行驶过程,提高了用户的视觉体验。
38.又一种可能的实现方式中,如果用户选中的待播放的第一视频片段的片头特定时长的拍摄过程中使用了“移运镜”中镜头从下往上的拍摄技巧,那么,开场动画的播放过程
中,第一视频片段的播放窗口也对应的从下往上移动的动态变化效果,且第一视频片段的播放窗口中播放的视频片段也具有镜头上下移动的视觉效果。
39.再一种可能的实现方式中,如果用户选中的待播放的第一视频片段的片头特定时长的拍摄过程中使用了“移运镜”中镜头从上往下的拍摄技巧,那么,开场动画的播放过程中,第一视频片段的播放窗口也对应的具有上下移动的动态变化效果,且第一视频片段的播放窗口中播放的视频片段也具有镜头从上往下移动的视觉效果。
40.通过上述方法,对于片头特定时长内采用了移运镜的视频,该开场动画的播放过程匹配移运镜的播放效果,即播放窗口也呈现出上下移动的动画效果,因此,该开场动画的播放过程可以进一步为用户提供一种连贯的沉浸式体验,即用户可以更加深刻形象的体验到镜头上下移动过程,提高了用户的视觉体验。
41.第二方面,提供了一种电子设备,包括:显示屏;一个或多个处理器;一个或多个存储器;安装有多个应用程序的模块;该存储器存储有一个或多个程序,当该一个或者多个程序被该处理器执行时,使得该电子设备执行以下步骤:显示视频列表界面,所述视频列表界面包括一个或多个视频片段的缩略图;接收用户对第一视频片段的缩略图的播放操作,其中,所述第一视频片段是所述一个或多个视频片段中的任意一个;响应于所述播放操作,获取所述第一视频片段在第一时长内对应的第一运镜类型;根据所述第一运镜类型,以第一展开方式展开所述第一视频片段的播放窗口,且在所述播放窗口中播放所述第一视频片段。
42.结合第二方面,在第二方面的某些实现方式中,该第一展开方式包括该第一视频片段的播放窗口的尺寸大小的变化方式;和/或该第一视频片段的播放窗口的位置变化方式。
43.结合第二方面和上述实现方式,在第二方面的某些实现方式中,当该一个或者多个程序被该处理器执行时,使得该电子设备执行以下步骤:将对该视频列表界面截图得到的图片,作为该第一视频片段的播放窗口的背景图片;以及在该背景图片上,以第一展开方式展开所述第一视频片段的播放窗口。
44.结合第二方面和上述实现方式,在第二方面的某些实现方式中,在以所述第一展开方式展开该第一视频片段的播放窗口的过程中,该背景图片的尺寸大小保持不变,和/或该背景图片的透明度保持不变;或者该背景图片的尺寸大小按照第一预设规则变化,和/或该背景图片的透明度按照第二预设规则变化。
45.结合第二方面和上述实现方式,在第二方面的某些实现方式中,在以所述第一展开方式展开该第一视频片段的播放窗口的过程中,当该一个或者多个程序被该处理器执行时,使得该电子设备执行以下步骤:根据该第一视频片段的缩略图的位置确定该第一视频片段的播放窗口初始化显示位置。
46.结合第二方面和上述实现方式,在第二方面的某些实现方式中,该第一时长是该第一视频片段的片头前s秒或者该第一视频片段的片头前n帧画面对应的时长。
47.结合第二方面和上述实现方式,在第二方面的某些实现方式中,该第一视频片段的播放窗口包括画面显示区域和/或菜单控制区域中。
48.结合第二方面和上述实现方式,在第二方面的某些实现方式中,当该一个或者多个程序被该处理器执行时,使得该电子设备执行以下步骤:获取该视频列表界面上该一个
或多个视频片段中每个视频片段在该第一时长内对应的运镜类型信息;以及响应于该播放操作,从该一个或多个视频片段中确定该第一视频片段,并将该第一视频片段在该第一时长内对应的运镜类型信息确定为该第一运镜类型。
49.结合第二方面和上述实现方式,在第二方面的某些实现方式中,该每个视频片段在该第一时长内对应的运镜类型信息是该电子设备进行实时运镜检测或者周期性运镜检测的方式获取的信息;和/或该每个视频片段在该第一时长内对应的运镜类型信息是该每个视频片段的标签详情中携带的信息。
50.第三方面,本技术提供了一种装置,该装置包含在电子设备中,该装置具有实现上述方面及上述方面的可能实现方式中电子设备行为的功能。功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。硬件或软件包括一个或多个与上述功能相对应的模块或单元。例如,显示模块或单元、检测模块或单元、处理模块或单元等。
51.第四方面,本技术提供了一种电子设备,包括:触摸显示屏,其中,触摸显示屏包括触敏表面和显示器;一个或多个音频设备;摄像头;一个或多个处理器;存储器;多个应用程序;以及一个或多个计算机程序。其中,一个或多个计算机程序被存储在存储器中,一个或多个计算机程序包括指令。当指令被电子设备执行时,使得电子设备执行上述任一方面任一项可能的实现中的播放视频的方法。
52.第五方面,本技术提供了一种电子设备,包括一个或多个处理器和一个或多个存储器。该一个或多个存储器与一个或多个处理器耦合,一个或多个存储器用于存储计算机程序代码,计算机程序代码包括计算机指令,当一个或多个处理器执行计算机指令时,使得电子设备执行上述任一方面任一项可能的实现中的播放视频的方法。
53.第六方面,本技术提供了一种计算机可读存储介质,包括计算机指令,当计算机指令在电子设备上运行时,使得电子设备执行上述任一方面任一项可能的视频播放的方法。
54.第七方面,本技术提供了一种计算机程序产品,当计算机程序产品在电子设备上运行时,使得电子设备执行上述任一方面任一项可能的播放视频的方法。
附图说明
55.图1是一例手机上播放视频的场景示意图。
56.图2是本技术实施例提供的一例电子设备的结构示意图。
57.图3是本技术实施例的电子设备100的软件结构框图。
58.图4是本技术实施例提供的一例开场动画的播放过程示意图。
59.图5是本技术实施例提供的一例播放窗口的示意图。
60.图6是本技术实施例提供的又一例开场动画的播放过程示意图。
61.图7是本技术实施例提供的另一例开场动画的播放过程示意图。
62.图8是本技术实施例提供的再一例开场动画的播放过程示意图。
63.图9是本技术实施例提供的一例播放视频的方法的示意性流程图。
64.图10是本技术实施例提供的一例运镜检测的流程图。
65.图11是本技术实施例提供的一例播放视频的实现过程示意图。
具体实施方式
66.下面将结合本技术实施例中的附图,对本技术实施例中的技术方案进行描述。其中,在本技术实施例的描述中,除非另有说明,“/”表示或的意思,例如,a/b可以表示a或b;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,a和/或b,可以表示:单独存在a,同时存在a和b,单独存在b这三种情况。另外,在本技术实施例的描述中,“多个”是指两个或多于两个。
67.以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。
68.图1是一例手机上播放视频的场景示意图。以手机为例,图1中的(a)图示出了手机在解锁模式下,当前显示的主界面101,该主界面101显示了多款应用程序(application,app),例如备忘录、视频、音乐等应用程序。应理解,该主界面101还可以包括其他更多的应用程序,本技术实施例对此不作限定。
69.如图1中的(a)图所示,用户可以点击该主界面101的“图库”应用,响应于用户的点击操作,手机进入图库应用的界面,该图库应用的界面的底部区域可以显示图库应用的主菜单,例如照片菜单、相册菜单、时刻菜单和发现菜单等。在如图1中的(b)图所示的相册菜单对应的界面102上,显示了相册分类列表。示例性的,该相册分类列表可以包括手机本地存储的所有照片、视频、相机照片和截屏录屏等子菜单,以及更多相册、新建相册等子菜单,且所有照片、视频、相机照片和截屏录屏等子菜单以缩略图的形式进行显示。
70.可选地,所有照片、相机照片和截屏录屏等子菜单的缩略图可以是在该分类中日期最新(即保存到手机本地的日期最接近于当前时间)的照片的缩略图,视频子菜单的缩略图可以是该视频分类中的日期最新(即保存到手机本地的日期最接近于当前时间)的视频片段的任意一张画面的缩略图,本技术实施例对此不作限定。
71.如图1中的(b)图所示,用户可以点击该界面102的视频子菜单,响应于用户的点击操作,手机进入如图1中的(c)图所示视频列表界面103,该界面103上显示了视频菜单中包括的一个或多个视频片段。可选地,每一个视频片段可以以缩略图的形式显示,且该缩略图上可以包括播放控制按钮10和该视频片段的播放时长等信息。可选地,每一个视频片段的缩略图可以是该视频片段的第一帧视频画面的缩略图,或者该视频片段的任意一帧画面的缩略图,本技术实施例对此不作限定。
72.当用户期望播放某个目标视频时,可以点击该目标视频的播放控制按钮10,或者点击该目标视频的缩略图的任意区域。示例性的,如图1中的(c)图所示,用户点击第二行第二列的播放时长为1分30秒的目标视频的播放控制按钮10,响应于用户的点击操作,手机弹出如图1中的(d)图所示的视频播放窗口20,在该视频播放窗口20中播放目标视频。
73.应理解,该视频播放窗口20的样式可以根据当前手机的横竖屏状态、该目标视频的大小、尺寸等进行适配,并以小窗口或者全屏窗口的形式显示。
74.示例性的,以图1中的(d)图为例,用户点击目标视频的播放按钮之后,视频播放窗口20可以自动弹出并显示在手机显示屏的中间区域,且视频播放窗口20的长边尺寸为手机显示屏可以显示画面的区域宽度,视频播放窗口20的长度适配于长边尺寸。
75.或者,以图1中的(e)图为例,用户点击目标视频的播放按钮之后,视频播放窗口20
可以自动弹出并全屏显示在手机的显示屏上,本技术实施例对此不作限定。
76.除了图1介绍的播放手机本地保存的视频,还应理解,用户还可以通过各种视频app来播放目标视频,在视频app上一般也会呈现视频列表,用户点击目标视频之后,该目标视频一般也会以图1中的(d)图或(e)图所示的方式弹出窗口,在弹出的窗口中播放目标视频,此处对用户通过各种视频app来播放目标视频的过程不再赘述。
77.上述介绍的播放视频的过程都以窗口的形式弹出并展开,即窗口弹出就以最终的目标尺寸显示,该展开方式单一。
78.针对如背景技术的介绍,视频拍摄过程中可能用到多种拍摄技巧,例如该拍摄过程可以伴随着镜头的移动和变换等不同的运镜技巧拍摄的视频,运镜技巧可以包括拉近、推远、横摇、直摇、鸟瞰、焦点转移等不同的运镜技巧,在视频播放中的效果表现为视频画面的缩放、被拍摄主体的靠近或远离、平移和旋转等。
79.对于运用了不同的运镜技巧拍摄出来的视频,本技术实施例将提供一种视频播放的方法,可以提升视频播放的效果,为用户创造一种一镜到底的沉浸式观看体验。
80.应理解,本技术实施例提供的播放视频的方法可以应用于手机、平板电脑、可穿戴设备、车载设备、增强现实(augmented reality,ar)/虚拟现实(virtual reality,vr)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,umpc)、上网本、个人数字助理(personal digital assistant,pda)等电子设备上,本技术实施例对电子设备的具体类型不作任何限制。
81.示例性的,图2是本技术实施例提供的一例电子设备100的结构示意图。电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,usb)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170a,受话器170b,麦克风170c,耳机接口170d,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,sim)卡接口195等。其中传感器模块180可以包括压力传感器180a,陀螺仪传感器180b,气压传感器180c,磁传感器180d,加速度传感器180e,距离传感器180f,接近光传感器180g,指纹传感器180h,温度传感器180j,触摸传感器180k,环境光传感器180l,骨传导传感器180m等。
82.可以理解的是,本技术实施例示意的结构并不构成对电子设备100的具体限定。在本技术另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
83.处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,ap),调制解调处理器,图形处理器(graphics processing unit,gpu),图像信号处理器(image signal processor,isp),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,dsp),基带处理器,和/或神经网络处理器(neural-network processing unit,npu)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
84.其中,控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
85.处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
86.在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,i2c)接口,集成电路内置音频(inter-integrated circuit sound,i2s)接口,脉冲编码调制(pulse code modulation,pcm)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,uart)接口,移动产业处理器接口(mobile industry processor interface,mipi),通用输入输出(general-purpose input/output,gpio)接口,用户标识模块(subscriber identity module,sim)接口,和/或通用串行总线(universal serial bus,usb)接口等。
87.i2c接口是一种双向同步串行总线,包括一根串行数据线(serial data line,sda)和一根串行时钟线(derail clock line,scl)。在一些实施例中,处理器110可以包含多组i2c总线。处理器110可以通过不同的i2c总线接口分别耦合触摸传感器180k,充电器,闪光灯,摄像头193等。例如:处理器110可以通过i2c接口耦合触摸传感器180k,使处理器110与触摸传感器180k通过i2c总线接口通信,实现电子设备100的触摸功能。
88.i2s接口可以用于音频通信。在一些实施例中,处理器110可以包含多组i2s总线。处理器110可以通过i2s总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过i2s接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
89.pcm接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块170与无线通信模块160可以通过pcm总线接口耦合。在一些实施例中,音频模块170也可以通过pcm接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。所述i2s接口和所述pcm接口都可以用于音频通信。
90.uart接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,uart接口通常被用于连接处理器110与无线通信模块160。例如:处理器110通过uart接口与无线通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过uart接口向无线通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
91.mipi接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。mipi接口包括摄像头串行接口(camera serial interface,csi),显示屏串行接口(display serial interface,dsi)等。在一些实施例中,处理器110和摄像头193通过csi接口通信,实现电子设备100的拍摄功能。处理器110和显示屏194通过dsi接口通信,实现电子设备100的显示功能。
92.gpio接口可以通过软件配置。gpio接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,gpio接口可以用于连接处理器110与摄像头193,显示屏194,无线通信模块160,音频模块170,传感器模块180等。gpio接口还可以被配置为i2c接口,i2s接口,uart接口,mipi接口等。
93.usb接口130是符合usb标准规范的接口,具体可以是mini usb接口,micro usb接
口,usb type c接口等。usb接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如ar设备等。
94.可以理解的是,本技术实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本技术另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
95.充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过usb接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
96.电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
97.电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
98.天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
99.移动通信模块150可以提供应用在电子设备100上的包括2g/3g/4g/5g等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,lna)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
100.调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170a,受话器170b等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
101.无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wireless local area networks,wlan)(如无线保真(wireless fidelity,wi-fi)网络),蓝牙(bluetooth,bt),全球导航卫星系统(global navigation satellite system,gnss),调频
(frequency modulation,fm),近距离无线通信技术(near field communication,nfc),红外技术(infrared,ir)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
102.在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,gsm),通用分组无线服务(general packet radio service,gprs),码分多址接入(code division multiple access,cdma),宽带码分多址(wideband code division multiple access,wcdma),时分码分多址(time-division code division multiple access,td-scdma),长期演进(long term evolution,lte),bt,gnss,wlan,nfc,fm,和/或ir技术等。所述gnss可以包括全球卫星定位系统(global positioning system,gps),全球导航卫星系统(global navigation satellite system,glonass),北斗卫星导航系统(beidou navigation satellite system,bds),准天顶卫星系统(quasi-zenith satellite system,qzss)和/或星基增强系统(satellite based augmentation systems,sbas)。
103.电子设备100通过gpu,显示屏194,以及应用处理器等实现显示功能。gpu为图像处理的微处理器,连接显示屏194和应用处理器。gpu用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个gpu,其执行程序指令以生成或改变显示信息。
104.显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,lcd),有机发光二极管(organic light-emitting diode,oled),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrix organic light emitting diode的,amoled),柔性发光二极管(flex light-emitting diode,fled),miniled,microled,micro-oled,量子点发光二极管(quantum dot light emitting diodes,qled)等。在一些实施例中,电子设备100可以包括1个或n个显示屏194,n为大于1的正整数。
105.电子设备100可以通过isp,摄像头193,视频编解码器,gpu,显示屏194以及应用处理器等实现拍摄功能。
106.isp用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给isp处理,转化为肉眼可见的图像。isp还可以对图像的噪点,亮度,肤色进行算法优化。isp还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,isp可以设置在摄像头193中。
107.摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,ccd)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,cmos)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给isp转换成数字图像信号。isp将数字图像信号输出到dsp加工处理。dsp将数字图像信号转换成标准的rgb,yuv等格式的图像信号。在一些实施例中,电子设备100可以包括1个或n个摄像头193,n为大于1的正整数。
108.数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其
他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
109.视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,mpeg)1,mpeg2,mpeg3,mpeg4等。
110.npu为神经网络(neural-network,nn)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过npu可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
111.外部存储器接口120可以用于连接外部存储卡,例如micro sd卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
112.内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,ufs)等。
113.电子设备100可以通过音频模块170,扬声器170a,受话器170b,麦克风170c,耳机接口170d,以及应用处理器等实现音频功能。例如音乐播放,录音等。
114.音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
115.扬声器170a,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170a收听音乐,或收听免提通话。
116.受话器170b,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170b靠近人耳接听语音。
117.麦克风170c,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170c发声,将声音信号输入到麦克风170c。电子设备100可以设置至少一个麦克风170c。在另一些实施例中,电子设备100可以设置两个麦克风170c,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以设置三个,四个或更多麦克风170c,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
118.耳机接口170d用于连接有线耳机。耳机接口170d可以是usb接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,omtp)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the usa,ctia)标准接口。
119.压力传感器180a用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180a可以设置于显示屏194。压力传感器180a的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180a,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180a检测所述触摸操作强度。电子设备100也可以根据压力传感器180a的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
120.陀螺仪传感器180b可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180b确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180b可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180b检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180b还可以用于导航,体感游戏场景。
121.气压传感器180c用于测量气压。在一些实施例中,电子设备100通过气压传感器180c测得的气压值计算海拔高度,辅助定位和导航。
122.磁传感器180d包括霍尔传感器。电子设备100可以利用磁传感器180d检测翻盖皮套的开合。在一些实施例中,当电子设备100是翻盖机时,电子设备100可以根据磁传感器180d检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
123.加速度传感器180e可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
124.距离传感器180f,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180f测距以实现快速对焦。
125.接近光传感器180g可以包括例如发光二极管(led)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180g检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180g也可用于皮套模式,口袋模式自动解锁与锁屏。
126.环境光传感器180l用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180l也可用于拍照时自动调节白平衡。环境光传感器180l还可以与接近光传感器180g配合,检测电子设备100是否在口袋里,以防误触。
127.指纹传感器180h用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
128.温度传感器180j用于检测温度。在一些实施例中,电子设备100利用温度传感器
180j检测的温度,执行温度处理策略。例如,当温度传感器180j上报的温度超过阈值,电子设备100执行降低位于温度传感器180j附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
129.触摸传感器180k,也称“触控面板”。触摸传感器180k可以设置于显示屏194,由触摸传感器180k与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180k用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180k也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
130.骨传导传感器180m可以获取振动信号。在一些实施例中,骨传导传感器180m可以获取人体声部振动骨块的振动信号。骨传导传感器180m也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180m也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于所述骨传导传感器180m获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器180m获取的血压跳动信号解析心率信息,实现心率检测功能。
131.按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
132.马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
133.指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
134.sim卡接口195用于连接sim卡。sim卡可以通过插入sim卡接口195,或从sim卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或n个sim卡接口,n为大于1的正整数。sim卡接口195可以支持nano sim卡,micro sim卡,sim卡等。同一个sim卡接口195可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。sim卡接口195也可以兼容不同类型的sim卡。sim卡接口195也可以兼容外部存储卡。电子设备100通过sim卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用esim,即:嵌入式sim卡。esim卡可以嵌在电子设备100中,不能和电子设备100分离。
135.电子设备100的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本技术实施例以分层架构的系统为例,示例性说明电子设备100的软件结构。
136.图3是本技术实施例的电子设备100的软件结构框图。分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(
runtime)和系统库,以及内核层。应用程序层可以包括一系列应用程序包。
137.如图3所示,应用程序包可以包括相机、音乐、图库、视频等应用程序。其中,图库应用中可以包括部分本地存储的视频资源,视频应用也可以包括本地存储的视频资源,以及在线视频资源等,本技术实施例对视频资源的来源不作限定。
138.应用程序框架层为应用程序层的应用程序提供应用编程接口(application programming interface,api)和编程框架。应用程序框架层包括一些预先定义的函数。
139.如图3所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统等。
140.窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断当前显示屏的屏幕是否显示有状态栏,并执行锁定屏幕,截取屏幕等操作。
141.内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。存放的数据可以包括视频数据、图像数据、音频数据等,此处不再赘述。
142.视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,显示界面可以包括应用图标、显示文字的视图以及显示图片的视图等。
143.runtime包括核心库和虚拟机。runtime负责安卓系统的调度和管理。
144.核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
145.应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象的生命周期管理、堆栈管理、线程管理、安全和异常的管理、以及垃圾回收等功能。
146.系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(media libraries),三维(three dimensional,3d)图形处理库(例如:opengl es),二维(two dimensional,2d)图形引擎等。
147.表面管理器用于对电子设备的显示子系统进行管理,并且为多个应用程序提供了2d和3d图层的融合。
148.媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:mpeg4,h.264,mp3,aac,amr,jpg,png等。
149.三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
150.二维图形引擎是二维绘图的绘图引擎。
151.图像处理库可以提供针对各种图像数据的分析以及提供多种图像处理算法等,例如可以提供图像切割、图像融合、图像模糊、图像锐化等处理,此处不再赘述。
152.内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动等。
153.具体地,结合本技术实施例介绍的视频播放过程,表面管理器可以从应用程序层的不同应用程序获取视频数据、图像数据等。表面管理器还可以提供图层(layer)合成的服务,三维图形处理库、二维图形引擎等可以将合成的图层进行绘制和渲染,渲染完成后送到显示屏进行显示。对于显示屏上显示的视频播放窗口,可以将根据视频数据进行数据刷新、图层合成、绘制渲染和送显过程,以保持视频播放窗口的显示内容的实时更新。
154.为了便于理解,本技术以下实施例将以具有图2和图3所示结构的手机为例,结合附图和应用场景,对本技术实施例提供的播放视频的方法进行具体阐述。
155.图4是本技术实施例提供的一例开场动画的播放过程示意图,以手机为例,假设手机本地保存了多个视频片段,如图4中的(a)图所示,手机显示视频列表界面401,该视频列表界面401上显示了15个视频片段的缩略图,该15个缩略图对应了手机存储的15个视频片段。为了便于描述,将该15个视频片段按照1-15的数字进行编号,应理解,该视频列表界面401上的每一个视频片段可以以图1中的(c)图所示的缩略图的形式显示,此处不再赘述。
156.可选地,每一个视频片段的缩略图可以是该视频片段的第一帧视频画面的缩略图,或者该视频片段的任意一帧画面的缩略图,本技术实施例对此不作限定。
157.当用户期望播放第8个视频片段时,用户可以执行如图4中的(a)图所示的操作,点击该目标视频的播放控制按钮或该目标视频的缩略图的任意区域,响应于用户的点击操作,手机可以播放如图4中的(b)图—(c)图—(d)图—(e)图所示的开场动画,该开场动画的播放效果与该目标视频的片头特定时长的片段具有的播放效果相关联,下面结合不同的拍摄方式,介绍不同的开场动画播放效果。
158.应理解,本技术实施例中“开场动画”可以理解为“视频播放窗口的展开过程”,换言之,在本技术中,用户选中的目标视频会在视频播放窗口中进行播放,该视频播放窗口可以以不同的展开方式(该展开过程称为“开场动画”)呈现给用户,并最终以特定尺寸的视频播放窗口播放该目标视频,避免了现有方案中视频播放窗口只能通过弹出固定窗口的方式。且在视频播放窗口展开的过程中,该视频播放窗口播放的内容可以是该目标视频的片头特定时长(预设时长)的画面,或者说该“开场动画”播放的内容是该目标视频的片头前s秒的内容,或者前n帧的内容,s和n可以为预设的固定值或者用户设置的值,本技术实施例对开场动画的时长不作限定。
159.还应理解,本技术实施例中将播放“开场动画”的窗口称为“播放窗口”,该播放窗口可以和播放目标视频的播放窗口为同一个窗口,即开场动画可以理解为播放目标视频的播放窗口的形态变化过程;或者,该播放窗口可以和播放目标视频的播放窗口为不同的窗口,开场动画播放结束后跳转至播放目标视频的播放窗口继续播放该目标视频,本技术实施例对此不作限定。
160.还应理解,本技术实施例中“目标视频的片头特定时长的片段具有的播放效果”可以理解为在拍摄该目标视频的过程中,片头特定时长内,拍摄者使用了不同的运镜方式等拍摄技巧之后,播放过程中可以呈现给用户的播放效果。示例性的,在后续实施例的描述中,如果目标视频的拍摄过程中使用了“推运镜”的拍摄技巧,都可以理解为该目标视频的片头特定时长的片段内,使用了“推运镜”的拍摄技巧,后续不再一一赘述。
161.下面以拍摄视频的过程中使用了不同的运镜技巧为例,针对不同的运镜方式介绍几种对应的视频播放效果。
162.(1)推拉运镜
163.推拉运镜是视频拍摄中运用最多的技巧,可以包括“推运镜”和“拉运镜”。其中,这里的“推运镜”可以理解为拍摄过程中涉及镜头的推远,因此,推运镜可以呈现出从较大的场景逐渐转换为局部特写的场景的过程,该被拍摄的主体可以呈现从小变大的动态变化过程。
164.同理,“拉运镜”可以理解为拍摄过程中涉及镜头的拉近,因此,拉运镜的运动方向与推运镜相反,被拍摄的主体可以呈现出从局部特写的场景逐渐拉开成远景,“拉运镜”一般用来交代被摄主体所处的环境。
165.可选地,在本技术实施例中,如果镜头位置不变,被拍摄的主体可能处于由远及近的运动状态,或者由近及远的运动状态。当镜头位置不变,被拍摄的主体处于由远及近的运动状态时,虽然该过程没有用到“推运镜”,且被拍摄的主体所处的场景范围不变,但是被拍摄的主体也可以呈现出由小变大的动态变化效果,因此可以将该场景也可以划分到“推运镜”的范畴,并在视频播放过程中匹配和“推运镜”相关联的播放效果的开场动画。
166.同样地,当镜头位置不变,被拍摄的主体处于由近及远的运动状态时,虽然该过程没有用到“拉运镜”,且被拍摄的主体所处的场景范围不变,但是被拍摄的主体也可以呈现出由大变小的动态变化效果,将该场景也可以划分到“拉运镜”的范畴,并在视频播放过程中匹配和“拉运镜”相关联的播放效果的开场动画,后续实施例中结合附图详细介绍。
167.(2)移运镜
168.移运镜跟推拉运镜相似,只是运动轨迹不同,推拉运镜是镜头的前后运动,移运镜则是镜头沿着某固定轨迹的单向运动。应理解,移运镜主要是为了表现场景中人物之间的空间关系。
169.可选地,该固定轨迹可以是上下方向的运动轨迹、左右方向的运动轨迹,也可以是上下方向和左右方向之间的复合方向的运动轨迹等。
170.可选地,固定轨迹不限于平直轨迹或者曲线轨迹。
171.(3)摇运镜
172.摇运镜跟移运镜相似,移运镜主要是镜头沿着某固定轨迹的往复运动。应理解,摇运镜主要是为了表现场景中被拍摄主体的不同位置的细节变化。例如,摇运镜可以包括镜头的上下交替移动、左右交替移动等可能的方式,此处不再赘述。
173.(4)跟随运镜
174.跟随运镜就是镜头跟随被拍摄的主体移动,我们可以从被拍摄的主体的正、反方向进行跟随拍摄,但是要确保与拍摄的主体保持相同的移动速度。
175.(5)俯视运镜(或者称为“升降运镜”)
176.俯视运镜是将镜头借助于升降装置,一边升降一边拍摄的方式,镜头的升降运动带来了画面视域的扩展和收缩,通过视点的连续变化形成了多角度、多方位的多构图效果,进而表现出高大物体的各个局部、纵深空间点面关系、事件或场面的规模、气势和氛围、画面内容中感情状态的变化等。例如,镜头处于低处并且借助于升降装置慢慢移动到高处,随着镜头的高度变化,所呈现的画面也是极具视觉冲击力,给人一种新奇而深刻的感受。
177.应理解,针对上述介绍的不同运镜方式,如果目标视频具有不同的播放效果,那么在本技术实施例中,该开场动画的播放效果与该目标视频具有的播放效果相关联,下面针对上述列举的拍摄视频的过程中使用不同的运镜技巧,介绍不同的开场动画播放效果。
178.可选地,当目标视频的片头特定时长内,拍摄者使用了一种运镜方式时,可以根据该运镜方式为目标视频匹配一种具有相关联的播放效果的开场动画。当目标视频的片头特定时长内,拍摄者使用了两种或两种以上的运镜方式时,可以根据该两种或两种以上的运镜方式中的任意一种运镜方式为目标视频匹配一种具有相关联的播放效果的开场动画。换
言之,当目标视频的片头特定时长混合使用了两种或两种以上运镜时,开场动画可以只按照某一种运镜方进行匹配,本技术实施例对此不作限定。一种可能的实现方式中,手机可以根据人工智能(artificial intelligence,ai)等方式检测目标视频的片头特定时长内混合使用的两种或两种以上运镜,并确定出主运镜,即将视觉上感知的播放效果最突出的运镜确定为主运镜,并根据主运镜匹配开场动画,以为用户提供更好的视觉体验。
179.一种可能的场景中,如果用户选中的待播放的目标视频(视频片段8)的片头特定时长的拍摄过程中使用了“推运镜”的拍摄技巧,那么,开场动画的播放过程中,播放窗口30对应的尺寸也可以具有由小变大的动态变化效果,且播放窗口30中播放的视频片段8也具有镜头从较大的场景逐渐转换为局部特写的场景,被拍摄的主体从小变大的视觉效果。
180.可选地,该“推运镜”的拍摄过程中,被拍摄的主体的位置可以保持不变或者为运动状态,本技术实施例对此不作限定。
181.示例性的,假设目标视频8的内容为:马路上一辆汽车。可选地,该被拍摄的主体——汽车可以是运动状态或者静止状态。以静止的汽车为例,用户点击目标视频8之后,响应于用户的点击操作,如图4中的(b)图所示,在该视频列表界面402上弹出播放窗口30,且播放窗口30最初以较小的尺寸显示。此时,在该播放窗口30的开场动画的画面中,汽车位于马路上距离拍摄镜头较远的位置。随着播放时间的推移,如图4中的(c)图所示,在该视频列表界面403上,播放窗口30的显示尺寸逐渐增大,且开场动画的画面中,汽车逐渐放大呈现出靠近拍摄镜头的效果。随着播放时间的继续推移,如图4中的(d)图所示,在该视频列表界面404上,播放窗口30的显示尺寸继续增大,播放窗口30的宽度已经接近于手机的显示屏的宽度,且开场动画的画面中,汽车越来越靠近拍摄镜头,汽车的尺寸继续增大。最终,如图4中的(e)图所示,在界面405上,对于当前手机处于竖屏的显示状态,该播放窗口30具有最大尺寸,例如播放窗口30的宽度等于手机的显示屏的宽度。且在界面405的播放窗口30中,该开场动画播放结束,继续播放目标视频。
182.对于图4中的(b)图—(c)图—(d)图所示的开场动画的播放过程中,播放窗口30的尺寸在手机的界面上也逐渐增大;且在播放过程中,播放窗口30中的视频画面中汽车的显示尺寸也逐渐增大,显示位置逐渐向拍摄镜头靠近。
183.换言之,该开场动画的播放效果匹配与该目标视频8的片头特定时长(前s秒或者前n帧)的拍摄过程,即开场动画的播放效果与该目标视频8的片头具有相同的播放效果,因此,该开场动画的播放过程可以进一步为用户提供一种连贯的沉浸式体验,即用户可以更加深刻形象的体验到汽车由近及远的行驶过程,提高了用户的视觉体验。
184.一种可能的场景中,手机还可以处于横屏状态,对于横屏显示的手机,上述方式同样适用,播放窗口可以全屏或者非全屏的状态显示。例如,对于横屏的手机,结合图4的场景,播放窗口30可以由小逐渐变大直到全屏显示在手机的显示屏上,以更符合用户的使用习惯。
185.或者,在图4中的(b)图和(c)图所示的开场动画的播放过程中,用户转动手机使得手机从竖屏显示切换为横屏显示,那么手机可以通过陀螺仪、重力传感器等检测到横屏状态,并对窗口的显示适应性做出调整。例如适应于横屏显示状态,图4中的(d)图为横屏状态下窗口继续增大,图4中的(e)图就变化为播放窗口30全屏显示在手机的显示屏上。应理解,手机横屏状态显示时,播放窗口30全屏显示更符合用户的使用习惯,本技术实施例对此不
作限定。
186.另一种可能的场景中,目标视频可以为竖屏拍摄的视频,例如用户通过手机竖屏拍摄的视频,当用户播放的目标视频是竖屏视频且该目标视频的特定时长内使用了“推运镜”时,示例性的,图4中的(b)图—(c)图—(d)图所示的开场动画的播放过程中,播放窗口30的尺寸可以以不同比例进行缩放,例如播放窗口30的纵边(平行于手机竖直长边框)的放大速率可以大于播放窗口30的横边(平行于手机水平短边框)的放大速率,最终图4中的(e)图中可以呈现为竖屏的全屏播放。该过程可以结合目标视频的横竖屏显示方式,为用户匹配更合理的窗口样式,更符合用户的视觉习惯。
187.可选地,如图4中的(b)图所示,该播放窗口30初始化显示时,可以是在该视频列表界面402上自动弹出的小窗口,该初始化显示的播放窗口30的最初尺寸可以和图4中的(a)图所示的目标视频片段缩略图的尺寸大小相同,或者该初始化显示的播放窗口30的最初尺寸可以是该目标视频片段缩略图按照一定比例缩放后的尺寸;又或者,该初始化显示的播放窗口30的最初尺寸可以是预定义的固定尺寸,本技术实施例对此不作限定。
188.可选地,该播放窗口30初始化显示时,最初的显示位置可以根据用户选中的目标视频缩略图所在的位置确定。具体地,如图4中的(a)图所示,当用户选中的目标视频8的缩略图位于视频列表界面401的中心区域时,播放窗口30初始化显示在目标视频8的缩略图所在区域,如图4中的(b)图所示,播放窗口30以缩略图所在区域为中心,逐渐动态变化,此处不再赘述。同样地,当用户选中的目标视频的缩略图位于视频列表界面401的左上角区域时,播放窗口30以左上角的缩略图所在区域为中心,向右下角方向逐渐动态变化,此处不再赘述。
189.一种可能的实现方式中,该播放窗口30的背景图片可以是用户点击目标视频8时的手机界面。
190.可选地,在开场动画的播放过程中,该播放窗口30的背景图片可以是保持不变的,或者该播放窗口30的背景图片也可以是动态变化的。例如,背景图片也可以随着播放窗口30的增大而放大显示,或者随着播放窗口30的缩小而缩小显示。应理解,本技术实施例对背景图片的放大速率或者缩小速率不作限定。
191.示例性的,如图4中的(a)图所示,用户在视频列表界面401上点击了目标视频8,手机可以直接以当前显示的视频列表界面401作为背景图片,且该背景图片也跟随播放窗口30的逐渐增大而具有逐渐放大的显示效果,且背景图片的放大速率小于播放窗口30的增大速率。应理解,以所述视频列表界面截图得到的图片作为所述第一视频片段的播放窗口的背景图片,并匹配该开场动画的播放效果对背景图片进行缩放处理,该过程可以减少手机的数据处理量,保证手机的运行性能。具体地,用户在的视频列表界面401上点击了目标视频8,如图4中的(b)图所示,手机可以直接以当前显示的视频列表界面401作为背景图片,该背景图片是包括15个视频片段缩略图的界面。且随着播放窗口30的逐渐增大,如图4中的(c)图所示,该15个视频片段缩略图也具有逐渐放大的显示效果。随着播放窗口30的继续增大,如图4中的(d)图所示,该15个视频片段缩略图继续逐渐放大,直到播放窗口30以如图4中的(e)图所示的最终状态显示,此后,该播放窗口30继续播放目标视频8。
192.应理解,这里“播放窗口30继续播放目标视频8”可以理解为在播放窗口30展示了该目标视频8的片头前s秒或者前n帧的开场动画之后,继续播放s秒或者前n帧之后的视频
内容,后续不再赘述。
193.还应理解,在本技术实施例中,“播放窗口30以最终状态显示”可以理解为手机竖屏或横屏状态播放视频时,播放窗口30呈现的最大尺寸、显示位置、显示形态(悬浮显示等)、背景图片等至少一种特征,本技术实施例对此不作限定。
194.示例性的,如图4中的(e)图所示,手机竖屏显示时,播放窗口30最终状态的窗口宽度可以等于或近似等于手机显示屏短边的宽度,窗口长度可以适配于该窗口宽度。此外,该播放窗口30最终可以悬浮态显示在手机显示屏的中间区域;再者,播放窗口30最终状态的背景图片可以隐藏,或者呈现空白背景、黑色背景等,本技术实施例对此不作限定。
195.另一种可能的实现方式中,在按照第一展开方式展开该第一视频片段的播放窗口的过程中,电子设备还可以直接缩放所述视频列表界面上的背景元素,并将缩放后的背景元素作为所述第一视频片段的播放窗口的背景。示例性的,以图4中的(a)图为例,该实现过程中,手机如果直接缩放背景元素本身,即手机分别缩放图4中的(a)图所示的1-15个视频片段的缩略图,且手机还需要控制视频片段1-15的排布顺序和每一个视频片段自在该背景界面上的位移变化过程,保证缩放背景元素之后可以实现图4中的(b)-(e)中的播放效果。
196.可选地,在本技术实施例中,当镜头位置不变,被拍摄的主体处于由远及近的运动状态时,虽然该过程没有用到推运镜,且被拍摄的主体所处的场景范围不变,但是被拍摄的主体也可以呈现出由小变大的动态变化效果,将该场景也可以划分到“推运镜”的范畴,并在视频播放过程中匹配和“推运镜”相关联的图4所示的播放效果,此处不再赘述。通过上述过程,对于片头特定时长内使用了“推运镜”拍摄技巧的目标视频,该开场动画的播放过程中,播放窗口具有由小变大的动态变化效果,且播放窗口中播放的目标视频也从较大的场景逐渐转换为局部特写的场景,被拍摄的主体从小变大。该开场动画的播放过程可以进一步为用户提供一种连贯的沉浸式体验。此外,该开场动画的播放过程中,同时伴随着背景图片的逐渐放大,用户可以更加深刻形象的体验到汽车由远及近的行驶过程,提高了用户的视觉体验。
197.又一种可能的实现方式中,在开场动画的播放过程中,播放窗口30的背景图片的透明度可以动态变化。
198.通过上述过程,对于片头特定时长内使用了“推运镜”拍摄技巧的目标视频,在用户点击播放之后,以开场动画的形式展示给用户,在开场动画的播放过程中,播放窗口具有由小变大的动态变化效果,且播放窗口中播放的目标视频也从较大的场景逐渐转换为局部特写的场景,被拍摄的主体从小变大。因此,该开场动画的播放过程可以进一步为用户提供一种连贯的沉浸式体验,即用户可以更加深刻形象的体验到汽车由远及近的行驶过程,提高了用户的视觉体验。
199.一种可能的实现方式中,开场动画的播放窗口30可以仅包括用于显示目标视频的片头的特定时长的画面的画面显示区域;或者,开场动画的播放窗口30可以包括用于显示目标视频的片头的特定时长的画面的画面显示区域,且播放窗口30还可以包括播放该目标视频过程的菜单控制区域,该菜单控制区域可以包括一种或多种按键、控件等。
200.图5是本技术实施例提供的一例播放窗口的示意图。示例性的,该开场动画的播放窗口30可以显示如图5中的(a)图所示,仅包括画面显示区域,该画面显示区域用于显示目标视频的片头的特定时长的画面,不包括用户可操作的任何菜单选项、控件等。
201.或者,如图5中的(b)图所示,该开场动画的播放窗口30可以包括画面显示区域,且播放窗口30还可以包括播放该目标视频过程的菜单控制区域。例如图5中的(b)图所示的菜单控制区域i显示的播放控制按键、下一个视频控制按键、时长控件、全屏控件等,以及菜单控制区域ii显示的影片名称菜单、弹幕控制控件、关闭控件等,本技术实施例对播放窗口的样式不作限定。
202.一种可能的场景中,如果用户选中的待播放的目标视频的片头特定时长的拍摄过程中使用了“拉运镜”的拍摄技巧,那么,开场动画的播放过程中,播放窗口30对应的尺寸具有由大变小的动态变化效果,且播放窗口30中播放的视频从局部特写的场景逐渐转换为较大的场景,被拍摄的主体从大变小的视觉效果。
203.图6是本技术实施例提供的又一例开场动画的播放过程示意图。示例性的,手机显示如图6中的(a)图所示的视频列表界面601,该视频列表界面601上显示了手机存储的15个视频片段的缩略图。
204.示例性的,如果用户选中的目标视频为编号为1的视频片段,视频片段1缩略图位于手机左上角区域,且目标视频1的片头特定时长的拍摄过程中使用了“拉运镜”的拍摄技巧。且在该场景中,假设目标视频1中被拍摄的主体——汽车为运动状态。
205.响应于用户的点击操作,如图6中的(b)图所示,在该视频列表界面602上弹出播放窗口30,且播放窗口30最初以最大的尺寸显示在手机显示屏的顶部区域,即覆盖视频片段1缩略图所在的左上角区域。此时,该播放窗口30具有最大尺寸,例如播放窗口30的宽度等于手机的显示屏的宽度,且在该播放窗口30的开场动画的初始画面中,汽车具有最大尺寸的特写镜头,镜头所拍摄的场景范围小。
206.随着播放时间的推移,如图6中的(c)图所示,在该视频列表界面603上,播放窗口30的显示尺寸逐渐缩小,且开场动画的画面中,汽车逐渐远离拍摄镜头,且镜头所拍摄的场景范围逐渐增大。
207.随着播放时间的继续推移,如图6中的(d)图所示,在该视频列表界面604上,播放窗口30的显示尺寸继续缩小,且开场动画的画面中,镜头所拍摄的场景范围继续增大,汽车越来越远离拍摄镜头,汽车的尺寸继续缩小。最终,该开场动画播放结束,如图6中的(e)图所示,在界面605上,手机可以在界面605的中间位置区域显示播放窗口30,继续播放目标视频1。
208.一种可能的实现方式中,除了上述播放窗口30的动态变化过程之外,在开场动画的播放过程中,该播放窗口30的背景图片也是动态变化的。
209.可选地,在开场动画的播放过程中,该播放窗口30的背景图片可以是保持不变的,或者该播放窗口30的背景图片也可以是动态变化的。例如,背景图片也可以随着播放窗口30的增大而放大显示,或者随着播放窗口30的缩小而缩小显示。应理解,本技术实施例对背景图片的放大速率或者缩小速率不作限定。
210.示例性的,如图6中的(b)图—(c)图—(e)图的变化过程,背景图片也可以随着播放窗口30的缩小而逐渐缩小,且背景图片的缩小速率大于该播放窗口30的缩小速率。同时,背景图片的缩小过程还伴随着透明度的变化,即背景图片逐渐由低透明度变化为高透明度,图6中的(d)图的背景图片已经呈现出半透明的状态,直到显示如图6中的(e)图所示,继续在播放窗口30中播放目标视频1。
211.可选地,当镜头位置不变,被拍摄的主体——汽车处于由近及远的运动状态时,虽然该过程没有用到拉运镜,且被拍摄的主体所处的场景范围不变,但是被拍摄的主体也可以呈现出由大变小的动态变化效果,将该场景也可以划分到“拉运镜”的范畴,并在视频播放过程中匹配和“拉运镜”相关联的播放效果,此处不再赘述。
212.通过上述过程,对于片头特定时长内使用了“拉运镜”拍摄技巧的目标视频,在用户点击播放之后,以开场动画的形式展示给用户。在开场动画的播放过程中,播放窗口具有由大变小的动态变化效果,且播放窗口中播放的目标视频也从局部特写的场景逐渐转换为较大的场景,被拍摄的主体从大变小。因此,该开场动画的播放过程可以进一步为用户提供一种连贯的沉浸式体验,即用户可以更加深刻形象的体验到汽车由近及远的行驶过程,提高了用户的视觉体验。
213.一种可能的实现方式中,在开场动画的展示过程中,播放窗口30的尺寸变化可以是长度、宽度中的至少一项的变化。
214.示例性的,以竖屏手机为例,播放窗口30平行于手机短边的尺寸称为“宽度”,平行于手机长边的尺寸称为“长度”,在图4列举的示意图中,在开场动画的展示过程中,播放窗口30的长度和宽度都逐渐增大,直到宽度达到手机短边宽度。在图6列举的示意图中,在开场动画的展示过程中,播放窗口30的长度逐渐缩小,而宽度为手机短边宽度且保持不变。
215.图7是本技术实施例提供的另一例开场动画的播放过程示意图。示例性的,手机显示如图7中的(a)图所示的视频列表界面701,该视频列表界面701上显示了手机存储的15个视频片段缩略图。
216.在图7列举的场景中,如果用户选中的待播放的目标视频(视频片段11)的片头特定时长的拍摄过程中使用了“移运镜”中镜头从下往上的拍摄技巧,那么,开场动画的播放过程中,播放窗口30也对应的从下往上移动的动态变化效果,且播放窗口30中播放的视频片段11也具有镜头上下移动的视觉效果。
217.示例性的,假设目标视频11的内容为:从铁塔底端逐渐上移至铁塔顶端。用户点击目标视频11之后,响应于用户的点击操作,如图7中的(b)图所示,在该视频列表界面702上弹出播放窗口30,且播放窗口30在初始就显示为手机竖屏状态播放视频时的最终状态的固定尺寸,即窗口宽度等于或近似等于手机显示屏短边的宽度,窗口长度可以适配于该窗口宽度。且该播放窗口30位于手机显示屏的底端区域,该播放窗口30的背景图片为视频列表界面,且背景图片逐渐开始呈现透明状态。对应地,在该播放窗口30的开场动画的画面展示为铁塔底端。
218.随着播放时间的推移,图7中的(b)图逐渐变化呈现如图7中的(c)图所示,在界面703上,该播放窗口30的位置逐渐由手机显示屏的底端区域向上移动,播放窗口30的尺寸大小可以保持不变,播放窗口30的背景图片的透明度增大,即背景图片逐渐变得更透明。对应地,该播放窗口30的开场动画的镜头画面从铁塔底端逐渐向上移动,显示如图7中的(c)图所示的铁塔腰身区域。
219.随着播放时间的继续推移,逐渐变化如图7中的(d)图所示,在界面704上,该播放窗口30的位置继续向上移动,播放窗口30的尺寸大小可以保持不变,播放窗口30悬浮显示在界面704的中间区域,背景图片的透明度增大到一定阈值后消失,即背景可以为全透明或者黑色等。对应地,该播放窗口30的开场动画的镜头画面从铁塔腰身区域向上移动到铁塔
塔尖区域,显示如图7中的(d)图所示,此后,该播放窗口30继续播放目标视频11。
220.通过上述方法,对于片头特定时长内采用了移运镜的目标视频11,该开场动画的播放过程匹配移运镜的播放效果,即播放窗口30也呈现出上下移动的动画效果,因此,该开场动画的播放过程可以进一步为用户提供一种连贯的沉浸式体验,即用户可以更加深刻形象的体验到镜头从铁塔底端到铁塔塔尖的移动过程,提高了用户的视觉体验。
221.图8是本技术实施例提供的再一例开场动画的播放过程示意图。图8中的目标视频5与图7的目标视频11使用了不同的移运镜,在图8列举的场景中,如果用户选中的待播放的目标视频(视频片段5)的片头特定时长的拍摄过程中使用了“移运镜”中从上往下的拍摄技巧,那么,开场动画的播放过程中,播放窗口30也对应的具有上下移动的动态变化效果,且播放窗口30中播放的视频片段11也具有镜头从上往下移动的视觉效果。
222.示例性的,假设目标视频5的内容为:从铁塔底端逐渐上移至铁塔顶端。如图8中的(a)图所示,用户点击目标视频5之后,响应于用户的点击操作,如图8中的(b)图所示,在该视频列表界面802上弹出播放窗口30,且播放窗口30在初始就显示为手机竖屏状态播放视频时的最终状态的固定尺寸,即窗口宽度等于或近似等于手机显示屏短边的宽度,窗口长度可以适配于该窗口宽度。且该播放窗口30位于手机显示屏的顶端区域,该播放窗口30的背景图片为视频列表界面,且背景图片逐渐开始呈现透明状态。对应地,在该播放窗口30的开场动画的画面展示为铁塔塔尖。
223.随着播放时间的推移,图8中的(b)图逐渐变化呈现如图8中的(c)图所示,在界面803上,该播放窗口30的位置逐渐由手机显示屏的顶端区域向下移动,播放窗口30的尺寸大小可以保持不变,播放窗口30的背景图片的透明度增大,即背景图片逐渐变得更透明。对应地,该播放窗口30的开场动画的镜头画面从铁塔塔尖逐渐向下移动,显示如图8中的(c)图所示的铁塔腰身区域。
224.随着播放时间的继续推移,逐渐变化如图8中的(d)图所示,在界面804上,该播放窗口30的位置继续向上移动,播放窗口30的尺寸大小可以保持不变,播放窗口30悬浮显示在界面804的底部区域,背景图片的透明度增大到一定阈值后消失,即背景可以为全透明或者黑色等。对应地,该播放窗口30的开场动画的镜头画面从铁塔腰身区域向下移动到铁塔底端区域,显示如图8中的(d)图所示,此后,该播放窗口30继续播放目标视频11。
225.通过上述方法,对于片头特定时长内采用了移运镜的目标视频11,该开场动画的播放过程匹配移运镜的播放效果,即播放窗口30也呈现出上下移动的动画效果,因此,该开场动画的播放过程可以进一步为用户提供一种连贯的沉浸式体验,即用户可以更加深刻形象的体验到镜头从铁塔底端到铁塔塔尖的移动过程,提高了用户的视觉体验。
226.在另一种可能的实现方式中,手机显示的视频列表界面上的视频片段的缩略图是基于预设的规律,按照一定的顺序排列显示的。
227.可选地,手机可以确定每个视频片段的片头的特定时长(前s秒或者前n帧)的运镜技巧,并根据每个视频对应的运镜技巧对所有的视频片段进行排序。
228.或者,手机可以按照每个视频片段保存到手机本地的时间进行排列,本技术实施例对此不作限定。
229.示例性的,以图4中的(a)图、图7中的(a)图和图8中的(a)图为例,手机的视频列表界面401上显示的15个视频片段分别对应了不同的运镜技巧,将使用了推拉运镜技巧的视
频片段(例如视频片段8)排列在列表的中间区域,将使用了移运镜技巧的视频片段(例如视频片段5和11)排列在前排或者最后一排。因为推拉运镜技巧的视频片段(例如视频片段8)对应的开场动画主要会对应播放窗口30的放大或缩小的开场动画,将该推拉运镜技巧的视频片段排列在中间区域显示,更符合用户的视觉习惯;再例如,对于移运镜技巧的视频片段(例如视频片段5和11)对应的开场动画主要会对应播放窗口30的上下移动的开场动画,将具有由上到下摇移的开场动画的视频片段排列在第一排或第二排的区域显示,将具有由下到上摇移的开场动画的视频片段排列在最下面一排的区域显示,使得该开场动画的播放过程更符合用户的视觉习惯,进一步提高了用户视觉体验。
230.结合附图4至附图8,以竖屏显示的手机为例,介绍了开场动画的播放过程和展示方式,应理解,对于横屏显示的手机,上述方式同样适用,播放窗口可以全屏或者非全屏的状态显示。例如,对于横屏的手机,结合图4的场景,播放窗口30可以由小逐渐变大直到全屏显示在手机的显示屏上;或者,结合图6的场景,播放窗口30可以在开场动画播放结束后,在图6中的(e)图中以全屏状态显示;又或者,结合图7或图8的场景,播放窗口30可以以小窗口的形式上下移动,在开场动画播放结束后,在图7中的(d)图或图8中的(d)图中以全屏状态显示。
231.应理解,本技术实施例提供的开场动画的实现过程中,播放窗口的大小、显示位置、显示方式等可以根据手机的横竖屏显示状态、用户播放的目标视频的片头特定时长内的拍摄方式进行调整和变化,本技术实施例对此不作限定。
232.综上所述,对于片头特定时长内使用了不同运镜拍摄技巧的目标视频,在用户点击播放该目标视频之后,以不同开场动画的形式展示给用户,即视频播放窗口可以通过不同的展开方式呈现给用户。具体地,手机等电子设备可以检测目标视频的运镜类型,并根据目标视频的运镜类型匹配不同的开场动画,使得开场动画的播放过程可以匹配运镜技巧,增强用户的视觉冲击感,进一步为用户提供一种连贯的沉浸式体验,提高了用户的视觉体验。
233.上述实施例结合图4至图8,从用户交互层面介绍了播放视频的方法,下面将结合图9至图11,从软件实现策略层面,介绍本技术实施例提供的播放视频的方法。
234.图9是本技术实施例提供的一例播放视频的方法的示意性流程图,应理解,该方法可以在如图2、图3所示的具有触摸屏等结构的电子设备(例如手机、平板电脑等)中实现。以手机为例,如图9所示,该方法可以包括以下步骤:
235.910,显示视频列表界面,所述视频列表界面包括一个或多个视频片段的缩略图。
236.示例性的,如图4中的(a)图所示,手机显示视频列表界面401,该视频列表界面401上显示了15个视频片段的缩略图,该15个缩略图对应了手机存储的15个视频片段。
237.可选地,每一个视频片段的缩略图可以是该视频片段的第一帧视频画面的缩略图,或者该视频片段的任意一帧画面的缩略图,本技术实施例对此不作限定。
238.920,接收用户对第一视频片段的缩略图的播放操作,响应于所述播放操作,获取所述第一视频片段在第一时长内对应的第一运镜类型,所述第一视频片段是所述一个或多个视频片段中的任意一个。
239.应理解,对于本地视频或者视频应用的在线视频等,该步骤920的过程可以对应不同的处理方式。
240.一种可能的实现方式中,所述电子设备可以获取所述视频列表界面上所述一个或多个视频片段中每个视频片段在所述第一时长内对应的运镜类型信息,以及响应于所述播放操作,从所述一个或多个视频片段中确定所述第一视频片段,并将所述第一视频片段在所述第一时长内对应的运镜类型信息确定为所述第一运镜类型。
241.示例性的,对于本地视频,电子设备可以对本地存储的视频进行实时运镜检测,或者周期性运镜检测,以获取每一个视频的运镜类型信息;或者用户点击了第一视频片段之后,电子设备启动检测该第一视频片段的运镜类型信息,而不需要额外检测其他视频片段的运镜类型,从而降低电子设备的数据处理过程,降低电子设备的功耗等。
242.又或者,每个视频片段在所述第一时长内对应的运镜类型信息是所述每个视频片段的标签详情中携带的信息,即每个视频片段都具有各自独有的标签信息,该标签信息中可以携带了运镜类型信息等。
243.对于视频应用的在线视频等,电子设备可以根据用户的选中操作,实时检测用户选中的目标视频片段的运镜类型信息,或者在电子设备缓存某个视频片段时,就启动电子设备检测该缓存的视频片段的运镜类型信息,本技术实施例对此不作限定。
244.930,根据所述第一运镜类型,以第一展开方式展开所述第一视频片段的播放窗口,且在所述播放窗口中播放所述第一视频片段。
245.示例性的,用户执行如图4中的(a)图所示的操作,点击该第一视频片段的缩略图的播放控制按钮或该第一视频片段的缩略图的任意区域,响应于用户的点击操作,手机可以如图4中的(b)图—(c)图—(d)图所示的展开过程展开第一视频片段的播放窗口。
246.应理解,本技术实施例将“以第一展开方式展开所述第一视频片段的播放窗口,且在所述播放窗口中播放所述第一视频片段的过程”称为“开场动画的播放过程”,该开场动画的播放效果与该目标视频的片头特定时长的片段具有的播放效果相关联,即对于不同的拍摄方式,可以具有不同的开场动画播放效果。
247.可选地,“第一时长”可以是所述第一视频片段的片头前s秒或者所述第一视频片段的片头前n帧画面对应的时长。
248.可选地,所述第一视频片段的播放窗口包括画面显示区域和/或菜单控制区域中。
249.示例性的,第一视频片段的播放窗口可以如图5中的(a)图所示,仅包括画面显示区域,该画面显示区域用于显示目标视频的片头的特定时长的画面,不包括用户可操作的任何菜单选项、控件等。
250.或者,示例性的,第一视频片段的播放窗口可以如图5中的(b)图所示,该开场动画的播放窗口30可以包括画面显示区域,且播放窗口30还可以包括播放该目标视频过程的菜单控制区域。例如图5中的(b)图所示的菜单控制区域i显示的播放控制按键、下一个视频控制按键、时长控件、全屏控件等,以及菜单控制区域ii显示的影片名称菜单、弹幕控制控件、关闭控件等,本技术实施例对播放窗口的样式不作限定。
251.一种可能的实现方式中,所述第一展开方式包括所述第一视频片段的播放窗口的尺寸大小的变化方式;和/或所述第一视频片段的播放窗口的位置变化方式。
252.可选地,在按照第一展开方式展开所述第一视频片段的播放窗口的过程中,所述背景图片的尺寸大小保持不变,和/或所述背景图片的透明度保持不变。或者,所述背景图片的尺寸大小按照第一预设规则变化,和/或所述背景图片的透明度按照第二预设规则变
化。
253.可选地,第一视频片段的播放窗口的尺寸大小的变化可以是长度、宽度中的至少一项的变化。
254.另一种可能的实现方式中,在按照第一展开方式展开该第一视频片段的播放窗口的过程中,电子设备还可以将对所述视频列表界面截图得到的图片,作为所述第一视频片段的播放窗口的背景图片;以及在所述背景图片上,以第一展开方式展开所述第一视频片段的播放窗口。
255.应理解,以所述视频列表界面截图得到的图片作为所述第一视频片段的播放窗口的背景图片,并匹配该开场动画的播放效果对背景图片进行缩放处理,该过程可以减少手机的数据处理量,保证手机的运行性能。
256.另一种可能的实现方式中,在按照第一展开方式展开该第一视频片段的播放窗口的过程中,电子设备还可以直接缩放所述视频列表界面上的背景元素,并将缩放后的背景元素作为所述第一视频片段的播放窗口的背景。示例性的,以图4中的(a)图为例,该实现过程中,手机如果直接缩放背景元素本身,即手机分别缩放图4中的(a)图所示的1-15个视频片段的缩略图,且手机还需要控制视频片段1-15的排布顺序和每一个视频片段自在该背景界面上的位移变化过程,保证缩放背景元素之后可以实现图4中的(b)-(e)中的播放效果。可选地,在第一视频片段的播放窗口的展开过程中,第一视频片段的播放窗口的背景图片也是动态变化的。具体地,第一视频片段的播放窗口的背景图片的显示尺寸、透明度可以动态变化。
257.示例性的,在第一视频片段的播放窗口的展开过程中,该播放窗口的背景图片可以是保持不变的,或者该播放窗口的背景图片也可以是动态变化的。例如,背景图片也可以随着播放窗口的增大而放大显示,或者随着播放窗口的缩小而缩小显示。应理解,本技术实施例对背景图片的放大速率或者缩小速率不作限定。
258.或者,示例性的,在第一视频片段的播放窗口的展开过程中,该播放窗口的背景图片的透明度可以逐渐由高变低、或者由低变高。
259.通过上述方案,在第一视频片段的播放窗口的展开过程中,同时伴随着背景图片的逐渐放大或缩小,以及伴随着背景图片的透明度的动态变化,用户可以更加深刻形象的体验到视频画面中的拍摄主体的变化过程,提高了用户的视觉体验。
260.又一种可能的实现方式中,在按照第一展开方式展开所述第一视频片段的播放窗口的过程中,所述第一视频片段的播放窗口初始化显示位置是根据所述第一视频片段的缩略图的位置确定的。具体地,该第一视频片段的播放窗口初始化显示时,最初的显示位置可以根据用户选中的第一视频片段的缩略图所在的位置确定。
261.示例性的,具体地,如图4中的(a)图所示,当用户选中的目标视频8的缩略图位于视频列表界面401的中心区域时,播放窗口30初始化显示在目标视频8的缩略图所在区域,如图4中的(b)图所示,播放窗口30以缩略图所在区域为中心,逐渐动态变化,此处不再赘述。同样地,当用户选中的目标视频的缩略图位于视频列表界面401的左上角区域时,播放窗口30以左上角的缩略图所在区域为中心,逐渐动态变化,此处不再赘述。
262.通过上述方案,该第一视频片段的播放窗口初始化显示位置可以根据用户点击的缩略图的位置变化而变化,更符合用户的使用习惯,提高了用户体验。
263.可选地,如果用户选中的待播放的第一视频片段的片头特定时长的拍摄过程中使用了“推运镜”的拍摄技巧,那么,开场动画的播放过程中,第一视频片段的播放窗口对应的尺寸也可以具有由小变大的动态变化效果,且第一视频片段的播放窗口中播放的第一视频片段也具有镜头从较大的场景逐渐转换为局部特写的场景,被拍摄的主体从小变大的视觉效果。
264.示例性的,对于图4中的(b)图—(c)图—(d)图—(e)图所示的开场动画的播放过程中,播放窗口30的尺寸在手机的界面上也逐渐增大;且在播放过程中,播放窗口30中的视频画面中汽车的显示尺寸也逐渐增大,显示位置逐渐向拍摄镜头靠近。具体地,如图4中的(b)图所示,该播放窗口30初始化显示时,可以是在该视频列表界面402上自动弹出的小窗口,该初始化显示的播放窗口30的最初尺寸可以和图4中的(a)图所示的目标视频片段缩略图的尺寸大小相同,或者该初始化显示的播放窗口30的最初尺寸可以是该目标视频片段缩略图按照一定比例缩放后的尺寸;又或者,该初始化显示的播放窗口30的最初尺寸可以是预定义的固定尺寸,本技术实施例对此不作限定。
265.通过上述过程,对于片头特定时长内使用了“推运镜”拍摄技巧的目标视频,在用户点击播放之后,以开场动画的形式展示给用户,在开场动画的播放过程中,播放窗口具有由小变大的动态变化效果,且播放窗口中播放的目标视频也从较大的场景逐渐转换为局部特写的场景,被拍摄的主体从小变大。因此,该开场动画的播放过程可以进一步为用户提供一种连贯的沉浸式体验,即用户可以更加深刻形象的体验到被拍摄的主体由远及近的行驶过程,提高了用户的视觉体验。
266.可选地,如果用户选中的待播放的第一视频片段的片头特定时长的拍摄过程中使用了“拉运镜”的拍摄技巧,那么,开场动画的播放过程中,第一视频片段的播放窗口对应的尺寸也可以具有由大变小的动态变化效果,且第一视频片段的播放窗口中播放的视频从局部特写的场景逐渐转换为较大的场景,被拍摄的主体从大变小的视觉效果。
267.示例性的,对于图6中的(b)图—(c)图—(d)图—(e)图所示的开场动画的播放过程中,播放窗口30的尺寸在手机的界面上的显示尺寸逐渐缩小,且开场动画的画面中,汽车逐渐远离拍摄镜头,且镜头所拍摄的场景范围逐渐增大。
268.通过上述过程,对于片头特定时长内使用了“拉运镜”拍摄技巧的目标视频,在用户点击播放之后,以开场动画的形式展示给用户。在开场动画的播放过程中,播放窗口具有由大变小的动态变化效果,且播放窗口中播放的目标视频也从局部特写的场景逐渐转换为较大的场景,被拍摄的主体从大变小。因此,该开场动画的播放过程可以进一步为用户提供一种连贯的沉浸式体验,即用户可以更加深刻形象的体验到被拍摄的主体由近及远的行驶过程,提高了用户的视觉体验。
269.可选地,如果用户选中的待播放的第一视频片段的片头特定时长的拍摄过程中使用了“移运镜”中从下往上的拍摄技巧,那么,开场动画的播放过程中,第一视频片段的播放窗口也对应的从下往上移动的动态变化效果,且第一视频片段的播放窗口中播放的视频片段也具有镜头上下移动的视觉效果。
270.可选地,如果用户选中的待播放的第一视频片段的片头特定时长的拍摄过程中使用了“移运镜”中从上往下的拍摄技巧,那么,开场动画的播放过程中,第一视频片段的播放窗口也对应的具有上下移动的动态变化效果,且第一视频片段的播放窗口中播放的视频片
段也具有镜头从上往下移动的视觉效果。
271.通过上述方法,对于片头特定时长内采用了移运镜的视频,该开场动画的播放过程匹配移运镜的播放效果,即播放窗口也呈现出上下移动的动画效果,因此,该开场动画的播放过程可以进一步为用户提供一种连贯的沉浸式体验,即用户可以更加深刻形象的体验到镜头上下移动过程,提高了用户的视觉体验。
272.下面针对步骤920介绍的运镜检测过程,介绍一种可能的运镜检测方式。图10是本技术实施例提供的一例运镜检测的流程图,如图10所示,以第一视频片段的片头的前n秒为例,该运镜检测流程1000可以包括:
273.1001,输入第一视频片段的片头的前n秒视频内容。
274.1002,将n秒的视频片段均匀分段,每段长度n秒。可选地,例如将视频片段按照每段1秒进行分段,本技术实施例对分段规则不作限定。
275.1003,基于每段n秒视频,选取每一段视频的关键帧,生成时序像素特征和画面结构特征。
276.1004,判断第一个关键帧中是否存在画面结构特征关键点。
277.1005,当第一个关键帧中是否存在画面结构特征的关键点时,在第一个关键帧之后的其他关键帧中提取画面结构特征关键点。
278.应理解,“关键帧(key frame)”可以表示被拍摄物体运动或发生变化过程中的关键动作所处的那一帧,又可以称为“过渡帧”或者“中间帧”。
279.1006,基于homograph的平面约束条件,判断其他关键帧中提取画面结构特征关键点是否与第一个关键帧的关键点匹配。
280.1007,当其他关键帧中提取画面结构特征关键点是否与第一个关键帧的关键点匹配时,基于homograph矩阵,透视变换计算关键点最大运动距离作为该n秒视频片段的时序特征。
281.1008,基于分类器的门限值和时序特征,确定该n秒视频片段的运镜类型。
282.1009,将该n秒视频片段的运镜类型作为该第一视频片段的运镜类型,输出结束。
283.应理解,以上步骤1001-1008介绍了通过视频中结构化关键点(高层特征)的运动检测分析来确定该第一视频片段的前n秒的运镜类型的过程,对于步骤1004,当第一个关键帧中不存在画面结构特征的关键点时,可以执行步骤1010-1013的过程;或者对于步骤1006,当其他关键帧中提取画面结构特征关键点与第一个关键帧的关键点不匹配时,也可以执行步骤1010-1013的过程。
284.1010,当第一个关键帧中不存在画面结构特征的关键点时,提取关键帧的时序像素特征,即时序像素变化直方图。
285.1011,根据第一个关键帧的时序像素变化直方图,计算该第一个关键帧的灰度像素直方图。
286.1012,计算累积关键帧间灰度像素直方图的差值,并将该差值作为该n秒的视频片段的时序特征。
287.1013,分类器基于灰度像素直方图的差值,进行分类,确定该n秒视频片段的运镜类型。
288.1009,将该n秒视频片段的运镜类型作为该第一视频片段的运镜类型,输出结束。
289.应理解,以上步骤1010-1013介绍了根据时序像素变化直方图(底层特征)来确定该第一视频片段的前n秒的运镜类型的过程。该过程可以基于分类器,通过离线数据训练的机器学习的logistics regression对提取的底层像素特征进行分类,保证了未知场景下,该镜头运动检测方法的准确性和检测过程的可靠性。
290.综上所述,在对第一视频片段进行运镜检测的过程中,可以通过视频数据中的时序像素变化以及基于关键帧匹配的结构化运动,同时提取视频片段中对应的底层特征和高层特征,针对不同场景的拍摄过程中的不同镜头运动模式,优先选择步骤1001-1008的过程,通过视频中结构化关键点(高层特征)的运动检测,进行有效的镜头运动的判断,进而确定该第一视频片段的前n秒的运镜类型。如果场景过于复杂导致关键点检测和匹配误差较大时,自动切换至步骤1010-1013的过程,通过时序像素变化直方图(底层特征),进行有效的镜头运动的判断,进而确定该第一视频片段的前n秒的运镜类型。该过程可以适用于更多拍摄场景下使用了不同运镜技巧的视频,提高了视频的运镜检测的准确性。
291.针对前述图9介绍的开场动画的实现流程和图10介绍的运镜检测方法,再结合具有图2和图3所示的结构的电子设备,以手机为例,介绍本技术实施例的一种可能的具体实现过程。图11是本技术实施例提供的一例播放视频的实现过程示意图,如图11所示,该过程1100包括:
292.用户操作阶段
293.1101,用户在视频列表界面选择待播放的第一视频片段。
294.示例性的,该过程可以如图4中的(a)图、图6中的(a)图、图7中的(a)图或者图8中的(a)图所示,此处不再赘述。在该用户操作阶段中,用户在手机的显示屏上点击选择待播放的第一视频片段,由显示屏的触摸传感器180k等检测用户的操作,并将该操作传递给手机的处理器,由处理器判断待播放的第一视频片段。
295.内部处理阶段
296.1102-1,视频播放器初始化。该步骤1102-1的过程可以理解为手机的播放器初始化加载播放窗口的部分控件、按钮、菜单等,如图5中的(b)图所示,在视频播放的过程中,可能会显示播放控制按键、下一个视频控制按键、时长控件、全屏控件等,为后续视频播放窗口的显示做初始化准备。
297.可选地,步骤1102-1中初始化的组件或控件等一般处于隐藏状态或未初始化状态,在开场动画的播放过程中可以直接显示,这样可以使用户界面到开场动画的播放界面的衔接更加紧凑。
298.1102-2,将当前的该视频列表界面截图,保存至手机的存储器。应理解,该视频列表界面截图可以作为播放窗口的展开过程的背景图片,该过程可以由窗口管理器、内容提供器等实现,此处不再赘述。
299.一种可能的实现方式中,该视频列表界面可以截图保存为一帧画面,即可以采用截图机制,对待播放的第一视频片段的前n秒进行解码,以抽取为一组序列帧保存。此时由于视频解码过程需要耗时,可以利用开场动画开始时且部分视频未立即完整呈现的时间,异步进行,边解码边绘制,即一帧一帧的绘制,此次不再赘述。
300.1102-3,解码器获取待播放的第一视频片段对应的文件,并对该文件进行解码,确定运镜类型。
301.应理解,该步骤1102-1,1102-2,1102-3的过程可以同时进行,本技术实施例对该内部处理过程的几个步骤的执行顺序不作限定。
302.1102-4,获取运镜类型和播放窗口的第一展开方式。
303.还应理解,该1102-4确定运镜类型的过程可以参考前述图10的相关介绍,此处不再赘述。
304.具体地,根据运镜检测的结果(运镜类型)匹配该第一视频片段的展开策略,即确定开场动画的策略。该开场动画的策略可以列举包括以下几种:
305.(1)当检测到该第一视频片段无运镜或运镜幅度低于某阈值时,采用普通展开,例如现有技术中自动弹出固定窗口的方式。
306.(2)当检测到该第一视频片段使用了“推运镜”的拍摄技巧时,采用“进入”的展开方式呈现该开场动画,如前述图4所示的过程,此处不再赘述。
307.(3)当检测到该第一视频片段使用了“拉运镜”的拍摄技巧时,采用“远离”的展开方式呈现该开场动画,如前述图6所示的过程,此处不再赘述。
308.(4)当检测到该第一视频片段使用了“移运镜”的拍摄技巧时,采用“上下推入”的展开方式呈现该开场动画,其方向与待播放视频运镜方向一致,如前述图7或图8所示的过程,此处不再赘述。
309.应理解,对于不同的运镜技巧,还可以包括更多的开场动画的策略,此处不再一一举例。
310.1103,根据第一展开方式,渲染器获取解码后的第一视频片段对应的文件和截图得到的背景图片,并进行绘制渲染,以合成可以在显示屏上显示的图层。
311.应理解,该步骤1103的过程可以由视频应用的渲染器来完成,或者由手机系统自带的渲染器来完成,本技术实施例对该过程的执行主体不作限定。
312.设备显示阶段
313.1104,根据合成的图层完成送显等,在显示屏上以第一展开方式展开该第一视频片段的播放窗口,且在该第一视频片段的播放窗口中播放第一视频片段,即显示该开场动画。
314.示例性的,该过程可以如图4中的(b)图-(c)图-(d)图-(e)图所示,或者如图6中的(b)图-(c)图-(d)图-(e)图所示,或者如图7中的(b)图-(c)图-(d)图所示,又或者图8中的(b)图-(c)图-(d)图所示,此处不再赘述。
315.应理解,开场动画结束后,解码器从第n秒处开始继续解码视频,并送至显示控件播放视频内容,即该播放窗口可以继续从第n秒处播放该第一视频片段,此处不再赘述。
316.综上所述,本技术实施例对于片头特定时长内使用了不同的运镜拍摄技巧的目标视频,可以检测该目标视频的运镜类型,并根据该目标视频的运镜类型匹配不同的开场动画,即在该目标视频的播放过程中,以不同的展开方式展开该目标视频的播放窗口,以呈现给用户不同的视觉效果。具体地,该开场动画的播放过程中,伴随着播放窗口中目标视频的播放效果,播放窗口也可以具有动态变化效果,同时伴随着背景图片的尺寸大小、透明度等动态变化过程,使得用户可以更加深刻形象的体验到被拍摄物体的动态变化过程,进一步为用户提供一种连贯的沉浸式体验,提高了用户的视觉体验。
317.可以理解的是,电子设备为了实现上述功能,其包含了执行各个功能相应的硬件
和/或软件模块。结合本文中所公开的实施例描述的各示例的算法步骤,本技术能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。本领域技术人员可以结合实施例对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本技术的范围。
318.本实施例可以根据上述方法示例对电子设备进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块可以采用硬件的形式实现。需要说明的是,本实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
319.在采用对应各个功能划分各个功能模块的情况下,该电子设备可以包括:显示单元、检测单元和处理单元等。其中,显示单元、检测单元和处理单元相互配合,以实现上述方法实施例涉及的各步骤和过程,在此不再赘述。
320.本实施例提供的电子设备,用于执行上述视频播放的方法,因此可以达到与上述实现方法相同的效果。
321.在采用集成的单元的情况下,电子设备可以包括处理模块、存储模块和通信模块。其中,处理模块可以用于对电子设备的动作进行控制管理,例如,可以用于支持电子设备执行上述显示单元、检测单元和处理单元执行的步骤。存储模块可以用于支持电子设备执行存储程序代码和数据等。通信模块,可以用于支持电子设备与其他设备的通信。
322.其中,处理模块可以是处理器或控制器。其可以实现或执行结合本技术公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,数字信号处理(digital signal processing,dsp)和微处理器的组合等等。存储模块可以是存储器。通信模块具体可以为射频电路、蓝牙芯片、wi-fi芯片等与其他电子设备交互的设备。
323.在一个实施例中,当处理模块为处理器,存储模块为存储器时,本实施例所涉及的电子设备可以为具有图2所示结构的设备。
324.本实施例还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机指令,当该计算机指令在电子设备上运行时,使得电子设备执行上述相关方法步骤实现上述实施例中的视频播放的方法。
325.本实施例还提供了一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述相关步骤,以实现上述实施例中的视频播放的方法。
326.另外,本技术的实施例还提供一种装置,这个装置具体可以是芯片,组件或模块,该装置可包括相连的处理器和存储器;其中,存储器用于存储计算机执行指令,当装置运行时,处理器可执行存储器存储的计算机执行指令,以使芯片执行上述各方法实施例中的视频播放的方法。
327.其中,本实施例提供的电子设备、计算机可读存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
328.通过以上实施方式的描述,所属领域的技术人员可以了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分
配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
329.在本技术所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
330.作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
331.另外,在本技术各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
332.集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本技术实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本技术各个实施例方法的全部或部分步骤。而前述的存储介质包括:u盘、移动硬盘、只读存储器(read only memory,rom)、随机存取存储器(random access memory,ram)、磁碟或者光盘等各种可以存储程序代码的介质。
333.以上内容,仅为本技术的具体实施方式,但本技术的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本技术揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本技术的保护范围之内。因此,本技术的保护范围应以权利要求的保护范围为准。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1