从视频中生成图片集的方法、装置及电子设备、用户端设备与流程

本公开涉及视频处理领域，特别是指一种从视频中生成图片集的方法、装置及电子设备、用户端设备。

背景技术：

随着车辆的普及，越来越多的人会使用行车记录仪记录驾驶时的路面情况，行车记录仪会录制大量的行驶视频，当用户需要浏览或查找某个行驶视频时，一般通过类似文件管理器的应用查看，每个视频文件都会生成一个视频预览图，用户通过预览图提供的信息查找自己想要查看的视频文件。

技术实现要素：

一方面，本公开提供了提供一种从视频中生成图片集的方法，应用于用户端设备，包括：

获取视频中的行进路线；

确定所述行进路线中的目标地点；

获取所述目标地点的信息和所述视频中所述目标地点的实际拍摄画面，根据所述目标地点的信息和所述实际拍摄画面生成所述视频的图片集。

可选地，所述获取视频的行进路线包括：

在所述视频的录制过程中，实时获取并记录途经地点的位置信息，并根据途经地点的位置信息确定所述视频的行进路线。

可选地，所述位置信息包括以下至少一种：地点名称、地址、经纬度、邮政信箱编号。

可选地，所述确定所述行进路线中的目标地点包括：

获取用户端设备的用户的多个兴趣地点；

从所述多个兴趣地点中选取与所述行进路线匹配的兴趣地点作为所述目标地点。

可选地，所述确定所述行进路线中的目标地点包括：

获取用户端设备的用户的关注内容类别；

在所述行进路线的途经地点属于所述关注内容类别且所述途经地点的搜索热度满足所选条件的状态下，将所述途经地点作为所述目标地点。

可选地，所述确定所述行进路线中的目标地点包括：

在行进过程中，将用户端设备发生异常状况的地点作为所述目标地点。

可选地，所述用户端设备位于车辆上，所述异常状况包括以下至少一种：

所述车辆发生碰撞；

所述车辆的车门开启；

所述车辆的乘客发生变化。

可选地，所述目标地点的信息包括以下至少一种：

所述目标地点的实景图片；

所述目标地点的地点名称；

所述目标地点的地址；

所述目标地点的经纬度；

所述目标地点的邮政信箱编号。

可选地，还包括将所生成的图片集形成动画的步骤。

可选地，确定所述行进路线中的目标地点，包括根据服务器端设备提供的信息确定所述行进路线中的目标地点的步骤。

本公开实施例还提供了一种从视频中生成图片集的装置，应用于用户端设备，包括：

获取模块，配置成获取视频中的行进路线；

处理模块，配置成确定所述行进路线中的目标地点；

生成模块，配置成获取所述目标地点的信息和所述视频中所述目标地点的实际拍摄画面，根据所述目标地点的信息和所述实际拍摄画面生成所述视频的图片集。

所述获取模块配置成在所述视频的录制过程中，实时获取并记录途经地点的位置信息，并根据途经地点的位置信息确定所述行进路线。

可选地，所述处理模块包括：

第一获取单元，配置成获取用户端设备的用户的多个兴趣地点；

第一处理单元，配置成从所述多个兴趣地点中选取与所述行进路线匹配的兴趣地点作为所述目标地点。

可选地，所述处理模块包括：

所述第二获取单元，配置成获取用户端设备的用户的关注内容类别；

第二处理单元，配置成在所述行进路线的途经地点属于所述关注内容类别且所述途经地点的搜索热度满足所选条件的状态下，将所述途经地点作为所述目标地点。

可选地，所述处理模块包括：

第三处理单元，配置成将所述用户端设备在行进过程中发生异常状况的地点作为所述目标地点。

可选地，所述生成模块还配置成将所生成的图片集形成动画。

本公开实施例还提供了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上所述方法中的一个或多个步骤。

本公开实施例还提供了一种用户端设备，包括上述的电子设备，和视频获取设备，和位置信息获取设备，所述电子设备耦接所述视频获取设备和所述位置信息获取设备。

可选地，还包括与所述电子设备耦接的通讯设备。

附图说明

图1为本公开实施例从视频中生成图片集的方法的流程示意图；

图2为本公开实施例服务器端获取兴趣地点的流程示意图；

图3为本公开具体实施例视频预览动画的生成方法的流程示意图；

图4为本公开实施例从视频中生成图片集的装置的结构框图。

具体实施方式

为使本公开的实施例要解决的技术问题、技术方案和优点更加清楚，下面将结合附图及具体实施例进行详细描述。

在相关技术中，生成视频预览图的默认方法是选取视频中的某一帧画面，通常是视频开始的第一帧画面。行车记录仪拍摄的视频在开始时多为道路、行驶车辆的画面，通过该方法生成的视频预览图仅包含道路及车辆信息，通过这样的视频预览图用户无法获知更多关于视频的信息，使用户不能方便快捷地查找到自己所需要的视频，为用户浏览视频增加了很多障碍。

尽管此处以行车记录仪形成的视频为例进行的说明，但其它的成像装置作为视频获取设备形成的视频也适用于本公开所提供的技术方案，例如用户行走或者自行车骑行或搭载公交车、轮船等过程中通过成像装置形成的视频，此类的成像装置例如gopro公司的运动相机、htc公司的re运动相机等；例如无人驾驶车辆的车头或车身安装深度摄像头形成的视频；例如大疆dji公司的无人机上搭载的相机形成的视频等。

在本公开的实施例中，位置信息的获取可以位置信息获取设备实现。例如，机动车辆通过导航仪获取行进过程中的位置信息并将其写入到车载成像装置所录制的视频中；或机动车辆通过内嵌gps、伽利略、北斗等定位系统模块的行车记录仪获得内嵌有位置信息的行车记录视频；或机动车辆可以通过与便携装置连接的智能车载成像设备获取行车记录视频并通过便携装置，例如手机、手持gps设备等获取位置信息并写入到行车记录视频中。例如，步行、自行车骑行、搭载公交车、轮船等，可以通过gopro公司的带有定位功能的运动相机或类似产品获得内嵌有位置信息的行进记录视频，或通过手机的摄像头获得内嵌有位置信息的行进记录视频。诸如上述举例，用于说明本公开的实施例中获得具有位置信息的视频方式是多样化的，而非构成特定限制。

在本公开的实施例中，地点名称，指的是场所或位于场所的标志性建筑物的名称，例如天安门、白宫、埃菲尔铁塔等；地址，指的是包含国家、省份、城市或乡村、街道、门牌号码、大厦等名称，或者再加楼层数目、房间编号等，例如中国北京市大兴区西环中路12号；经纬度指的是地址在地理坐标系统中的表示，例如北纬39.9072014648,东经116.1902475357；邮政信箱编号指的是地点所设置的信箱在邮政系统中的号码，例如pobox405，whitehouse,nj08888。

为了至少部分地解决相关技术中存在的问题，本公开的实施例提供一种从视频中生成图片集的方法、装置及电子设备和用户端设备，能够生成包含更多视频信息的图片集或基于图片集形成的视频预览动画，使得用户能够方便快捷地查找到自己所需要的视频，优化用户体验。

本公开实施例提供一种从视频中生成图片集的方法，应用于用户端设备，如图1所示，包括：

步骤101：获取视频中的行进路线；

步骤102：确定所述行进路线中的目标地点；

步骤103：获取所述目标地点的信息和所述视频中所述目标地点的实际拍摄画面，根据所述目标地点的信息和所述实际拍摄画面生成所述视频的图片集。

上述步骤的编号仅为了示意性方便，并不限定步骤的先后次序。例如，可以先执行步骤101，然后再执行步骤102；也可以先执行步骤102，再执行步骤101。

本实施例中，根据行进路线中的目标地点的信息和实际拍摄画面生成视频的图片集，其中，目标地点为行进路线中用户感兴趣的地点，

通过本公开的技术方案，能够生成包含更多视频信息的图片集，便于用户回想视频的内容和相关的行程，能够使得用户获知更多关于视频的信息，方便用户进行视频文件的浏览，使得用户能够快捷地查找到自己所需要的视频，优化用户体验。

在一些实施例中，所述方法还包括步骤s104：将所生成的图片集形成动画。

例如，动画的格式可以为gif(graphicsinterchangeformat)、flv(flashvideo)、apng(animatedpng)、mng(multiple-imagenetworkgraphics)、svg(scalablevectorgraphics)等。

例如，动画的格式可以以预览视频的形式出现，可以将多帧图片以mpeg2、mpeg4、divx、vp9等视频编码格式编码并封装为视频。

在一些实施例中，所述获取视频的行进路线包括：

在所述视频的录制过程中，实时获取并记录途经地点的位置信息，并根据途经地点的位置信息确定所述视频中的行进路线。

在一些实施例中，可选地，所述位置信息可以包括以下至少一种：地点名称、地址、经纬度、邮政信箱编号。

在一些实施例中，所述确定所述行进路线中的目标地点包括：

获取用户端设备的用户的多个兴趣地点(poi)；

从所述多个兴趣地点中选取与所述行进路线匹配的兴趣地点作为所述目标地点。

在一些实施例中，用户可以在用户端设备中输入或从用户端设备的地图数据库中选择多个poi。

例如，对于带有触摸屏的用户端设备，用户可以通过点选或者虚拟键盘输入的方式选择多个poi。

例如，对于带有物理键盘的用户端设备，用户可以通过输入的方式选择多个poi。

例如，对于可以与安装有用户端设备对应管理程序的电脑通讯的用户端设备，用户可以在电脑上选择多个poi。

在一些实施例中，从服务器端设备获取用户端设备的用户的多个兴趣地点(poi)。

例如，服务器端设备可以是多个用户端设备共用的服务器，以用户端设备id、用户端设备的用户帐号等可区分的方式提供多个兴趣地点；或者服务器端设备可以是针对每个用户端设备的私有服务器，为相关联的用户端设备提供多个兴趣地点。

例如，服务器端设备可以是实体的服务器(如位于数据中心机房中的服务器)，也可以是基于云服务(如aws、azure等云计算平台)构建的虚拟服务器。

在一些实施例中，如图2所示，服务器端可以通过以下步骤确定用户的兴趣地点：

步骤301：用户登录服务器端；

用户可以在使用用户端设备(比如手机或行车记录仪)的过程中登录在服务器端的账户。

步骤302：服务器端获取用户常去或者常搜索的地点，将上述地点标记为兴趣地点；

服务器端与用户端设备进行通信，通过获取的用户端设备的信息，服务器端可获取用户常去的目的地或者常关注、搜索的地点，并将上述地点标记为兴趣地点，其中，可以设置一第一阈值，将去过次数大于第一阈值的目的地标记为兴趣地点；还可以设置一第二阈值，将搜索次数大于第二阈值的地点标记为兴趣地点。

步骤303：服务器端获取兴趣地点相关信息；

服务器端可以通过数据分析获得用户的兴趣地点的相关信息，如地点名称、地址、经纬度等。

进一步的，还可以包括步骤304：分析兴趣地点类别。

服务器端还可以根据获得的用户的兴趣地点的相关信息分析兴趣地点类别，比如得到兴趣地点的类别为商场、饭店、旅游景点等，并可以将获得的兴趣地点类别作为用户的关注内容类别。

在一些实施例中，所述确定所述行进路线中的目标地点包括：

从服务器端设备获取用户端设备的用户的关注内容类别；

在所述行进路线的途经地点属于所述关注内容类别且所述途经地点的搜索热度满足所选条件时，将所述途经地点作为所述目标地点。

例如，搜索热度可以设置为用户自己或多个用户搜索途经地点的频次。

例如，搜索热度可以设置为在线地图中，例如谷歌地图、微软地图等，选择与视频中行进路线对应的导航用户选择的途经地点的频次。

在一些实施例中，所述确定所述行进路线中的目标地点包括：

在行进过程中，将用户端设备发生异常状况的地点作为所述目标地点。

例如，用户端设备为机动车辆上搭载的行车记录仪等，所述异常状况包括以下至少一种：

所述车辆发生碰撞；

所述车辆的车门开启；

所述车辆的乘客发生变化。

例如，用户端设备为步行或者自行车骑行等过程中用户自行携带的gopro等运动相机，所述异常情况可以包括以下至少一种：

突然停止行进；

快速转弯等。

本公开实施例的技术方案，丰富了目标地点的选取方式：(1)当行进路线的途经地点属于用户关注类别，且该地点的搜索热度满足所选条件，比如在排行榜的前几名，则记录该点地理位置，作为目标地点；(2)当车辆发生碰撞的时候，记录该点地理位置，作为目标地点；(3)车辆其他摄像头拍摄到车辆发生异常状况(如车内人数改变)，记录该点地理位置，作为目标地点。

可选地在一些实施例中，所述目标地点的信息可以包括以下至少一种：

所述目标地点的实景图片；

所述目标地点的地点名称；

所述目标地点的地址；

所述目标地点的经纬度；

所述目标地点的邮政信箱编号。

下面结合具体的实施例对本公开实施例的方法的一个具体实现进行进一步介绍，如图3所示，本实施例的视频预览动画的生成方法包括以下步骤：

步骤401：视频开始录制；

以用户端设备为机动车辆安装的行车记录仪为例，在车辆开始行驶后，行车记录仪自动开始录制视频。

步骤402：实时获取并记录途经地点相关信息；

视频录制过程中，可以通过导航仪或行车记录仪中的gps模块实时获取并记录途经地点的相关信息，如地点名称、地址、经纬度等，进而获得该段视频的行进路线。

步骤403：读取服务器端存储的该用户的兴趣地点，与行进路线匹配；

用户可以通过用户端设备登录服务器端的账号，用户端设备与服务器端进行通信，获取服务器端存储的该用户的兴趣地点，并将该用户的兴趣地点与行进路线匹配。

步骤404：判断该视频的行进路线是否途经用户关注的兴趣地点；

通过匹配结果判断行进路线是否途经用户关注的兴趣地点，如果经过兴趣地点，就将途经的兴趣地点选择作为该段视频的目标地点，记录该目标地点的地理位置。

步骤405：判断该视频的行进路线的途经地点是否属于用户关注类别；

用户端设备与服务器端进行通信，获取服务器端存储的该用户的关注内容类别，当行进路线的途经地点属于服务器端存储的用户的关注内容类别，且途经的地点的搜索热度在排行榜的前n名，n为正整数，比如可以取值为5，则将该途经的地点作为目标地点，记录该目标地点的地理位置。

步骤406：判断车辆是否发生碰撞；

当车辆发生碰撞的时候，将发生碰撞的地点作为目标地点，并记录该目标地点的地理位置。

步骤407：判断是否拍摄到异常情况；

具体地，车辆上还可以设置其他摄像设备，其他摄像设备可以与用户端设备进行通信。当用户端设备或者其他摄像设备拍摄到异常情况，比如车辆的车门开启、或者车辆的乘客人数发生变化时，则将拍摄到异常情况的地点作为目标地点，并记录该目标地点的地理位置。

步骤408：选取所有目标地点，向服务器端请求目标地点的实景图片；

在通过上述方式选取目标地点后，用户端设备向服务器端请求所有目标地点的实景图片，如果某个目标地点没有实景图片，可以用空白图片叠加文字(文字的内容可以为地点名称)来替代。

步骤409：在视频中找到与所有目标地点地理坐标相同的实际拍摄画面；

由于已经记录目标地点的地理位置，因此可以根据目标地点的地理位置在视频中找到与所有目标地点的地理坐标(如经纬度)相同的实际拍摄画面。

步骤410：将所有实景图片与实际拍摄画面结合，生成视频预览动画。

将所有目标地点的实景图片和实际拍摄画面结合，作为该视频的预览动画。

本实施例中，根据行进路线中的目标地点的信息和实际拍摄画面生成视频的视频预览动画，其中，目标地点为行进路线中用户感兴趣的标志性地点，通过本公开的技术方案，能够生成包含更多视频信息的视频预览动画，便于用户回想视频的内容，能够使得用户获知更多关于视频的信息，方便用户进行视频文件的浏览，使得用户能够快捷地查找到自己所需要的视频，优化用户体验。

本公开实施例还提供了一种从视频中生成图片集的装置，应用于用户端设备，如图4所示，包括：

获取模块21，配置成获取视频中的行进路线；

处理模块22，配置成确定所述行进路线中的目标地点；

生成模块23，配置成获取所述目标地点的信息和所述视频中所述目标地点的实际拍摄画面，根据所述目标地点的信息和所述实际拍摄画面生成所述视频的图片集。

本实施例中，根据行进路线中的目标地点的信息和实际拍摄画面生成视频的图片集，其中，目标地点为行进路线中用户感兴趣的标志性地点，通过本公开的技术方案，能够生成包含更多视频信息的图片集，便于用户回想视频的内容，能够使得用户获知更多关于视频的信息，方便用户进行视频文件的浏览，使得用户能够快捷地查找到自己所需要的视频，优化用户体验。

可选地在一些实施例中，所述获取模块21配置成在所述视频的录制过程中，实时获取并记录途经地点的位置信息，并根据途经地点的位置信息确定所述视频的行进路线。

在一些实施例中可选地，所述处理模块22包括：

第一获取单元，配置成获取用户端设备的用户的多个兴趣地点；

第一处理单元，配置成从所述多个兴趣地点中选取与所述行进路线匹配的兴趣地点作为所述目标地点。

在一些实施例中可选地，所述处理模块22包括：

所述第二获取单元，配置成获取用户端设备的用户的关注内容类别；

第二处理单元，配置成当所述行进路线的途经地点属于所述关注内容类别且所述途经地点的搜索热度满足所选条件时，将所述途经地点作为所述目标地点。

在一些实施例中可选地，所述处理模块22包括：

第三处理单元，配置成将所述用户端设备所在行进过程中发生异常状况的地点作为所述目标地点。

在一些实施例中，所述生成模块还配置成将所生成的图片集形成动画。

本公开实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上所述的方法中的一个或多个步骤。

可选地本公开实施例还提供了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上所述的方法中的一个或多个步骤。

具体地，所述处理器执行所述程序时实现以下步骤：获取视频中的行进路线；确定所述行进路线中的目标地点；获取所述目标地点的信息和所述视频中所述目标地点的实际拍摄画面，根据所述目标地点的信息和所述实际拍摄画面生成所述视频的图片集。

可选地，所述处理器执行所述程序时还实现以下步骤：在所述视频的录制过程中，实时获取并记录途经地点的位置信息，并根据途经地点的位置信息确定所述视频的行进路线。

可选地，所述处理器执行所述程序时还实现以下步骤：获取用户端设备的用户的多个兴趣地点；从所述多个兴趣地点中选取与所述行进路线匹配的兴趣地点作为所述目标地点。

可选地，所述处理器执行所述程序时还实现以下步骤：获取用户端设备的用户的关注内容类别；当所述行进路线的途经地点属于所述关注内容类别且所述途经地点的搜索热度满足所选条件时，将所述途经地点作为所述目标地点。

可选地，所述处理器执行所述程序时还实现以下步骤：将所述用户端设备在行进过程中发生异常状况的地点作为所述目标地点。

可选地，所述处理器执行所述程序时还实现以下步骤：将所生成的图片集形成动画。

本公开实施例还提供了一种用户端设备，包括前述的电子设备，和视频获取设备，和位置信息获取设备，所述电子设备耦接所述视频获取设备和位置信息获取设备。

可选地，还包括与所述电子设备耦接的通讯设备。通过该通讯设备，用户端设备得以与服务器端设备进行信息交互。

可以理解的是，本文描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现，处理器可以实现在一个或多个专用集成电路(applicationspecificintegratedcircuits，asic)、数字信号处理器(digitalsignalprocessing，dsp)、数字信号处理设备(dspdevice，dspd)、可编程逻辑设备(programmablelogicdevice，pld)、现场可编程门阵列(field-programmablegatearray，fpga)、通用中央处理器(cpu)、微控制器(mcu)等具有数据处理能力和/或程序执行能力的逻辑运算器件。

对于软件实现，可通过执行本文所述功能的模块(例如过程、函数等)来实现本文所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。

在本公开中，为了便于理解和描述，在部分段落，对功能描述使用了与处理器所要执行的功能对应的功能单元、功能模块的描述方式，容易理解，这些功能是功能实体，不一定必须与物理或逻辑上独立的实体相对应。处理器可以通过运行软件以执行计算机指令的形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中可编程地实现这些功能实体。

在本公开中，存储器例如可以是易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(ram)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(rom)、硬盘、闪存等。

在本公开中，耦接可以是通过网络连接，例如无线网络、有线网络、和/或无线网络和有线网络的任意组合。网络可以包括局域网、互联网、电信网、基于互联网和/或电信网的物联网(internetofthings)、和/或以上网络的任意组合等。有线网络例如可以采用双绞线、同轴电缆或光纤传输等方式进行通信，无线网络例如可以采用3g/4g/5g移动通信网络、蓝牙、zigbee或者wi-fi等通信方式。

在本公开中，通讯器件可以包括无线通讯网络模组，例如支持gprs、edge、cdma1x、evdo、wcdma、tdlte、fddlte、wimax、phs等中的至少一种通讯模式的无线通讯网络模组。

本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。

本领域内的技术人员应明白，本公开实施例的实施例可提供为方法、装置、或计算机程序产品。因此，本公开实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本公开实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质上实施的计算机程序产品的形式。

本公开实施例是参照根据本公开实施例的方法、用户设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理用户设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理用户设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理用户设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理用户设备上，使得在计算机或其他可编程用户设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程用户设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本公开实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本公开实施例范围的所有变更和修改。

还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者用户设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者用户设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者用户设备中还存在另外的相同要素。

以上所述的是本公开的优选实施方式，应当指出对于本技术领域的普通人员来说，在不脱离本公开所述的原理前提下还可以作出若干改进和润饰，这些改进和润饰也在本公开的保护范围内。