一种多路视频融合播放的方法及装置与流程

文档序号:13941491阅读:388来源:国知局

本发明涉及视频图像处理技术领域,尤其涉及一种多路视频融合播放的方法及装置。



背景技术:

随着时代的发展,人们获取信息的方式越来越多样化,甚至希望将获取的信息在同一屏幕画面中进行显示,以满足用户的不同需求,因此,对视频播放的形式要求越来越多样化。目前市面上在同一屏幕画面中进行融合显示多种视频的视频融合功能,往往是通过外接单独的设备实现多路视频融合。

在实现本发明过程中,发明人发现现有技术中至少存在如下问题:商家为实现多路视频融合功能,1、需要花费额外的费用购买必要的视频融合外设,从而增加了设备购买成本和后期的维护成本;2、还需要播放设备与外设厂家互相配合进行调试,导致实现视频融合功能的步骤不仅复杂,而且将耗费额外的人力;3、实现视频融合功能后,该方式实现的视频融合功能不易维护,一旦视频融合出现问题,需要花费大量时间确定问题是出现在外设方还是出现在播放设备方,解决问题效率缓慢。



技术实现要素:

本发明实施例提供一种多路视频融合播放的方法及装置,高效、简单地实现了多路视频在同一屏幕画面中同时进行播放。

一方面,本发明实施例提供了一种多路视频融合播放的方法,包括:

实时获取至少一个解码器播放的视频的当前帧的图像信息;

确定各个解码器各自对应的融合底图,并将获取到的各个当前帧的图像缩放至与播放所述各个当前帧的各自解码器对应的融合底图相匹配的尺寸;

基于播放所述各个当前帧的各自解码器对应的融合底图,对缩放后的所述各个当前帧的缩放图像进行融合处理,以得到融合后的融合图像;

获取所述各个融合底图在融合画面中各自对应的位置信息,并根据所述各个位置信息,在融合画面的对应位置显示相匹配的融合图像。

另一方面,本发明实施例提供了一种多路视频融合播放的装置,包括:

第一获取单元,用于实时获取至少一个解码器播放的视频的当前帧的图像信息;

缩放单元,用于确定各个解码器各自对应的融合底图,并将获取到的各个当前帧的图像缩放至与播放所述各个当前帧的各自解码器对应的融合底图相匹配的尺寸;

融合处理单元,用于基于播放所述各个当前帧的各自解码器对应的融合底图,对缩放后的所述各个当前帧的缩放图像进行融合处理,以得到融合后的融合图像;

获取及显示单元,用于获取所述各个融合底图在融合画面中各自对应的位置信息,并根据所述各个位置信息,在融合画面的对应位置显示相匹配的融合图像。

上述技术方案具有如下有益效果:通过本发明高效、简单地实现了多路视频在同一屏幕画面中同时进行播放,避免了通过外接设备实现融合播放时需要花费额外的费用与人力的情况,进一步地,降低了维护成本;同时,能够将各路视频在同一屏幕画面中以不同的显示形状进行显示,实现了多路视频显示形式的多样化,极大地提高了用户的观看体验。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1为本发明一个实施例中一种多路视频融合播放的方法流程图;

图2为本发明另一实施例中一种多路视频融合播放的装置结构示意图;

图3为本发明一优选实施例中在某个时间点多路视频在同一屏幕画面中同时进行播放的播放画面示意图;

图4为本发明另一优选实施例中融合素材的获取及显示的流程示意图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

如图1所示,为本发明实施例中一种多路视频融合播放的方法,包括:

101、实时获取至少一个解码器播放的视频的当前帧的图像信息;

102、确定各个解码器各自对应的融合底图,并将获取到的各个当前帧的图像缩放至与播放所述各个当前帧的各自解码器对应的融合底图相匹配的尺寸;

103、基于播放所述各个当前帧的各自解码器对应的融合底图,对缩放后的所述各个当前帧的缩放图像进行融合处理,以得到融合后的融合图像;

104、获取所述各个融合底图在融合画面中各自对应的位置信息,并根据所述各个位置信息,在融合画面的对应位置显示相匹配的融合图像。

可选地,还包括:

预配置各个解码器各自对应的融合底图与各个融合底图在融合画面中各自对应的位置信息;

确定各个融合底图中的每一个像素的透明度。

优选地,所述基于播放所述各个当前帧的各自解码器对应的融合底图,对缩放后的所述各个当前帧的缩放图像进行融合处理,以得到融合后的融合图像,包括:

基于播放所述各个当前帧的各自解码器对应的融合底图,将缩放后的所述各个当前帧的缩放图像叠加在各自对应的融合底图的上层;

根据播放所述各个当前帧的各自解码器对应的融合底图中每一个像素的透明度信息以及所述各个当前帧的缩放图像中每一个像素的透明度信息,计算所述各个当前帧的缩放图像叠加后的每一个像素的透明度;

根据计算出的各个当前帧的缩放图像中的每一个像素的透明度,以及所述各个解码器各自对应的融合底图中每一个像素的透明度,确定融合后的融合图像。

可选地,还包括:

确定至少一个融合背景视频,并在所述每一个融合背景视频中预设置多个不同形状的显示窗口,以用于融合显示多个视频画面。

可选地,还包括:

将融合背景视频和融合底图上传至云端服务器;

以预定频率从所述云端服务器获取融合背景视频和融合底图。

如图2所示,为本发明另一实施例中一种多路视频融合播放的装置结构示意图,包括:

第一获取单元21,用于实时获取至少一个解码器播放的视频的当前帧的图像信息;

缩放单元22,用于确定各个解码器各自对应的融合底图,并将获取到的各个当前帧的图像缩放至与播放所述各个当前帧的各自解码器对应的融合底图相匹配的尺寸;

融合处理单元23,用于基于播放所述各个当前帧的各自解码器对应的融合底图,对缩放后的所述各个当前帧的缩放图像进行融合处理,以得到融合后的融合图像;

获取及显示单元24,用于获取所述各个融合底图在融合画面中各自对应的位置信息,并根据所述各个位置信息,在融合画面的对应位置显示相匹配的融合图像。

可选地,还包括:

预配置单元,用于预配置各个解码器各自对应的融合底图与各个融合底图在融合画面中各自对应的位置信息;

确定单元,用于确定各个融合底图中的每一个像素的透明度。

优选地,所述融合处理单元23,包括:

叠加模块,用于基于播放所述各个当前帧的各自解码器对应的融合底图,将缩放后的所述各个当前帧的缩放图像叠加在各自对应的融合底图的上层;

计算模块,用于根据播放所述各个当前帧的各自解码器对应的融合底图中每一个像素的透明度信息以及所述各个当前帧的缩放图像中每一个像素的透明度信息,计算所述各个当前帧的缩放图像叠加后的每一个像素的透明度;

确定模块,用于根据计算出的各个当前帧的缩放图像中的每一个像素的透明度,以及所述各个解码器各自对应的融合底图中每一个像素的透明度,确定融合后的融合图像。

可选地,还包括:

确定及预设置单元,用于确定至少一个融合背景视频,并在所述每一个融合背景视频中预设置多个不同形状的显示窗口,以用于融合显示多个视频画面。

可选地,还包括:

上传单元,用于将融合背景视频和融合底图上传至云端服务器;

第二获取单元,用于以预定频率从所述云端服务器获取融合背景视频和融合底图。

本发明实施例上述技术方案具有如下有益效果:通过本发明高效、简单地实现了多路视频在同一屏幕画面中同时进行播放,避免了通过外接设备实现融合播放时需要花费额外的费用与人力的情况,进一步地,降低了维护成本;同时,能够将各路视频在同一屏幕画面中以不同的显示形状进行显示,实现了多路视频显示形式的多样化,极大地提高了用户的观看体验。

以下结合应用实例对本发明实施例上述技术方案进行详细说明:

本发明应用实例旨在高效、简单地实现多路视频在同一屏幕画面中同时进行播放。

如图1所示,例如,在多路视频融合播放过程中,首先通过调用设备,如机顶盒,中芯片厂商提供的底层视频播放相关接口,实时获取至少一个解码器,如解码器a,播放的视频的当前帧的图像信息,如1.jpg;随后,确定解码器a对应的融合底图,如a.jpg,并将获取到的当前帧的图像1.jpg缩放至与融合底图a.jpg相匹配的相同大小的尺寸,得到缩放后的当前帧的缩放图像1-zoom.jpg;基于融合底图a.jpg,对缩放后的当前帧的缩放图像1-zoom.jpg进行融合处理,如将缩放后的当前帧的缩放图像1-zoom.jpg叠加在对应的融合底图a.jpg的上层,通过计算缩放图像1-zoom.jpg中每个像素的透明度,确定融合后的融合图像,如1a.jpg;获取融合底图a.jpg在融合画面中对应的位置信息,若a.jpg为正方形,则a.jpg在融合画面中对应的位置信息可为a.jpg左上顶角与右下顶角各自在融合画面中的坐标x轴和y轴像素信息,并根据a.jpg在融合画面中对应的位置信息,在融合画面的对应位置显示融合图像a.jpg。

在一优选实施例中,还包括:预配置各个解码器各自对应的融合底图与各个融合底图在融合画面中各自对应的位置信息;确定各个融合底图中的每一个像素的透明度。

例如,在多路视频融合播放前,预配置各个解码器各自对应的融合底图,并确定各个融合底图的存储路径,预配置各个融合底图在融合画面中各自对应的位置信息,并确定各个融合底图中的每一个像素的透明度信息,如在显示窗口中融合底图中需要显示的部分的透明度设置为255,融合底图中不需要显示的部分透明度为0;在多路视频融合播放的过程中,可默认使用预配置的各个解码器各自对应的融合底图,如预配置的解码器a对应的融合底图为a.jpg,则默认解码器a对应的融合底图为a.jpg,同时,用户也可以根据自定义需求,在多路视频融合播放的过程中人机交互界面中,修改确定各个解码器各自对应的融合底图,如修改解码器a对应的融合底图为b.jpg。需要说明的是,确定各个解码器各自对应的融合底图与各个融合底图在融合画面中各自对应的位置信息的方式有多种,如通过配置文件确定或通过用户自定义设置确定等方式,本发明中虽会以特定的方式为例说明,但在此不做限定。

通过本实施例,在融合底图中对各个像素设置不同的透明度,从而实现了显示窗口的不规则形状,极大地增加了显示窗口的显示样式,进一步地提高了用户的使用体验。

在一优选实施例中,步骤103基于播放所述各个当前帧的各自解码器对应的融合底图,对缩放后的所述各个当前帧的缩放图像进行融合处理,以得到融合后的融合图像,包括:基于播放所述各个当前帧的各自解码器对应的融合底图,将缩放后的所述各个当前帧的缩放图像叠加在各自对应的融合底图的上层;根据播放所述各个当前帧的各自解码器对应的融合底图中每一个像素的透明度信息以及所述各个当前帧的缩放图像中每一个像素的透明度信息,计算所述各个当前帧的缩放图像叠加后的每一个像素的透明度;根据计算出的各个当前帧的缩放图像中的每一个像素的透明度,以及所述各个解码器各自对应的融合底图中每一个像素的透明度,确定融合后的融合图像。

例如,在多路视频融合播放过程中,基于播放当前帧1.jpg的解码器a对应的融合底图a.jpg,将缩放后的当前帧的缩放图像1-zoom.jpg叠加在对应的融合底图a.jpg的上层;根据融合底图a.jpg中每一个像素的透明度信息以及当前帧缩放后的缩放图像1-zoom.jpg中每一个像素的透明度信息,根据每一个像素的计算公式,透明度=视频帧透明度*融合底图透明度,计算当前帧的缩放图像1-zoom.jpg叠加后的每一个像素的透明度;根据计算出的当前帧的缩放图像1-zoom.jpg中的每一个像素的透明度,以及解码器a对应的融合底图a.jpg中每一个像素的透明度,确定融合后的融合图像,如1a.jpg。

在一优选实施例中,还包括:确定至少一个融合背景视频,并在所述每一个融合背景视频中预设置多个不同形状的显示窗口,以用于融合显示多个视频画面。

例如,在多路视频融合播放过程中,预设置确定至少一个融合背景视频以及各个融合背景视频的视频类型,如广告、mv和预览等,通过确定多个窗口的坐标位置,在每一个融合背景视频中预设置多个不同形状的显示窗口,以用于在该多个不同形状的显示窗口中融合显示多路视频的多个视频画面;其中,每一个显示窗口的播放内容可以相同,也可以不同,当各个显示窗口播放内容相同时,拷贝融合图像,如拷贝1a.jpg至不同窗口的显示位置中,即可在不同的窗口中显示融合图像1a.jpg;当每一个显示窗口的播放内容不相同时,针对不同的解码器创建不同的线程单独对获取到的各个视频当前帧的图像进行融合处理,并在不同的显示窗口中显示对应的融合图像,当获取到视频中每一帧的图像信息,即可实现视频的连续播放。在某个时间点多路视频在同一屏幕画面中同时进行播放的播放画面,参考图3。

在一优选实施例中,还包括:将融合背景视频和融合底图上传至云端服务器;以预定频率从所述云端服务器获取融合背景视频和融合底图频率从所述云端服务器获取融合背景视频和融合底图。

例如,融合素材的获取及显示的流程示意图,参考图4;通过人机交互界面将融合背景视频和融合底图上传至云端服务器,如图4中的步骤401;在多路视频融合播放过程中,设备,如机顶盒以预定频率,如每天一次,从云端服务器获取融合背景视频和融合底图,,如图4中的步骤402;通过人机交互界面,显示获取到的融合背景视频和融合底图,如图4中的步骤403;并根据用户自定义需求确定融合背景视频,以及各个解码器各自对应的融合底图,,如图4中的步骤404。

通过本实施例,丰富了融合背景视频和融合底图的素材,实现了融合素材的多样化,极大地提高了用户的使用体验。

本发明实施例提供了一种多路视频融合播放的装置,可以实现上述提供的方法实施例,具体功能实现请参见方法实施例中的说明,在此不再赘述。

应该明白,公开的过程中的步骤的特定顺序或层次是示例性方法的实例。基于设计偏好,应该理解,过程中的步骤的特定顺序或层次可以在不脱离本公开的保护范围的情况下得到重新安排。所附的方法权利要求以示例性的顺序给出了各种步骤的要素,并且不是要限于所述的特定顺序或层次。

在上述的详细描述中,各种特征一起组合在单个的实施方案中,以简化本公开。不应该将这种公开方法解释为反映了这样的意图,即,所要求保护的主题的实施方案需要比清楚地在每个权利要求中所陈述的特征更多的特征。相反,如所附的权利要求书所反映的那样,本发明处于比所公开的单个实施方案的全部特征少的状态。因此,所附的权利要求书特此清楚地被并入详细描述中,其中每项权利要求独自作为本发明单独的优选实施方案。

为使本领域内的任何技术人员能够实现或者使用本发明,上面对所公开实施例进行了描述。对于本领域技术人员来说;这些实施例的各种修改方式都是显而易见的,并且本文定义的一般原理也可以在不脱离本公开的精神和保护范围的基础上适用于其它实施例。因此,本公开并不限于本文给出的实施例,而是与本申请公开的原理和新颖性特征的最广范围相一致。

上文的描述包括一个或多个实施例的举例。当然,为了描述上述实施例而描述部件或方法的所有可能的结合是不可能的,但是本领域普通技术人员应该认识到,各个实施例可以做进一步的组合和排列。因此,本文中描述的实施例旨在涵盖落入所附权利要求书的保护范围内的所有这样的改变、修改和变型。此外,就说明书或权利要求书中使用的术语“包含”,该词的涵盖方式类似于术语“包括”,就如同“包括,”在权利要求中用作衔接词所解释的那样。此外,使用在权利要求书的说明书中的任何一个术语“或者”是要表示“非排它性的或者”。

本领域技术人员还可以了解到本发明实施例列出的各种说明性逻辑块(illustrativelogicalblock),单元,和步骤可以通过电子硬件、电脑软件,或两者的结合进行实现。为清楚展示硬件和软件的可替换性(interchangeability),上述的各种说明性部件(illustrativecomponents),单元和步骤已经通用地描述了它们的功能。这样的功能是通过硬件还是软件来实现取决于特定的应用和整个系统的设计要求。本领域技术人员可以对于每种特定的应用,可以使用各种方法实现所述的功能,但这种实现不应被理解为超出本发明实施例保护的范围。

本发明实施例中所描述的各种说明性的逻辑块,或单元都可以通过通用处理器,数字信号处理器,专用集成电路(asic),现场可编程门阵列或其它可编程逻辑装置,离散门或晶体管逻辑,离散硬件部件,或上述任何组合的设计来实现或操作所描述的功能。通用处理器可以为微处理器,可选地,该通用处理器也可以为任何传统的处理器、控制器、微控制器或状态机。处理器也可以通过计算装置的组合来实现,例如数字信号处理器和微处理器,多个微处理器,一个或多个微处理器联合一个数字信号处理器核,或任何其它类似的配置来实现。

本发明实施例中所描述的方法或算法的步骤可以直接嵌入硬件、处理器执行的软件模块、或者这两者的结合。软件模块可以存储于ram存储器、闪存、rom存储器、eprom存储器、eeprom存储器、寄存器、硬盘、可移动磁盘、cd-rom或本领域中其它任意形式的存储媒介中。示例性地,存储媒介可以与处理器连接,以使得处理器可以从存储媒介中读取信息,并可以向存储媒介存写信息。可选地,存储媒介还可以集成到处理器中。处理器和存储媒介可以设置于asic中,asic可以设置于用户终端中。可选地,处理器和存储媒介也可以设置于用户终端中的不同的部件中。

在一个或多个示例性的设计中,本发明实施例所描述的上述功能可以在硬件、软件、固件或这三者的任意组合来实现。如果在软件中实现,这些功能可以存储与电脑可读的媒介上,或以一个或多个指令或代码形式传输于电脑可读的媒介上。电脑可读媒介包括电脑存储媒介和便于使得让电脑程序从一个地方转移到其它地方的通信媒介。存储媒介可以是任何通用或特殊电脑可以接入访问的可用媒体。例如,这样的电脑可读媒体可以包括但不限于ram、rom、eeprom、cd-rom或其它光盘存储、磁盘存储或其它磁性存储装置,或其它任何可以用于承载或存储以指令或数据结构和其它可被通用或特殊电脑、或通用或特殊处理器读取形式的程序代码的媒介。此外,任何连接都可以被适当地定义为电脑可读媒介,例如,如果软件是从一个网站站点、服务器或其它远程资源通过一个同轴电缆、光纤电缆、双绞线、数字用户线(dsl)或以例如红外、无线和微波等无线方式传输的也被包含在所定义的电脑可读媒介中。所述的碟片(disk)和磁盘(disc)包括压缩磁盘、镭射盘、光盘、dvd、软盘和蓝光光盘,磁盘通常以磁性复制数据,而碟片通常以激光进行光学复制数据。上述的组合也可以包含在电脑可读媒介中。

以上所述的具体实施方式,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施方式而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1