一种视频移动终端实时拖动与缩放的方法及装置制造方法
【专利摘要】本发明公开了一种视频移动终端实时拖动与缩放的方法及装置，其中该装置主要具体包括：解码模块、绘制模块和交互模块，所述解码模块包括：解码子模块、解码控制子模块、转换子模块、双缓存器；所述绘制模块包括：提取子模块、填充子模块、绘制控制子模块；所述交互模块包括：监听子模块、计算子模块、请求分流器、缩放适配器以及拖动适配器。本发明所述方法及装置解决了现有技术中在移动终端视频播放存在的问题，实现的过程较为简便，效率较高，并且同时提供了在进行拖动或缩放之后视频源的范围超出显示区域的越界检测纠正方法，更加有效方便了在移动终端对视频播放的操作。
【专利说明】一种视频移动终端实时拖动与缩放的方法及装置
【技术领域】
[0001]本发明属于视频处理【技术领域】，具体涉及一种视频移动终端实时拖动与缩放的方法及装置的设计。
【背景技术】
[0002]信息化技术的发展伴随着互联网络的广泛普及而日新月异，移动互联网络时代已经到来，3G网络现在已广泛得应用于人们的生活当中，世界上目前已有20多个国家在部署4G网络，越来越多的终端设备支持4G网络。视频相关业务也由传统的电视终端，PC端等向移动终端转移，移动终端由于其便携性，客户对齐黏度和依赖性较高，因此互联网的未来在移动互联网。用户已经习惯了随时随地使用便携设备接入互联网享受服务，高压缩比编码标准的不断推新，如MPEG4、H.264/AVC、HEVC使得低码率高质量的视频回放已不再困难，这将加速“动态展览”时代的到来。传统互联网上的视频具有高分辨率、显示器尺寸大、分辨率高的特点，而移动终端在拥有便携性的同时，尺寸一般较小，显示屏的大小受限，使得用户更加期待获得视频的完整信息和细节信息。移动终端设备拥有桌面设备不具备的特性，因此在移动终端对视频进行拖动和缩放处理技术尤为重要，不可缺少。
[0003]移动终端由于其显示屏尺寸较小，显示数据量有限，对于目前的互联网上的视频资源直接移用到移动终端时，显示的信息不够完整。对于实时视频播放，同样的视频资源同时在多种设备上播放，播放端的特性不同，尤其是移动终端的多样性，显示尺寸、分辨率差异较大，用户对实时性又有强烈的需求，因此研究移动终端视频实时处理有迫切的用户需求和重大的社会应用价值。移动终端最常见的操作即拖动选择显示区域和缩放显示细节信肩、O
【发明内容】
[0004]本发明的目的是为了解决现有技术中视频在移动终端上进行播放存在的问题而提出一种视频移动终端实时拖动与缩放的方法及装置。
[0005]本发明的技术方案是:一种视频移动终端实时拖动与缩放的方法，具体包括:解码线程、绘制线程以及交互线程，所述解码线程、绘制线程、交互线程并行运行；
[0006]其中，所述解码线程的具体步骤为:
[0007]S11、在视频流到达移动终端后，对该视频流进行解码，得到原始数据帧；
[0008]S12、收集所述交互线程生成的缩放参数，控制视频的缩放比；
[0009]S13、对视频格式进行转换，最终转换为RGB格式的ARGB8888标准的RGB中间帧；
[0010]S14、将转换后的RGB中间帧存放至双缓存器；
[0011]S15、帧同步后即唤醒绘制线程，同时进入下一帧视频的解码；
[0012]所述绘制线程的具体步骤为:
[0013]S21、接收到解码线程的唤醒信号后，启动绘制线程；
[0014]S22、收集所述交互线程生成的定位参数，控制视频图像的提取区域；[0015]S23、从双缓存器中提取待显示部分的数据；
[0016]S24、在待显示区域，将所述步骤S23提取的待显示的数据写入至待显示区域；
[0017]S25、数据填充完成后进入休眠状态，直至再次接收到解码线程的唤醒信号，进入下一帧的绘制；
[0018]所述交互线程的具体步骤为:
[0019]S31、交互线程启动，监听显示窗口内的交互事件，所述交互事件包括:单指拖动和双指缩放；
[0020]S32、计算分析显示窗口内发生的交互事件，判断用户的需求是否发生变化；若是，则进入步骤S33，否则返回所述步骤S31继续监听显示窗口内的交互事件；
[0021]S33、计算缩放分量和拖动分量；
[0022]S34、根据缩放分量进行坐标转换计算,得出缩放比,生成缩放参数,并将缩放参数传递给解码线程；
[0023]S35、根据拖动分量进行坐标转换计算，得出拖动位移大小，生成定位参数，并将定位参数传递给绘制线程。
[0024]进一步的，所述步骤S34中生成缩放参数的具体过程为:
[0025]设在进行缩放操作前手指触摸点分别为Et和Ft,缩放操作过后手指触摸点分别为Et+1和Ft+1, St为提取数据区域的起点，
【权利要求】
1.一种视频移动终端实时拖动与缩放的方法，其特征在于，具体包括:解码线程、绘制线程以及交互线程，所述解码线程、绘制线程、交互线程并行运行； 其中，所述解码线程的具体步骤为: 511、在视频流到达移动终端后，对该视频流进行解码，得到原始数据帧； 512、收集所述交互线程生成的缩放参数，控制视频的缩放比； 513、对视频格式进行转换，最终转换为RGB格式的ARGB8888标准的RGB中间帧； 514、将转换后的RGB中间帧存放至双缓存器； 515、帧同步后即唤醒绘制线程，同时进入下一帧视频的解码； 所述绘制线程的具体步骤为: 521、接收到解码线程的唤醒信号后，启动绘制线程； 522、收集所述交互线程生成的定位参数，控制视频图像的提取区域； 523、从双缓存器中提取待显示部分的数据； 524、在待显示区域，将所述步骤S23提取的待显示的数据写入至待显示区域； 525、数据填充完成后 进入休眠状态，直至再次接收到解码线程的唤醒信号，进入下一帧的绘制； 所述交互线程的具体步骤为: 531、交互线程启动，监听显示窗口内的交互事件，所述交互事件包括:单指拖动和双指缩放； 532、计算分析显示窗口内发生的交互事件，判断用户的需求是否发生变化；若是，则进入步骤S33，否则返回所述步骤S31继续监听显示窗口内的交互事件； 533、计算缩放分量和拖动分量； 534、根据缩放分量进行坐标转换计算，得出缩放比，生成缩放参数，并将缩放参数传递给解码线程； 535、根据拖动分量进行坐标转换计算,得出拖动位移大小，生成定位参数,并将定位参数传递给绘制线程。
2.如权利要求1所述的一种视频移动终端实时拖动与缩放的方法，其特征在于，所述步骤S34中生成缩放参数的具体过程为: 设在进行缩放操作前手指触摸点分别为Et和Ft，缩放操作过后手指触摸点分别为Et+1和Ft+1，St为提取数据区域的起点，(xSt, yS.) |Ει为Et相对于St点的坐标，(Xs'，yS') |Ft为Ft相对于St点的坐标，(xs.，ys.) Iem1为Et+1相对于St点的坐标，(Xs'，ySt) |Ft+1为Ft+1相对于St点的坐标，WV、HV分别为提取数据区域的宽度和高度，Wt、Ht别为缩放操作前t时刻RGB中间帧的宽度和高度，缩放操作后Wt、Ht会等比变小，Wv、Hv不变；
Hn 选择7作为提取数据区域与RGB中间帧大小比，计算在提取数据区域内缩放μμ 7 7 — PtFtIl甘出?_
V， v ||Et+1Ft+1 Il ，一中，IIEtFtII=^xs' |E1-Xs* |Ft)2+(ySt |Et —ySt|Ft )2 ，
3.如权利要求1所述的一种视频移动终端实时拖动与缩放的方法，其特征在于，所述步骤S35中生成定位参数的具体过程为: 设在进行拖动操作前手指触摸点为At，拖动操作后手指触摸点为At+1，点D为RGB中间中贞的起始点，点St和St+1分别为在进行拖动操作前和拖动操作后提取数据的起点，
4.如权利要求1至3任一项所述的一种视频移动终端实时拖动与缩放的方法，其特征在于，当缩放操作或拖动操作后的定位参数取值超出RGB中间帧范围时,要对缩放参数及定位参数进行越界检测，其具体过程为:设Wv和Hv分别表示显示区域的宽度和高度，Ws和Hs表示视频源的宽度和高度，（xD,yD）|s表示提取的数据区域的原点S相对于RGB中间帧的原点D的坐标；
当 WS〈WV 且 WS-WV〈HS-HV 时，则设置 Ws=Wv，Hs=Ws' Hv/ffv ；
当 HS〈HV 且 HS-HV〈WS-WV 时，则设置 Hs=Hv, Ws=Hs, ffv/Hv ；
当 xD I s〈0 或 ffs<ffv 时，则设置 xD I s=0 ；
当 yD I s〈0 或 HS〈HV 时，则设置 yD I s=0 ；
当 Xd I s>ffs-ffv 时，则设置 Xd I s=ffs-ffv ；
当 yD I S>HS-HV 时，则设置 yD I s=Hs-Hvo
5.一种视频移动终端实时拖动与缩放的装置，其特征在于，具体包括:解码模块、绘制模块和交互模块， 所述解码模块包括:解码子模块、解码控制子模块、转换子模块、双缓存器；所述解码子模块将视频流文件解码为视频帧数据；所述解码控制子模块用于接收交互模块传来的缩放参数，控制转换子模块进行格式转换；所述转换子模块用于将解码子模块得到的视频帧数据转换为RGB格式的ARGB8888标准的RGB中间帧；所述双缓存器用于存放转换后的RGB中间帧； 所述绘制模块包括:提取子模块、填充子模块、绘制控制子模块；所述提取子模块用于从双缓存器中提取待显示部分的数据；所述填充子模块将提取的待显示的数据写入至待显示区域；所述绘制控制子模块用于接收交互模块传来的定位参数，控制提取子模块提取数据的位置； 所述交互模块包括:监听子模块、计算子模块、请求分流器、缩放适配器以及拖动适配器；所述监听子模块用于实时监测显示区域内的用户交互请求；所述计算子模块用于对用户的交互请求进行计算，并将计算结果传输到请求分流器；所述请求分流器用于对交互请求进行分流，分离出是缩放请求还是拖动请求，或者是二者都有；所述缩放适配器收请求分流器分离出的缩放请求，进行缩放坐标计算得到缩放参数；所述拖动适配器用于接收请求分流器分离出的拖动请求，进行拖动坐标计算得到定位参数。
6.如权利要求5所述的一种视频移动终端实时拖动与缩放的装置，其特征在于，所述交互模块还包括越界处理子模块，所述越界处理子模用于检测交互请求是否越界并进行越界纠正。
【文档编号】G06F3/0488GK103888840SQ201410119164
【公开日】2014年6月25日 申请日期:2014年3月27日 优先权日:2014年3月27日
【发明者】田玲, 周益民, 罗光春, 闫科 申请人:电子科技大学