重要信息显示方法、装置、设备及存储介质与流程

文档序号:33701695发布日期:2023-03-31 19:48阅读:28来源:国知局
重要信息显示方法、装置、设备及存储介质与流程

1.本发明涉及显示控制技术领域,尤其涉及一种重要信息显示方法、装置、设备及存储介质。


背景技术:

2.随着移动互联网的发展,人们传递信息的方式也越来越多样化,其中,通过视频传递信息是一种十分直观且便捷的方法,在我们日常信息交流中占据的比重也越来越大。
3.在工作和生活中,我们经常会用到录屏功能去分享设备上一些视觉信息,视频传递虽然更加直观,但由于没有重点,在传递一些目的性较强的信息时,信息容易被对方错误理解甚至是忽视,例如:在接收信息的对象是老年人时,对方不知道某个功能的入口需要向本方求助,通常情况下我们会将达到该功能的操作步骤通过录屏的方式告知。但由于每个界面上都会有很多信息,现在技术方案下,无法很好地对重要信息进行展示,从而破坏了用户的使用体验。
4.上述内容仅用于辅助理解本发明的技术方案,并不代表承认上述内容是现有技术。


技术实现要素:

5.本发明的主要目的在于提供一种重要信息显示方法、装置、设备及存储介质,旨在解决现有技术无法通过视频展示重要信息的技术问题。
6.为实现上述目的,本发明提供了一种重要信息显示方法,所述方法包括以下步骤:
7.在检测到视频录制操作时,对屏幕触摸信号进行监控;
8.根据所述屏幕触摸信号确定目标控件信息;
9.根据所述目标控件信息对当前录制视频进行视频处理,得到重要信息显示视频。
10.可选的,所述根据所述目标控件信息对当前录制视频进行视频处理,得到重要信息显示视频,包括:
11.根据所述目标控件信息确定目标控件和目标控件对应的控件时序信息;
12.根据所述控件时序信息和当前录制视频确定需要进行处理的控件视频帧;
13.对所述控件视频帧中的目标控件进行重要信息提示处理,得到处理后的控件视频帧;
14.根据所述处理后的控件视频帧得到重要信息显示视频。
15.可选的,所述对所述控件视频帧中的目标控件进行重要信息提示处理,得到处理后的控件视频帧,包括:
16.获取所述目标控件在屏幕上的控件坐标信息;
17.根据所述控件坐标信息确定所述控件视频帧中的待处理区域;
18.将所述待处理区域进行放大处理,得到处理后的控件视频帧。
19.可选的,所述根据所述控件时序信息和当前录制视频确定需要进行处理的控件视
频帧,包括:
20.获取视频录制时屏幕显示界面切换的时间戳;
21.根据所述时间戳和所述控件时序信息确定需要进行处理的控件视频帧。
22.可选的,所述根据所述目标控件信息对当前录制视频进行视频处理,得到重要信息显示视频之后,还包括:
23.获取预设关键标签;
24.根据所述预设关键标签对所述重要信息显示视频进行检测,得到目标关键信息;
25.根据所述目标关键信息对所述重要信息显示视频进行处理,得到重要信息提示视频。
26.可选的,所述根据所述预设关键标签对所述重要信息显示视频进行检测,得到目标关键信息,包括:
27.根据所述预设关键标签,对所述重要信息显示视频进行目标检测,得到关键信息检测结果;
28.根据所述关键信息检测结果确定目标关键信息。
29.可选的,所述根据所述预设关键标签,对重要信息显示视频进行目标检测,得到关键信息检测结果,包括:
30.对所述重要信息显示视频进行遍历,将遍历到的重要信息显示视频帧作为当前帧;
31.根据所述预设关键标签对所述当前帧进行目标检测;
32.在检测到目标图像时,确定所述目标图像的坐标信息;
33.获取所述当前帧的时序信息和所述目标图像的标签名;
34.将所述坐标信息、所述时序信息和所述标签名进行关联,并加入目标重要信息集合得到更新后的目标重要信息集合;
35.根据所述更新后的目标重要信息集合得到关键信息检测结果。
36.可选的,所述获取预设关键标签之前,还包括:
37.获取用户的输入信息;
38.对所述用户的输入信息进行关键词检测,得到关键词标签;
39.根据所述关键词标签匹配预设关联标签库得到关联标签;
40.根据所述关键词标签和所述关联标签确定预设关键标签。
41.可选的,所述根据所述目标控件信息对当前录制视频进行视频处理之前,还包括:
42.在检测到视频录制操作时,对用户语音进行监控,得到语音信息;
43.对所述语音信息进行语义识别,得到语义标签;
44.根据所述语义标签确定提示信息;
45.所述根据所述目标控件信息对当前录制视频进行视频处理,包括:
46.根据所述目标控件信息和所述提示信息对当前录制视频进行视频处理。
47.可选的,所述根据所述目标控件信息和所述提示信息对当前录制视频进行视频处理,包括:
48.根据所述提示信息确定待提示目标的第一修改信息;
49.根据所述目标控件信息确定待提示目标的第二修改信息;
50.根据所述第一修改信息和第二修改信息对当前录制视频进行视频处理。
51.可选的,所述根据所述目标控件信息和所述提示信息对当前录制视频进行视频处理,包括:
52.根据所述提示信息确定用户操作意图;
53.根据所述目标控件信息确定用户实际操作;
54.将所述用户操作意图与用户实际操作进行匹配,得到匹配结果;
55.根据所述匹配结果对当前录制视频进行视频处理。
56.可选的,所述根据所述匹配结果对当前录制视频进行视频处理,包括:
57.根据所述匹配结果获取匹配正确的用户实际操作;
58.根据所述匹配正确的用户实际操作对应的目标控件信息对当前录制视频进行视频处理。
59.此外,为实现上述目的,本发明还提出一种重要信息显示装置,所述重要信息显示装置包括:
60.检测模块,用于在检测到视频录制操作时,对屏幕触摸信号进行监控;
61.处理模块,用于根据所述屏幕触摸信号确定目标控件信息;
62.控制模块,用于根据所述目标控件信息对当前录制视频进行视频处理,得到重要信息显示视频。
63.可选的,所述控制模块,还用于根据所述目标控件信息确定目标控件和目标控件对应的控件时序信息,根据所述控件时序信息和当前录制视频确定需要进行处理的控件视频帧,对所述控件视频帧中的目标控件进行重要信息提示处理,得到处理后的控件视频帧;根据所述处理后的控件视频帧得到重要信息显示视频。
64.可选的,所述控制模块,还用于获取所述目标控件在屏幕上的控件坐标信息,根据所述控件坐标信息确定所述控件视频帧中的待处理区域,将所述待处理区域进行放大处理,得到处理后的控件视频帧。
65.可选的,所述控制模块,还用于获取视频录制时屏幕显示界面切换的时间戳,根据所述时间戳和所述控件时序信息确定需要进行处理的控件视频帧。
66.可选的,所述检测模块,还用于获取预设关键标签;根据所述预设关键标签对所述重要信息显示视频进行检测,得到目标关键信息;
67.所述控制模块,还用于根据所述目标关键信息对所述重要信息显示视频进行处理,得到重要信息提示视频。
68.可选的,所述检测模块,还用于根据所述预设关键标签,对所述重要信息显示视频进行目标检测,得到关键信息检测结果,根据所述关键信息检测结果确定目标关键信息。
69.此外,为实现上述目的,本发明还提出一种重要信息显示设备,所述重要信息显示设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的重要信息显示程序,所述重要信息显示程序配置为实现如上文所述的重要信息显示方法的步骤。
70.此外,为实现上述目的,本发明还提出一种存储介质,所述存储介质上存储有重要信息显示程序,所述重要信息显示程序被处理器执行时实现如上文所述的重要信息显示方法的步骤。
71.本发明在检测到视频录制操作时,对屏幕触摸信号进行监控;根据所述触摸信号
确定目标控件信息;根据所述目标控件信息对当前录制视频进行视频处理,得到重要信息显示视频。通过上述方式,实现了对当前录制视频的优化,通过将重要的内容进行醒目的处理,并配合慢放让观看视频的用户能更加清楚的理解视频的意图,在提升画面的可读性的同时优化了用户的使用体验。
附图说明
72.图1是本发明实施例方案涉及的硬件运行环境的重要信息显示设备的结构示意图;
73.图2为本发明重要信息显示方法第一实施例的流程示意图;
74.图3为本发明重要信息显示方法一实施例的重要信息显示示意图;
75.图4为本发明重要信息显示方法第二实施例的流程示意图;
76.图5为本发明重要信息显示装置第一实施例的结构框图。
77.本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
78.应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
79.参照图1,图1为本发明实施例方案涉及的硬件运行环境的重要信息显示设备结构示意图。
80.如图1所示,该重要信息显示设备可以包括:处理器1001,例如中央处理器(central processing unit,cpu),通信总线1002、用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(display)、输入单元比如键盘(keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(wireless-fidelity,wi-fi)接口)。存储器1005可以是高速的随机存取存储器(random access memory,ram)存储器,也可以是稳定的非易失性存储器(non-volatile memory,nvm),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
81.本领域技术人员可以理解,图1中示出的结构并不构成对重要信息显示设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
82.如图1所示,作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及重要信息显示程序。
83.在图1所示的重要信息显示设备中,网络接口1004主要用于与网络服务器进行数据通信;用户接口1003主要用于与用户进行数据交互;本发明重要信息显示设备中的处理器1001、存储器1005可以设置在重要信息显示设备中,所述重要信息显示设备通过处理器1001调用存储器1005中存储的重要信息显示程序,并执行本发明实施例提供的重要信息显示方法。
84.本发明实施例提供了一种重要信息显示方法,参照图2,图2为本发明一种重要信息显示方法第一实施例的流程示意图。
85.本实施例中,所述重要信息显示方法包括以下步骤:
86.步骤s10:在检测到视频录制操作时,对屏幕触摸信号进行监控。
87.需要说明的是,本实施例的执行主体为智能终端,所述智能终端可以为手机,也可以为平板电脑,还可以为个人电脑,还可以为与所述手机功能相同或者相似的其他终端设备,本实施例对此不加以限定。
88.可以理解的是,本实施例应用于设备录屏的过程中,由于正常的录屏过程中无法添加重点内容,因此在传递一些目的性较强的信息时,录屏的视频信息容易被对方错误理解甚至是忽视,无法很好地对重要信息进行展示导致对方无法理解这段录屏视频想要表达的内容。例如:对方不知道某个功能的入口需要向本方求助,通常情况下我们会将达到该功能的操作步骤通过录屏的方式告知,但由于具体操作的演示过程都会有手部操作例如点击、滑动以及长按等等,而视频中并不会展示这些操作,导致对方无法理解关键的操作点,导致视频无法将找到功能入口的操作传达给对方。综上所述,在录屏过程中对重要信息做明显地展示是非常有必要的,可提升用户使用录屏功能的体验。本实施例通过对屏幕触摸信号进行监控,在根据触摸信号对视频进行处理(例如:对关键位置进行高亮或者放大),得到一个可以对重要区域重点展示的录屏视频。
89.应当说明的是,视频录制操作一般指的是开启录制功能时进行屏幕录制的操作,例如:当用户点击录制按钮后倒数3秒开启屏幕录制,那么此处视频录制操作即为用户点击录制按钮时开始监控触摸信号。同时也可以是在录屏功能暂停后,按下音量键继续进行录制,那么此时继续进行录制的操作同样可以是视频录制操作。
90.需要明白的是,屏幕触摸信号可以为:用户在触摸屏上的点击、长按以及滑动等操作所触发的信号,通过触摸屏的传感器即可以获取。通过对屏幕触摸信号的监控结合当前显示的内容可以进一步知道用户的操作意图,例如:打开软件、打开链接、移动app以及翻页等操作意图。
91.步骤s20:根据所述触摸信号确定目标控件信息。
92.需要说明的是,用户与智能终端的交互过程都是通过控件实现的,控件为人机交互提供了条件,例如:在打开某个功能页面时,检测到该功能图标的点击信号后对应的控件根据点击信号执行打开该功能图标对应的视窗的操作。因此根据触摸信号可以关联到与其互动的控件信息。
93.可以理解的是,目标控件信息即为在视频录制过程中与用户存在交互的控件的信息,其中,目标控件信息中包含了该控件在屏幕中的坐标信息和触发控件功能的时间信息。通过上述信息可以得到用户在什么位置和什么时间与屏幕进行了交互,进而根据用户的交互过程得到需要进行提示的操作。该控件在屏幕中的坐标可以是智慧终端定义的虚拟坐标,也可以屏幕上的像素坐标,用户说明控件对应的交互区域在屏幕中的位置即可,本实施例对此不加以限定。触发控件功能的时间信息即为与控件交互时的时间节点,通过该时间节点可以与录制视频中对应时间的视频帧数对应上,例如:与控件进行交互的时间节点为a时间,通过a时间可以找到视频录制过程中在a时间进行录制的若干帧视频图像。视频帧即为录制视频当中的一帧视频图像。
94.步骤s30:根据所述目标控件信息对当前录制视频进行视频处理,得到重要信息显示视频。
95.需要说明的是,此处进行的视频处理可以为:对视频中用户的操作位置进行放大的处理步骤,例如:在当前录制视频中用户点击某一个图标,进入另一个视窗时,将用户点
击的图标进行放大处理,以醒目的提示观看者这一图标非常重要,需要进行操作方能进入另一个视窗。
96.可以理解的是,重要信息显示视频即为用户所观看到的,经过视频处理后的视频,其中会将录屏用户认为重要的信息凸显出来,以达到突出重要信息的目的,让接收视频的用户能够更加有侧重的对视频进行观看和解读。
97.在具体实现中,在检测到视频录制操作时,对屏幕触摸信号进行监控,可以得到触摸信号并对触摸信号的意图进行解读根据解读到的操作动作,根据所述触摸信号解读到的操作动作即可确定用户与哪些目标控件进行交互,并记录下这些控件在与用户交互时的相关信息。根据所述目标控件信息对当前录制视频进行视频处理,具体处理过程可以是标注、高亮或者放大以达到醒目的目的,最终得到处理后的得到重要信息显示视频,例如:图3所示在录制某个功能入口的演示视频时,将用户进入功能入口的操作进行识别,识别出目标控件对应的图标e在对应的视频帧中对交互的控件对应的位置进行放大,而除了图标e之外的正常图像保持不变,如图标a、b、c、d、f、g、h均未发生变化,从而让用户观看时可以直观的明白录屏者想要表达的意图,在交互的过程中将对应的若干帧视频进行慢放以保证观看视频的用户可以清楚明白的了解录制视频用户的操作意图,提高了视频的可读性,优化了用户的使用体验。
98.在本实施例中,根据所述目标控件信息确定目标控件和目标控件对应的控件时序信息;根据所述控件时序信息和当前录制视频确定需要进行处理的控件视频帧;对所述控件视频帧中的目标控件进行重要信息提示处理,得到处理后的控件视频帧;根据所述处理后的控件视频帧得到重要信息显示视频。
99.需要说明的是,控件时序信息即为用户与控件交互时的时间节点,通过控件所生成的操作指令对应的时间戳可以获得控件时序信息,根据所述控件时序信息可以找到录制该视频的时间进度,例如:点击控件的时间为a,通过时间a找到在时间a时视频录制到5.32秒的时间进度,再吧5.32秒前后几帧画面作为点击控件这个动作对应的控件视频帧,控件视频帧即为目标控件对应的几帧视频的集合。
100.进一步的,可以获取所述目标控件在屏幕上的控件坐标信息;根据所述控件坐标信息确定所述控件视频帧中的待处理区域;将所述待处理区域进行放大处理,得到处理后的控件视频帧。对控件视频帧画面中的目标控件的位置进行醒目处理,如高亮或者放大等。其中,控件的坐标信息,为控件用于交互的坐标点集合,根据该坐标点集合对应一个屏幕区域,根据不同的控件类型,该屏幕区域的大小和形状可能并不相同,可以再根据该区域设置一个略大于屏幕区域的待处理区域用于放大,将每一帧控件视频帧均处理完后,即可得到处理后的控件视频帧。
101.在本实施例中,确定控件视频帧的具体方案可以为:获取视频录制时屏幕显示界面切换的时间戳;根据所述时间戳和所述控件时序信息确定需要进行处理的控件视频帧。
102.需要说明的是,由于在点击操作或者长按操作的操作时间特别快,操作完很有可能当前界面就切换成其他界面了,因此,短时间内用户可能很难观察到让重要信息醒目的效果。为了避免出现这种情况,可以获取录屏过程中显示界面切换的时间点,通过视窗打开和关闭的时间戳即可实现,以屏幕显示界面切换的时间戳为时间界限,在两个时间界限中如果存在控件时序信息对应的时间点,即可将两个时间界限中出现的若干帧视频图像均作
为控件视频帧,如此,即可在画面中持续放大重要信息,直至用户点击了重要信息后切换画面。
103.此外,本实施例提出一种目标控件信息与语音信号相结合实现重要信息显示的优选方案,如下:在检测到视频录制操作时,对用户语音进行监控,得到语音信息;对所述语音信息进行语义识别,得到语义标签;根据所述语义标签确定提示信息;所述根据所述目标控件信息对当前录制视频进行视频处理,包括:根据所述目标控件信息和所述提示信息对当前录制视频进行视频处理。
104.需要说明的是,在检测到视频录制操作时,对用户语音进行监控,得到语音信息即为在监控屏幕触摸信号的同时对用户的语音信号进行监控,其中,用户语音信息即为用户在录制录屏视频时发出的声音信号,声音信号中可以包含用于辅助用户进行屏幕控制的信息,例如:在进行操作的同时用户通过语音进行提示,下拉菜单,点击某某app,找到功能模块a后,进入界面b,在界面b中找到链接c等等语音,智能终端通过语义识别找到对应的语义标签,用于理解用户发出语音的意思,本功能中语义标签一般分为两类,一类是动作标签,一类是名词标签,动作标签用户识别出用户语音中包含的动作信息,例如:“点击”、“下拉”、“打开”以及“下划”等等。名词标签一般用于识别出用户操作的目标,例如:某个软件名称、某种功能键、“按钮”、“浮动窗口”、“菜单”以及“文件夹”等等。通过语音信息既可以提示观看的用户进行操作,也可以生成机器语言让智能终端明白录制视频用户的意图。在没有检测到屏幕触摸信号时,通过语音信号依然可以实现重要信息的提示。
105.可以理解的是,提示信息为根据语义标签确定动作信息与操作目标之间的关系,只有动作信息与操作目标相关联才能确定一个完整的提示信息,例如:“点击
”‑“
短信”,那么即可将用户在哪个时间点击了哪个目标控件的这一信息确定为提示信息,从而确定需要放大的图像。
106.在本实施例中,根据所述目标控件信息和所述提示信息对当前录制视频进行视频处理的方式,本实施例提出一种优选方案:根据所述提示信息确定待提示目标的第一修改信息;根据所述目标控件信息确定待提示目标的第二修改信息;根据所述第一修改信息和第二修改信息对当前录制视频进行视频处理。
107.需要说明的是,待提示目标为需要进行提示的重要信息,其中包括重要信息需要进行提示的时间段和对应的屏幕坐标集合,当加入提示信息进行重要信息选取时,重要信息可为一个控件,也可能为一些关键字或者图片。
108.在具体实现中,第一修改信息和第二修改信息为当前录制视频进行视频处理提供了数据基础,第一修改信息和第二修改信息中包含了重要信息的屏幕坐标集合、需要修改的视频帧数为哪几帧、修改的方式是放大、高亮、标记、涂改或者其他醒目的方式,等等。
109.在本实施例中,根据所述提示信息确定用户操作意图;根据所述目标控件信息确定用户实际操作;将所述用户操作意图与用户实际操作进行匹配,得到匹配结果;根据所述匹配结果对当前录制视频进行视频处理。
110.需要说明的是,根据所述提示信息可以确定用户的操作意图,其中,操作意图即为通过提示信息中操作目标和动作信息确定的一个完整的操作链,例如:下划列表后点开图标a,长按按钮b进入某一功能入口。那么根据这个操作链和检测到用户屏幕触摸信号得到实际操作进行匹配,将不存在这一操作链的操作视为误操作,例如:在用户录屏过程中,用
户误点了其他位置,通过与语音信号生成的操作意图进行匹配,即可以判断此次误点是误操作,将其从第一修改信息中除去。防止无用的位置被放大或者高亮,影响观看视频用户的判断。
111.在本实施例中,根据所述匹配结果获取匹配正确的用户实际操作;根据所述匹配正确的用户实际操作对应的目标控件信息对当前录制视频进行视频处理。
112.应当说明的是,根据所述匹配结果获取匹配正确的用户实际操作,其中,匹配正确的用户实际操作,即为符合操作意图的操作链确定的实际操作,根据匹配正确的用户实际操作确定目标控件,再对目标控件对应区域的图像进行醒目的处理。
113.本实施例在检测到视频录制操作时,对屏幕触摸信号进行监控;根据所述触摸信号确定目标控件信息;根据所述目标控件信息对当前录制视频进行视频处理,得到重要信息显示视频。通过上述方式,实现了对当前录制视频的优化,通过将重要的内容进行醒目的处理,并配合慢放让观看视频的用户能更加清楚的理解视频的意图,在提升画面的可读性的同时优化了用户的使用体验。
114.参考图4,图4为本发明一种重要信息显示方法第二实施例的流程示意图。
115.基于上述第一实施例,本实施例重要信息显示方法在所述步骤s30之后,还包括:
116.步骤s40:获取预设关键标签。
117.需要说明的是,预设关键标签为用户事先设置好的一些关键信息,用于节约用户的操作时间,例如:在录制屏幕的目的为重要信息的展示时,需要将视频中文件的内容进行重点标记,如关键的语句、日期、合同编号或者其他内容进行突出显示,用户挨个点击会十分耗时耗力,再有大量重复内容的情况下可以交给机器处理,其中,预设关键标签为一些关键词或者关键图像的标签。例如:一些常见的应用图像对应的标签如微信、微博、电话以及短信等,或者是一些常见的标识符、图片、文字等。
118.在本实施例中,提出一种设置预设关键标签的优选方案,如下:获取用户的输入信息;对所述用户的输入信息进行关键词检测,得到关键词标签;根据所述关键词标签匹配预设关联标签库得到关联标签;根据所述关键词标签和所述关联标签确定预设关键标签。
119.可以理解的是,用户需要事先对预设关键标签,所述设置方式即为输入一个输入信息,其输入信息可以是输入文字信息,也可以是系统提供自带的标签给用户进行选择得到的选择结果,对输入信息进行关键词检测以检测输入信息当中是否有关键词标签,如果是系统提供的选择那么直接就可以获取,关键词标签即为用于对视频图像进行文字识别的参数,例如:关键词标签为“钱”时,即可把视频中所有出现钱的视频帧和位置找到。
120.需要说明的是,一个关键词可能存在多个同义词,相应的一个关键词标签可能有多个关键标签,例如:关键词标签“钱”的关联标签可能有“金额”、“贷款”、“存款”、“财产”以及“money”等。通过关键词便签和关联标签,即可通过智能终端帮助用户进行操作,以替代大量的重复的点击操作,提高了用户的使用体验。
121.步骤s50:根据所述预设关键标签对所述重要信息显示视频进行检测,得到目标关键信息。
122.需要说明的是,预设关键标签即为用于对视频图像进行文字识别或者图像识别的参数,例如:预设关键标签为“钱”时,即可把视频中所有出现钱的视频帧和位置找到。其中,目标关键信息即为通过检测过程得到的重要信息的出现时间和各个出现时间对应的坐标
位置信息。
123.在本实施例中,检测的具体过程可以为:根据所述预设关键标签,对所述重要信息显示视频进行目标检测,得到关键信息检测结果;根据所述关键信息检测结果确定目标关键信息。目标检测即为根据预设关键标签找到对应的预先训练好的检测模型对视频进行目标检测,检测结果即为目标关键信息。
124.在本实施例中,对所述重要信息显示视频进行遍历,将遍历到的重要信息显示视频帧作为当前帧;根据所述预设关键标签对所述当前帧进行目标检测;在检测到目标图像时,确定所述目标图像的坐标信息;获取当前帧的时序信息和目标图像的标签名;将所述坐标信息、时序信息和标签名进行关联,并加入目标重要信息集合;根据加入后的目标重要信息集合得到关键信息检测结果。
125.需要说明的是,对所述重要信息显示视频进行遍历即为对所有重要信息显示视频均执行一遍同样的操作,当进行到其中一个重要信息显示视频时,把该视频作为当前视频,其中,目标图像为根据预设关键标签检测出来的符合要求的图像,目标图像的坐标信息即为目标图像在每一帧图像中的位置坐标,当前帧的时序信息,检测到目标图像这一帧图像的播放时间,标签名即为检测出当前图像对应的标签的名称,根据标签名则可知道这是哪一种重要信息。根据这些信息即可组成一条完整的目标关键信息,再将所有的目标关键信息都存储起来以供后续步骤进行处理。
126.步骤s60:根据所述目标关键信息对所述重要信息显示视频进行处理,得到重要信息提示视频。
127.需要说明的是,在重要信息提示视频的基础上,还可以根据目标关键信息对一些关键信息进行醒目的处理,以便捷的完成需要重复操作的重要信息,例如在重要信息显示视频的基础上标记出视频中所有出现用户头像的图像,那么此时目标关键信息就位每一个用户头像的位置和出现的时间,将所有的用户头像进行高亮处理,以提醒观看用户的注意。
128.需要说明的是,此处进行的视频处理可以为将录制好的视频中用户的操作位置进行放大处理,例如:用户想标记出所有进入一个视窗的入口,这些入口均为同样的图像或者链接,但是逐一点击十分耗时,录屏时无法及时机型操作,那么可以通过本实施例,自动识别出来全部的入口,以提示观看者,有这些操作方式进入另一个视窗。
129.本实施例获取预设关键标签;根据所述预设关键标签对所述重要信息显示视频进行检测,得到目标关键信息;根据所述目标关键信息对所述重要信息显示视频进行处理,得到重要信息提示视频。通过上述方式,实现了对重要信息自动识别的过程,通过预设的参数对重要信息进行识别,在有大量重复信息需要进行提示的场景下,避免用户进行反复操作来确定重要信息,并且在视频录制时由于时间有限无法进行大量操作,避免了重要信息的遗漏,节约了用户的时间成本,提高了用户的使用体验。
130.此外,本发明实施例还提出一种存储介质,所述存储介质上存储有重要信息显示程序,所述重要信息显示程序被处理器执行时实现如上文所述的重要信息显示方法的步骤。
131.由于本存储介质采用了上述所有实施例的全部技术方案,因此至少具有上述实施例的技术方案所带来的所有有益效果,在此不一一赘述。
132.参照图5,图5为本发明重要信息显示装置第一实施例的结构框图。
133.如图5所示,本发明实施例提出的重要信息显示装置包括:
134.检测模块10,用于在检测到视频录制操作时,对屏幕触摸信号进行监控。
135.处理模块20,用于根据所述屏幕触摸信号确定目标控件信息。
136.控制模块30,用于根据所述目标控件信息对当前录制视频进行视频处理,得到重要信息显示视频。
137.应当理解的是,以上仅为举例说明,对本发明的技术方案并不构成任何限定,在具体应用中,本领域的技术人员可以根据需要进行设置,本发明对此不做限制。
138.本实施例检测模块10,在检测到视频录制操作时,对屏幕触摸信号进行监控;处理模块20,根据所述触摸信号确定目标控件信息;控制模块30,根据所述目标控件信息对当前录制视频进行视频处理,得到重要信息显示视频。通过上述方式,实现了对当前录制视频的优化,通过将重要的内容进行醒目的处理,并配合慢放让观看视频的用户能更加清楚的理解视频的意图,在提升画面的可读性的同时优化了用户的使用体验。
139.由于本装置采用了上述所有实施例的全部技术方案,因此至少具有上述实施例的技术方案所带来的所有有益效果,在此不一一赘述。
140.在一实施例中,所述控制模块30,还用于根据所述目标控件信息确定目标控件和目标控件对应的控件时序信息;
141.根据所述控件时序信息和当前录制视频确定需要进行处理的控件视频帧;
142.对所述控件视频帧中的目标控件进行重要信息提示处理,得到处理后的控件视频帧;
143.根据所述处理后的控件视频帧得到重要信息显示视频。
144.在一实施例中,所述控制模块30,还用于获取所述目标控件在屏幕上的控件坐标信息;
145.根据所述控件坐标信息确定所述控件视频帧中的待处理区域;
146.将所述待处理区域进行放大处理,得到处理后的控件视频帧。
147.在一实施例中,所述控制模块30,还用于获取视频录制时屏幕显示界面切换的时间戳;
148.根据所述时间戳和所述控件时序信息确定需要进行处理的控件视频帧。
149.在一实施例中,所述检测模块10,还用于获取预设关键标签;
150.根据所述预设关键标签对所述重要信息显示视频进行检测,得到目标关键信息;
151.所述控制模块30,还用于根据所述目标关键信息对所述重要信息显示视频进行处理,得到重要信息提示视频。
152.在一实施例中,所述检测模块10,还用于根据所述预设关键标签,对所述重要信息显示视频进行目标检测,得到关键信息检测结果;
153.根据所述关键信息检测结果确定目标关键信息。
154.在一实施例中,所述检测模块10,还用于对所述重要信息显示视频进行遍历,将遍历到的重要信息显示视频帧作为当前帧;
155.根据所述预设关键标签对所述当前帧进行目标检测;
156.在检测到目标图像时,确定所述目标图像的坐标信息;
157.获取当前帧的时序信息和目标图像的标签名;
158.将所述坐标信息、时序信息和标签名进行关联,并加入目标重要信息集合;
159.根据加入后的目标重要信息集合得到关键信息检测结果。
160.在一实施例中,所述检测模块10,还用于获取用户的输入信息;
161.对所述用户的输入信息进行关键词检测,得到关键词标签;
162.根据所述关键词标签匹配预设关联标签库得到关联标签;
163.根据所述关键词标签和所述关联标签确定预设关键标签。
164.在一实施例中,所述处理模块20,还用于在检测到视频录制操作时,对用户语音进行监控,得到语音信息;
165.对所述语音信息进行语义识别,得到语义标签;
166.根据所述语义标签确定提示信息;
167.所述控制模块30,还用于根据所述目标控件信息和所述提示信息对当前录制视频进行视频处理。
168.在一实施例中,所述控制模块30,还用于根据所述提示信息确定待提示目标的第一修改信息;
169.根据所述目标控件信息确定待提示目标的第二修改信息;
170.根据所述第一修改信息和第二修改信息对当前录制视频进行视频处理。
171.在一实施例中,所述控制模块30,还用于根据所述提示信息确定用户操作意图;
172.根据所述目标控件信息确定用户实际操作;
173.将所述用户操作意图与用户实际操作进行匹配,得到匹配结果;
174.根据所述匹配结果对当前录制视频进行视频处理。
175.在一实施例中,所述控制模块30,还用于根据所述匹配结果获取匹配正确的用户实际操作;
176.根据所述匹配正确的用户实际操作对应的目标控件信息对当前录制视频进行视频处理。
177.需要说明的是,以上所描述的工作流程仅仅是示意性的,并不对本发明的保护范围构成限定,在实际应用中,本领域的技术人员可以根据实际的需要选择其中的部分或者全部来实现本实施例方案的目的,此处不做限制。
178.另外,未在本实施例中详尽描述的技术细节,可参见本发明任意实施例所提供的重要信息显示方法,此处不再赘述。
179.需要说明的是,以上所描述的工作流程仅仅是示意性的,并不对本发明的保护范围构成限定,在实际应用中,本领域的技术人员可以根据实际的需要选择其中的部分或者全部来实现本实施例方案的目的,此处不做限制。
180.另外,未在本实施例中详尽描述的技术细节,可参见本发明任意实施例所提供的重要信息显示方法,此处不再赘述。
181.本发明还公开了a1,一种重要信息显示方法,其特征在于,所述重要信息显示方法包括:
182.在检测到视频录制操作时,对屏幕触摸信号进行监控;
183.根据所述屏幕触摸信号确定目标控件信息;
184.根据所述目标控件信息对当前录制视频进行视频处理,得到重要信息显示视频。
185.a2、如权利要求a1所述的方法,其特征在于,所述根据所述目标控件信息对当前录制视频进行视频处理,得到重要信息显示视频,包括:
186.根据所述目标控件信息确定目标控件和目标控件对应的控件时序信息;
187.根据所述控件时序信息和当前录制视频确定需要进行处理的控件视频帧;
188.对所述控件视频帧中的目标控件进行重要信息提示处理,得到处理后的控件视频帧;
189.根据所述处理后的控件视频帧得到重要信息显示视频。
190.a3、如权利要求a2所述的方法,其特征在于,所述对所述控件视频帧中的目标控件进行重要信息提示处理,得到处理后的控件视频帧,包括:
191.获取所述目标控件在屏幕上的控件坐标信息;
192.根据所述控件坐标信息确定所述控件视频帧中的待处理区域;
193.将所述待处理区域进行放大处理,得到处理后的控件视频帧。
194.a4、如权利要求a2所述的方法,其特征在于,所述根据所述控件时序信息和当前录制视频确定需要进行处理的控件视频帧,包括:
195.获取视频录制时屏幕显示界面切换的时间戳;
196.根据所述时间戳和所述控件时序信息确定需要进行处理的控件视频帧。
197.a5、如权利要求a1所述的方法,其特征在于,所述根据所述目标控件信息对当前录制视频进行视频处理,得到重要信息显示视频之后,还包括:
198.获取预设关键标签;
199.根据所述预设关键标签对所述重要信息显示视频进行检测,得到目标关键信息;
200.根据所述目标关键信息对所述重要信息显示视频进行处理,得到重要信息提示视频。
201.a6、如权利要求a5所述的方法,其特征在于,所述根据所述预设关键标签对所述重要信息显示视频进行检测,得到目标关键信息,包括:
202.根据所述预设关键标签,对所述重要信息显示视频进行目标检测,得到关键信息检测结果;
203.根据所述关键信息检测结果确定目标关键信息。
204.a7、如权利要求a6所述的方法,其特征在于,所述根据所述预设关键标签,对重要信息显示视频进行目标检测,得到关键信息检测结果,包括:
205.对所述重要信息显示视频进行遍历,将遍历到的重要信息显示视频帧作为当前帧;
206.根据所述预设关键标签对所述当前帧进行目标检测;
207.在检测到目标图像时,确定所述目标图像的坐标信息;
208.获取所述当前帧的时序信息和所述目标图像的标签名;
209.将所述坐标信息、所述时序信息和所述标签名进行关联,并加入目标重要信息集合得到更新后的目标重要信息集合;
210.根据所述更新后的目标重要信息集合得到关键信息检测结果。
211.a8、如权利要求a5所述的方法,其特征在于,所述获取预设关键标签之前,还包括:
212.获取用户的输入信息;
213.对所述用户的输入信息进行关键词检测,得到关键词标签;
214.根据所述关键词标签匹配预设关联标签库得到关联标签;
215.根据所述关键词标签和所述关联标签确定预设关键标签。
216.a9、如权利要求a1所述的方法,其特征在于,所述根据所述目标控件信息对当前录制视频进行视频处理之前,还包括:
217.在检测到视频录制操作时,对用户语音进行监控,得到语音信息;
218.对所述语音信息进行语义识别,得到语义标签;
219.根据所述语义标签确定提示信息;
220.所述根据所述目标控件信息对当前录制视频进行视频处理,包括:
221.根据所述目标控件信息和所述提示信息对当前录制视频进行视频处理。
222.a10、如权利要求a9所述的方法,其特征在于,所述根据所述目标控件信息和所述提示信息对当前录制视频进行视频处理,包括:
223.根据所述提示信息确定待提示目标的第一修改信息;
224.根据所述目标控件信息确定待提示目标的第二修改信息;
225.根据所述第一修改信息和第二修改信息对当前录制视频进行视频处理。
226.a11、如权利要求a9所述的方法,其特征在于,所述根据所述目标控件信息和所述提示信息对当前录制视频进行视频处理,包括:
227.根据所述提示信息确定用户操作意图;
228.根据所述目标控件信息确定用户实际操作;
229.将所述用户操作意图与用户实际操作进行匹配,得到匹配结果;
230.根据所述匹配结果对当前录制视频进行视频处理。
231.a12、如权利要求a11所述的方法,其特征在于,所述根据所述匹配结果对当前录制视频进行视频处理,包括:
232.根据所述匹配结果获取匹配正确的用户实际操作;
233.根据所述匹配正确的用户实际操作对应的目标控件信息对当前录制视频进行视频处理。
234.本发明公开了b1,一种重要信息显示装置,其特征在于,所述重要信息显示装置包括:
235.检测模块,用于在检测到视频录制操作时,对屏幕触摸信号进行监控;
236.处理模块,用于根据所述屏幕触摸信号确定目标控件信息;
237.控制模块,用于根据所述目标控件信息对当前录制视频进行视频处理,得到重要信息显示视频。
238.b2、如权利要求b1所述的装置,其特征在于,所述控制模块,还用于根据所述目标控件信息确定目标控件和目标控件对应的控件时序信息,根据所述控件时序信息和当前录制视频确定需要进行处理的控件视频帧,对所述控件视频帧中的目标控件进行重要信息提示处理,得到处理后的控件视频帧;根据所述处理后的控件视频帧得到重要信息显示视频。
239.b3、如权利要求b2所述的装置,其特征在于,所述控制模块,还用于获取所述目标控件在屏幕上的控件坐标信息,根据所述控件坐标信息确定所述控件视频帧中的待处理区域,将所述待处理区域进行放大处理,得到处理后的控件视频帧。
240.b4、如权利要求b2所述的装置,其特征在于,所述控制模块,还用于获取视频录制时屏幕显示界面切换的时间戳;根据所述时间戳和所述控件时序信息确定需要进行处理的控件视频帧。
241.b5、如权利要求b1所述的装置,其特征在于,所述检测模块,还用于获取预设关键标签;根据所述预设关键标签对所述重要信息显示视频进行检测,得到目标关键信息;
242.所述控制模块,还用于根据所述目标关键信息对所述重要信息显示视频进行处理,得到重要信息提示视频。
243.b6、如权利要求b5所述的装置,其特征在于,所述检测模块,还用于根据所述预设关键标签,对所述重要信息显示视频进行目标检测,得到关键信息检测结果,根据所述关键信息检测结果确定目标关键信息。
244.此外,需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个
……”
限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
245.上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
246.通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如只读存储器(read only memory,rom)/ram、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
247.以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1