专利名称：视觉信息搜索方法
技术领域：
本发明涉及到搜索技术领域，特别涉及到一种实现视觉信息准确搜索的方法。
背景技术：
随着社会和技术的进步，通讯技术和应用方式也越来越适应用户的需求，网络和手机已经进入到了生活的方方面面，特别是随着宽带网络推进和应用，所提供的服务和应用越来越多，其中搜索服务是最重要的服务之一，搜索也有很多种类型和应用，例如除了常用的关键字搜索以外，还有图片搜索、音乐搜索等，图片搜索可以通过搜索程序，向用户提供在网络或数据库、特别是互联网上相关的图片资料，而现有技术中的图片搜索，是由先为图片、图像关联文字说明，并与图片图像结合，而由用户在终端页面搜索框内输入相关搜索文字并提交到网站搜索引擎后，搜索引擎在网络机器人抓取到的海量配有文字的图片中， 以用户所提交的搜索文字作为关键字，来搜索附加在这些图片中匹配的文字的方式，常用的是搜索图片所附加的文字，并将此图片返回用户，也就是说，这实质上还是一种基于文字的图片搜索，而不是准确针对图片的具体内容的搜索，这样，这种方式搜索出来的图片，往往是与所用的关键字的内容相附，而与用户真正想搜索的图片的具体内容不符，用户所得到的返回的结果不少，却不是自己最想要找的内容，因此，目前的图片搜索方式还存在不足和需要完善的地方。同样的现象存在于图像与视频搜索当中，也就是说，在目前的视觉信息搜索当中还存在不足，特别是是其于宽带网络的服务和应用。
发明内容
本发明的目的就是为了解决以上问题，提供一种不借助文字就可以准确快速进行视觉信息搜索的方法。本发明是通过这样的方法来实现的这种方法是在用户终端或网络上存在样本视觉信息；对样本视觉信息进行全局信息提取与/或局部信息提取；对所提取的全局信息与/或局部信息进行再处理，并提取共性特征；藉于上述未处理与/或处理后的全局信息与/或局部信息的再处理特征建立特征模型与/或索引；该特征模型与/或索引可以传输于网络与/或网络数据库；使该样本视觉信息的特征模型与/或索引在网络与/或网络数据库中进行搜索；搜索到与该样本视觉信息的特征模型与索引相关度最高的视觉信息结果，这个视觉信息结果为目标视觉信息；将所述搜索到的目标视觉信息返回给用户端。进一步的，利用全局与/或局部特征各自的优势，在进行特征模型与索引的提取和建立以及搜索时，采用多模块并行计算，并将结果进行有效融合。进一步的，从样本视觉信息中获得能够描述该视觉信息的信息，是从该样本视觉信息可视界面中获取其中一部分，作为样本视觉信息。进一步的，从样本视觉信息中获得能够描述该视觉信息的信息，是从样本视觉信息中以图片、图像特征作为依据选择其中一部分，作为样本视觉信息。
进一步的，所述的从样本视觉信息中选择其中一部分作为样本视觉信息，是采用的剪切方式、点选方式或圈选方式。进一步的，所述的目标视觉信息至少为一个。进一步的，所述样本视觉信息生成样本视觉信息是从互联网上获取已经存在的样本视觉信息；获取到的样本视觉信息的颜色特征、纹理特征、形状特征，以便从所述视觉信息上获取到能够描述该视觉信息的样本视觉信息；所述的再处理至少包括加噪、变形、剪切、插入内容、旋转、缩放以及亮度增减、模糊化等处理内容。进一步的，将所获得的目标视觉信息中再提取目标样本视觉信息，作为再次搜索的参考视觉信息，进行再次搜索。进一步的，样本视觉信息生成全部与/或局部信息，是所述样本视觉信息的全部或一部分，并提取共性特征；所述共性特征能够描述该视觉信息的颜色特征、纹理特征、形状特征信息；根据所述共性特征生成所述视觉信息的信息，以便根据所述样本视觉信息搜索到对应的目标视觉信息。进一步的，从样本视觉信息获取到的样本视觉信息中获得能够描述该视觉信息的颜色特征，具体过程包括选择在样本视觉信息局域内的有效指定局域作为样本视觉信息的选择对象，采用可视界面的视觉信息剪切方式，生成一个样本视觉信息局域；将所述样本视觉信息局域内每个点的实际色彩表示成数值形式的颜色特征；取得所述每个点的颜色特征，生成能够描述所述视觉信息的颜色特征；颜色特征包括色彩与灰度特征；按照所述色彩及灰度信息中包含的实际色彩种类、特性、比例等特征分别建立与所述样本视觉信息。本发明具有以下的优点和效果这种视觉信息搜索方法，可以准确针对图片、图像及视频的具体内容进行搜索，基于这种方式搜索出来的视觉信息内容，无需与图片、视频的关键字的内容相关联，而与用户真正想搜索的图片视频内容相符合，同时可以返回多个用户想要的结果，容易实现及操作。
图1是本发明所提出的视觉信息搜索方法的原理框图；图2是本发明所提出的视觉信息搜索方法之搜索方法获取样本视觉信息示意图；图3是本发明所提出的视觉信息搜索方法的搜索方法所述的目标视觉信息示意图；图中说明1-用户终端显示屏，简称显示屏2-样本视觉信息3-局部样本信息4-目标视觉信息(由样本视觉信息获取)
具体实施例方式下面结合附图对本发明的系统和方法进行进一步的说明。为实现本发明的目的，本发明采用是这样的方法来实现的首先需要有一个用户终端，这个终端可以是电脑、电脑、手机等具有显示屏1以及操作系统软件的信息设备，并且具有可以获取信息的样本视觉信息2，样本视觉信息2可以为图片、图像或是视频片段，以及由字符构成的平面信息，在实施例中为图片，样本视觉信息2可以直接显示在用户终端的显示屏1上，而不仅仅只是一个或一段文字标识，这个图片可以是一个模型，如一个模型图片或与用户所要检索的目标图片最为接近的图片，并且从这个样本视觉信息2中获得能够描述该图片的信息，就是指这个图片是可以复制、剪切或是通过其它方式可获得其它像素或图像信息的，是可以通过计算机的系统或应用程序获得该图片的像素的信息，而不是不可复制或不可裁剪类的文件。样本视觉信息2来自于局域网络、互联网络或用户本身或自存文档。所获取到的样本视觉信息2包括颜色特征、纹理特征、形状特征等因素。上述的过程和方法实质是在样本视觉信息2全局的基础上提取了局部信息，也就是对样本视觉信息2进行全局信息提取与/或局部信息提取；完成这一步骤以后，对所提取的全局信息与/或局部信息进行再处理，这个处理是指进行一些模拟外部干扰、破坏，以及影响质量和数量的因素，如对全局信息与/或局部信息进行至少包括加噪、变形、剪切、插入内容、旋转、缩放以及亮度增减、模糊化等处理内容。具体的说，就要根据所述样本视觉信息2信息生成局部样本信息3，如附图2， 所述的样本视觉信息2可视界面中具有数字1234567890，也具有三角形图形，还具有字母AB⑶EFGHIJK，用户想找到与字母AB⑶EFGHIJK最为接近的图片，那么就把字母 ABCDEFGHIJK区域的图片作为局部样本信息3，字母ABCDEFGHIJK区域的图片中的字母为宋体字体，也就是说，局部样本信息3信息就是样本视觉信息2可视界面上图片信息的一部分 fn息ο接着要对局部样本信息3进行干扰处理，处理的方式有多种，包括加噪、变形、剪切、插入内容、旋转、缩放以及亮度增减、模糊化等处理内容，其目的也就是模拟各种可能的破坏情况。同理，对于全局信息也可以做同样的处理，本说明书中所述的类似内容相同。经过处理以后，再提取这些视觉信息的共性特征，这样就相当于，无论样本视觉信息的全局与/或局部特征没有发生质的变化，只要有一个共性特征，即实例中的图片的质量和形式发生了什么变化，只要基本的内容没有变化，都应当具备这个共性特征，这样就为后期的搜索打下了良好的基础，并搜索到预期的结果。还有，利用全局与/或局部特征各自的优势，在进行特征模型与索引的提取和建立以及搜索时，采用多模块并行计算，并将结果进行有效融合。这样，在藉于上述未处理与/或处理后的全局信息与/或局部信息的再处理特征所建立起来的特征模型与/或索引，就非常吻合局部样本信息的本质内容，如果以此作为搜索的样本，就可以找到最附合要求的目标。完成上述的步骤以后，将局部样本信息3信息发送到网络或数据库，网络或数据库接受该局部样本信息3信息，并以此为参考图片进行搜索。同样，搜索的范围也可以分别是局域网络、互联网络或用户本身或自存文档。搜索到与该样本视觉信息的特征模型与索引相关度最高的视觉信息结果，这个视觉信息结果为目标视觉信息。即经过上述电脑或服务器、以及网络上的搜索，搜索到对应的其它类似图片，这个或这些类似图片为目标视觉信息4，如附图3所示，可以找到很多类似其它字体及形式的结果，以及具有字母ABCDEFGHIJK中大部分字体的图片，也都可以作为搜索结果返回，实质上，目标视觉信息4就是样本视觉信息2在网络上最接近或最类似的结果。搜索出来以后，网络或数据库将所述搜索到的目标视觉信息4返回给用户端，就如同在在附图3中所看到的结果。在上述的样本视觉信息2中获得能够描述该图片的局部样本信息3的方法，是从样本视觉信息2中剪切其中一部分，作为局部样本信息3，也可以是从样本视觉信息2中选择其中一部分，作为局部样本信息3，是采用的点选方式，或是采用的圈选方式，所述的点选或圈选的方式可以以所选择的区域或点选的范围来确定。另外，所述的目标视觉信息4至少为一个搜索结果，一般为多个。同时，也可从互联网上获取已经存在的样本视觉信息2，将获取到的所述样本视觉信息2的格式转换为点阵格式，以便从所述图片上获取到能够描述该图片的局部样本信息 3 fn 息。根据所述局部样本信息3信息在互联网内搜索，将与所述局部样本信息3信息搜索请求对应的目标视觉信息4或者与所述局部样本信息3信息搜索请求最接近的目标视觉信息4发送给用户。在上述的基础上，为了获得更准确的搜索结果，还可再次由所获得的目标视觉信息4中再提取局部样本信息3信息，作为再次搜索的参考图片，进行再一次的搜索，得到更附合用户的需要。另外，样本视觉信息生成全部与/或局部信息，是所述样本视觉信息的全部或一部分，并提取共性特征；所述共性特征能够描述该视觉信息的颜色特征、纹理特征、形状特征信息；根据所述共性特征生成所述视觉信息的信息，以便根据所述样本视觉信息搜索到对应的目标视觉信息。还有，从样本视觉信息获取到的样本视觉信息中获得能够描述该视觉信息的颜色特征，具体过程包括选择在样本视觉信息局域内的有效指定局域作为样本视觉信息的选择对象，采用可视界面的视觉信息剪切方式，生成一个样本视觉信息局域；将所述样本视觉信息局域内每个点的实际色彩表示成数值形式的颜色特征；取得所述每个点的颜色特征， 生成能够描述所述视觉信息的颜色特征；颜色特征包括色彩与灰度特征；按照所述色彩及灰度信息中包含的实际色彩种类、特性、比例等特征分别建立与所述样本视觉信息。就是说，在前所述的样本视觉信息2生成局部样本信息3，局部样本信息3信息是所述样本视觉信息的一部分，所述样本视觉信息2信息的指能够描述该图片的颜色特征， 并根据所述颜色特征息生成所述图片的局部样本信息3信息，以便根据所述局部样本信息 3信息搜索到对应的目标视觉信息4。通过上述的方法和步骤，即可以准确针对视觉信息的具体内容，并且基于这种方式搜索出来的视觉信息，无需与视觉信息的关键字的内容相关联，而与用户真正想搜索的视觉信息真实内容相符合，同时可以返回多个用户想要的结果，容易实现及操作。虽然这里只说明了本发明的一个优选实施例，但其意并非限制本发明的范围、适用性和配置。相反，对实施例的详细说明可使本领域技术人员得以实施。应能理解，在不偏离所附权利要求书确定的本发明精神和范围情况下，可对一些细节做适当变更和修改。
权利要求
1.一种视觉信息搜索方法，其特征在于包括 存在样本视觉信息；对样本视觉信息进行全局信息提取与/或局部信息提取； 对所提取的全局信息与/或局部信息进行再处理，并提取共性特征； 藉于上述未处理与/或处理后的全局信息与/或局部信息的再处理特征建立特征模型与/或索引；该特征模型与/或索引可以传输于网络与/或网络数据库； 使该样本视觉信息的特征模型与/或索引在网络与/或网络数据库中进行搜索； 搜索到与该样本视觉信息的特征模型与索引相关度最高的视觉信息结果，这个视觉信息结果为目标视觉信息；将所述搜索到的目标视觉信息返回给用户端。
2.根据权利要求1所述的视觉信息搜索方法，其特征在于利用全局与/或局部特征各自的优势，在进行特征模型与索引的提取和建立以及搜索时，采用多模块并行计算，并将结果进行有效融合。
3.根据权利要求1所述的视觉信息搜索方法，其特征在于从样本视觉信息中获得能够描述该视觉信息的信息，是从该样本视觉信息可视界面中获取其中一部分，作为样本视 JaL f η 息。
4.根据权利要求1所述的视觉信息搜索方法，其特征在于从样本视觉信息中获得能够描述该视觉信息的信息，是从样本视觉信息中以图片、图像特征作为依据选择其中一部分，作为样本视觉信息。
5.根据权利要求4所述的视觉信息搜索方法，其特征在于所述的从样本视觉信息中选择其中一部分作为样本视觉信息，是采用的剪切方式、点选方式或圈选方式。
6.根据权利要求1所述的视觉信息搜索方法，其特征在于所述的目标视觉信息至少为一个。
7.根据权利要求1所述的视觉信息搜索方法，其特征在于所述样本视觉信息生成样本视觉信息是从互联网上获取已经存在的样本视觉信息； 获取到的样本视觉信息的颜色特征、纹理特征、形状特征，以便从所述视觉信息上获取到能够描述该视觉信息的样本视觉信息；所述的再处理至少包括加噪、变形、剪切、插入内容、旋转、缩放以及亮度增减、模糊化等处理内容。
8.根据权利要求1所述的视觉信息搜索方法，其特征在于将所获得的目标视觉信息中再提取目标样本视觉信息，作为再次搜索的参考视觉信息，进行再次搜索。
9.根据权利要求1所述的视觉信息搜索方法，其特征在于样本视觉信息生成全部与/或局部信息，是所述样本视觉信息的全部或一部分，并提取共性特征；所述共性特征能够描述该视觉信息的颜色特征、纹理特征、形状特征信息； 根据所述共性特征生成所述视觉信息的信息，以便根据所述样本视觉信息搜索到对应的目标视觉信息。
10.根据权利要求9所述的视觉信息搜索方法，其特征在于从样本视觉信息获取到的样本视觉信息中获得能够描述该视觉信息的颜色特征，具体过程包括选择在样本视觉信息局域内的有效指定局域作为样本视觉信息的选择对象，采用可视界面的视觉信息剪切方式，生成一个样本视觉信息局域；将所述样本视觉信息局域内每个点的实际色彩表示成数值形式的颜色特征； 取得所述每个点的颜色特征，生成能够描述所述视觉信息的颜色特征； 颜色特征包括色彩与灰度特征；按照所述色彩及灰度信息中包含的实际色彩种类、特性、比例等特征分别建立与所述样本视觉信息。
全文摘要
本发明是一种视觉信息搜索方法，这种方法是对样本视觉信息进行全局信息提取与或局部信息提取，对所提取的全局信息与或局部信息进行再处理，并提取共性特征，并以此建立特征模型与或索引，该特征模型与或索引可以传输于网络与或网络数据库，使该样本视觉信息的特征模型与或索引在网络与或网络数据库中进行搜索，搜索到与该样本视觉信息的特征模型与索引相关度最高的视觉信息结果，这个视觉信息结果为目标视觉信息，再将所述搜索到的目标视觉信息返回给用户端，基于这种方式搜索出来的视觉信息内容，无需与图片、视频的关键字的内容相关联，而与用户真正想搜索的图片视频内容相符合，同时可以返回多个用户想要的结果，容易实现及操作。
文档编号G06F17/30GK102231148SQ20101056232
公开日2011年11月2日 申请日期2010年11月29日 优先权日2010年11月29日
发明者辜进荣 申请人:辜进荣