基于增强现实技术的点读方法及系统的制作方法
【专利摘要】本发明公开了一种基于增强现实技术的点读方法及系统，其涉及的主要技术方案包括：以图像采集单元摄入图像，并至少选定被摄入图像中的一帧以上图像，以及，在被选定的图像上加载一个以上可视化标记，使用户能够通过选定和点触其中的一个以上可视化标记，从而输出至少用以获取与被选定可视化标记相应的资源的服务请求和/或至少用以使选定功能单元执行选定动作的控制指令。本发明通过采用基于图像识别的增强现实技术，能够将任意书本、物体或场景结合多种形式的多媒体信息而展示，从而给予用户更为良好且互动的体验。
【专利说明】基于增强现实技术的点读方法及系统
【技术领域】
[0001]本发明涉及一种点读方法及系统，特别涉及一种基于图像识别增强现实技术(AR)的智能点读系统及方法，属于增强现实技术及图像识别【技术领域】。
【背景技术】
[0002]点读系统(例如，点读机和点读笔等)是现代数码信息技术与最新教学需求完美结合的一种有声互动学习产品，它能够将文字化的书本教材变成能按学习需要任意发声的有声教材。
[0003]其中，点读笔是利用在书本上加印二维码的技术，将声音文件植入书本中，使用者在使用过程中选择要点读的某一页，随便点击该页上的图案、文字、数字等内容，点读笔都能通过笔头上装配的高速摄像头识别书本上的二维码而读出对应内容的声音文件。
[0004]而点读机使用的原理是在制作发音文件过程中，给发音文件预先设置好对应书本内容的“经纬位置”。使用者将课本置于机器平板上，用专用的笔点书本上的文字、图画、数字等内容，机器就会发出相对应的声音。
[0005]但是，现有点读系统的内容和形式均非常单调，且用户只能被动的接受信息，因此无法给予用户(特别是幼儿或某些特殊人群)良好体验。
【发明内容】
[0006]有鉴于此，本发明的一个目的在于提供一种基于增强现实技术的点读方法，其操作简便，能给予用户更具真实感，且互动式的良好体验。
[0007]为了实现上述目的，本发明提供的技术方案如下:
一种基于增强现实技术的点读方法，包括:
以图像采集单元摄入图像，并至少选定被摄入图像中的一帧以上图像，
以及，在被选定的图像上加载一个以上可视化标记，使用户能够通过选定和点触其中的一个以上可视化标记，从而输出至少用以获取与被选定可视化标记相应的资源的服务请求和/或至少用以使选定功能单元执行选定动作的控制指令。
[0008]进一步的，该方法还可包括:通过选定和点触其中的一个以上可视化标记，从而获取和/或播放与被选定的可视化标记相应的多媒体资源。
[0009]进一步的，该方法还可包括:通过选定和点触其中的一个以上可视化标记，从而输出与被选定可视化标记相应的控制指令，使选定设备执行选定动作，和/或，接受选定设备输出的、与被选定可视化标记相应的反馈信号。
[0010]进一步的，该方法还可包括:
甄别被摄入图像，且选定其中包含特定标识信息的图像，并在被选定的图像上加载一个以上可视化标记。
[0011]作为其中可选的实施方案之一，该方法还可包括:
依据所述特定标识信息，获取与被选定图像相应的多媒体资源，且所述多媒体资源与加载在被选定图像上的可视化标记之间还存在对应关系。
[0012]进一步的，该方法可包括:
以图像采集单元拍摄和/或扫描真实或虚拟物体，从而摄入图像；
或者，以图像采集单元接收计算机可读形式的图像数据，从而摄入图像。
[0013]作为较为优选的实施方案之一，该方法还包括:在被选定的图像上加载相应的增强现实图景。
[0014]进一步的，该方法还可包括:至少将被选定的图像和/或与被选定图像相应的多媒体资源存储于本地和/或云端存储单元中。
[0015]作为其中一种典型的实施方案案，该基于增强现实技术的点读方法可包括如下步骤:
51.提供一种以上印刷物及一种以上多媒体资源，并在选定印刷物与选定多媒体资源之间建立对应关系；
52.选择一印刷物，并获取与该印刷物对应的多媒体资源；
53.以图像采集单元摄入该印刷物中选定页面的图像，并在该页面的图像上加载一个以上可视化标记；
54.选定和点触其中的一个以上可视化标记，从而播放与被选定可视化标记相应的多媒体资源。
[0016]本发明的另一目的在于提供一种基于增强现实技术的点读系统，其包括:
图像采集单元，至少用以摄入图像；
点读单元，至少用以甄别和选定被摄入图像中的一帧以上图像，并在被选定图像上加载一个以上可视化标记，使用户能够通过选定和点触其中的一个以上可视化标记，从而输出至少用以获取与被选定可视化标记相应的资源的服务请求和/或至少用以使选定功能单元执行选定动作的控制指令。
[0017]此处所述的功能单元，可以选自某些由电力驱动、液压驱动或气流驱动的实体机械等，亦可为某些虚拟设备，且不限于此。
[0018]进一步的,所述图像采集单元包括:
能够实时拍摄和/或扫描真实和/或虚拟物体，并获得图像的元件，
或者，能够接受计算可读形式的图像数据，从而获得图像的元件。
[0019]进一步的，所述图像采集单元和点读单元集成设置于一终端内，
或者，所述图像采集单元和点读单元分立设置，并经通讯模块连接。
[0020]作为可选的实施方案之一，所述点读系统还可包括:
存储单元，至少用以存储被摄入的图像和/或与被选定图像相应的多媒体资源存储于本地和/或云端。
[0021]进一步的,所述点读单元包括:
显示单元，至少用以显示被摄入的图像，
数据处理单元，至少用以从被摄入的图像中甄别和选定被摄入图像中的一帧以上图像，并在被选定图像上加载一个以上可视化标记，以及接收和处理用户的点触操作指令，从而实现多媒体的获取和/或播放，
以及，触控操作单元，至少用以使用户能够通过选定和点触一个以上可视化标记而发出点触操作指令。
[0022]作为较为优选的实施方案之一，所述显示单元和触控操作单元集成设置于一触控显示单元内。
[0023]进一步的，该方法中的点触方式包括手指触碰操作，手势识别操作，鼠标触碰操作，可触碰笔操作或类笔物体触碰操作，但不限于此。
[0024]进一步的，所述多媒体资源至少选自字符、文档、图形、音频、视频、虚拟模型或超级链接，但不限于此。
[0025]进一步的，所述多媒体资源还可包括增强现实图景。
[0026]进一步的，所述图像采集单元包括影像摄录设备(如摄像头、摄像机、照相机等)或扫描仪。
[0027]与现有技术相比，本发明至少具有以下有益效果:通过采用基于图像识别的增强现实技术，能够将任意书本、物体或场景结合多种形式的多媒体信息而展示，从而给予用户更为良好且互动的体验。
【专利附图】
【附图说明】
[0028]为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0029]图1为本发明一典型实施例中一种基于增强现实技术的点读方法的示意图；
图2为本发明一实施方案中一种基于增强现实技术的点读系统的结构框图；
图3为本发明一实施方案中一种基于增强现实技术的点读方法的流程图；
图4为本发明一具体实施方案中执行触碰事件的具体流程图。
【具体实施方式】
[0030]为了使本【技术领域】的人员更好地理解本发明中的技术方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
[0031]本发明的一个方面提供了一种基于增强现实技术的点读方法，包括:
以图像采集单元摄入图像，并至少选定被摄入图像中的一帧以上图像，
以及，在被选定的图像上加载一个以上可视化标记，使用户能够通过选定和点触其中的一个以上可视化标记，从而输出至少用以获取与被选定可视化标记相应的资源的服务请求和/或至少用以使选定功能单元执行选定动作的控制指令。
[0032]本发明的另一方面提供了一种基于增强现实技术的点读系统，其包括:
图像采集单元，至少用以摄入图像；
点读单元，至少用以甄别和选定被摄入图像中的一帧以上图像，并在被选定图像上加载一个以上可视化标记，使用户能够通过选定和点触其中的一个以上可视化标记，从而输出至少用以获取与被选定可视化标记相应的资源的服务请求和/或至少用以使选定功能单元执行选定动作的控制指令。
[0033]其中，作为一种可行的实施方式，本发明可以通过以图像采集单元拍摄和/或扫描真实或虚拟物体，从而摄入图像。
[0034]更为具体的讲，其过程可以包括:以具有实体的影像摄录设备或扫描设备拍摄或扫描真实或虚拟物体，例如，图片、书本、模型或某些场景，从而摄入图像；
或者，以虚拟的影像摄录设备或扫描设备拍摄或扫描虚拟物体，从而摄入图像，这种方式可以应用于诸如网络游戏等虚拟环境中。
[0035]其中，典型的所述图像采集单元可以包括影像摄录设备(如摄像头、摄像机、照相机等)、扫描仪等，但不限于此。
[0036]而作为另一种可行的实施方式，本发明亦可通过以图像采集单元接收计算机可读形式的图像数据，从而摄入图像。
[0037]换言之，本发明也可以属于或非属于本发明点读系统的真实或虚拟影像摄入设备或扫描设备获取图像后，再传输给本发明的图像采集单元，从而完成图像的摄入。
[0038]这种实施方式尤为适于需要从远端获取图像，而需要在本地完成点读操作的点读系统，例如，在矿井、建筑工地、海上或太空等特殊场合作业时，需要对特定设备、地点进行远程安全监控或操作的情形。
[0039]显然的，为达成这样的目的，通常需要在图像采集单元和点读单元之间设置通讯模块，使该两者能够实现数据的交互等。
[0040]进一步的，在本发明中可以预先建立特定图片的甄选标准，例如，可以预先规定所要选取的图片中应包含的特定标识信息，例如，特定的文字或代码(如条形码、二维码)、特定的图形结构等，继而，在图像采集单元摄入图像后，可以通过鉴别图像中是否包含前述的特定标识信息，从中选定所需的图像。
[0041]进一步的，在甄选出所需的图像后，可以直接在该图像上加载可视化标记，其中，依据图像的不同，可视化标记的数量、形式和在图像上的分布位置可相应变化。
[0042]而作为较为优选的实施方案之一，也可以在在甄选出所需的图像后，依据该图像所包含的特定标识信息，首先在图像上加载相应的增强现实图景，例如，三维模型、视频、动画等，而后再加载可视化标记，当然，也可以同时加载所述增强现实途径及可视化标记。
[0043]其中，可视化标记可以为文字、图形(如，圆形、矩形、多边形或其它任意不规则形态的图形)、立体模型或者动态标识，且不限于此。
[0044]作为其中较为优选的实施方案之一，前述可视化标记亦可以为与选定图像上所载有的图形、标记等相同或相近的图形、标记等。例如，当以摄像头等实时摄入某一真实物品(例如，某一书本)的特定图像(例如，某一页的图像或某一视角的图像，并且在图像中存在一个或多个标记，例如，小喇机等音频标记、摄像机等视频标记)时，则可在该特定图像上加载与该特定图像上的标记位置相同、形态相同的可视化标记(例如，小喇叭状、摄像机状可视化标记)，如此，用户可极为方便的判别、选取和播放可视化标记所对应的多媒体资源等。
[0045]进一步的，本发明的方法还可包括:通过选定和点触其中的一个以上可视化标记，从而获取和/或播放与被选定的可视化标记相应的多媒体资源。
[0046]进一步的，在本发明中可以依据前述的特定标识信息，预先获取与特定图像相应的多媒体资源，且使所述多媒体资源与加载在被选定图像上的可视化标记之间还存在对应关系。
[0047]或者，也可以在可视化标记中加载藉以获取相应多媒体资源的链接信息或请求，并在点触可视化标记时，激活所述链接信息或请求，从而从本地和/或云端存储单元获取与播放多媒体资源。
[0048]因此，作为一较为优选的实施方案，本发明的点读系统中还可包括本地和/或云端存储单元，或者亦可为本地服务器和/或云端服务器。
[0049]并且，进一步的，在本发明中，还可以至少将被选定的图像和/或与被选定图像相应的多媒体资源存储于本地和/或云端存储单元中。
[0050]藉由前述设计，使得本发明的点读系统至少具有两种工作模式，包括:
1、在线工作模式:通过图像采集单元实时摄入图像，并在其中选定的图像上加载可视标记，用户通过点触可视标记，实时获取、播放多媒体资源；
2、离线工作模式:调阅存储于本地的被选定图像，并在选定图像上加载可视标记，用户通过点触可视标记，实时播放存储于本地的多媒体资源。
[0051]进一步的，在前述离线工作模式的基础上，还可衍生出睡眠工作模式等，S卩，使用户在调阅存储于本地的特定图像，且点触加载于该特定图像上的可视标记，即可使点触系统自行播放存储于本地的某一类型或某几种类型的多媒体资源。
[0052]作为较为优选的实施方案之一，所述图像采集单元和点读单元可集成设置于一终端内。
[0053]作为可选的实施方案之一，所述点读单元可以包括:
显示单元，至少用以显示被摄入的图像，
数据处理单元，至少用以从被摄入的图像中甄别和选定被摄入图像中的一帧以上图像，并在被选定图像上加载一个以上可视化标记，以及接收和处理用户的点触操作指令，从而实现多媒体的获取和/或播放，
以及，触控操作单元，至少用以使用户能够通过选定和点触一个以上可视化标记而发出点触操作指令。
[0054]作为较为优选的实施方案之一，所述显示单元和触控操作单元集成设置于一触控显示单元内。
[0055]进一步的，在本发明的一个实施方案中，该点读方法还可包括:通过选定和点触其中的一个以上可视化标记，从而输出与被选定可视化标记相应的控制指令，使选定设备执行选定动作，和/或，接受选定设备输出的、与被选定可视化标记相应的反馈信号。
[0056]例如，对于某些需要远程控制的机械设备，藉由前述实施方案涉及的设计，则，也可在本地通过某些影像摄录设备实时摄入相应机械设备的影像，而控制人员通过远程控制设备(如，计算机系统)获取相应影像后，由远程控制设备在影像上的特定位置，特别是对应于相应机械设备的操控面板上的特定位置或一个或多个按键的位置加载可视标记，控制人员依据影像中所显示的机械设备的工作状态，可相应选定和点触其中某一个或几个可视标记，从而发出控制指令，并在远端调整机械设备的工作状态。
[0057]本发明的点读系统可以在本领域人员悉知的各类终端上实现，例如，可以为通常使用的智能手机、平板电脑，PC，智能电视、Google眼镜等具有多媒体功能的设备，但不限于此。
[0058]进一步的，该方法中的点触方式包括手指触碰操作，手势识别操作，鼠标触碰操作，可触碰笔操作或类笔物体触碰操作，但不限于此。
[0059]进一步的，所述多媒体资源至少选自字符、文档、图形、音频、视频、虚拟模型或超级链接，但不限于此。
[0060]进一步的，所述多媒体资源还可包括增强现实图景。
[0061]以下结合附图及典型实施例对本发明的技术方案作更为具体的解释说明。
[0062]参阅图1，在本发明的一典型实施例中，其涉及的点读方法可以包括如下步骤:
(1)用户选取书本，并以影像摄录设备实时摄录书本中的选定页面，使选定页面的影像(可以是单帧图像，也可以是连续显示的多帧图像形成动态图像或视频)实时显示于一显示屏上；
(2)在选定页面的影像上自动浮现一个以上可视化标记(即，触控点)；
(3)用户通过依次点触其中的一个以上可视化标记，实现与各可视化标记相应多媒体信息，包括文字、图形、立体模型、视频、音频等的播放。
[0063]进一步的，在本发明的另一实施例中，参阅图2所示，其涉及的一种点读系统可以包括:
摄像头10，用于获取图像信息，通过所述智能点读系统摄像头摄入所述教材中任意一处或多处来获取图像信息，该图像信息包括任意一页和/或字符和/或任意一张插图和/或多张插图和/或一维码和/或二维码和/或一个或多个实物；
点读单元,包括:
图像处理单元20，用于处理图像信息，并传输给本地存储单元进行存储，
图像处理单元20具体用于:摄取和分析所述图像信息并进行矩阵化处理，所述矩阵化处理具体为将扭曲或变形的图像信息矫正成标准的图像信息；
多媒体处理单元30，用于处理多媒体资源，处理各种用于学习和/或展览展示和/或互动和/或娱乐的多媒体资源，多媒体资源包括3D模型及资源和/或2D模型及资源和/或图片和/或按钮和/或视频和/或音频和/或字符；
触控处理单元40，用于接受和处理外界对多媒体资源的各项互动操作，互动操作包括手指触碰操作，手势识别操作，鼠标触碰操作，可触碰笔操作，类笔类物体触碰操作等其他外界操作；
本地存储单元50，用于对图像信息、多媒体资源、互动操作进行本地存储；
本地处理单元60，用于对本地存储单元的信息进行逻辑操作，逻辑操作包括本地化逻辑操作和在线逻辑操作，具体为:
本地化逻辑操作，本地处理单元根据图像处理单元处理后的图像信息结合本地处理单元搜索到对应的多媒体资源，并对多媒体资源进行点读逻辑解析，再根据点读逻辑将触控处理单元所对应的互动操作与对应的多媒体资源关联，最终完成点读操作；
在线逻辑操作，本地处理单元根据图像处理单元处理后的图像信息请求服务器处理单元进行对应的多媒体资源的下载操作，并通过本地存储单元进行存储操作，经过本地处理单元对已下载的多媒体资源进行点读逻辑解析，再根据点读逻辑将触控处理单元所对应的互动操作与对应的多媒体资源关联，最终完成点读操作。
[0064]本地处理单元60还可用于:
通过图像处理单元对多媒体资源进行增强现实实时追踪叠加操作，并结合触控处理单元对增强现实实时追踪叠加的多媒体资源进行360度触控操作。
[0065]服务器处理单元70，用于响应本地处理单元发送的各项服务请求。
[0066]服务器存储单元80，用于存储图像信息和多媒体资源。
[0067]进一步地，本实施方式中本地处理单元60采样和处理本地存储单元50所存储的数据，并上传所述服务器处理单元70和服务器存储单元80，用于智能点读系统对热门和/或经典和/或有趣和/或有益的等其他有针对性的教材和多媒体资源的推送。
[0068]相应地，本实施例提供的一种基于图像识别增强现实技术实现的点读方法可以包括以下步骤:
51、摄像头获取图像信息，图像处理单元和多媒体处理单元对图像信息进行处理，得到多媒体资源并存储在服务器存储单元中，用户根据需要下载所需点读的多媒体资源至本地存储单兀；
52、本地处理单元扫描多媒体资源中存在智能点读资源的页面，该页面上包括若干用于互动操作的触碰点；
53、触碰页面上的触碰点位置，本地处理单元进行逻辑解析，在触控处理单元中触发触碰事件,显示对应的多媒体信息。
[0069]进一步地,步骤SI包括:
自动刷新请求已有的多媒体资源列表，在系统中全部列出；
用户选择指定的多媒体资源，获取该多媒体资源对应的智能点读资源的下载地址，并自动下载资源；
智能点读资源下载完毕，自动采用内置的基于图像识别增强现实技术的摄像头进行实景扫描。
[0070]进一步地，步骤S2包括:
用户将该多媒体资源翻至拥有智能点读功能的页面，将该页面放置于摄像头下；
加载该多媒体资源的制作智能点读资源的页面，实时解析当前实景，判断当前实景是否为制作智能点读资源的页面；
当追踪到该多媒体资源的制作智能点读资源的页面，在摄像头实景中提示该页面已制作的触碰点的位置。
[0071]进一步地,步骤S3包括:
检测触碰到触碰点，获取触碰点的识别标识信息；
根据触碰点的识别标识信息检索解析获取到触碰点对应的触碰事件；
根据触碰事件,读取对应的多媒体资源,执行触碰事件。
[0072]参阅图3所示为本发明一实施例中点读方法的流程图，包括:
智能点读系统启动完毕，自动刷新向服务器请求已有的书本资源列表，在系统中全部列出；
用户选择指定的书本，系统向服务器请求该书本对应的智能点读资源的下载地址，并自动下载资源；
该书本的智能点读资源下载完毕，自动启动系统内置的基于图像识别增强现实技术的摄像头实景扫描功能；
用户将该书本翻至拥有智能点读功能的页面，将该页面放置于智能点读系统摄像头下；
智能点读系统加载该书本的制作智能点读资源的页面，实时解析当前实景，判断当前实景是否为制作智能点读资源的页面；
当追踪到该书本的制作智能点读资源的页面，软件在摄像头实景中提示该页面已制作的触碰点的位置；
用户根据点读系统关于触碰点的位置的提示，利用手指或者笔等工具触碰书本上的触碰点，触发触碰事件，显示多媒体信息。
[0073]参阅图4所示，本实施方式中智能点读系统触碰事件执行流程具体包括:
智能点读系统检测触碰到触碰点，获取触碰点的识别标识信息；
根据触碰点的识别标识信息检索解析获取到触碰点对应的触碰事件；
根据触碰事件,读取对应的多媒体资源,执行触碰事件。
[0074]本实施方式中触碰事件包括:播放音频、显示图片、显示文字、播放视频、播放模型动画等。不同的事件，有不同的事件操作，如播放音频，可以设置音频音量、是否循环等，智能点读系统解析触碰事件，根据触碰事件的执行逻辑，在书本页面的指定区域显示指定的多媒体信息，以达到将文字化的书本教材变成按学习需要任意展示多媒体信息的多媒体互动教程的目的。
[0075]由以上技术方案可以看出，本发明基于图像识别增强现实技术实现的智能点读系统及方法通过采用基于图像识别的增强现实技术，能实现将任意文字、图形化的书本教材变成按学习需要任意展示多媒体信息的多媒体互动教程。
[0076]与现有技术相比，本发明利用增强现实技术可以立刻把任何现有的书籍变成可点读的书籍，不需要特制的书本和点读设备(比如点读书和点读笔)，一般通常使用的智能手机、平板电脑、PC、智能电视等即可充当点读设备，使用方便，应用广泛。
[0077]对于本领域技术人员而言，显然本发明不限于上述示范性实施例的细节，而且在不背离本发明的精神或基本特征的情况下，能够以其他的具体形式实现本发明。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本发明的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化囊括在本发明内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。
[0078]此外，应当理解，虽然本说明书按照实施方式加以描述，但并非每个实施方式仅包含一个独立的技术方案，说明书的这种叙述方式仅仅是为清楚起见，本领域技术人员应当将说明书作为一个整体，各实施例中的技术方案也可以经适当组合，形成本领域技术人员可以理解的其他实施方式。
【权利要求】
1.一种基于增强现实技术的点读方法，其特征在于，包括: 以图像采集单元摄入图像，并至少选定被摄入图像中的一帧以上图像， 以及，在被选定的图像上加载一个以上可视化标记，使用户能够通过选定和点触其中的一个以上可视化标记，从而输出至少用以获取与被选定可视化标记相应的资源的服务请求和/或至少用以使选定功能单元执行选定动作的控制指令。
2.根据权利要求1所述的基于增强现实技术的点读方法，其特征在于，该方法还包括:通过选定和点触其中的一个以上可视化标记，从而获取和/或播放与被选定的可视化标记相应的多媒体资源。
3.根据权利要求1所述的基于增强现实技术的点读方法，其特征在于，该方法还包括:通过选定和点触其中的一个以上可视化标记，从而输出与被选定可视化标记相应的控制指令，使选定设备执行选定动作，和/或，接受选定设备输出的、与被选定可视化标记相应的反馈信号。
4.根据权利要求1所述的基于增强现实技术的点读方法，其特征在于，该方法还包括:甄别被摄入图像，且选定其中包含特定标识信息的图像，并在被选定的图像上加载一个以上可视化标记。
5.根据权利要求4所述的基于增强现实技术的点读方法，其特征在于，该方法还包括:依据所述特定标识信息，获取与被选定图像相应的多媒体资源，且所述多媒体资源与加载在被选定图像上的可视化标记之间还存在对应关系。
6.根据权利要求1所述的基于增强现实技术的点读方法，其特征在于，该方法包括:以图像采集单元拍摄和/或扫描真实或虚拟物体，从而摄入图像；或者，以图像采集单元接收计算机可读形式的图像数据，从而摄入图像。
7.根据权利要求1所述的基于增强现实技术的点读方法，其特征在于，该方法还包括:在被选定的图像上加载相应的增强现实图景。
8.根据权利要求1所述的基于增强现实技术的点读方法，其特征在于，该方法还包括:至少将被选定的图像和/或与被选定图像相应的多媒体资源存储于本地和/或云端存储单元中。
9.根据权利要求1-8中任一项所述的基于增强现实技术的点读方法，其特征在于，该方法中的点触方式包括手指触碰操作，手势识别操作，鼠标触碰操作，可触碰笔操作或类笔物体触碰操作。
10.根据权利要求1-8中任一项所述的基于增强现实技术的点读方法，其特征在于，所述多媒体资源至少选自字符、文档、图形、音频、视频、虚拟模型或超级链接。
11.根据权利要求10所述的基于增强现实技术的点读方法，其特征在于，所述多媒体资源还包括增强现实图景。
12.一种基于增强现实技术的点读方法，其特征在于，包括如下步骤: 51.提供一种以上印刷物及一种以上多媒体资源，并在选定印刷物与选定多媒体资源之间建立对应关系； 52.选择一印刷物，并获取与该印刷物对应的多媒体资源； 53.以图像采集单元摄入该印刷物中选定页面的图像，并在该页面的图像上加载一个以上可视化标记； S4.选定和点触其中的一个以上可视化标记，从而播放与被选定可视化标记相应的多媒体资源。
13.一种基于增强现实技术的点读系统，其特征在于，包括: 图像采集单元，至少用以摄入图像； 点读单元，至少用以甄别和选定被摄入图像中的一帧以上图像，并在被选定图像上加载一个以上可视化标记，使用户能够通过选定和点触其中的一个以上可视化标记，从而输出至少用以获取与被选定可视化标记相应的资源的服务请求和/或至少用以使选定功能单元执行选定动作的控制指令。
14.根据权利要求13所述的基于增强现实技术的点读系统，其特征在于，所述图像采集单元包括: 能够实时拍摄和/或扫描真实和/或虚拟物体，并获得图像的元件， 或者，能够接受计算可读形式的图像数据，从而获得图像的元件。
15.根据权利要求13所述的基于增强现实技术的点读系统，其特征在于， 所述图像采集单元和点读单元集成设置于一终端内， 或者，所述图像采集单元和点读单元分立设置，并经通讯模块连接。
16.根据权利要求13-15中任一项所述的基于增强现实技术的点读系统，其特征在于，它还包括: 存储单元，至少用以存储被摄入的图像和/或与被选定图像相应的多媒体资源存储于本地和/或云端。
17.根据权利要求13所述的基于增强现实技术的点读系统，其特征在于，所述点读单元包括: 显示单元，至少用以显示被摄入的图像； 数据处理单元，至少用以从被摄入的图像中甄别和选定被摄入图像中的一帧以上图像，并在被选定图像上加载一个以上可视化标记，以及接收和处理用户的点触操作指令，从而实现多媒体的获取和/或播放， 以及，触控操作单元，至少用以使用户能够通过选定和点触一个以上可视化标记而发出点触操作指令。
18.根据权利要求17所述的基于增强现实技术的点读系统，其特征在于，所述显示单元和触控操作单元集成设置于一触控显示单元内。
19.根据权利要求13-15、17-18中任一项所述的基于增强现实技术的点读系统，其特征在于，所述多媒体资源至少选自字符、文档、图形、音频、视频、虚拟模型或超级链接。
20.根据权利要求13-15、17-18中任一项所述的基于增强现实技术的点读系统，其特征在于，所述图像采集单元包括影像摄录设备或扫描仪。
【文档编号】G06K9/20GK104461318SQ201310669737
【公开日】2015年3月25日 申请日期:2013年12月10日 优先权日:2013年12月10日
【发明者】周志颖, 梁建强, 古鉴 申请人:苏州梦想人软件科技有限公司