某类指点信息或图文信息识别设备的制作方法

本发明涉及电子技术领域，尤其涉及图文识别。

背景技术：

目前点读及指点图文识别还没有依靠摄像头实现的实际产品，尤其没有直接用手指在图书上指点即能拍照识别是在哪一页哪个位置指点的实际产品，也没有直接用手指在图文上指点即能进行拍照识别指点的图文的实际产品，

目前的一些方案不能转化为实际可用的产品，这些方案完全依靠连续拍照的图像识别，缺点是，一方面在复杂图书背景下完全靠拍照识别的准确率低，与其它简单背景的手的拍照识别的不同，图书的图案多样，有些图案与手指或棍相似很容易混淆，完全仅靠拍照识别，实际应用中常常在没有指点时却误识别为有指点，或者实际应用中需要较长时间来可靠确认是否有指点，另一方面，大部分时间用户什么操作都没有，既没有翻页也无指点，此时的连续拍照识别是无效的低效率的，还会占用设备的处理器内存等导致其它工作不能很好的完成，若要连续无效的拍照同时又完成其它工作，则对硬件要求过高系统过于复杂导致成本过高，无法形成实际可用的产品，

因此目前并没有拍照识别直接用手指在图书上指点的实际产品。

技术实现要素：

本发明的目的是提供某类指点信息或图文信息识别设备，可以拍照识别手指在图书上指点在哪个位置或指点的图文而不用借助特别的笔等装置，可以拍照识别哪本书哪一页，手或书翻页等反射红外或超声波，只在图书信息或指点信息确实发生变化时才拍照识别，在需要识别的时候才识别，避免了大部分时间用户没有操作时的连续拍照的低效率，而且手对红外的反射，相比仅靠连续拍照识别是相对准确的，不会出现没有指点却误识为有指点，可以直接用手指在图文上指点即能可靠地进行指点位置识别和/或图文识别，指点的文字或图等、哪本书、哪一页等，可以根据识别显示相关信息或发出对应音频，不用借助特别的笔等装置，使用非常方便，

通过设置红外或超声波的高度和探测距离，保证对大多数图书有效触发，还提出了一种通过用短监测距离的红外或超声波来有效区分读者究竟是将手随意放在图书还是有意指点，这种方案，由于采用的短监测距离的红外或超声波，读者将手随意放在图书并不会反射，只有读者有意指点时向前伸出较多才会触发拍照识别，从而有效区分读者究竟是将手随意放在图书还是有意指点。

本发明通过以下技术方案实现：

某类指点信息或图文信息识别设备，

所述指点信息或图文信息识别设备包括拍照模块和监测模块，

所述拍照模块包括一个或多个摄像头，对图书拍照识别时，所述指点信息或图文信息识别设备放置于桌面上在图书前方或图书右侧或图书左侧，所述摄像头位于外壳的识别拍照位置向下拍照，所述摄像头固定在或平时在外壳的所述识别拍照位置和/或所述摄像头旋转和/或推拉到外壳的所述识别拍照位置，

当所述监测模块被触发后，所述指点信息或图文信息识别设备通过所述摄像头向下拍照获得图书图像对图书拍照识别，所述指点信息或图文信息识别设备根据一幅所述图像或者多幅所述图像进行识别，

所述监测模块包括一个或多个红外或超声波监测单元，所述红外或超声波监测单元是红外或超声波发射接收组，所述监测模块的触发包括通过所述红外或超声波监测单元发射并接收到被反射的红外线或超声波而触发，所述指点信息或图文信息识别设备放置于桌面上对图书拍照识别时所述红外或超声波监测单元向图书一方水平发射，

所述红外或超声波监测单元包括第一种红外或超声波监测单元，所述第一种红外或超声波监测单元引起第一种触发，

第一种触发有效后，若所述指点信息或图文信息识别设备被设置为专门或优先进行指点识别则所述指点信息或图文信息识别设备根据包括一幅所述图像或者多幅所述图像的信息识别指点的文字或图形和/或识别指点的是哪个位置，

第一种触发有效后，若所述指点信息或图文信息识别设备被设置为专门或优先识别图书信息则所述指点信息或图文信息识别设备根据包括一幅所述图像或者多幅所述图像的信息识别哪本书和/或哪一页，

第一种触发有效后，若所述指点信息或图文信息识别设备被设置为综合识别指点和图书信息则所述指点信息或图文信息识别设备根据包括一幅所述图像或者多幅所述图像的信息进行指点的文字内容和/或指点的是哪个位置和/或哪本书和/或哪一页的综合识别，

所述指点信息或图文信息识别设备放置于桌面上对图书拍照识别时，所述第一种红外或超声波单元距离桌面高度高于2厘米且最高4厘米或者高于4厘米且最高5厘米或者高于5厘米且最高7厘米或者高于7厘米且最高9厘米，

所述指点信息或图文信息识别设备在图书的前面工作，所述摄像头在图书正上方向下拍照和/或在与所述第一种红外或超声波监测单元同在图书的一方向下拍照，所述第一种红外或超声波监测单元包括从所述的指点信息或图文信息识别设备向图书一方的监测距离水平投影少于18厘米的红外或超声波监测单元，

和/或，

所述指点信息或图文信息识别设备在图书的左侧面向图书工作和/或在图书的右侧面向图书工作，所述摄像头在图书正上方向下拍照和/或在与所述第一种红外或超声波监测单元同在图书的一方向下拍照，所述第一种红外或超声波监测单元包括在图书的左侧和/或右侧面向图书一方监测，所述第一种红外或超声波监测单元监测后边界距离所述指点信息或图文信息识别设备的拍照识别范围前边界少于15厘米和/或所述第一种红外或超声波监测单元监测后边界距离所述指点信息或图文信息识别设备的拍照识别范围后边界大于3厘米和/或至少部分所述第一种红外或超声波监测单元监测距离小于8厘米，

和/或，

所述指点信息或图文信息识别设备置于桌面上在图书的左侧面向图书工作和/或在图书的右侧面向图书工作而且所述摄像头在图书正上方向下拍照和/或在所述第一种红外或超声波监测单元同侧的上方向下拍照而且所述第一种红外或超声波单元包括从所述指点信息或图文信息识别设备向读者方向图书之外区域监测的红外或超声波单元，或或所述指点信息或图文信息识别设备在图书的前面而且所述摄像头在图书正上方向下拍照和/或在所述第一种红外或超声波监测单元同侧的上方向下拍照而且所述的第一种红外或超声波单元包括的从所述指点信息或图文信息识别设备向左和/或向右图书以外区域监测的红外或超声波单元。

某类指点信息或图文信息识别设备，

所述指点信息或图文信息识别设备在图书的前面工作，所述的第一种红外或超声波监测单元包括的从所述的指点信息或图文信息识别设备向图书一方的监测距离水平投影少于18厘米的红外或超声波监测单元向图书一方的监测距离水平投影少于6厘米，

和/或，

所述指点信息或图文信息识别设备在图书的左侧面向图书工作或在图书的右侧面向图书工作而且所述的第一种红外或超声波单元包括的从所述指点信息或图文信息识别设备向读者方向图书以外区域监测的红外或超声波单元向读者方向监测距离水平投影小于6厘米，或者所述指点信息或图文信息识别设备在图书的前面而且所述的第一种红外或超声波单元包括的从所述指点信息或图文信息识别设备向左和/或向右图书以外区域监测的红外或超声波单元向读者方向监测距离水平投影小于6厘米，

和/或，

所述指点信息或图文信息识别设备在图书的左侧面向图书工作或在图书的右侧面向图书工作，所述的第一种红外或超声波监测单元包括的在图书的左侧或右侧面向图书一方监测的红外或超声波监测单元向图书一方的监测距离水平投影小于6厘米。

指点信息或图文信息识别设备，

所述指点信息或图文信息识别设备在图书的前面工作，所述拍照模块在图书正上方和/或前上方向下拍照，包括在图书的前面向图书一方发射的两个或多于两个的互相间距大于5厘米的所述第一种红外或超声波监测单元，所述在图书的前面向图书一方监测的两个或多于两个的所述第一种红外或超声波监测单元向图书一方监测距离水平投影全部小于6厘米，

当所述在图书的前面向图书一方监测的两个或多于两个的互相间距大于5厘米的所述第一种红外或超声波监测单元之中的一个被触发，则拍照识别指点是哪个位置或指点的图文，当所述在图书的前面向图书一方监测的两个或多于两个的互相间距大于5厘米的所述第一种红外或超声波监测单元之中的多个被依次触发或同时触发则拍照识别哪本书或者哪一页。

指点信息或图文信息识别设备，

所述红外或超声波监测单元包括一组或多组第二种红外或超声波监测单元，所述第二种红外或超声波监测单元引起第二种触发，

若所述第一种触发和第二种触发中仅第一种触发发生，则第一种触发后所述指点信息或图文信息识别设备被设置为专门或优先进行指点识别，

若第二种触发发生，则第一种触发无效，

第二种触发后，若所述指点信息或图文信息识别设备被设置为专门或优先识别哪本书则所述指点信息或图文信息识别设备根据包括第二种触发后拍照的图像的信息专门或优先识别哪本书，若所述指点信息或图文信息识别设备被设置为专门或优先识别哪一页则所述指点信息或图文信息识别设备根据包括第二种触发后拍照的图像的信息专门或优先识别哪一页，若所述指点信息或图文信息识别设备被设置为综合识别哪本书和哪一页则根据包括第二种触发后拍照的图像的信息对哪本书和哪一页综合识别，

所述指点信息或图文信息识别设备置于桌面在图书的前面面向图书一方工作或者在图书的右侧或左侧面向图书一方工作，

所述第二种红外或超声波单元在图书前方从所述指点信息或图文信息识别设备面向图书一方的一面向图书一方探测，

所述第二种红外或超声波监测单元包括距桌面高度至少6厘米最多12厘米而且距桌面高度高于所有所述第一种红外或超声波监测单元至少2厘米的a类红外或超声波监测单元，和/或所述第二种红外或超声波监测单元包括距桌面高度至少3厘米最高12厘米而且探测距离短于6厘米而且探测距离短于所有所述第一种红外或超声波监测单元至少2厘米的b类红外或超声波监测单元，和/或所述第二种红外或超声波监测单元包括c类红外或超声波监测单元，所述指点信息或图文信息识别设备置于桌面在图书的前面面向图书一方工作时所述c类红外或超声波监测单元距桌面高度至少3厘米最高12厘米而且探测距离短于6厘米而且与至少一个所述第一种红外或超声波监测单元水平距离大于5厘米，所述指点信息或图文信息识别设备置于桌面在图书的右侧或左侧面向图书一方工作时所述c类红外或超声波监测单元距桌面高度至少3厘米最高12厘米而且探测距离短于6厘米而且比所述第一种红外或超声波监测单元距离大于5厘米而且比所述第一种红外或超声波监测单元远离读者。

指点信息或图文信息识别设备，

所述指点信息或图文信息识别设备还包括显示屏，显示屏显示操作界面和/或显示屏显示指点位置对应信息和/或显示屏显示指点处文字内容和/或显示屏显示指点处文字的解释和/或翻译，所述显示屏与摄像头与监测模块位于同一外壳的同一侧，所述指点信息或图文信息识别设备放置于桌面上在图书前方对图书拍照识别时，所述显示屏是垂直竖立或者正面向上倾斜竖立与垂直夹角小于45度，当显示屏显示指点位置对应信息和/或显示屏显示指点处文字内容和/或显示屏显示指点处文字的解释和/或翻译时所述指点信息或图文信息识别设备放置于桌面上在图书前方进行拍照识别，

和/或，

所述指点信息或图文信息识别设备还包括扬声器，所述指点信息或图文信息识别设备包括根据包括哪本书和/或哪一页和/或指点的是哪个位置和/或指点处文字或图像的信息通过所述扬声器发出对应音频。

所述第一种红外或超声波监测单元数目为1个或2个或3个或4个或5个或6个。

由上述本发明提供的技术方案可以看出，

本发明针对解决了现有方案的一些缺点，

目前的一些方案不能转化为实际可用的产品，这些方案完全依靠连续拍照的图像识别，缺点是，一方面，与其它简单背景的手的拍照识别的不同，图书的图案多样，有些图案与手指或棍相似很容易混淆，完全仅靠图像识别，则有时没有指点却误识别为有指点，另一方面，大部分时间用户什么操作都没有，此时的连续拍照识别是无效的低效率的，还会占用设备的处理器内存等导致其它工作不能很好的完成，若要连续无效的拍照同时又完成其它工作，则对硬件要求过高系统过于复杂导致成本过高，无法形成实际可用的产品，

本发明的某类指点信息或图文信息识别设备，可以拍照识别手指在图书上指点在哪个位置或指点的图文而不用借助特别的笔等装置，可以拍照识别哪本书哪一页，手或书翻页等反射红外或超声波，只在图书信息或指点信息确实发生变化时才拍照识别，在需要识别的时候才识别，避免了大部分时间用户没有操作时的连续拍照的低效率，而且手对红外的反射，相比仅靠连续拍照识别是相对准确的，不会出现没有指点却误识为有指点，可以直接用手指在图文上指点即能可靠地进行指点位置识别和/或图文识别，指点的文字图像、哪本书、哪一页等，可以根据识别显示相关信息或发出对应音频，不用借助特别的笔等装置，使用非常方便，

通过设置红外或超声波的高度和探测距离，保证对大多数图书有效触发，还提出了一种通过用短监测距离的红外或超声波来有效区分读者究竟是将手随意放在图书还是有意指点，这种方案，由于采用的短监测距离的红外或超声波，读者将手随意放在图书并不会反射，只有读者有意指点时向前伸出较多才会触发拍照识别，从而有效区分读者究竟是将手随意放在图书还是有意指点。

具体的，

一、

本发明引入红外或超声波监测单元，图书或手的运动反射红外或超声波然后才触发拍照，比如，当用户指点后才拍照识别，或图书翻页后才进行拍照识别，实现了只有当有效的变化出现时才拍照识别，针对解决了现有方案的连续拍照识别效率低、准确率低的两大问题，一方面实际阅览图书的大部分时间读者并无指点拍照识别是无效的，本发明的拍照识别由红外或超声波监测单元触发因此可保证只拍照确实有变化的，另一方面，以拍照识别指点为例，与其它简单背景的手的拍照识别的不同，图书的图案多样，有些图案与手指或棍相似很容易混淆，完全仅靠图像识别，则有时没有指点却误识别为有指点，引入红外或超声波监测单元后手必须触发红外或超声波监测单元后才进行对指点的拍照识别，可大大减少这种误判以解决上述问题，

提出了第一种红外或超声波监测单元，所述第一种红外或超声波监测单元引起第一种触发，第一种触发可专用于触发指点的拍照识别，也可以触发综合识别即仅第一种触发本身并不能确定是哪种而只是知道有信息变化了需要识别，比如后面可靠图像识别来具体识别是翻到新的页面还是有指点等，

所述第一种红外或超声波单元距离桌面高度高于2厘米且最高4厘米或者高于4厘米且最高5厘米或者高于5厘米且最高7厘米或者高于7厘米且最高9厘米，这个高度范围是研究了指点及翻页操作确定的，图书一般厚度高于2厘米，第一种红外或超声波单元距离桌面高度高于2厘米，而第一种红外或超声波监测单元要考虑手在图书上指点时的高度，也要考虑翻页时翻页的高度，因此最高9厘米，这样可都触发，或者后面安排其它区别方式。

二、

本发明的思路是以红外或超声波监测触发拍照而不是用红外或超声波精确定位，不同于一般红外或超声波定位的尽量高密度覆盖所要监测区域，本发明特别设置监测单元监测距离不必过长，也不必很密，只要红外或超声波监测单元的设置方便用户触发即可，因此最少1个红外或超声波监测单元也可以，或者通过2个或3个或4个就可以较好的使用户在指点图书时能触发红外或超声波。

本发明一种设计，当所述某类指点信息或图文信息识别设备在图书的前面工作，所述第一种红外或超声波监测单元包括在图书的前面向图书与设备相对的另一方向的监测距离小于18厘米的红外或超声波监测单元，这个是考虑了目前儿童图书大部分为16开甚至更大，单页尺寸大概18x26厘米，展开后尺寸往往大于36x26厘米，而读者往往用手按住图书距离读者近的一边以固定图书，本发明特意设置监测距离比16开图书短8厘米，避开读者按住图书的手对指点监测的干扰，而对于小些的书，比如32开图书，尺寸约13x18厘米，不会因探测距离过长而被图书后面的读者身体所误触发，若想进一步避开读者按住图书的手对指点监测的干扰，只要将书略向后移动几厘米即可。

本发明一种设计，当所述图书综合识别设备在图书的左侧面向图书工作和/或在图书的右侧面向图书工作，红外或超声波是从图书旁向图书一方发射进行监测，要保证图书既能触发红外或超声波又在摄像头的拍照范围内以便识别而且红外或超声波不会与按住图书底边的手冲突，因此设计要求所述第一种红外或超声波监测单元监测后边界距离所述指点信息或图文信息识别设备的拍照识别范围前边界少于15厘米和/或所述第一种红外或超声波监测单元监测后边界距离所述指点信息或图文信息识别设备的拍照识别范围后边界大于3厘米和/或至少部分所述第一种红外或超声波监测单元监测距离小于8厘米，

三、

用户往往会在图书上手指点时，只是自己想指点而并非是希望设备进行识别，

但仅从手指在图书上这个图像上来看，并无区别，

本发明特别考虑了上述需求，提出了针对性的方案，

一种方案是，所述指点信息或图文信息识别设备置于桌面上在图书的左侧面向图书工作和/或在图书的右侧面向图书工作，所述摄像头在图书正上方向下拍照和/或在所述第一种红外或超声波监测单元同侧的上方向下拍照，所述第一种红外或超声波单元包括从所述指点信息或图文信息识别设备向读者方向图书之外区域监测的红外或超声波单元，

此方案中，红外或超声波向读者方向图书之外区域发射，因此读者手一般在图书上并不会被拍照识别，只有当读者手在红外或超声波监测单元前经过一下触发，然后手在图书上进行指点才会被拍照识别，从而有效区分究竟是读者的指点还是仅仅将手放在图书上。

一种方案是，监测距离少于6厘米，这是考虑到图书一般有约3厘米的空白边，加上图书距离设备可能有一段距离，监测距离少于6厘米时基本用户在图书上手指点时不会触发红外或超声波，当用户需要设备进行识别时，用户在伸出手指点之前先要将伸出的手在红外或超声波监测单元前晃一下，这样设备才会被触发进行指点的拍照识别。

四、

本发明巧妙地布置了两个或多于两个的互相间距大于5厘米的所述红外或超声波监测单元，红外或超声波监测单元向图书一方的监测距离水平投影少于6厘米以保证用户随意将手放在图书上不会触发红外或超声波监测单元，用户必须将手前伸到红外或超声波监测单元的监测范围内才会触发，此时设备认为用户将进行指点并进行拍照识别，两个或多于两个的互相间距大于5厘米的红外或超声波监测单元，这样所述指点信息或图文信息识别设备放在图书前方拍照识别时，当用户用右手指点则右手向前伸出触发右边的监测单元，当用户用左手指点则左手向前伸出触发左边的监测单元，这样无论左右都很方便，而且红外或超声波监测单元互相间距大于5厘米，手向前伸出以触发监测单元时可以只触发一个监测单元，利用这点可与翻页等区分，

五、

考虑到翻页或指点都会触发红外或超声波监测，为了在图像识别之前就能区分以便进行针对识别，本发明除了第一种红外或超声波监测单元还设置了第二种红外或超声波监测单元，第二种红外或超声波监测单元包括三种，a类距桌面高度至少6厘米最多12厘米而且距桌面高度高于所述第一种红外或超声波监测单元至少2厘米，高度至少6厘米最多12厘米既可以高于手的高度以避开手的指点又能满足大部分图书翻页触发，最多13厘米是根据32开图书尺寸13x18厘米，低于这个高度才能翻页触发，这样a类第二种红外或超声波监测单元在翻页时被触发而在指点时不会被触发，b类距桌面高度至少3厘米最高12厘米探测距离短于6厘米而且探测距离短于所述第一种红外或超声波监测单元至少2厘米，这样b类第二种红外或超声波监测单元在翻页时被触发而在指点时不会被触发，c类由于探测距离短于6厘米一般指点时不会被触发而且与最近的所述第一种红外或超声波监测单元水平距离大于5厘米，这样c类第二种红外或超声波监测单元与第一种红外或超声波监测单元位于不同的水平位置而且有大于5厘米的间距，指点时手在第一种红外或超声波监测单元前的晃动不会触发到c类第二种红外或超声波监测单元，从而形成区分。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的部分实施例，

图1为本发明实施例提供的指点信息或图文信息识别设备的结构示意图，

图2为本发明实施例提供的指点信息或图文信息识别设备在图书右侧发射红外或超声波示意图，指点信息或图文信息识别设备是有摄像头从上向下对水平放置的图书拍照，本图是俯视的，摄像头可能被遮挡，在图中并未画出，

图3为本发明实施例提供的指点信息或图文信息识别设备在图书前方发射红外或超声波示意图，指点信息或图文信息识别设备是有摄像头从上向下对水平放置的图书拍照，本图是俯视的，摄像头可能被遮挡，在图中并未画出，

图4为本发明实施例提供的某类指点信息或图文信息识别设备在图书右侧向读者方向图书之外区域监测的红外或超声波示意图，指点信息或图文信息识别设备是有摄像头从上向下对水平放置的图书拍照，本图是俯视的，摄像头可能被遮挡，在图中并未画出，

图5为本发明实施例提供的某类指点信息或图文信息识别设备在图书前方向左或向右向读者方向图书之外区域监测的红外或超声波示意图，指点信息或图文信息识别设备是有摄像头从上向下对水平放置的图书拍照，但示意图是俯视的，摄像头可能被遮挡看不见，在图中并未示出。

具体实施方式

下面结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明的保护范围。

本发明实施例提供了某类指点信息或图文信息识别设备，其具体实现结构如图1所示，

某类指点信息或图文信息识别设备，

所述指点信息或图文信息识别设备包括拍照模块和监测模块，

所述拍照模块包括一个或多个摄像头，对图书拍照识别时，所述指点信息或图文信息识别设备放置于桌面上在图书前方或图书右侧或图书左侧，所述摄像头位于外壳的识别拍照位置向下拍照，所述摄像头固定在或平时在外壳的所述识别拍照位置和/或所述摄像头旋转和/或推拉到外壳的所述识别拍照位置，

当所述监测模块被触发后，所述指点信息或图文信息识别设备通过所述摄像头向下拍照获得图书图像对图书拍照识别，所述指点信息或图文信息识别设备根据一幅所述图像或者多幅所述图像进行识别，

所述监测模块包括一个或多个红外或超声波监测单元，所述红外或超声波监测单元是红外或超声波发射接收组，所述监测模块的触发包括通过所述红外或超声波监测单元发射并接收到被反射的红外线或超声波而触发，所述指点信息或图文信息识别设备放置于桌面上对图书拍照识别时所述红外或超声波监测单元向图书一方水平发射，

所述红外或超声波监测单元包括第一种红外或超声波监测单元，所述第一种红外或超声波监测单元引起第一种触发，

第一种触发有效后，若所述指点信息或图文信息识别设备被设置为专门或优先进行指点识别则所述指点信息或图文信息识别设备根据包括一幅所述图像或者多幅所述图像的信息识别指点的文字或图形和/或识别指点的是哪个位置，

第一种触发有效后，若所述指点信息或图文信息识别设备被设置为专门或优先识别图书信息则所述指点信息或图文信息识别设备根据包括一幅所述图像或者多幅所述图像的信息识别哪本书和/或哪一页，

第一种触发有效后，若所述指点信息或图文信息识别设备被设置为综合识别指点和图书信息则所述指点信息或图文信息识别设备根据包括一幅所述图像或者多幅所述图像的信息进行指点的文字内容和/或指点的是哪个位置和/或哪本书和/或哪一页的综合识别，

所述指点信息或图文信息识别设备放置于桌面上对图书拍照识别时，所述第一种红外或超声波单元距离桌面高度高于2厘米且最高4厘米或者高于4厘米且最高5厘米或者高于5厘米且最高7厘米或者高于7厘米且最高9厘米，

所述指点信息或图文信息识别设备在图书的前面工作，所述摄像头在图书正上方向下拍照和/或在与所述第一种红外或超声波监测单元同在图书的一方向下拍照，所述第一种红外或超声波监测单元包括从所述的指点信息或图文信息识别设备向图书一方的监测距离水平投影少于18厘米的红外或超声波监测单元，

和/或，

所述指点信息或图文信息识别设备在图书的左侧面向图书工作和/或在图书的右侧面向图书工作，所述摄像头在图书正上方向下拍照和/或在与所述第一种红外或超声波监测单元同在图书的一方向下拍照，所述第一种红外或超声波监测单元包括在图书的左侧和/或右侧面向图书一方监测，所述第一种红外或超声波监测单元监测后边界距离所述指点信息或图文信息识别设备的拍照识别范围前边界少于15厘米和/或所述第一种红外或超声波监测单元监测后边界距离所述指点信息或图文信息识别设备的拍照识别范围后边界大于3厘米和/或至少部分所述第一种红外或超声波监测单元监测距离小于8厘米，

和/或，

所述指点信息或图文信息识别设备置于桌面上在图书的左侧面向图书工作和/或在图书的右侧面向图书工作而且所述摄像头在图书正上方向下拍照和/或在所述第一种红外或超声波监测单元同侧的上方向下拍照而且所述第一种红外或超声波单元包括从所述指点信息或图文信息识别设备向读者方向图书之外区域监测的红外或超声波单元，或或所述指点信息或图文信息识别设备在图书的前面而且所述摄像头在图书正上方向下拍照和/或在所述第一种红外或超声波监测单元同侧的上方向下拍照而且所述的第一种红外或超声波单元包括的从所述指点信息或图文信息识别设备向左和/或向右图书以外区域监测的红外或超声波单元。

某类指点信息或图文信息识别设备，

所述指点信息或图文信息识别设备在图书的前面工作，所述的第一种红外或超声波监测单元包括的从所述的指点信息或图文信息识别设备向图书一方的监测距离水平投影少于18厘米的红外或超声波监测单元向图书一方的监测距离水平投影少于6厘米，

和/或，

所述指点信息或图文信息识别设备在图书的左侧面向图书工作或在图书的右侧面向图书工作而且所述的第一种红外或超声波单元包括的从所述指点信息或图文信息识别设备向读者方向图书以外区域监测的红外或超声波单元向读者方向监测距离水平投影小于6厘米，或者所述指点信息或图文信息识别设备在图书的前面而且所述的第一种红外或超声波单元包括的从所述指点信息或图文信息识别设备向左和/或向右图书以外区域监测的红外或超声波单元向读者方向监测距离水平投影小于6厘米，

和/或，

所述指点信息或图文信息识别设备在图书的左侧面向图书工作或在图书的右侧面向图书工作，所述的第一种红外或超声波监测单元包括的在图书的左侧或右侧面向图书一方监测的红外或超声波监测单元向图书一方的监测距离水平投影小于6厘米。

指点信息或图文信息识别设备，

所述指点信息或图文信息识别设备在图书的前面工作，所述拍照模块在图书正上方和/或前上方向下拍照，包括在图书的前面向图书一方发射的两个或多于两个的互相间距大于5厘米的所述第一种红外或超声波监测单元，所述在图书的前面向图书一方监测的两个或多于两个的所述第一种红外或超声波监测单元向图书一方监测距离水平投影全部小于6厘米，

当所述在图书的前面向图书一方监测的两个或多于两个的互相间距大于5厘米的所述第一种红外或超声波监测单元之中的一个被触发，则拍照识别指点是哪个位置或指点的图文，当所述在图书的前面向图书一方监测的两个或多于两个的互相间距大于5厘米的所述第一种红外或超声波监测单元之中的多个被依次触发或同时触发则拍照识别哪本书或者哪一页。

指点信息或图文信息识别设备，

所述红外或超声波监测单元包括一组或多组第二种红外或超声波监测单元，所述第二种红外或超声波监测单元引起第二种触发，

若所述第一种触发和第二种触发中仅第一种触发发生，则第一种触发后所述指点信息或图文信息识别设备被设置为专门或优先进行指点识别，

若第二种触发发生，则第一种触发无效，

第二种触发后，若所述指点信息或图文信息识别设备被设置为专门或优先识别哪本书则所述指点信息或图文信息识别设备根据包括第二种触发后拍照的图像的信息专门或优先识别哪本书，若所述指点信息或图文信息识别设备被设置为专门或优先识别哪一页则所述指点信息或图文信息识别设备根据包括第二种触发后拍照的图像的信息专门或优先识别哪一页，若所述指点信息或图文信息识别设备被设置为综合识别哪本书和哪一页则根据包括第二种触发后拍照的图像的信息对哪本书和哪一页综合识别，

所述指点信息或图文信息识别设备置于桌面在图书的前面面向图书一方工作或者在图书的右侧或左侧面向图书一方工作，

所述第二种红外或超声波单元在图书前方从所述指点信息或图文信息识别设备面向图书一方的一面向图书一方探测，

所述第二种红外或超声波监测单元包括距桌面高度至少6厘米最多12厘米而且距桌面高度高于所有所述第一种红外或超声波监测单元至少2厘米的a类红外或超声波监测单元，和/或所述第二种红外或超声波监测单元包括距桌面高度至少3厘米最高12厘米而且探测距离短于6厘米而且探测距离短于所有所述第一种红外或超声波监测单元至少2厘米的b类红外或超声波监测单元，和/或所述第二种红外或超声波监测单元包括c类红外或超声波监测单元，所述指点信息或图文信息识别设备置于桌面在图书的前面面向图书一方工作时所述c类红外或超声波监测单元距桌面高度至少3厘米最高12厘米而且探测距离短于6厘米而且与至少一个所述第一种红外或超声波监测单元水平距离大于5厘米，所述指点信息或图文信息识别设备置于桌面在图书的右侧或左侧面向图书一方工作时所述c类红外或超声波监测单元距桌面高度至少3厘米最高12厘米而且探测距离短于6厘米而且比所述第一种红外或超声波监测单元距离大于5厘米而且比所述第一种红外或超声波监测单元远离读者。

指点信息或图文信息识别设备，

所述指点信息或图文信息识别设备还包括显示屏，显示屏显示操作界面和/或显示屏显示指点位置对应信息和/或显示屏显示指点处文字内容和/或显示屏显示指点处文字的解释和/或翻译，所述显示屏与摄像头与监测模块位于同一外壳的同一侧，所述指点信息或图文信息识别设备放置于桌面上在图书前方对图书拍照识别时，所述显示屏是垂直竖立或者正面向上倾斜竖立与垂直夹角小于45度，当显示屏显示指点位置对应信息和/或显示屏显示指点处文字内容和/或显示屏显示指点处文字的解释和/或翻译时所述指点信息或图文信息识别设备放置于桌面上在图书前方进行拍照识别，

和/或，

所述指点信息或图文信息识别设备还包括扬声器，所述指点信息或图文信息识别设备包括根据包括哪本书和/或哪一页和/或指点的是哪个位置和/或指点处文字或图像的信息通过所述扬声器发出对应音频。

所述第一种红外或超声波监测单元数目为1个或2个或3个或4个或5个或6个。

具体的，设备硬件可以包括处理器，内存，摄像头等，

红外或超声波发射接收组，即常见的发射头和接收头在一起同时具有发射和接收功能，所述监测模块的触发包括通过所述红外或超声波监测单元的红外线或超声波的反射或阻挡被触发，具体的，比如用户将手放在图书上时对红外线或超声波的反射，被收到，说明有操作，触发进行拍照识别，

拍照模块和监测模块设置于同一外壳，所述指点信息或图文信息识别设备以所述外壳竖立或者以外壳带的支架竖立或者通过外部支架竖立，比如外壳有一定厚度自己就可以竖立，或者外壳通过其带的支架竖立，或者外壳通过外部支架竖立，

所述指点信息或图文信息识别设备优先在图书前方，也可图书右侧，具体如图2图3所示，

所述红外或超声波单元从所述指点信息或图文信息识别设备向图书区域和/或图书上方区域探测，调整其发射强度即可调整探测距离，而发射强度可以通过控制通过电流调整。

当所述监测模块被触发后，所述拍照模块向下拍照获得图像，

所述指点信息或图文信息识别设备根据一幅所述图像或者多幅所述图像进行识别，识别包括：哪个位置和/或指点的文字内容和/或哪本书和/或哪一页。

具体的，可以根据一幅所述图像进行识别，比如就在一幅所述图像上识别是哪本书，或者一幅所述图像是图书内页的图像则可识别是哪一页，可就在一幅所述图像上识别手指的指点，也可根据多幅所述图像进行识别，比如几幅图像进行对比来看是否有手指指点。

拍照模块和监测模块设置于一外壳，所述图书综合识别设备以所述外壳竖立或者以外壳带的支架竖立或者通过外部支架竖立，比如外壳有一定厚度自己就可以竖立，或者外壳通过其带的支架竖立，或者外壳通过外部支架竖立，

所述图书综合识别设备放置于桌面上在图书前方对图书拍照识别，摄像头位于外壳的识别拍照位置向下拍照，所述摄像头固定于外壳的所述识别拍照位置和/或所述摄像头旋转和/或推拉到外壳的所述识别拍照位置，

所述摄像头固定于外壳的所述识别拍照位置，即摄像头固定于外壳的，这个位置就是识别拍照位置，

所述摄像头旋转和/或推拉到外壳的所述识别拍照位置，即摄像头平时是在别的位置，比如收纳起来，在拍照识别时旋转和/或推拉到外壳的所述识别拍照位置，在这个位置拍照。

所述监测模块包括一个或多个红外或超声波监测单元，所述红外或超声波监测单元是红外或超声波发射接收组，所述监测模块的触发包括通过所述红外或超声波监测单元发射并接收到被反射的红外线或超声波而触发，所述图书综合识别设备放置于桌面上在图书前方对图书拍照识别时所述红外或超声波监测单元向图书一方发射，

所述第一种红外或超声波单元距离桌面高度即所述第一种红外或超声波单元下沿距离桌面的高度，高于2厘米且最高4厘米或者高于4厘米且最高5厘米或者高于5厘米且最高7厘米或者高于7厘米且最高9厘米，一般儿童图书厚度低于2厘米，若高度设置在高于4厘米则几乎可超过所有儿童图书的厚度，高度最好在7厘米以下，比如最高6厘米，这是根据儿童指点时手的高度要能反射红外或超声波，

这个高度刚好高于一般儿童图书的厚度，又能够在读者进行指点时被触发，

本发明监测模块的红外或超声波发射接收组是要保证监测到读者手向前伸出，因此作用及安排上与一般的发射横竖交叉红外或超声波来定位大不相同，一般的发射横竖交叉红外或超声波来定位需要横竖两个方向发射以获得横向及竖向坐标，而且传感器越密定位越好，而本发明的红外或超声波监测单元是起到触发，考虑到与显示屏及拍照的配合完成，考虑到指点是向前伸出手来指点，因此特别设置红外或超声波监测单元图书前面，当用户伸手就可以反射监测单元发射的红外线或超声波从而触发拍照，

而且尽量少的红外或超声波，只要能方便的监测到读者手向前伸出即可，

所述第一种红外或超声波监测单元引起第一种触发，

第一种触发后，若所述图书综合识别设备被设置为专门或优先进行指点识别则所述图书综合识别设备根据包括一幅所述图像或者多幅所述图像的信息识别指点的文字内容和/或识别指点的是哪个位置，

第一种触发后，若所述图书综合识别设备被设置为综合识别指点和图书信息则所述图书综合识别设备根据包括一幅所述图像或者多幅所述图像的信息进行指点的文字内容和/或指点的是哪个位置和/或哪本书和/或哪一页的综合识别。

这是考虑到除了指点的手会反射红外或超声波，翻页等也会，因此在功能上要根据具体安排来决定第一种红外或超声波监测单元的具体功用，

在图书的前方向图书这侧发射红外或超声波可以监测是否手伸出，对于单页图文来说没有问题，但当具体目标是图书，图书翻页等也会红外或超声波，这里提出了两种方案，

一种方案是，第一种触发后，若所述图书综合识别设备被设置为专门或优先进行指点识别则所述图书综合识别设备根据包括一幅所述图像或者多幅所述图像的信息识别指点的文字内容和/或指点哪个位置，这样由于已经设置了专门或优先进行指点识别，因此是功能清晰的，对于单页图文通常只有指点而没有翻页等，可以很容易设置为专门进行指点识别，而对于图书，拿起放下图书及翻页等也会反射红外或超声波，可以采取一些措施来区分，比如人工在已经翻到某页后需要识别指点时设置为专门或优先进行指点识别，或者还有其它的监测手段比如其它的红外或超声波能区分是翻页还是指点，但无论采取任何其它技术手段来区分，都符合本发明的这个特征，即所述图书综合识别设备被设置为专门或优先进行指点识别，只是具体通过什么手段来设置为专门或优先进行指点识别，

另一种方案是，第一种触发后，若所述图书综合识别设备被设置为综合识别则所述图书综合识别设备根据包括一幅所述图像或者多幅所述图像的信息进行指点的文字内容和/或指点哪个位置和/或哪本书和/或哪一页的综合识别，由于拿起放下图书及翻页及指点都会反射红外或超声波，可以不事先区分，而是靠图像识别，即第一种触发后，设备就靠图像识别来识别究竟是指点还是翻页等并识别具体的指点信息或当前页信息。

所述显示屏和拍照模块和监测模块设置于同一外壳，即使外壳为安装方便及工作方便分为几块，但它们组装为同一整体，仍属同一外壳。

显示屏可根据需要显示各种信息，比如，显示屏显示交互界面，比如，显示屏显示指点位置相关的信息，比如，显示屏显示指点处文字内容相关的信息如解释或翻译等，

本发明一种设计，当所述某类指点信息或图文信息识别设备在图书的前面工作，所述第一种红外或超声波监测单元包括在图书的前面向图书与设备相对的另一方向的监测距离小于18厘米的红外或超声波监测单元，这个是考虑了目前儿童图书大部分为16开甚至更大，单页尺寸大概18x26厘米，展开后尺寸往往大于36x26厘米，而读者往往用手按住图书距离读者近的一边以固定图书，本发明特意设置监测距离比16开图书短8厘米，避开读者按住图书的手对指点监测的干扰，而对于小些的书，比如32开图书，尺寸约13x18厘米，不会因探测距离过长而被图书后面的读者身体所误触发，若想进一步避开读者按住图书的手对指点监测的干扰，只要将书略向后移动几厘米即可。

本发明一种设计，当所述图书综合识别设备在图书的左侧面向图书工作和/或在图书的右侧面向图书工作，红外或超声波是从图书旁向图书一方发射进行监测，要保证图书既能触发红外或超声波又在摄像头的拍照范围内以便识别而且红外或超声波不会与按住图书底边的手冲突，因此设计要求所述第一种红外或超声波监测单元监测后边界距离所述指点信息或图文信息识别设备的拍照识别范围前边界少于15厘米和/或所述第一种红外或超声波监测单元监测后边界距离所述指点信息或图文信息识别设备的拍照识别范围后边界大于3厘米和/或至少部分所述第一种红外或超声波监测单元监测距离小于8厘米，

用户往往会在图书上手指点时，只是自己想指点而并非是希望设备进行识别，

但仅从手指在图书上这个图像上来看，并无区别，

本发明特别考虑了上述需求，提出了针对性的方案，

一种方案是如图4，图5所示，所述指点信息或图文信息识别设备在图书的左侧面向图书工作或在图书的右侧面向图书工作而且所述的第一种红外或超声波单元包括的从所述指点信息或图文信息识别设备向读者方向图书以外区域监测的红外或超声波单元向读者方向监测距离水平投影小于6厘米，或者所述指点信息或图文信息识别设备在图书的前面而且所述的第一种红外或超声波单元包括的从所述指点信息或图文信息识别设备向左和/或向右图书以外区域监测的红外或超声波单元向读者方向监测距离水平投影小于6厘米，

此方案中，红外或超声波向读者方向图书之外区域发射，因此读者手一般在图书上并不会被拍照识别，只有当读者手在红外或超声波监测单元前经过一下触发，然后手在图书上进行指点才会被拍照识别，从而有效区分究竟是读者的指点还是仅仅将手放在图书上。

一种方案是，监测距离少于6厘米，这是考虑到图书一般有约3厘米的空白边，加上图书距离设备可能有一段距离，监测距离少于6厘米时基本用户在图书上手指点时不会触发红外或超声波，当用户需要设备进行识别时，用户在伸出手指点之前先要将伸出的手在红外或超声波监测单元前晃一下，这样设备才会被触发进行指点的拍照识别。

本发明巧妙地布置了两个或多于两个的互相间距大于5厘米的所述红外或超声波监测单元，红外或超声波监测单元向图书一方的监测距离水平投影少于6厘米以保证用户随意将手放在图书上不会触发红外或超声波监测单元，用户必须将手前伸到红外或超声波监测单元的监测范围内才会触发，此时设备认为用户将进行指点并进行拍照识别，两个或多于两个的互相间距大于5厘米的红外或超声波监测单元，这样所述指点信息或图文信息识别设备放在图书前方拍照识别时，当用户用右手指点则右手向前伸出触发右边的监测单元，当用户用左手指点则左手向前伸出触发左边的监测单元，这样无论左右都很方便，而且红外或超声波监测单元互相间距大于5厘米，手向前伸出以触发监测单元时可以只触发一个监测单元，利用这点可与翻页等区分，

本发明考虑到图书翻页等也会触发红外或超声波监测单元，但仔细研究了其与指点的区别，虽然手在图书上任意处指点，但手向前伸出以触发监测单元时可以只在一个较小区域，本发明特别设置红外或超声波监测单元互相间距大于5厘米，这样指点前手向前伸出以触发监测单元时只触发一个监测单元，而翻页时图书页划过的范围大，会依次触发或同时触发多个监测单元，从而区分究竟是翻页还是指点，

考虑到翻页或指点都会触发红外或超声波监测，为了在图像识别之前就能区分以便进行针对识别，本发明除了第一种红外或超声波监测单元还设置了第二种红外或超声波监测单元，

所述红外或超声波监测单元包括一组或多组第二种红外或超声波监测单元，所述第二种红外或超声波监测单元引起第二种触发，

若所述第一种触发和第二种触发中仅第一种触发发生，则第一种触发后所述指点信息或图文信息识别设备被设置为专门或优先进行指点识别，

若所述第一种触发和第二种触发中仅第二种触发发生或者第一种触发和第二种触发都发生，则第二种触发后，所述指点信息或图文信息识别设备被设置为专门或优先识别包括哪本书和/或哪一页的图书信息，若所述指点信息或图文信息识别设备被设置为专门或优先识别哪本书则所述指点信息或图文信息识别设备根据包括第二种触发后拍照的图像的信息专门或优先识别哪本书，若所述指点信息或图文信息识别设备被设置为专门或优先识别哪一页则所述指点信息或图文信息识别设备根据包括第二种触发后拍照的图像的信息专门或优先识别哪一页，若所述指点信息或图文信息识别设备被设置为综合识别哪本书和哪一页则根据包括第二种触发后拍照的图像的信息对哪本书和哪一页综合识别，

所述指点信息或图文信息识别设备置于桌面在图书的前面或者在图书的右侧或左侧进行拍照识别，所述第二种红外或超声波单元从所述指点信息或图文信息识别设备面向图书一方的一面向图书一方探测，

所述第二种红外或超声波监测单元包括距桌面高度至少6厘米最多12厘米而且距桌面高度高于所有所述第一种红外或超声波监测单元至少2厘米的a类红外或超声波监测单元，和/或所述第二种红外或超声波监测单元包括距桌面高度至少3厘米最高12厘米而且探测距离短于6厘米而且探测距离短于所有所述第一种红外或超声波监测单元至少2厘米的b类红外或超声波监测单元，和/或所述第二种红外或超声波监测单元包括c类红外或超声波监测单元，所述指点信息或图文信息识别设备置于桌面在图书的前面面向图书一方工作时所述c类红外或超声波监测单元距桌面高度至少3厘米最高12厘米而且探测距离短于6厘米而且与所有所述第一种红外或超声波监测单元水平距离大于5厘米，所述指点信息或图文信息识别设备置于桌面在图书的右侧或左侧面向图书一方工作时所述c类红外或超声波监测单元距桌面高度至少3厘米最高12厘米而且探测距离短于6厘米而且与所有所述第一种红外或超声波监测单元距离大于5厘米而且比至少一个所述第一种红外或超声波监测单元远离读者。

所述指点信息或图文信息识别设备还包括显示屏，显示屏显示操作界面和/或显示屏显示指点位置对应信息和/或显示屏显示指点处文字内容和/或显示屏显示指点处文字的解释和/或翻译，所述显示屏与摄像头与监测模块位于同一外壳的同一侧，所述指点信息或图文信息识别设备放置于桌面上在图书前方对图书拍照识别时，所述显示屏是垂直竖立或者正面向上倾斜竖立与垂直夹角小于45度，当显示屏显示指点位置对应信息和/或显示屏显示指点处文字内容和/或显示屏显示指点处文字的解释和/或翻译时所述指点信息或图文信息识别设备放置于桌面上在图书前方进行拍照识别，

和/或，

所述指点信息或图文信息识别设备还包括扬声器，所述指点信息或图文信息识别设备包括根据包括哪本书和/或哪一页和/或指点的是哪个位置和/或指点处文字或图像的信息通过所述扬声器发出对应音频。

以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明披露的技术范围内，可轻易想到的变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应该以权利要求书的保护范围为准。