静态图像的多媒体呈现方法、装置和系统与流程

本发明涉及图像处理领域，具体而言，涉及一种静态图像的多媒体呈现方法、装置和系统。

背景技术：

随着生活质量和教育水平的提高，现在的家长越来越重视孩子的启蒙教育，启蒙教育是指让孩子提早认识周围的世界，家长经常会购买一些关于幼儿启蒙教育的绘本、积木、画册等，让孩子广泛接触各种颜色、形状的物品，让孩子看图识字、认识各种小动物等，让孩子从视觉上去认识这个世界的事物。

为了加强孩子的对文字或图像的理解，市场上出现了很多点读类的文具，例如点读机或点读笔，与相应的画册、书籍一起售卖，让孩子在点击文字或图像的同时，可以从听觉上去体会。然而，现有市面上的点读文具只能实现与配套书籍的使用发出声音，无法实现视觉上的画面呈现，交互性差；并且不能将任何静态非电子类实物转换为相应的多媒体数据，兼容性差。由于，现有的点读笔或点读机都是与书籍配套使用的，当学习其他书的时候需要再买与该书配套使用的点读笔或点读机，造成很大的学习成本。

另一方面，手机、平板电脑等智能设备已经广泛普及到人们的生活中，利用电子设备来学习已成为未来教育的趋势，但是，利用电子设备不能替代所有的传统学习，例如，孩子画画，拼图等，并且，长时间近距离接触电子设备，对孩子的眼睛伤害较大。因而，迫切需要一种可以将传统学习与电子设备相结合的学习方案。

针对上述现有技术无法实现将任何静态非电子类实物进行动画呈现的问题，目前尚未提出有效的解决方案。

技术实现要素：

本发明实施例提供了一种静态图像的多媒体呈现方法、装置和系统，以至少解决现有技术无法实现将任何静态非电子类实物进行动画呈现的技术问题。

根据本发明实施例的一个方面，提供了一种静态图像的多媒体呈现方法，包括：获取电子图像，其中，电子图像是由物品上的静态图像拍摄得到的；获取电子图像中的信息；根据信息确定静态图像对应的多媒体数据，其中，多媒体数据包括以下至少之一：音频、视频、3D图像；呈现多媒体数据。

根据本发明实施例的另一方面，还提供了一种静态图像的多媒体呈现系统，包括：摄像头，用于获取电子图像，其中，电子图像是由物品上的静态图像拍摄得到的；处理器，用于获取电子图像中的信息；根据信息确定静态图像对应的多媒体数据，并呈现多媒体数据；其中，多媒体数据包括以下至少之一：音频、视频、3D图像。

根据本发明实施例的另一方面，还提供了一种静态图像的多媒体呈现装置，包括：第一获取模块，用于获取电子图像，其中，电子图像是由物品上的静态图像拍摄得到的；第二获取模块，用于获取电子图像中的信息；确定模块，用于根据信息确定静态图像对应的多媒体数据，其中，多媒体数据包括以下至少之一：音频、视频、3D图像；输出模块，用于呈现多媒体数据。

在本发明实施例中，通过获取电子图像，其中，电子图像是由物品上的静态图像拍摄得到的；获取电子图像中的信息；根据信息确定静态图像对应的多媒体数据，其中，多媒体数据包括以下至少之一：音频、视频、3D图像；呈现多媒体数据，达到了将任意纸质平面图像以多媒体形式交互展示的目的，从而实现了节约教育成本、增强用户体验的技术效果，进而解决了现有技术无法实现将任何静态非电子类实物进行动画呈现的技术问题。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是根据本发明实施例的一种静态图像的多媒体呈现方法流程图；

图2是根据本发明实施例的一种可选的静态图像的多媒体呈现方法流程图；

图3是根据本发明实施例的一种可选的静态图像的多媒体呈现方法流程图；

图4是根据本发明实施例的一种可选的静态图像的多媒体呈现方法流程图；

图5是根据本发明实施例的一种可选的静态图像的多媒体呈现方法流程图；

图6是根据本发明实施例的一种可选的静态图像的多媒体呈现方法流程图；

图7是根据本发明实施例的一种优选的绘图静态图像的多媒体呈现方法流程图；

图8是根据本发明实施例的一种优选的让静态图案动起来的方法流程图；

图9是根据本发明实施例的一种支架示意图；

图10(a)是根据本发明实施例的一种可选的支架示意图；

图10(b)是根据本发明实施例的一种可选的支架示意图；

图11是根据本发明实施例的又一种可选的支架示意图；

图12是根据本发明实施例的又一种可选的支架示意图；

图13是根据本发明实施例的又一种可选的支架示意图；

图14(a)是根据本发明实施例的一种可选的支架示意图；

图14(b)是根据本发明实施例的一种可选的支架示意图；

图15(a)是根据本发明实施例的一种可选的反射镜示意图；

图15(b)是根据本发明实施例的一种可选的反射镜示意图；

图16是根据本发明实施例的一种可选的支架示意图；

图17是根据本发明实施例的一种可选的用于跟踪手势操作的指套示意图；

图18是根据本发明实施例的一种静态图像的多媒体呈现系统示意图；

图19是根据本发明实施例的一种静态图像的多媒体呈现装置示意图；以及

图20是根据本发明实施例的一种基于云存储的多媒体资源共享系统示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

实施例1

根据本发明实施例，提供了一种静态图像的多媒体呈现方法实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。

图1是根据本发明实施例的一种静态图像的多媒体呈现方法流程图，如图1所示，该方法包括如下步骤：

步骤S102，获取电子图像，其中，电子图像是由物品上的静态图像拍摄得到的；

步骤S104，获取电子图像中的信息；

步骤S106，根据信息确定静态图像对应的多媒体数据，其中，多媒体数据包括以下至少之一：音频、视频、3D图像；

步骤S108，呈现多媒体数据。

作为一种可选的实施例，上述物品可以为用于孩子启蒙教育的课本、绘本或其他书籍，还可以为七巧板、拼图、积木等玩具；上述静态图像可以为上述物品的放置于预设空间后呈现出来的画面，例如，可以是上述课本或绘本的封面，或其中的某一页面，也可以是拼图的形状等；上述电子图像可以为通过摄像装置获取的预设空间内物品上的静态图像的电子图像；上述多媒体数据可以为与上述静态图像对应的音频、视频或3D图像；通过摄像装置，将预设空间内的物品上的静态图像转换为相应的电子图像，从电子图像中提取相应的信息，从而获取与该信息对应的多媒体数据，并呈现至显示屏上。

在一种可选的实施方案中，上述摄像装置可以为手机或平板电脑的摄像头，上述显示屏可以为手机或平板电脑的显示屏，以课本或书籍为例，当打开的课本或书籍的某一页面(静态图像)上为文字时，利用手机或平板电脑摄像头拍摄该页面，可以将课本或书籍页面上的文字朗诵出来；当打开的课本或书籍的某一页面上有图像时，利用手机或平板电脑的摄像头拍摄该页面，可以在手机或平板电脑的显示屏上显示该页面上的平面图像以3D图像的形式呈现出来，并附加显示相应的音频或视频，从而增加课本或书籍的可读性。

可选地，上述摄像装置也可以为外置摄像头，上述显示屏可以为台式机电脑的显示器。

在另一种可选的实施方案中，可以将摄像装置和显示屏利用支架固定，当用户在阅读课本或书籍的过程中，随着用户的翻页等操作，显示屏中的音频、视频或3D图像自动切换至下一页，通过点击或触摸课本或书籍上的局部文字或图像中某一目标对象，显示屏上的多媒体数据会播放页面中相应部分的音频、视频或图像中该目标对象作出相应的动作。

一种可选的实施例中，上述物品可以为课本，通过用户在课本上的点击、触摸等操作，显示屏上可以实时显示课本的画面，优选地，可以是3D模型；当用户点击画面中的某一个目标对象时，显示屏上相应的目标对象会伴随发出相应的声音或作出一些动作。

一种可选的实施例中，上述物品可以为绘本，可以在显示屏上实时显示用户在纸质绘本上填涂的颜色或形状，当用户完成填涂作业后，可以在显示屏上显示填涂完成的平面图像的3D模型，例如，当孩子在绘本中填涂好了一幅一群小鸭子在水中游泳的画时，可以在显示屏中显示相应的立体画面，优选地，可以伴随有相应的声音等，增加孩子的成就感，培养孩子的学习兴趣。

一种可选的实施例中，上述物品可以为拼图，可以在显示屏上显示一幅拼图，用户可以在预设空间(例如，可以是平板桌面上摄像头可以覆盖的区域)进行拼图，当用户的拼图结果正确时，可以发出一些关于恭喜拼图正确的声音，并可以将拼好的拼图进行3D显示；当用户的拼图结果错误时，可以发出一些关于鼓励的声音，优选地，还可以提供一些拼图提示等。

一种可选的实施例中，上述物品可以英文字母卡片，在显示屏上显示一个实物，用户可以在预设空间内投掷与实物对应的英文单词的字母卡片，只要投掷的字母卡片与该英文单词对应(无需保证顺序一致)，则输出投掷正确的结果信息。

通过上述实施例，可以培养孩子的学习兴趣，并促进孩子的学习和成长。

由上可知，在本申请上述实施例中，通过摄像装置拍摄物品，将物品(例如，课本、绘本或其他书籍)上的静态图像转换为相应的电子图像，根据从该电子图像中获取的信息，将静态图像以音频、视频或3D图像等多媒体的形式呈现出来，达到了将任意纸质平面图像以多媒体形式交互展示的目的，从而实现了节约教育成本、增强用户体验的技术效果，进而解决了现有技术无法实现将任何静态非电子类实物进行动画呈现的技术问题。

可选地，上述物品可以包括：课本、绘本、卡片、画册、手绘本、七巧板、积木、玩具。

在一种可选的实施例中，如图2所示，上述步骤S104中获取电子图像中的信息，可以包括：步骤S204，获取电子图像的特征信息；

上述步骤S106中根据信息确定静态图像对应的多媒体数据，可以包括：步骤S206，根据特征信息查找与电子图像匹配的3D图像。

作为一种可选的实施例，上述电子图像可以为通过摄像装置获取的预设空间内物品上的静态图像的电子图像；上述特征信息可以为电子图像中的文字、图片、颜色或其他标记信息；上述多媒体数据可以为与上述静态图像对应的音频、视频或3D图像；基于上述步骤S204和S206，在将预设空间内的物品上的静态图像转换为电子图像后，可以获取该电子图像中的特征信息，根据获取到的特征信息查找与该电子图像匹配的3D图像。

一种优选的实施例中，可以在物品的页面上设置标记信息，例如，二维码等，可以快速地识别出该页面，并查找出与该页面对应的3D图像。

通过上述实施例，实现了将物品页面中的平面图像进行3D展示的效果。

在一种可选的实施例中，如图3所示，上述步骤S204中获取电子图像的特征信息，可以包括：步骤S304，获取电子图像中的目标对象的线条轮廓；

上述步骤S206中根据特征信息查找与电子图像匹配的3D图像，可以包括：步骤S306，根据线条轮廓查找与目标对象匹配的3D模型。

作为一种可选的实施例，上述电子图像可以为通过摄像装置获取的预设空间内物品上的静态图像的电子图像；上述特征信息可以为电子图像中的文字、图片、颜色或其他标记信息；上述目标对象可以为物品页面上的各个图形；上述线条轮廓可以为物品页面上各个图像的形状轮廓；上述3D模型可以为这些图像对应的3D模型，例如，在物品页面上有一个小鸭图像，可以在显示的时候，将小鸭显示为3D模型；基于上述步骤S304和S306，在将预设空间内的物品上的静态图像转换为电子图像后，可以获取该电子图像中的各个目标对象的形状，即线条轮廓，根据该线条轮廓查找与该目标对象匹配的3D模型。

通过上述实施例，达到了将纸制物品的页面中各个目标对象分别进行3D展示的目的。

在一种可选的实施例中，如图4所示，呈现3D图像可以包括如下步骤：

步骤S402，根据线条轮廓获取目标对象的至少一个部分的渲染信息；

步骤S404，根据渲染信息对与目标对象匹配的3D模型进行渲染；

步骤S406，呈现渲染后的3D模型。

作为一种可选的实施例，上述目标对象可以为物品页面上的各个图形；上述线条轮廓可以为物品页面上各个图像的形状轮廓；上述3D模型可以为这些图像对应的3D模型；上述渲染信息可以为物品页面上各个图像颜色的变化；基于上述步骤S402至S406，根据线条轮廓查找与目标对象匹配的3D模型后，根据图形的线条轮廓获取该获取目标对象的一个或多个部分的渲染信息(例如，图形颜色的变化)，并根据该渲染信息将与该目标对象匹配的3D模型进行渲染，并在显示屏上呈现渲染后的3D模型。

通过上述实施例，实现了使静态图案动起来的效果。

在另一种可选的实施例中，如图5所示，上述步骤S104中获取电子图像的信息，可以包括：步骤S504，获取电子图像中与物品上被操作的部位对应的位置信息，其中，操作包括：翻页、点击、触摸；

上述步骤S106中根据信息确定静态图像对应的多媒体数据，可以包括：步骤S506，根据位置信息查找与位置信息匹配的音频或视频。

作为一种可选的实施例，上述电子图像可以为通过摄像装置获取的预设空间内物品上的静态图像的电子图像；上述操作位置可以为对预设空间内的物品的静态图像进行点击、触摸或翻页等操作的位置；上述多媒体数据可以为与上述静态图像对应的音频、视频或3D图像；基于上述步骤S504和S506，在将预设空间内的物品上的静态图像转换为电子图像，获取该电子图像中与静态图像中进行点击、触摸或翻页等操作的位置对应的电子图像中位置信息，根据该位置信息查找与该位置匹配的音频或视频。

此处需要说明的是，上述操作位置可以为纸质页面中的页码所在位置，也可以为纸质页面中目标对象所在的位置，如果操作的是页码所在位置，即，进行的是翻页操作，可以自动获取下一页的音频或视频；如果操作的目标对象所在的位置，即点击或触摸该目标对象，则自动获取该目标对象对应的音频或视频，一种可选的实施例中，也可以是该目标对象的3D模型。

可选地，上述获取对电子图像中电子图像中与操作位置对应的位置信息可以包括：通过动作跟踪器获取物品被操作的部位；根据该部位确定电子图像中对应的位置信息。

通过上述实施例，实现了通过点击或触摸物品页面中某个位置来获取相应位置的音频或视频的目的。

一种可选的实施例中，可以通过实时采集用户的运动数据，并根据运动运动数据生成相应的驱动数据，根据驱动数据触发渲染虚拟对象(例如，声音)，从而实时生成动画影像数据，其中，运动数据可以包括至少以下之一：书籍翻页动作数据、手指指环数据、触摸屏点击(移动)数据。

在一种可选的实施方案中，实时采集用户的运动数据可以包括以至少之一：分析输入的包含采集对象中书籍的图像，定位采集对象中书籍的特征信息，根据书籍的特征信息确定哪种数据书籍中的哪一页，其中，书籍的特征信息位置包括以下至少之一：书籍页面所在的位置，书籍页面的倾斜角度，旋转角度等。

在一种可选的实施方案中，在处理运动数据生成第一运动驱动数据之前，上述方法还包括以下至少之一：分析输入的包含采集对象中手指指环所在位置，定位采集对象中图像的特征信息，根据的特征信息确定是否存在手指，手指在图像中的位置信息，其中，图像的特征信息位置包括以下至少之一：颜色信息和形状信息。

在一种可选的实施方案中，在处理运动数据生成第一运动驱动数据之前，上述方法还可以包括以下至少之一：从图像中识别出来书籍中的哪一页，书籍页面在图像中的位置，同时从图像中识别中指环，由于采集数据的时候，存在各种倾斜和旋转，需要对书籍页面就行透视矫正，同时也对指环也进行矫正使其数据在同一个数据空间中，然后根据预先设置好的触发条件，得到指环驱动数据；采集与采集对象对应的触摸屏和外设鼠标键盘等传感器数据，根据传感数据解算出采集对象的动作数据，其中，动作数据包括采集对象的当前动作的世界坐标的位置和旋转角度。

在一种可选的实施方案中，将第一动画影像数据和声音渲染以后，上述方法还包括：

步骤一，采集互动信息，并将互动信息发送到第一动画影像和声音的虚拟场景中，其中，互动信息包括位于互动对象的以下至少之一的信息：语音信息，图像信息，动作信息，文字信息，互动指令；

步骤二，实时捕捉采集对象根据互动信息生成的第二运动数据；

步骤三，根据第二运动数据生成第二运动驱动数据，并根据第二运动驱动数据驱动并渲染虚拟对象实时生成第二动画影像数据和声音。

一种可选的实施例中，动作信息和互动指令来源是触摸屏幕和指环在实际的书籍页面上面的触摸操作.在书籍页面上的指环操作,其中包含了一下处理模块,实时书籍页面的检测，空间透视矫正，实时指环识别，配合书籍页面透视校正，触发特效信息。

在一种可选的实施方案中，将2D静态图像生成3D动态图像可以包含了以下操作：对该静态图片的识别，分割，空间位置的矫正，然后让生存的图片，对应于所使用的模型，生成3D动态图像。

基于上述实施例，如图5所示，上述步骤S108中呈现多媒体数据可以包括：步骤S508，播放音频或视频。

在一种可选的实施例中，获取电子图像，可以包括：获取预设空间内的物品上的静态图像；对静态图像进行识别、矫正，得到电子图像。

此处需要说明的是，由于摄像装置拍摄的图像可能存在旋转、倾斜等问题，在获取物品页面上的静态图像后，可以对静态图像进行识别、空间透视矫正等，从而得到该页面的电子图像。

在一种可选的实施例中，如图6所示，在呈现多媒体数据之后，上述方法还可以包括如下步骤：

步骤S602，获取预设的手势动作，其中，手势动作由用户自定义设置；

步骤S604，根据手势动作，确定对多媒体数据的操作，其中，操作至少包括：暂停、切换或退出当前呈现的多媒体数据。

作为一种可选的实施例，上述手势动作可以为用户预先自定义设置的一系列动作；一种可选的实施例中，可以设置在预设空间的物品上画三角形为暂停当前呈现的多媒体数据；设置在预设空间内画圈为退出当前呈现的多媒体数据(例如，视频或音频等)；设置在预设空间内画横线为自动切换至下一个多媒体数据。

通过上述实施例，实现了快速切换、暂停或退出当前多媒体数据的目的，增强了用户体验效果。

作为一种优选的实施例，图7所示为一种绘图静态图像的多媒体呈现方法流程图。如图7所示，包括如下步骤：

步骤S702，采集绘本上的第一静态图像。

在上述步骤中，通过摄像装置获取绘本上的第一静态图像，对第一静态图像进行空间透视校正，消除用户拍摄图像时产生的旋转、倾斜问题，然后对特征点轮廓分析，并且保存这些特征点轮廓数据和图片。

步骤S704，根据第一静态图像的轮廓数据计算其拓扑结构，在数据库中查找相应的同构拓扑数据。

在上述步骤中，对根据特征点轮廓数据计算该静态图像的拓扑结构图，根据拓扑结构图的同构关系，在拓扑数据库中查找相应的同构拓扑数据。

步骤S706，根据获取到的同构拓扑数据，为该第一静态图像建立3D模型和动作。

在上述步骤中，在拓扑数据库中查找相应的同构拓扑数据后，为该第一静态图像建立3D模型和动作。

步骤S708，获取绘图后的第二静态图像。

在上述步骤中，对第二静态图像进行空间透视校正，得到一个和第一静态图像大小一致的图像(唯一的区别是，该图案已经被用户填上了各种颜色)。

步骤S710，输出第二静态图像对应的3D模型。

在上述步骤中，根据第二静态图像的轮廓数据计算得到拓扑数据，用第二静态图像的拓扑数据替换3D模型原有的纹理，然后把3D模型显示出来，从而使绘图呈现。

在本申请上述实施例中，提供了一种绘图静态图像的多媒体呈现方法，即在一些静态图案上面，用户可以根据自己喜好，把静态图片绘制成自己想要的颜色，然后通过摄像头拍摄，通过程序识别，扣出原始图像中根据特征点的匹配得出具体是哪一张静态的图像，把识别的图像进行空间透视矫正，得到一张和原始静态图案一样的图片(唯一的区别是，该图案已经被用户填上了各种颜色)，然后将矫正完以后的图片数据和预先做好的3D模型渲染，得到最终结果的图像，这样，就实现了用户绘制的内容，在电脑上面动起来了。

作为一种优选的实施方式，图8所示为一种让静态图案起来的方流程图，如图8所示，包括：

步骤S1，通过摄像头接收外部图像。

在上述步骤中，可以通过手机或平板电脑等智能设备的摄像头获取外部静态物品的图像，该静态物品可以为绘本书籍、纯手工绘本、添色绘本或实体玩具。

步骤S2，对图像进行分析处理。

在上述步骤中，在通过摄像头获取到外部静态物品的图像后，由于摄像装置拍摄的图像可能存在旋转、倾斜等问题，在获取物品页面上的静态图像后，需要进行空间透视失真矫正来得到与静态图像对应的电子图像，对电子图像的进行特征点轮廓分析和生物轮廓相关性模式识别，保存特征点轮廓数据和图片。

步骤S3，获取拓扑结构骨骼图。

在上述步骤中，在对电子图像的轮廓进行分析得到轮廓数据后，对轮廓数据进行填充锐化缝补连接操作，然后对图像数据进行ReebGraph分析，得到图像的拓扑结构骨骼图。

步骤S4，获取生物图像数据。

在上述步骤中，根据对电子图像进行轮廓分析得到的轮廓数据，对电子图像中的目标对象抠图。

步骤S5，数据图形3D化矢量化。

在上述步骤中，在获取到电子图像中目标对象的图形后，对平面轮廓数据三角形化纹理化，对骨骼数据和轮廓数据进行匹配计算，使得数据图形3D化矢量化。

步骤S6，手势动作捕捉(根据动作捕捉，确定触发指定动作)。

在上述步骤中，通过跟踪器等动作捕捉设备获取用户的手势动作，触发相应的动作指令。

步骤S7，根据预制的3D动作，驱动渲染

在上述步骤中，根据预先设置保存的3D动作，对图片数据和3D模型进行渲染，得到最终结果图像。

此处需要说明的是，上述3D卡通动作可以由用户自定义，即自己制作手势动作对应的内容。

实施例2

根据本发明实施例，还提供了一种支架实施例，该支架可以为用于支撑移动设备(例如，手机，平板电脑)，与物品(例如，课本、绘本等)结合作为一种智能伴读工具。

图9是根据本发明实施例的一种支架示意图，如图9所示，该支架包括：固定夹901和支撑杆903。

其中，固定夹901，用于放置并固定移动设备；

支撑杆903，与固定夹铰接，用于支撑固定夹并固定至预设高度。

作为一种可选的实施例，上述移动设备可以为手机、平板电脑等智能移动设备；上述固定夹901，可以用于将目前市面上不同的大小尺寸的手机、平板电脑夹持或固定，上述支撑杆用于支撑并将上述固定夹置于一定的高度，由于固定夹与支撑杆铰接，固定夹可以转动任意角度，以满足用户最佳的视角。

一种可选的实施例中，上述支架、绘本和智能移动设备相结合，可以作为一种智能互动伴读工具，将智能移动设备的的光学影像识别、图形分析处理以及云端传输及数据库等高科技技术，运用到3-6岁儿童早教培养中，可以驾驭各种不同类型、内容的中英文绘本。通过在智能移动设备内置卡通角色朗读，语音引导、智能交互功能，让孩子在读绘本、玩绘本的同时，从触觉、视觉、和听觉上全面体会学习的乐趣。

由上可知，在本申请上述实施例中，提供了一种智能移动设备的支架，结合智能移动设备，可以作为一种智能伴读工具，利用智能移动设备的摄像头，可以将物品(例如，拼图、七巧板、积木玩具、课本、绘本或其他书籍)上的静态图像转换为相应的电子图像，根据从该电子图像中获取的信息，将静态图像以音频、视频或3D图像等多媒体的形式呈现出来，达到了将任意物品的平面图像以多媒体形式交互展示的目的，从而实现了节约教育成本、增强用户体验的技术效果，进而解决了现有技术无法实现将任何静态非电子类实物进行动画呈现的技术问题。

在一种可选的实施例中，如图10(a)所示，上述固定夹可以包括：斜板101，通过销轴与支撑杆转动连接；第一挡板103，与斜板的底端连接为一个整体结构，其中，第一挡板与斜板呈锐角设置。

基于上述实施例，在一种可选的实施方案中，如图10(b)所示，上述支架还包括：第一螺栓105，垂直穿过支撑杆与斜板连接，用于控制并固定斜板的倾斜角度。

在另一种可选的实施例中，如图11所示，上述固定夹包括：平台111，与支撑杆连接；至少两个第二挡板113，与平台的两端连接为一个整体结构，其中，至少两个第二档板与平台呈锐角设置。

一种可选的实施例中，上述采用如图11的平台，用户可以在平台下方放置拼图、积木玩具、绘本、书籍等，置于平台上的智能设备可以通过后摄像头，获取物品的静态图像，并在智能设备的显示屏上显示相应的3D图像或卡通动画。

基于上述实施例，在一种可选的实施方案中，如图12所示，上述支架还包括：第二螺栓115，用于固定支撑杆的高度，其中，支撑杆为可伸缩杆。

可选地，上述支撑杆也可以为定型软管，可以由用户任意设置高度和角度，提高用户体验效果。

通过上述实施方案，采用可伸缩支撑杆，用户可以根据自己的需求，将支撑杆进行升降选择。

在一种可选的实施例中，如图13所示，上述支撑杆可以为由多个连接杆通过销轴转动连接构成的连接部件131，用于将平台进行多个角度的旋转，其中，最上面的连接杆与平台连接。

在一种可选的实施例中，如图14(a)所示，上述支架还包括：反射镜141，设置在固定夹或移动设备上，用于将预设空间内的物品的静态图像反射至移动设备的摄像头中，其中，反射镜与固定夹或移动设备成预设角度，如图14(b)所示。

作为一种可选的实施例，上述反射镜可以设置在移动设备上，反射使用者在桌面放置的物品页面图像，使任意放置的移动设备的摄像头可以获取物品页面的静态图像，这大大方便了使用者，为书籍页面点读，实物图像的有声动画化，提供了必备的条件；优选地，将上述反射镜夹在摄像头的后面，如图14(a)所示，可以将使用者在书籍页面上面的各种操作(指令)识别出来，从而触发相应操作。

可选地，上述预设角度可以为45度，上述反射镜可以为平面镜或凸透镜。

一种可选的实施例中，如图15(a)所示的反射镜(反射镜中的镜面呈45度角设置)可以用于智能移动设备的后摄像头；如图15(b)的反射镜(反射镜中的镜面呈45度角设置)可以用于智能移动设备的前置摄像头。

在一种可选的实施例中，如图16所示，上述支架还包括：水平底座905，与支撑杆的底部连接，用于放置物品。

一种优选的实施例中，可以在水平底座的下满设置四个吸盘，用于更好地固定上述支架，保持平衡。

根据本发明实施例，还提供了一种动作捕捉跟踪器实施例，该动作捕捉跟踪器与支架配套使用，用于获取在物品上的操作指令信息。

一种可选的实施例中，上述动作捕捉跟踪器可以为如图17所示的指环或指套。

在上述实施例中，使用指环或指套作为识别标志，让使用者戴上指环，在书籍页面上面，进行点击触发各种操作。

此处需要说明的是，上述动作捕捉跟踪器为以下任意一种：小贴纸、涂料(例如，指甲油)、棍状指示物(例如，点读笔)。

作为一种优选的方式，将基于本申请上述实施例的支架(包括：反射镜)和互动指环或指套结合，配备相应的操作说明书和标配的绘本，可以作为孩子启蒙教育的伴读工具。

具体地，在上述实施方式中，在用户购买该伴读工具后，可以按照产品说明书安装组合手机/平板电脑支架和反射镜；首先，将移动设备(以平板电脑为例)放置在支架上，再将要阅读的绘本放在反射镜可识别的区域，打开平板电脑上对应的产品APP，开始进入学习过程；在一切就绪后，平板电脑先识别绘本封面判断是哪本书，然后进入正常翻页阅读场景中；将绘本翻到绘本任意页，平板电脑的APP程序通过图形识别后调用相应的音频、3D影像、动画演示等学习内容。

此处需要说明的是，在上述学习过程中，用户随时可以手戴指套，在绘本识别区域进行点读，屏幕内容会随之变化，生动演示；当用户点击“换书”按钮可以切换显示屏内容，阅读其他绘本。

作为一种优选的实施例，本装置支持互动内容自制功能，父母可以把家中已经有的任意一个绘本，按操作步骤录入APP，并对应录入自己的声音，和手指点读动作，制作完成之后，孩子就可以在此产品下正常阅读绘本，听到的是自己爸爸、妈妈讲解该绘本的内容。

优选地，本装置还支持绘本内容讲解分享功能：父母可以将自己讲解绘本的内容上传至云端，同时也可以听到其他父母讲解绘本的内容，让孩子学习到不同绘本、不同风格绘本的内容。

实施例3

根据本发明实施例，还提供了一种静态图像的多媒体呈现系统实施例。本发明实施例1中的静态图像的多媒体呈现方法可以在本发明实施例3的系统中执行。

图18是根据本发明实施例的一种静态图像的多媒体呈现系统示意图，如图18所示，该系统包括：摄像头181和处理器183。

摄像头181，用于获取电子图像，其中，电子图像是由物品上的静态图像拍摄得到的；

处理器183，用于获取电子图像中的信息；根据信息确定静态图像对应的多媒体数据，并呈现多媒体数据；其中，多媒体数据包括以下至少之一：音频、视频、3D图像用于获取电子图像中的信息；根据信息确定静态图像对应的多媒体数据，其中，多媒体数据包括以下至少之一：音频、视频、3D图像；呈现多媒体数据。

由上可知，在本申请上述实施例中，通过摄像装置拍摄物品，将物品(例如，课本、绘本或其他书籍)上的静态图像转换为相应的电子图像，根据从该电子图像中获取的信息，将静态图像以音频、视频或3D图像等多媒体的形式呈现出来，达到了将任意纸质平面图像以多媒体形式交互展示的目的，从而实现了节约教育成本、增强用户体验的技术效果，进而解决了现有技术无法实现将任何静态非电子类实物进行动画呈现的技术问题。

在一种可选的实施例中，上述处理器183还用于获取电子图像的特征信息；根据特征信息查找与电子图像匹配的3D图像。

在一种可选的实施例中，上述处理器183还用于获取电子图像中的目标对象的线条轮廓；根据特征信息查找与电子图像匹配的3D图像：根据线条轮廓查找与目标对象匹配的3D模型。

在一种可选的实施例中，上述处理器183还用于根据线条轮廓获取目标对象的至少一个部分的渲染信息；根据渲染信息对与目标对象匹配的3D模型进行渲染；呈现渲染后的3D模型。

在一种可选的实施例中，上述处理器183还用于获取电子图像中与物品上被操作的部位对应的位置信息，并根据位置信息查找与位置信息匹配的音频或视频；其中，操作包括：翻页、点击、触摸；根据位置信息查找与位置信息匹配的音频或视频。

在一种可选的实施例中，上述处理器183还用于通过动作跟踪器获取物品被操作的部位；根据部位确定电子图像中对应的位置信息。

在一种可选的实施例中，上述处理器183还用于播放音频或视频。

在一种可选的实施例中，上述摄像头181还用于获取预设空间内的物品上的静态图像；上述处理器183还用于对静态图像进行识别、空间透视矫正，得到电子图像。

在一种可选的实施例中，上述摄像头181还用于获取预设的手势动作，其中，手势动作由用户自定义设置；上述处理器183还用于根据手势动作，确定对多媒体数据的操作，其中，操作至少包括：暂停、切换或退出当前呈现的多媒体数据。

实施例4

根据本发明实施例，还提供了一种静态图像的多媒体呈现装置实施例。本发明实施例1中的静态图像的多媒体呈现方法可以在本发明实施例4的装置中执行。

图19是根据本发明实施例的一种静态图像的多媒体呈现装置示意图，如图19所示，该装置包括：第一获取模块191、第二获取模块193、确定模块195和输出模块197。

其中，第一获取模块191，用于获取电子图像，其中，电子图像是由物品上的静态图像拍摄得到的；第二获取模块193，用于获取电子图像中的信息；确定模块195，用于根据信息确定静态图像对应的多媒体数据，其中，多媒体数据包括以下至少之一：音频、视频、3D图像；输出模块197，用于呈现多媒体数据。

由上可知，在本申请上述实施例中，通过摄像装置拍摄物品，将物品(例如，课本、绘本或其他书籍)上的静态图像转换为相应的电子图像，根据从该电子图像中获取的信息，将静态图像以音频、视频或3D图像等多媒体的形式呈现出来，达到了将任意纸质平面图像以多媒体形式交互展示的目的，从而实现了节约教育成本、增强用户体验的技术效果，进而解决了现有技术无法实现将任何静态非电子类实物进行动画呈现的技术问题。

在一种可选的实施例中，上述第二获取模块还包括：第一获取子模块，用于获取电子图像的特征信息；上述确定模块还包括：第一查找模块，用于根据特征信息查找与电子图像匹配的3D图像。

在一种可选的实施例中，上述第二获取模块还包括：第二获取子模块，用于获取电子图像中的目标对象的线条轮廓；上述确定模块还包括：第二查找模块，用于根据线条轮廓查找与目标对象匹配的3D模型。

在一种可选的实施例中，上述输出模块还包括：第三获取子模块，用于根据线条轮廓获取目标对象的至少一个部分的渲染信息；第一处理模块，用于根据渲染信息对与目标对象匹配的3D模型进行渲染；第一输出子模块，用于呈现渲染后的3D模型。

在一种可选的实施例中，上述第二获取模块还包括：第四获取子模块，用于获取电子图像中与物品上被操作的部位对应的位置信息，其中，操作包括：翻页、点击、触摸；上述确定模块还包括：第三查找模块，用于根据位置信息查找与位置信息匹配的音频或视频。

在一种可选的实施例中，上述第二获取模块还包括：第五获取子模块，用于通过动作跟踪器获取物品被操作的部位；根据部位确定电子图像中对应的位置信息。

在一种可选的实施例中，上述输出模块还包括：第二输出子模块，用于播放音频或视频。

在一种可选的实施例中，上述第一获取模块还包括：第六获取子模块，用于获取预设空间内的物品上的静态图像；第二处理模块，用于对静态图像进行识别、矫正，得到电子图像。

实施例5

根据本发明实施例，还提供了一种基于云平台的多媒体资源共享系统实施例。本发明实施例1中的静态图像的多媒体呈现方法可以用于本发明实施例5的多媒体资源共享系统中执行。

图20是根据本发明实施例的一种基于云存储的多媒体资源共享系统示意图，如图20所示，该系统包括：服务器201和至少一个移动终端203。

作为一种可选的实施例，上述移动终端可以为计算机、智能手机、平板电脑等智能设备，上述服务器提供了一个基于云存储的多媒体资源共享平台，用户通过访问该平台可以下载或上传多媒体数据，其中，多媒体数据包括：基于上述静态图像的多媒体呈现方法制作的各种音频、视频、卡通动画、3D模型等成品文件，以及各种电子书籍、手绘本、图片等，一种可选的实施例中，用户可以通过手机上安装的APP下载其他用户上传的多媒体数据，也可以将自己制作的音频、视频等多媒体数据上传至平台，供其他用户下载；另一种可选的实施例中，用户可以通过访问网页版的多媒体资源共享平台，上传或下载多媒体数据文件。

一种可选的实施例中，通过多媒体资源共享平台还可以提供一些模板数据，例如一些卡通图案、3D模型等，用户可以通过下载这些有趣的元素用来将枯燥的课本制作成非常生动有趣的多媒体数据文件，增加孩子学习的兴趣。

一种可选的实施例中，通过上述多媒体资源共享平台，还可以给家长提供一个交流的平台，通过家长之间的交流和互动，探讨最适合培养孩子的教育方式。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如单元的划分，可以为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。

作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例方法的全部或部分步骤。而前述的存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

以上仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。