一种基于混合现实可视化的中文朗读培训方法与流程

本发明涉及混合现实可视化应用领域，特别涉及一种混合现实可视化的中文朗读培训方法中文朗读培训系统。

背景技术：

目前的中文朗读教育，由于很多课文情景的表述较为抽象，学生难以做到生动朗读。目前的中文朗读教育指导方法主要是使用平面展示方法，包括平面印刷，ppt，微课等方式来解读课文情景，指导朗读。采用此方法的缺点在于无法展示课文的三维空间场景，无法通过沉浸式的三维情景可视化来再现课文的情景，也无法针对不同的用户提供有针对性的指导。因此，一套能够使用混合现实设备的智能指导系统可以结合三维信息可视化，在实体空间中通过三维动可视化的方式生动展示抽象的课文情景，通过智能的指导，有效提高用户的中文朗读培训效果。

技术实现要素：

为解决上述问题，本发明提供一种基于混合现实可视化的中文朗读培训方法，包括如下步骤：

s10：开启混合现实系统；

s20：混合现实客户端对实体环境进行扫描，并将实体环境信息上传至混合现实服务器；

s30：用户通过混合现实客户端向混合现实服务器请求三维场景；

s40：混合现实服务器计算并分析实体环境信息，确定可用于展示三维可视化场景的空间位置；

s50：混合现实服务器查询并获取用户所请求的三维场景，混合现实服务器计算和分析用户所请求的三维场景，生成三维可视化场景；

s60：混合现实客户端将三维可视化场景展示于可用于展示三维可视化场景的空间位置；

s70：用户通过混合现实客户端观察到的三维可视化场景进行朗读。

优选地，s20中对实体环境进行扫描包括对用户的位置进行定位，并扫描用户的周围环境。

优选地，s50中所述三维可视化场景为带有朗读指导方案和交互方案的三维可视化场景。

本发明提供的基于混合现实可视化的中文朗读培训方法，通过使用混合现实设备，可以作到：在教室的中展示虚拟的课文场景；用户可以观察全息三维形象，并进行互动；可以根据实际环境信息及用户个人情况进行朗读指导智能定制。通过使用智能语音指导并结合混合现实设备追踪用户头部位置，视点，结合语文课文的情景，从而完成在实体教室中展示虚拟课文场景，并有效指导中文朗读。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明提供的基于混合现实可视化的中文朗读培训方法流程图；

图2为本发明提供的基于混合现实可视化的中文朗读培训方法方框图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明提供一种基于混合现实可视化的中文朗读培训方法，包括如下步骤：

s10：开启混合现实系统；混合现实系统，例如微软的hololens，谷歌眼镜等可以完成对周边环境的三维扫描，同时能够捕捉用户的位置信息以及显示全息图像；使得用户可以通过混合现实设备观看三维动画，全景视频等媒体；

s20：混合现实客户端对实体环境进行扫描，并将实体环境信息上传至混合现实服务器；对实体环境进行扫描包括对用户的位置进行定位，并扫描用户的周围环境；

s30：用户通过混合现实客户端向混合现实服务器请求三维场景；

s40：混合现实服务器计算并分析实体环境信息，确定可用于展示三维可视化场景的空间位置；

s50：混合现实服务器查询并获取用户所请求的三维场景，混合现实服务器计算和分析用户所请求的三维场景，生成三维可视化场景；三维可视化场景为带有朗读指导方案和交互方案的三维可视化场景

s60：混合现实客户端将三维可视化场景展示于可用于展示三维可视化场景的空间位置；

s70：用户通过混合现实客户端观察到的三维可视化场景进行朗读。

实施例：对《青蛙写诗》的混合现实朗读教学。

人教版小学语文一年级上册(2016年教育部审定版)第7课；

实际场景：长宽大于3m*3m的教学空间；

佩戴设备：混合现实头盔系统；

使用过程：

空间布局：学生佩戴混合现实头盔客户端并启动混合现实头盔客户端程序。混合现实头盔客户端学生的位置及扫描学生周围的场景信息。根据预先设置的课文场景数据，即远景、中景、近景的设置以极坐标的方式部署三维场景内容的水平空间距离摆放；以高、中、低的设置布置三维场景内容的高度摆放；物体距离极坐标中心的角度系统按照物体在空间中均匀分布的原则自动完成。具体来说，需要将课文场景中的青蛙设置在(0，0°)水平位置，高度为0；小蝌蚪设置在(1，45°)位置，高度为0；水泡设置在(2，90位置)，高度-1；荷叶设置在(3，135°)位置，高度为1；以上长度和高度单位均为米。

朗读讲解与用户交互：

空间布局完成后，开始播放示范朗读。示范朗读中如果有和空间分布的三维可视化场景中的物体相关的朗读要点，则这些朗读要点会通过文本框提示的方式，在示范朗读的对应时间点，标注在相关三维可视化场景中的物体的对应位置。提示的内容主要用于说明正确的朗读应该如何依照课文中对应的物体的空间关系(例如远近、大小等)来安排朗读的正确方法(例如音量、语气、语调、节奏快慢等)。此外，在示范朗读的播放过程中，用户可以通过在移动到对应的场景三维物体位置，听取对应课文内容的朗读讲解。例如，用户移动到三维可视化场景中的水泡的位置，则除了朗读示范外，可以针对课文相关原文“池塘里的水泡泡说，我能当个小句号”，讲解如何结合水泡的空间位置和特点，来调整朗读的语气与节奏。

本发明提供的基于混合现实可视化的中文朗读培训方法，通过使用混合现实设备，可以作到：在教室的中展示虚拟的课文场景；用户可以观察全息三维形象，并进行互动；可以根据实际环境信息及用户个人情况进行朗读指导智能定制。通过使用智能语音指导并结合混合现实设备追踪用户头部位置，视点，结合语文课文的情景，从而完成在实体教室中展示虚拟课文场景，并有效指导中文朗读。

最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

技术特征：

技术总结
本发明提供一种基于混合现实可视化的中文朗读培训方法，包括如下步骤：混合现实客户端对实体环境进行扫描，并将实体环境信息上传至混合现实服务器；用户通过混合现实客户端向混合现实服务器请求三维场景；混合现实服务器确定可用于展示三维可视化场景的空间位置；混合现实服务器查询并获取用户所请求的三维场景，混合现实服务器计算和分析用户所请求的三维场景，生成三维可视化场景；混合现实客户端将三维可视化场景展示于可用于展示三维可视化场景的空间位置。通过使用智能语音指导并结合混合现实设备追踪用户头部位置，视点，结合语文课文的情景，从而完成在实体教室中展示虚拟课文场景，并有效指导中文朗读。

技术研发人员：李建勋
受保护的技术使用者：李建勋
技术研发日：2018.07.19
技术公布日：2018.12.18