移动互联网网络环境下的新型通话辅助系统研究方法
【专利摘要】本发明涉及一种移动互联网网络环境下的新型通话辅助系统研究方法，主要是在两个移动终端建立通话过程中，配合网络传输步骤，综合利用了拍照、绘图、情境模拟步骤，分别实现图像辅助功能、实时动态交互图形绘制、情境模拟，由此以填补用户在语音视频通话过程中无法完全表达双方语意的空白，有助于彼此的沟通与互动。
【专利说明】
移动互联网网络环境下的新型通话辅助系统研究方法
技术领域
[0001]本发明涉及一种移动通话技术，尤指一种应用于移动互联网网络环境下的新型通话辅助系统研究方法。
【背景技术】
[0002]目前，手机的应用已经深入千家万户，成为多数人与人之间联络的必备工具，利用手机，人们不仅可以进行语音通话，而且随着通信技术的不断发展，特别是4G时代的到来，人们亦可通过智能终端手机进行语音视频通话，如此，使得人与人之间的交流联系愈来愈方便。
[0003]然而，当用户遇到相关的问题难以用声音或简单的视频完整描述时，采用语音视频通讯即有它的弊端存在，如此，则有必要提出一种有助于沟通与互动的图形化辅助通话方法，以解决现有技术所带来的种种问题。
【发明内容】
[0004]鉴于上述现有技术的缺点，本发明目的在于提供一种移动互联网网络环境下的新型通话辅助方法，以弥补用户在语音视频通话过程中无法完全表达双方语意的空白，有助于彼此的沟通与互动。
[0005]为达到上述目的，本发明给出的技术方案表征为:
[0006]—种移动互联网网络环境下的新型通话辅助方法，应用于支持互联网网络的移动终端中，其特征在于，包括如下步骤:
[0007]步骤I，拍照:摄取图像数据，并在摄取之后将获取到的图像数据予以输出，且产生第一触发信号；
[0008]步骤2，绘图:接收步骤I中输出的图像数据，以基于所述图像数据进行绘制或调整处理，或用以直接提供图形的绘制，而形成图片数据，并产生第二触发信号，所述绘制采用双缓冲绘图技术，以实现动态交互图形绘制；
[0009]步骤3，情境模拟:采用多个情境元素库，以提供进行所需情境的模拟处理，而形成特定情境模拟数据，并产生第二触发信号，其中，所述情境元素库中包含符合该情境的各种不同的物理元素，当选择其中一个情境元素库时，则提供自所选择的情境元素库中提取所需要的元素，组合添加到移动终端的屏幕上，以画出所需的动态模型，而得到特定的情境模拟数据；以及
[0010]步骤4，网络传输:通过第一传输协议与第二传输协议，用以在2个移动终端建立通话过程中；接收到第一触发信号时，依据第一传输协议并通过所述移动互联网网络将所述图像数据同步发送到对方移动终端，而在接收到第二触发信号时，依据第二传输协议并通过所述移动互联网网络将相应的图片数据或特定情境模拟数据同步发送到对方移动终端。
[0011]所述第一传输协议与第二传输协议均采用超时重传和捎带确认机制。
[0012]其中，该第一传输协议与第二传输协议均采用超时重传和捎带确认机制，而该第一传输协议为TCP协议，该第二传输协议为UDP协议。
[0013]此外，该2个移动终端建立通话的工作模式可为全双工工作模式，或者半双工工作模式。
[0014]以下结合上述技术方案，说明本发明的有益技术效果。
[0015]相比于现有技术，本发明主要是在2个移动终端建立通话过程中，在网络传输步骤中，利用图像辅助、实时动态交互图形绘制、情境模拟，由此以填补用户在语音视频通话过程中无法完全表达双方语意的空白，有助于彼此的沟通与互动。
【附图说明】
[0016]图1为本发明研究方法示意图。
【具体实施方式】
[0017]以下通过特定的具体实例说明本发明的实施方式，所属领域的普通技术人员可由本说明书所揭示的内容轻易地了解本发明的其他优点与功效。本发明亦可通过其他不同的具体实例加以施行或应用，本说明书中的各项细节亦可基于不同观点与应用，在不背离本发明的精神下进行各种修饰与变更。
[0018]请参阅图1，其为显示本发明的方法示意图。如图所示，本发明方法应用于支持互联网网络的移动终端中，其中，该移动终端可例如为智能手机或个人数字助理(PDA)。
[0019]本发明方法中涉及的绘图步骤，一方面可用以接收拍照后所输出的图像数据，以基于该图像数据进行绘制或调整处理，而形成图片数据，例如，当移动终端使用者欲描述自己当前所处的地理位置，可以使用该拍照步骤摄取当前所处地理位置附近的图像数据，然后，通过绘图步骤在该图像数据基础上重点圈出自己所处的位置，以形成图片数据；
[0020]或者，另一方面，绘图步骤中也可用以在没有其他图像数据来源的前提下，直接提供图形的绘制，以形成图片数据;且在形成图片数据后即产生第二触发信号。于本实施例中，图片的绘制是指绘制自由线条，如直线、任意矩形、任意圆等，以及橡皮擦等操作；图片的调整是指对图片的放大缩小、拖动等操作，或者是实现两块画布切换过程中的动画特效。优选地，该绘图模块12是采用双缓冲绘图技术，以实现动态交互图形绘制。
[0021]该情境模拟模块14具有多个情境元素库，以提供进行所需情境的模拟处理，而形成特定情境模拟数据，并产生第二触发信号。在本实施例中，该情境模拟模块14是利用例如Box2D的物理引擎与例如Qt的Graphics View的图形视图框架结合实现的，每个情境元素库中包含符合该情境的各种不同的物理元素，当移动终端使用者选择某一个情境元素库时，即可自该情境元素库中提取自己所需要的元素，组合添加到移动终端屏幕上，以画出所需的动态模型，而得到特定的情境模拟数据，如此，当用户在遇到相关的问题难以用声音描述完整时，可以使用情境模拟来帮助彼此的沟通。
[0022]此处需予以说明的是，前述2个移动终端建立通话的工作模式可例如为全双工工作模式，在该工作模式下，移动终端的通讯双方能同时在图片或文本上进行操作，这样可以使通讯双方之间的沟通更加方便，交流更加随心所欲。但不以此为限，在其他实施例中，亦可采用半双工工作模式，例如在某一时刻只允许通讯一方载入图片，以为了防止产生混乱。
[0023]为更详尽了解应用本发明如何使用拍照、绘图方法以实现辅助通话的功效，以下配合图1，以移动终端通讯双方A与B在建立通话过程中讨论A所处地理位置为例进行说明。当通讯双方A与B在建立通话过程中，A无法用语音明确界定其所处地理位置时，A则可通过拍照摄取A所处地理位置周边的图像，在摄取之后将获取到的图像数据分别予以输出进行后续的绘图，同时产生第一触发信号，并将该第一触发信号传输予网络传输步骤，消息分发步骤41接收到该第一触发信号后，即对应产生并输出第一控制信号，而控制网络通讯步骤42依据TCP协议并通过移动互联网网络将相应的图像数据同步发送到B的移动终端，于此同时，A通过绘图步骤在该图像数据基础上重点圈出自己所处的位置，以形成比较形象的图片数据，并产生第二触发信号，消息分发步骤41接收到该第二触发信号后，即对应产生并输出第二控制信号，而控制网络通讯步骤42是依据UDP协议并通过移动互联网网络将相应的图像数据同步发送到B的移动终端，如此，B即可结合A同步传输的图片而明确A所要表达的地理位置，进而填补通讯双方在语音视频通话过程中无法完全表达双方语意的空白。而且A通过绘图步骤在图像数据上添置的任一笔，都会通过第二触发信号，及时触发网络传输同步传输予B的移动终端，实现即拍即绘即传即享的效果。
[0024]此外，为更详尽了解应用本发明方法如何使用情境模拟步骤以实现辅助通话的功效，以下以移动终端通讯双方C与D在建立通话过程中讨论某个电路图的布局为例进行说明。当通讯双方C与D在建立通话过程中，(:与0无法明确叙明该电路图中的某一布局时，C或D任一方(以下以C为例)可通过情境模拟选择电子元器件这一个情境元素库，该情境元素库中包含有属于电子元器件的各种元件，则C可自该情境元素库中提取自己所需要的元件，组合添加到移动终端屏幕上，以画出自己所要表达的电路布局，并产生第二触发信号，消息分发步骤接收到该第二触发信号后，即对应产生并输出第二控制信号，而控制网络通讯步骤依据UDP协议并通过移动互联网网络将相应的电路布局同步发送到D的移动终端，D若对C所描述的电路布局持不同意见，也通过前述方式利用情境模拟绘制自己所要表达的电路布局，如此，即可利用图形很好的辅助通话双方的沟通能力。
【主权项】
1.一种移动互联网网络环境下的新型通话辅助系统研究方法，其应用于支持移动互联网网络的移动终端中，其特征在于，包括如下步骤: 步骤I，拍照:摄取图像数据，并在摄取之后将获取到的图像数据予以输出，且产生第一触发信号； 步骤2，绘图:接收步骤I中输出的图像数据，以基于所述图像数据进行绘制或调整处理，或用以直接提供图形的绘制，而形成图片数据，并产生第二触发信号，所述绘制采用双缓冲绘图技术，以实现动态交互图形绘制； 步骤3，情境模拟:采用多个情境元素库，以提供进行所需情境的模拟处理，而形成特定情境模拟数据，并产生第二触发信号，其中，所述情境元素库中包含符合该情境的各种不同的物理元素，当选择其中一个情境元素库时，则提供自所选择的情境元素库中提取所需要的元素，组合添加到移动终端的屏幕上，以画出所需的动态模型，而得到特定的情境模拟数据；以及 步骤4，网络传输:通过第一传输协议与第二传输协议，用以在2个移动终端建立通话过程中；接收到第一触发信号时，依据第一传输协议并通过所述移动互联网网络将所述图像数据同步发送到对方移动终端，而在接收到第二触发信号时，依据第二传输协议并通过所述移动互联网网络将相应的图片数据或特定情境模拟数据同步发送到对方移动终端。2.根据权利要求1所述的方法，其特征在于，步骤4中， 又包括: 步骤41，消息分发:通过接收步骤1、步骤2、步骤3执行完的数据，用以获得第一触发信号与第二触发信号，再产生并输出第一控制信号与第二控制信号；以及 步骤42，网络通讯:对第一传输协议与第二传输协议进行储存，用以在2个移动终端建立通话过程中，且接收到所述消息分发步骤41输出的第一控制信号时，依据第一传输协议并通过所述移动互联网网络将所述图像数据同步发送到对方移动终端，而在接收到第二控制信号时，依据第二传输协议并通过所述移动互联网网络将相应的图片数据或特定情境模拟数据同步发送到对方移动终端。
【文档编号】H04L29/06GK106060001SQ201610301382
【公开日】2016年10月26日
【申请日】2016年5月9日
【发明人】程久军, 黄震华
【申请人】同济大学