用户端界面的远程操作方法及系统的制作方法
【专利摘要】本发明提供了用户端界面的远程操作方法，包括：服务器根据用户端发出的呼叫请求信息，提取该用户端的标识信息，根据用户端的标识信息及客服端信息在该用户端与客服端之间建立语音通话服务；用户端通过语音通话服务向客服端下发用户端的界面显示数据操作请求；客服端根据界面显示数据操作请求，对用户端的显示界面进行操作。本发明还提供了用户端界面的远程操作系统。根据本发明，可以实现用户端借助语音通话向远程客服端下发用户端界面操作指示，从而使用户在自己不进行用户界面操作就可实现对用户界面进行浏览。
【专利说明】用户端界面的远程操作方法及系统
【技术领域】
[0001] 本发明涉及智能家居领域，特别涉及用户端界面的远程操作方法及系统。
【背景技术】
[0002] 随着自动化及互联网技术的不断发展，智能家居系统作为新兴的家居控制方式被 逐步应用到了现代化家居的电器控制中。智能家居系统是融合了自动化控制系统、计算机 网络系统和网络通讯技术于一体的网络化智能化的家居控制系统，以住宅为平台，通过智 能家居控制系统为控制核心给予实现。实现了对室内照明系统及室内电器等室内装置的电 控。使家庭生活更加安全、节能、智能、便利和舒适。智能家居控制系统通常具有用户操作 界面，此用户操作界面可在电视等可视设备上的显示，用户可通过对用户界面的操作，实现 对家居控制系统的操作控制。随着用户对电子商务等应用需求的不断提升，在家居控制系 统中还逐步纳入了对电子商务信息进行浏览及操作等功能，其功能具体可通过在远端设定 服务器等多种方式给予实现。但同时也增加了用户界面的复杂程度，与此同时，由于用户界 面的操作需要借助遥控器等设备进行，用户需要在用户页面上进行相应的选取，致使对于 不便操作或操作不熟练的用户，将无法顺利实现对用户页面的浏览，使用户的操作难度提 高。由此可知，较为复杂的用户界面的用户体验效果较差，对于部分用户无法实现对用户界 面的操作，由此无法满足用户通过智能家居系统实现电子商务的需求。
【发明内容】
[0003] 鉴于现有技术中存在的情况，根据本发明的一个方面，提供了用户端界面的远程 操作方法，服务器根据用户端发出的呼叫请求信息，获取该用户端的标识信息，根据所述用 户端的标识信息及客服端信息在该用户端与客服端之间建立语音通话服务；
[0004] 所述用户端通过所述语音通话服务向所述客服端发送用户端的界面显示数据操 作请求；
[0005] 所述客服端根据所述界面显示数据操作请求，对所述用户端的显示界面进行操 作。
[0006] 在一些实施方式中，在所述服务器根据用户端发出的呼叫请求信息提取该用户端 标识信息的步骤之前包括：用户端通过本地处理装置加载显示模板，显示用户界面；从所 述用户界面上选取呼叫请求按钮以发出呼叫请求信息。
[0007] 在一些实施方式中，所述用户端通过所述本地处理装置加载显示模板，显示用户 界面的步骤包括：若显示模板加载失败，则根据用户端的用户标识从所述服务器的数据库 中调用该用户对应的显示模板及与之对应的变量信息，根据调用的用户显示模板及与之对 应的变量值加载所述用户界面，显示用户界面。
[0008] 在一些实施方式中，所述服务器根据所述用户端标识信息及客服端信息在该用户 端与客服端之间建立语音通话服务的步骤包括：服务器通过所述用户端标识信息及客服对 应记录确定客服端信息；根据所述用户端标识信息，获取用户端拨叫号码，根据所述客服端 信息，获取客服端拨叫号码；根据所述用户端拨叫号码及所述客服端拨叫号码，在该用户端 与客服端之间通过IP电话呼叫建立语音通话服务。
[0009] 在一些实施方式中，在所述服务器根据用户端发出的呼叫请求信息，获取该用户 端的标识信息的步骤后，还包括：服务器记录该发起呼叫的用户端状态为呼叫状态，并记录 呼叫请求时间；服务器将所述用户端的呼叫状态及所述呼叫请求时间发送到所述客服端。 [0010] 在一些实施方式中，所述根据所述用户端拨叫号码及所述客服端拨叫号码，在该 用户端与客服端之间通过IP电话呼叫建立语音通话服务的步骤包括：客服端确定所述服 务器上的用户端状态为呼叫状态后，在所述呼叫请求时间累计设定时间内，若服务器未建 立语音通话服务，则由所述客服端向服务器发出建立请求；服务器根据所述建立请求中包 含的用户端拨叫号码及所述客服端拨叫号码，在该用户端与客服端之间建立语音通话服 务，或由客服端用本地的客服端拨叫号码向用户端拨叫号码发起呼叫，在该用户端与客服 端之间建立语音通话服务。
[0011] 在一些实施方式中，所述服务器根据所述用户端标识信息及客服端信息在该用户 端与客服端之间建立语音通话服务的步骤包括：服务器通过所述用户端的标识信息及客服 对应记录确定客服端信息；服务器根据所述用户端与客服端的对应信息，将所述用户端标 识信息发送到所述客服端；所述客服端根据所述用户端标识信息获取用户端拨叫号码；所 述客服端通过本地号码向所述用户端拨叫号码发起呼叫，在用户端与客服端之间建立语音 通话服务。
[0012] 在一些实施方式中，所述客服端根据所述客服端的操作权限及所述用户端的界面 显示数据操作请求，对所述用户端的显示界面进行操作。
[0013] 在一些实施方式中，所述客服端根据所述界面显示数据操作请求，对所述用户端 的显示界面进行操作的步骤包括：所述客服端根据所述界面显示数据操作请求，对所述用 户端的显示界面中的数据变量进行操作，并将操作后的数据发送到用户端的显示界面上进 行显示；或所述客服端根据所述界面显示数据操作请求，登录用户端账户，根据所述界面显 示数据操作请求，对所述用户端的显示界面进行操作。
[0014] 本发明另外一方面提供了用户端界面数据的远程操作系统，包括：
[0015] 包括：在服务器上配置的用户端及客服端，所述客服端与所述用户端分别配置语 音通话装置；所述服务器配置为根据用户端发出的呼叫请求信息获取该用户端的标识信 息；根据所述用户端的标识信息及客服端信息在该用户端与客服端之间建立语音通话服 务；所述用户端配置为通过所述语音通话服务向所述客服端发送用户端的界面显示数据操 作请求；所述客服端配置为根据所述界面显示数据操作请求，对所述用户端的显示界面进 行操作。
[0016] 在一些实施方式中，所述用户端包括，本地处理装置配置为加载显示模板，显示用 户界面；从所述用户界面上选取呼叫请求按钮以发出呼叫请求信息。
[0017] 在一些实施方式中，所述本地处理装置包括：加载显示单元配置为若显示模板加 载失败，则根据用户端的用户标识从所述服务器的数据库中调用该用户对应的显示模板及 与之对应的变量值，根据调用的用户显示模板及与之对应的变量信息加载所述用户界面， 显示用户界面。
[0018] 在一些实施方式中，所述服务器还包括：通话单元配置为通过所述用户端标识信 息及客服对应记录确定客服端信息；根据所述用户端标识信息，获取用户端拨叫号码；根 据所述客服端信息，获取客服端拨叫号码；根据所述用户端拨叫号码及所述客服端拨叫号 码，在该用户端与客服端之间通过IP电话呼叫建立语音通话服务。
[0019] 在一些实施方式中，所述服务器还配置为服务器记录该发起呼叫的用户端状态为 呼叫状态，并提取呼叫请求时间；将所述用户端的呼叫状态及呼叫请求时间推送到所述客 服端。
[0020] 在一些实施方式中，所述客服端包括：呼叫监控单元配置为：客服端确定所述服 务器上的用户端状态为呼叫状态后，在所述呼叫请求时间累加设定时间内，若服务器未建 立语音通话服务，则由所述客服端向服务器发出建立请求，该建立请求中包括：客服端拨叫 号码、用户端拨叫号码；服务器根据所述建立请求中包含的用户端拨叫号码及所述客服端 拨叫号码，在该用户端与客服端之间建立语音通话服务，或由客服端用本地的客服端拨叫 号码向用户端拨叫号码发起呼叫，在该用户端与客服端之间建立语音通话服务。
[0021] 在一些实施方式中，所述服务器还配置为：通过所述用户端的标识信息及客服对 应记录确定客服端信息，根据所述用户端与客服端的对应信息，将所述用户端标识信息发 送到所述客服端；所述客服端还配置为：根据所述用户端标识信息获取用户端拨叫号码； 通过本地号码向所述用户端拨叫号码发起呼叫，在用户端与客服端之间建立语音通话服 务。
[0022] 在一些实施方式中，所述客服端还配置为：根据所述客服端的操作权限及所述用 户端的界面显示数据操作请求，对所述用户端的显示界面进行操作。
[0023] 在一些实施方式中，所述客服端还配置为：根据所述界面显示数据操作请求，对所 述用户端的显示界面中的数据变量进行操作，并将操作后的数据发送到用户端的显示界面 上进行显示；或根据所述界面显示数据操作请求，登录用户端账户，根据所述界面显示数据 操作请求，对所述用户端的显示界面进行操作。
[0024] 与现有技术相比，根据本发明的方案具有以下优点：本发明中通过服务器等第三 方监控用户的呼叫状态，用户可借助语音通话向远端的客服人员下发希望进行的用户界面 操作，从而实现对所需用户界面内容的浏览及操作。从而对于无操作经验的用户及行为残 障人士可实现对系统的快速使用。可针对客户喜好提供相应服务，使用户对系统的依赖度、 信任度及好感度都有显著提高。
【专利附图】
【附图说明】
[0025] 图1为本发明一实施例中用户端界面的远程操作系统的组成示意图；
[0026] 图2为根据本发明一实施例的用户界面的示例；
[0027] 图3是本发明一实施方式的用户端界面的远程操作方法的系统示意框图；
[0028] 图4是本发明一实施方式的用户端界面的远程操作方法的数据链路示意图。
【具体实施方式】
[0029] 下面结合附图对本发明作进一步详细的说明。
[0030] 如图1所示，本发明一实施方式的适用于用户端界面的操作方法的系统包括：一 个或多个用户端10、服务器20及客服端30。其中，用户端10及客服端30都配置在服务器 20的设备列表上。用户端10及客服端30分别配置用户语音通话装置12及客服语音通话 装置32。
[0031] 用户端10为用户提供本地浏览与操作用户界面的服务。用户可通过选取用户界 面上的"呼叫按钮"，向服务器20发出用户端的呼叫请求信息。同时，用户端10可通过与客 服端30所建立语音通话，下发用户希望对本地用户界面的操作，从而使用户可动态浏览到 用户希望得到的显示内容。
[0032] 服务器20根据用户端10发出的呼叫请求信息，从中提取该用户端10的标识信 息，并根据标识信息及在本地预存的客户端10与客服端30的对应关系，确定客服端30的 呼叫号码，从而在用户端10与客服端30之间建立语音通话服务。
[0033] 客服端30通过本地配置的语音通话设备与用户端10进行通话，根据语音通话中 用户端所发送的显示界面的操作请求，在系统后台对用户端的显示界面进行远程控制及操 作，使用户端显示用户希望浏览的界面内容。
[0034] 由此可知，通过该系统解决了用户无法对用户界面操作时，不能操作并浏览用户 界面内容的问题，可以实现用户通过语音通话上报界面操作指示的功能，从而简化了用户 的操作难度，提高了用户体验。
[0035] 在每个用户端10中设置本地处理装置11。在本地处理装置11中预存了用户的唯 一标识码，标识码可唯一验证用户身份；同时还预存了显示模板。在用户启动本地处理装置 11时，用户会通过标识码登录服务器20进行身份验证，同时会在用户本地加载显示模板。 在本地处理装置11与电视的数据接口连接后，可在电视的屏幕上实现智能家居控制器11 内部预存的用户界面的显示，从而实现对用户界面的显示。在用户界面为多层显示页面，用 户浏览各层的页面时，需要在多层用户页面的各层间进行切换。用户可通过与本地处理装 置11配套的遥控器上的选择键对照用户界面上的显示项目及页面切换控件进行拾取，从 而实现用户浏览页面的功能。用户界面上可包括：产品信息、促销信息、广告信息、购物车、 交易确认等信息。，此外，在用户界面上还可设有"呼叫控件"，用户选取后即可发出呼叫请 求。
[0036] 图2显示了根据本发明一实施例的用户界面的示例。图中：
[0037] D01表示商品分类显示框，是商品类别1、2…….等类别名称信息的显示窗口，可 通过静态或动态的图片。
[0038] D02表示商品查询显示框,可输入待查询商品的名称。
[0039] D03表示账户信息显示框，包含账户名称等与用户端10本地账户有关的信息。
[0040] D04表示购物车信息显示框，包含当前购买产品的数量及相关信息。
[0041] D05表示成交记录信息显示框，包括用户端10本地账户的购买历史信息。
[0042] D06表示客服信息显示框，包括用户端10对应客服端30的基本文字及图片信息。
[0043] D07表示呼叫控件，用户端10用户可通过对此控件的选取，向服务器20发起呼叫 请求。
[0044] D08表示广告展示显示框，包括广告商的商品内容的文字、图片及视频信息的展 /_J、1 〇
[0045] D09表示查询结果展示显示框，对D02中的用户查询结果给予显示，显示方式为文 字或图片信息列表。
[0046] 该用户界面可以采用多种计算机语言以软件等常规的手段实现，在此不再赘述。
[0047] 上述本地处理装置11在具体实施时可选用智能家居控制器Control4公司的 HC800, HC250, HC1000及在iPad、iPhone、Androld系统等设备上配置器本地处理装置11的 核心操作软件来实现。本地处理装置11中包括加载显示单元110。此单元包括两种工作 方式，其一，模板显示单元110根据用户端的用户标识码从服务器20的用户数据库中调用 与本用户及本地模板对应(可将标识码设定为数据库中的关键字来实现）的变量信息，如图 2中的D01、D02?D06、D08等控件的变量信息，通过从服务器20的用户数据库中调用的变 量信息及本地所保存的本地模板来加载用户界面。其中的变量可采用XML格式，从而实现 了用户界面的显示。另外一种方式是，当本地模板不存在或不可用时，根据用户端的用户标 识码从服务器20的数据库中调用用户显示模板及与之对应的变量信息，根据调用用户显 示模板及与之对应的变量信息加载用户界面，最终实现用户界面的显示。需要说明的是，随 着语音通话技术的发展，在每个用户端10所配置的语音通话设备，除了普通语音电话还可 配置有可视电话设备，由于本地处理装置11是具有智能家居控制功能的处理装置，因此用 户端本地的用户语音通话装置12是否为可视或其他类别，应该可使客服端30的语音通话 装置32的类型给予相应的切换，如：当用户端10配置为可视语音通话设备时，客服端20的 通话设备也可选择为可视语音通话设备，从而进一步提高了用户的体验效果。
[0048] 在服务器20中包括：电商服务器21、会话控制服务器22、身份认证服务器23、即 时通讯服务器24、数据库服务器25、运营管理服务器26及SIP电话交换服务器27。
[0049] 电商服务器21的作用在于为最终用户提供用户界面数据的服务，提供用户浏览 商品的服务，执行设置的电子商务交易工作流程，并可完成用户在线支付等重要流程。电商 服务器21与用户端10的本地处理装置11有线或无线连接，一方面包括每个用户端10各 自的显示变量，从而便于用户端10根据自身标识码在用户端10登录后通过标识码进行调 取；另外一方面包括各个商户的显示信息，如广告、促销内容及商品价目介绍等信息。在用 户界面上显示的内容多为动态变量，从而可便于随时的调整更新。
[0050] 会话控制服务器22中设置通话单元221。通话单元221中包括：用户端10及客 服端30的对应关系，在此对应关系包括用户端10及客服端20的标识信息，为便于处理，此 标识信息可采用用户标识码、客服标识码的方式，对应关系可为一对一对应关系，或一对多 对应关系。如表1中所示，其对应关系可通过数据列表等多种数据形式给予实现。
[0051] (表 1)
【权利要求】
1. 用户端界面的远程操作方法，其特征在于，包括： 服务器根据用户端发出的呼叫请求信息，获取该用户端的标识信息，根据所述用户端 的标识信息及客服端信息在该用户端与客服端之间建立语音通话服务； 所述用户端通过所述语音通话服务向所述客服端发送用户端的界面显示数据操作请 求； 所述客服端根据所述界面显示数据操作请求，对所述用户端的显示界面进行操作。
2. 根据权利要求1所述的控制方法，其特征在于，在所述服务器根据用户端发出的呼 叫请求信息提取该用户端标识信息的步骤之前包括： 用户端通过本地处理装置加载显示模板，显示用户界面； 从所述用户界面上选取呼叫请求按钮以发出呼叫请求信息。
3. 根据权利要求2所述的控制方法，其特征在于，所述用户端通过所述本地处理装置 加载显示模板，显示用户界面的步骤包括： 若显示模板加载失败，则根据用户端的用户标识从所述服务器的数据库中调用该用户 对应的显示模板及与之对应的变量信息，根据调用的用户显示模板及与之对应的变量值加 载所述用户界面，显示用户界面。
4. 根据权利要求2或3所述的操作方法，其特征在于，所述服务器根据所述用户端标识 信息及客服端信息在该用户端与客服端之间建立语音通话服务的步骤包括： 服务器通过所述用户端标识信息及客服对应记录确定客服端信息； 根据所述用户端标识信息，获取用户端拨叫号码，根据所述客服端信息，获取客服端拨 叫号码； 根据所述用户端拨叫号码及所述客服端拨叫号码，在该用户端与客服端之间通过IP 电话呼叫建立语音通话服务。
5. 根据权利要求4所述的操作方法，其特征在于，在所述服务器根据用户端发出的呼 叫请求信息，获取该用户端的标识信息的步骤后，还包括： 服务器记录该发起呼叫的用户端状态为呼叫状态，并记录呼叫请求时间； 服务器将所述用户端的呼叫状态及所述呼叫请求时间发送到所述客服端。
6. 根据权利要求5所述的操作方法，其特征在于，所述根据所述用户端拨叫号码及所 述客服端拨叫号码，在该用户端与客服端之间通过IP电话呼叫建立语音通话服务的步骤 包括： 客服端确定所述服务器上的用户端状态为呼叫状态后，在所述呼叫请求时间累计设定 时间内，若服务器未建立语音通话服务，则由所述客服端向服务器发出建立请求；服务器根 据所述建立请求中包含的用户端拨叫号码及所述客服端拨叫号码，在该用户端与客服端之 间建立语音通话服务，或 由客服端用本地的客服端拨叫号码向用户端拨叫号码发起呼叫，在该用户端与客服端 之间建立语音通话服务。
7. 根据权利要求2或3所述的操作方法，其特征在于，所述服务器根据所述用户端标识 信息及客服端信息在该用户端与客服端之间建立语音通话服务的步骤包括： 服务器通过所述用户端的标识信息及客服对应记录确定客服端信息； 服务器根据所述用户端与客服端的对应信息，将所述用户端标识信息发送到所述客服 端； 所述客服端根据所述用户端标识信息获取用户端拨叫号码； 所述客服端通过本地号码向所述用户端拨叫号码发起呼叫，在用户端与客服端之间建 立语音通话服务。
8. 根据权利要求1所述的操作方法，其特征在于，所述客服端根据所述客服端的操作 权限及所述用户端的界面显示数据操作请求，对所述用户端的显示界面进行操作。
9. 根据权利要求1所述的操作方法，其特征在于，所述客服端根据所述界面显示数据 操作请求，对所述用户端的显示界面进行操作的步骤包括： 所述客服端根据所述界面显示数据操作请求，对所述用户端的显示界面中的数据变量 进行操作，并将操作后的数据发送到用户端的显示界面上进行显示；或 所述客服端根据所述界面显示数据操作请求，登录用户端账户，根据所述界面显示数 据操作请求，对所述用户端的显示界面进行操作。
10. 用户端界面的远程操作系统，包括：在服务器上配置的用户端及客服端，所述客服 端与所述用户端分别配置语音通话装置； 所述服务器配置为根据用户端发出的呼叫请求信息获取该用户端的标识信息；根据所 述用户端的标识信息及客服端信息在该用户端与客服端之间建立语音通话服务； 所述用户端配置为通过所述语音通话服务向所述客服端发送用户端的界面显示数据 操作请求； 所述客服端配置为根据所述界面显示数据操作请求，对所述用户端的显示界面进行操 作。
11. 根据权利要求10所述的系统，其特征在于，所述用户端包括，本地处理装置配置为 加载显示模板，显示用户界面； 从所述用户界面上选取呼叫请求按钮以发出呼叫请求信息。
12. 根据权利要求11所述的系统，其特征在于，所述本地处理装置包括：加载显示单元 配置为若显示模板加载失败，则根据用户端的用户标识从所述服务器的数据库中调用该用 户对应的显示模板及与之对应的变量值，根据调用的用户显示模板及与之对应的变量信息 加载所述用户界面，显示用户界面。
13. 根据权利要求11或12所述的系统，其特征在于，所述服务器还包括：通话单元配 置为通过所述用户端标识信息及客服对应记录确定客服端信息；根据所述用户端标识信 息，获取用户端拨叫号码；根据所述客服端信息，获取客服端拨叫号码；根据所述用户端拨 叫号码及所述客服端拨叫号码，在该用户端与客服端之间通过IP电话呼叫建立语音通话 服务。
14. 根据权利要求13所述的系统，其特征在于，所述服务器还配置为服务器记录该发 起呼叫的用户端状态为呼叫状态，并提取呼叫请求时间；将所述用户端的呼叫状态及呼叫 请求时间推送到所述客服端。
15. 根据权利要求14所述的系统，其特征在于，所述客服端包括：呼叫监控单元配置 为：客服端确定所述服务器上的用户端状态为呼叫状态后，在所述呼叫请求时间累加设定 时间内，若服务器未建立语音通话服务，则由所述客服端向服务器发出建立请求，该建立请 求中包括：客服端拨叫号码、用户端拨叫号码；服务器根据所述建立请求中包含的用户端 拨叫号码及所述客服端拨叫号码，在该用户端与客服端之间建立语音通话服务，或 由客服端用本地的客服端拨叫号码向用户端拨叫号码发起呼叫，在该用户端与客服端 之间建立语音通话服务。
16. 根据权利要求11或12所述的系统，其特征在于，所述服务器还配置为：通过所述 用户端的标识信息及客服对应记录确定客服端信息，根据所述用户端与客服端的对应信 息，将所述用户端标识信息发送到所述客服端； 所述客服端还配置为：根据所述用户端标识信息获取用户端拨叫号码；通过本地号码 向所述用户端拨叫号码发起呼叫，在用户端与客服端之间建立语音通话服务。
17. 根据权利要求10所述的系统，其特征在于，所述客服端还配置为：根据所述客服端 的操作权限及所述用户端的界面显示数据操作请求，对所述用户端的显示界面进行操作。
18. 根据权利要求11所述的系统，其特征在于，所述客服端还配置为：根据所述界面显 示数据操作请求，对所述用户端的显示界面中的数据变量进行操作，并将操作后的数据发 送到用户端的显示界面上进行显示；或 根据所述界面显示数据操作请求，登录用户端账户，根据所述界面显示数据操作请求， 对所述用户端的显示界面进行操作。
【文档编号】H04M7/00GK104092710SQ201310110534
【公开日】2014年10月8日 申请日期:2013年4月1日 优先权日:2013年4月1日
【发明者】刘磊, 翁良荣, 何冰, 黄学胜 申请人:斯恩威（中国）自控系统工程有限公司