CRF的自动录入方法和装置、电子设备和存储介质与流程

crf的自动录入方法和装置、电子设备和存储介质
技术领域
1.本技术属于计算机数据处理技术领域，具体涉及一种crf的自动录入方法、装置、电子设备和存储介质。


背景技术：

2.病例报告表(case report form，crf)，是按试验方案规定设计的一种文件，用以记录每一名受试者在试验过程中的数据，可用于向研究基地、申办者和统计部门提供临床试验的相关数据。在临床试验中，将受试者的资料录入并对照录入crf需要耗费大量人力时间。
3.公开于该背景技术部分的信息仅仅旨在增加对本技术的总体背景的理解，而不应当被视为承认或以任何形式暗示该信息构成已为本领域一般技术人员所公知的现有技术。


技术实现要素：

4.本技术的目的在于提供一种crf的自动录入方法，其用于解决受试者资料录入crf耗费人力成本高的问题。
5.为实现上述目的，本技术提供了一种crf的自动录入方法，所述方法包括：
6.配置待录入crf的特征值和字段映射；
7.从受试者资料中识别文本信息，其中，所述文本信息包括受试者信息和化验项明细信息；
8.基于所述受试者信息匹配对应的受试者；
9.基于所述化验项明细信息和待录入crf的特征值，从所述待录入crf中匹配所述对应受试者的目标crf；
10.基于所述字段映射，将所述识别的文本信息映射至所述目标crf。
11.一实施例中，还包括：
12.对历史受试者资料添加标识符，并将从其中识别的历史文本信息归档；
13.基于所述标识符判断所述历史受试者资料中是否存在与所述受试者资料重复的目标资料文本；若是，
14.判断当前识别规则与所述目标资料文本对应的历史文本信息的识别规则是否一致；若是，
15.将所述对应的历史文本信息确定为所述受试者资料的文本信息。
16.一实施例中，从受试者资料中识别文本信息，具体包括：
17.展示受试者资料的上传界面；
18.响应于对所述上传界面的格式选择操作，确定所述受试者资料的类型；
19.基于所述受试者资料的类型，调用对应的光学字符识别模型从所述受试者资料中识别文本信息。
20.一实施例中，从受试者资料中识别文本信息，具体包括：
21.基于光学字符识别模型从受试者资料中识别原始文本信息；
22.基于规则和近义词匹配从所述原始文本信息中筛选出所述文本信息。
23.一实施例中，所述方法还包括：
24.将所述原始文本信息展示至信息核对界面；
25.响应于对所述信息核对界面的编辑操作，修正所述原始文本信息。
26.一实施例中，基于所述受试者信息匹配对应的受试者，具体包括：
27.获取当前录入操作的定义域，其中，所述定义域包括时间范围信息和/或项目范围信息；
28.在所述定义域的范围内，匹配与所述受试者信息对应的受试者。
29.一实施例中，还包括：
30.将与所述受试者信息匹配的受试者展示至信息核对界面；
31.响应于对所述信息核对界面的操作，确定与所述受试者信息对应的受试者。
32.本技术还提供一种crf的自动录入装置，包括：
33.配置模块，用于配置待录入crf的特征值和字段映射；
34.识别模块，用于从受试者资料中识别文本信息，其中，所述文本信息包括受试者信息和化验项明细信息；
35.第一匹配模块，用于基于所述受试者信息匹配对应的受试者；
36.第二匹配模块，用于基于所述化验项明细信息和待录入crf的特征值，从所述待录入crf中匹配所述对应受试者的目标crf；
37.录入模块，用于基于所述字段映射，将所述识别的文本信息映射至所述目标crf。
38.本技术还提供一种电子设备，包括：
39.至少一个处理器；以及
40.存储器，所述存储器存储指令，当所述指令被所述至少一个处理器执行时，使得所述至少一个处理器执行如上所述的crf的自动录入方法。
41.本技术还提供一种机器可读存储介质，其存储有可执行指令，所述指令当被执行时使得所述机器执行如上所述的crf的自动录入方法。
42.与现有技术相比，根据本技术的crf的自动录入方法，通过配置待录入crf的特征值和字段映射，并通过受试者资料中识别的受试者信息和化验项明细信息匹配对应受试者的目标crf，可以将受试者资料中识别的文本信息自动映射至该目标crf，效率高且节约资源成本。
附图说明
43.图1是本技术crf的自动录入方法实施环境的示意图；
44.图2是根据本技术一实施例crf的自动录入方法的流程图；
45.图3是根据本技术一实施例crf的自动录入方法中，对受试者资料进行旋转的示意图；
46.图4是根据本技术一实施例crf的自动录入方法中，对受试者资料进行连续文本检测的示意图；
47.图5是根据本技术一实施例crf的自动录入方法中，在受试者资料上传界面中选择
项目范围信息的操作示意图；
48.图6是根据本技术一实施例crf的自动录入方法中，在受试者资料上传界面中选择时间范围信息的操作示意图；
49.图7根据本技术一实施例crf的自动录入装置的模块图；
50.图8是根据本技术一实施例电子设备的硬件结构图。
具体实施方式
51.以下将结合附图所示的各实施方式对本技术进行详细描述。但该等实施方式并不限制本技术，本领域的普通技术人员根据该等实施方式所做出的结构、方法、或功能上的变换均包含在本技术的保护范围内。
52.本技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本技术的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“对应于”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
53.在介绍本技术实施例之前，对本技术实施例涉及的基本概念进行示意性的解释：
54.药物的临床试验指的是在人体进行的药物系统性研究，以确定药物的疗效和安全性。药物临床试验阶段分为i期、ii期、iii期临床试验、iv期临床试验。i期主要是涉及初步的临床药理学及人体安全性评价试验。ii期可以理解为治疗作用初步评价阶段，主要涉及初步评价药物对目标适应症患者的治疗作用和安全性，也包括为iii期临床试验研究设计和给药剂量方案的确定提供依据。iii期可以理解为治疗作用确证阶段，主要进一步验证药物对目标适应症患者的治疗作用和安全性，评价利益与风险关系，最终为药物注册申请的审查提供充分的依据。iv期主要是药物上市后的临床试验，在药物上市后，可以继续追踪在广泛使用条件下的药物的疗效和不良反应，以评价在普通或者特殊人群中使用的利益与风险关系以及改进给药剂量等。
55.在临床试验过程中，可以按照临床试验方案制定设定crf，用于记录每一名受试者在试验过程中的临床试验数据。crf包括人口学属性表单、不良事件表单、合并/既往用药表单、pk样本采集表单、既往病史数据表单、献血史表单、过敏史表单、给药记录表单、凝血功能表单、尿常规表单、血常规表单等。edc(electronic data capture system，电子数据捕获系统)是适用于临床试验数据采集和传输的平台软件。edc系统的基本功能主要包含ecrf构建、数据保存和稽查轨迹、自动核查、数据质疑管理、源数据核查确认、电子签名、数据库的锁定、数据存储和导出等功能。
56.临床协调员(clinical research coordinator，crc)通俗解释为医生助理，可以是临床试验药的药厂聘请以辅助研究者的工作角色。crc的工作内容包括检查、稽查新药临床试验；协助设计临床试验方案、研究者手册、crf及相关文件；对临床试验相关医师、护师及试验相关人员的试验方案操作实施的培训；负责联系临床医生、患者，协调医患关系，准备临床研究相关资料，并负责病人试验预约、问题解答、治疗观察跟踪随访、临床试验监查
与管理。
57.临床监查员(clinical researchassociate，cra)是申办者与研究者之间的主要联系人。其人数及访视的次数取决于临床试验的复杂程度和参与试验的医疗机构的数目。监查员应有适当的医学、药学或相关专业学历，并经过必要的训练，熟悉药品管理有关法规，熟悉有关试验药物的临床前和临床方面的信息以及临床试验方案及其相关的文件。其监查的目的是为了保证临床试验中受试者的权益受到保障，试验记录与报告的数据准确、完整无误，保证试验遵循已批准的方案和有关法规。
58.参图1，示出了应用本技术实施例进行crf录入的场景图。该实施环境中包括终端和服务器。其中，终端与服务器之间通过通信网络进行数据通信，可选地，通信网络可以是有线网络也可以是无线网络，且该通信网络可以是局域网、城域网以及广域网中的至少一种。
59.终端可以是例如能通过浏览器访问服务器的电子设备，该电子设备可以是智能手机、平板电脑或个人计算机等等。服务器上部署有具有crf录入等功能的临床试验行业软件程序(比如edc系统)。终端通过网络访问平台服务器提供的临床试验行业软件程序，终端向平台服务器发送访问请求，访问请求中携带有用户标识，用户标识对应有用户权限。不同的用户权限，平台服务器可以向终端返回与用户权限对应的操作界面。不同的用户权限，平台服务器可以向终端返回与用户权限对应的操作界面。
60.在用户(比如crc或者cra)需要在某个项目或者某个项目下的访视中录入crf时，终端向服务器发送受试者资料，服务器从受试者资料中识别出文本信息，并对应地从项目或访视中匹配到受试者的目标crf，从而将受试者资料中的相关文本信息映射至该目标crf。
61.参图2，介绍本技术crf的自动录入方法的一实施例。在本实施例中，该方法包括：
62.s11、配置待录入crf的特征值和字段映射。
63.特征值用于标识某个特定的crf，可以理解的，这里配置的特征值应当是可以将不同的crf进行区分。也即，对于crf表a的特征值a，期望两者之间的对应关系是唯一的。
64.crf的特征值可以是各crf中的某条明细信息或者某几条明细信息的组合。例如，尿常规表单中包括“白细胞”、“红细胞”、“尿蛋白”、“胆红素”等检查项，对于这些检查项而言，“白细胞”、“红细胞”、“胆红素”也可能出现在血常规或者其它的crf中，因此可以选择“尿蛋白”作为尿常规表单的特征值。又例如，血常规表单中包括“淋巴细胞数目”、“中性细胞数目”、“白细胞数目”、“中间细胞数目”等检查项，而这四个检查项的组合可以确认对应的表单为血常规表单，因此，可以将这四个检查项组合作为血常规表单的特征值。再例如，核酸报告单中的“核酸化验项”是其独有的检查项，则可以直接将“核酸化验项”作为核酸报告单的特征值。
65.对于受试者资料而言，其中的文本信息的格式可能并不被采集方(例如edc系统)所认可。以时间信息为例，原始文本信息可能为“日期：2020年12月25日，时间：17点52分”，而对应到edc系统的crf中，时间信息是以时间戳的形式进行保存。因此，需要对这些不同数据格式之间配置字段映射，将原始文本信息转换成数据采集方认可的数据格式，也可以称之为标准格式。
66.s12、从受试者资料中识别文本信息。
67.识别的文本信息包括受试者信息和化验项明细信息。受试者信息可以是例如包括受试者的“姓名”、“性别”、“年龄”等。化验项明细信息可以是受试者资料中所包括的化验项，例如，对于血生化检验单，化验项明细信息可以包括“总蛋白”、“白蛋白”、“球蛋白”、“天门东氨酸转移酶”、“丙氨酸氨基转移酶”、“总胆汁酸”、“总胆红素”、“直接胆红素”、“间接胆红素”、“碱性磷酸酶”、“谷氨酰基转移酶”、“胆碱酯酶”、“乳酸脱氢酶”、“羟基酸脱氢酶”、“肌酸激酶”、“肌酸激酶同工酶”、“尿素”、“肌酐”、“尿酸”、“葡萄糖”、“钾”、“钠”、“氯”、“钙”、“磷”、“二氧化碳”、“甘油三酯”、“总胆固醇”、“高密度脂蛋白胆固醇”、“低密度脂蛋白胆固醇”、“载脂蛋白”等。
68.受试者资料可以是包括多种格式，例如pdf文档格式，png、jpeg、jpg、bmp等图片格式。在一些场景中，用户可以是将多份受试者资料通过终端打包进行上传。服务器在接收到压缩包后，解压出其中的受试者资料并分别进行识别，从而一次完成多份受试者资料的crf自动录入。
69.受试者资料中的文本信息可以是基于光学字符识别模型进行识别。光学字符识别(optical character recognition，ocr)是指针对印刷体字符，通过光学成像设备转换为电子文件，并利用识别软件将电子文件中的文字转换为文本格式。示范性地，成像设备可以是扫描仪、数码相机、带摄像功能的移动终端等。
70.本实施例中提出，可以根据受试者资料的类型，调用对应的光学字符识别模型从受试者资料中识别文本信息。具体地，可以首先展示受试者资料的上传界面，并响应于对上传界面的格式选择操作，以确定受试者资料的类型。
71.不同的受试者资料的格式，可能对应至不同的受试者资料的类型。例如，pdf格式的受试者资料通常对应至ct检查报告，图片格式的受试者资料可能对应至化验单或者ct检查报告。针对不同类型的受试者资料，光学字符识别模型可以是被预先针对性地建模和训练，从而在相应类型的受试者资料识别中具有较佳的准确性。
72.不同的光学字符识别模型可以是分别布置在多台独立的服务器上，基于受试者资料的类型，其会被上传至对应服务器进行识别；又或者，光学字符识别模型可以是布置在同一台服务器上，并由该服务器调用对应的光学字符识别模型进行识别，本技术对此不做限制。
73.本实施例中，受试者资料的格式确定可以是基于用户在上传界面的格式选择操作。在另一些实施例中，也可以是由服务器直接对受试者资料进行格式的智能识别。
74.在一些场景下，受试者资料的格式可能并不唯一对应某种类型的受试者资料，也即，基于用户在上传界面的格式选择操作可能并不能最终确定受试者资料的类型。这种情况下，上述服务器对受试者资料类型的智能识别还可以作为辅助确认受试者资料类型的依据。
75.一实施例中，光学字符识别模型可以是crnn网络模型。可选地，在利用光学字符识别模型进行文本信息识别前，还可以根据不同受试者资料的来源，对其进行一些设定流程的预处理，以优化光学字符识别结果。
76.配合参图3，示范性地，对于受试者资料而言，可能的保存角度有0
°
、90
°
、180
°
以及270
°
，其中，0
°
为常规视角的角度，90
°
为0
°
向右旋转90
°
，其它角度同理。本实施例中，可以选择轻量级神经网络模型mobilenetv3将受试者资料都统一旋转至0
°
，以便于后续处理。
77.配合参图4，又例如，可以使用dbnet网络模型进行受试者资料中连续文本的坐标检测，并且，综合性能考虑，其主干网络(backbone)可以采用resnet18。dbnet网络可以为受试者资料中的连续文本匹配对应的文本框，从而将这些文本框的四个顶点的坐标确定为对应的连续文本坐标。根据确定的连续文本坐标，可以进行透视变换，以获取受试者资料中的文本区域图片供光学字符识别。透视变换的过程是将一个平面通过一个投影矩阵投影到指定的平面上，从而扭转矫正原图像中可能存在的变形和偏转等问题。
78.光学字符识别模型识别的信息通常是通用的识别结果，本实施例中称为“原始文本信息”。可选地，还可以进一步将原始文本信息展示至信息核对界面，用户可以在信息核对界面对原始文本信息进行核对，并对需要修正的内容进行编辑；进而，服务器可以响应于对信息核对界面的编辑操作，修正原始文本信息。
79.为了使上述通用的识别结果中满足本技术crf录入的需要，可以基于规则和近义词匹配从该原始文本信息中筛选出需要的文本信息。
80.这里的规则可以根据待录入crf确定，并例如针对医药、医疗领域进行针对设置。在此过程中，还可以筛除一些crf中不关心的信息，提高后续录入的效率；并且，通过规则的设定，还可以将一些散乱的数据赋予业务含义。例如，对于一些识别出的单位符号，可能是对应受试者资料中某项化验项，且该单位符号真实的位置应当是该化验项单位的角标，则可以相应地将该单位符号正确匹配到该化验项的项目单位中。
81.近义词匹配可以是基于设定的词典，将识别的信息进行命名、格式等的一致性处理，确保返回的文本信息为所期望的标准信息。
82.以上实施例介绍的是基于受试者资料，通过光学字符识别-原始文本信息核对修正-规则和近义词匹配，进行文本信息识别的完整过程。在本技术的一些实施例中，可以将该“流程”所涉及的方法定义为“识别规则”；又或者，在本技术的另一些实施例中，可以只关注该“流程”中的部分步骤(例如光学字符识别-规则和近义词匹配)，并将这几个步骤所涉及的方法定义为“识别规则”。
83.本实施例中，对于已经识别过的历史受试者资料，会添加相应的标识符，并将从其中识别的历史文本信息归档。基于该标识符可以判断历史受试者资料中是否存在与受试者资料重复的目标资料文本；若是，继续判断当前识别规则与目标资料文本对应的历史文本信息的识别规则是否一致；若是，将对应的历史文本信息确定为受试者资料的文本信息。
84.特征值可以采用多种方式获得，例如，可以将受试者资料中的图像进行量化处理，并将图像量化处理结果作为特征值；其中，上述的图像量化处理可以指的是针对图像的特征提取，图像量化处理结果为哈希(hash)算法串。其中，上述哈希算法可以指的是安全散列算法(sha，secure hashalgorithm)、消息摘要算法第五版(md5，message digestalgorithm 5)、以及消息认证码算法(mac，messageauthentication code)等。
85.特征值相同代表比对的受试者资料也相同，而在相同的识别规则下，相同受试者资料识别出的文本信息也应当一致。基于此，通过与历史受试者资料进行标识符的比对，若匹配到已经识别的历史文本信息，可以节约重复识别所需耗费的资源。基于以上原因，该比对步骤可选地作为步骤s12中：“从受试者资料中识别文本信息”的前置步骤。当然，在一些替换的实施例中，该比对步骤确定的文本信息也可以与步骤s12中：“从受试者资料中识别文本信息”彼此印证，本技术对此不做限定。
86.s13、基于所述受试者信息匹配对应的受试者。
87.一实施例中，可以基于受试者信息中的“姓名”匹配同名的受试者。
88.对于本技术crf的自动录取方法的应用场景而言，例如一个edc系统，其中可能包括多个临床试验项目(study)的数据。以一个临床试验项目为例，会涉及多个受试者(subject)，每个受试者都会有多个访视周期(event)，每个访视周期下会产生多个表单(form)的数据，每个表单下可能会有一个或多个字段组(item group)，每个字段组下对应到具体的字段(item)；对于每个字段而言，其可以有对应的说明信息，说明信息可以包括在edc系统界面上展示的名称、数据类型、字段的含义、字段对应的业务规则以及字段在导出表中的呈现方式等，例如，可以从药物警戒专业书籍、药物警戒工作的标准作业程序(standard operating procedure，sop)文件等资料中提取字段以及对应的解释信息，这样的信息被称为字典。而上述的这些内容组合起来可以成为一条完整的临床研究数据(clinical data)。
89.可以看出，edc系统中包含的临床研究数据越多，其中包括同名受试者的可能性也相应增加。在一些实施例中，可以是基于受试者信息中“性别”、“年龄”等进行组合，从而增加匹配到对应受试者的准确性。
90.本实施例中，还会获取当前录入操作的定义域，并在该定义域的范围内，匹配与受试者信息对应的受试者。这里的定义域包括时间范围信息和/或项目范围信息。
91.例如，配合参图5，edc系统中包括临床试验项目a、b、c的数据，当前的受试者资料是对应其中的临床试验项目a；则可以直接将临床试验项目a作为上述的定义域，并在临床试验项目a的范围内，匹配与受试者信息对应的受试者。配合参图6，又例如，还可以通过限定时间段“2019.01～2020.01”为上述的定义域，并在该时间段的范围内，匹配与受试者信息对应的受试者。当然，这里示出的时间范围和项目范围两个“维度”的定义域还可以彼此结合地使用，本技术对此不做限制。
92.可以看出，限缩受试者信息的匹配范围将有助于提高受试者匹配的准确性。在具体的应用场景中，定义域的获取可以通过多种方式，例如，在上述提供给用户的受试者资料上传界面中，向用户展示“所需上传的临床试验项目”选择项，用户在选定项目时即相当于定义域被获取。
93.本实施例中，还可以将与受试者信息匹配的受试者展示至信息核对界面。用户可以在信息核对界面进行核对，从而确认当前匹配的受试者是否正确。而响应于对信息核对界面的操作，可以最终确定与受试者信息对应的受试者。
94.s14、基于所述化验项明细信息和待录入crf的特征值，从所述待录入crf中匹配所述对应受试者的目标crf。
95.例如，化验项明细信息包括“尿蛋白”，则可以匹配到尿常规表单为该受试者的目标crf。又例如，化验项明细信息包括“淋巴细胞数目”、“中性细胞数目”、“白细胞数目”、“中间细胞数目”，则可以匹配到血常规表单为该受试者的目标crf。
96.s15、基于所述字段映射，将所述识别的文本信息映射至所述目标crf。
97.这里所说的字段映射中的“字段”可以是crf中所包括的数据项，例如“检查项”、“测量结果”、“身高”、“体重”等。如上所述，字段映射的目的之一在于数据的标准化，而临床试验数据的规范化和标准化可推动和提高实际工作的效率和可靠性。
98.基于若干生物技术和药物开发公司组建了cdisc(the clinical data interchangestandards consortium，临床数据交换标准协会)，cdisc提出了临床试验数据的递交标准sdtm(study data tabulation mode，研究数据表格格式)。药政监管部门要求按照sdtm格式提交临床试验数据，以帮助其对安全性数据和功效数据实施审查和批准。在本技术的一个实施例中，所配置的字段映射即可以根据该sdtm标准执行。
99.当目标crf录入完成后，会被保存至服务器或者本地的合适位置，例如中台mdm(主数据管理，master datamanagement)服务中。mdm数据的元数据和数据表保存在业务数据库中，同时的数据表与通过元数据定义的表单一一对应，并可以用于eav(entity-attribute-value，实体-属性-值)模型设计下的的数据分析问题。
100.参图7，介绍本技术crf的自动录入装置的一实施例。在本实施例中，该临床试验项目的推荐装置包括配置模块21、识别模块22、第一匹配模块23、第二匹配模块24以及录入模块25。
101.配置模块21，用于配置待录入crf的特征值和字段映射；识别模块22，用于从受试者资料中识别文本信息，其中，所述文本信息包括受试者信息和化验项明细信息；第一匹配模块23，用于基于所述受试者信息匹配对应的受试者；第二匹配模块24，用于基于所述化验项明细信息和待录入crf的特征值，从所述待录入crf中匹配所述对应受试者的目标crf；录入模块25，用于基于所述字段映射，将所述识别的文本信息映射至所述目标crf。
102.一实施例中，识别模块22还用于：对历史受试者资料添加标识符，并将从其中识别的历史文本信息归档；基于所述标识符判断所述历史受试者资料中是否存在与所述受试者资料重复的目标资料文本；若是，判断当前识别规则与所述目标资料文本对应的历史文本信息的识别规则是否一致；若是，将所述对应的历史文本信息确定为所述受试者资料的文本信息。
103.一实施例中，识别模块22具体用于：展示受试者资料的上传界面；响应于对所述上传界面的格式选择操作，确定所述受试者资料的类型；基于所述受试者资料的类型，调用对应的光学字符识别模型从所述受试者资料中识别文本信息。
104.一实施例中，识别模块22具体用于：基于光学字符识别模型从受试者资料中识别原始文本信息；基于规则和近义词匹配从所述原始文本信息中筛选出所述文本信息。
105.一实施例中，识别模块22具体用于还用于：将所述原始文本信息展示至信息核对界面；响应于对所述信息核对界面的编辑操作，修正所述原始文本信息。
106.一实施例中，第一匹配模块23具体用于：获取当前录入操作的定义域，其中，所述定义域包括时间范围信息和/或项目范围信息；在所述定义域的范围内，匹配与所述受试者信息对应的受试者。
107.一实施例中，第二匹配模块24还用于：将与所述受试者信息匹配的受试者展示至信息核对界面；响应于对所述信息核对界面的操作，确定与所述受试者信息对应的受试者。
108.如上参照图1至图6，对根据本说明书实施例crf的自动录入方法进行了描述。在以上对方法实施例的描述中所提及的细节，同样适用于本说明书实施例的crf的自动录入装置。上面的crf的自动录入装置可以采用硬件实现，也可以采用软件或者硬件和软件的组合来实现。
109.图8示出了根据本说明书的实施例的电子设备的硬件结构图。如图6所示，电子设
备30可以包括至少一个处理器31、存储器32(例如非易失性存储器)、内存33和通信接口34，并且至少一个处理器31、存储器32、内存33和通信接口34经由内部总线35连接在一起。至少一个处理器31执行在存储器32中存储或编码的至少一个计算机可读指令。
110.应该理解，在存储器32中存储的计算机可执行指令当执行时使得至少一个处理器31进行本说明书的各个实施例中以上结合图1至图6描述的各种操作和功能。
111.在本说明书的实施例中，电子设备30可以包括但不限于：个人计算机、服务器计算机、工作站、桌面型计算机、膝上型计算机、笔记本计算机、移动电子设备、智能电话、平板计算机、蜂窝电话、个人数字助理(pda)、手持装置、消息收发设备、可佩戴电子设备、消费电子设备等等。
112.根据一个实施例，提供了一种比如机器可读介质的程序产品。机器可读介质可以具有指令(即，上述以软件形式实现的元素)，该指令当被机器执行时，使得机器执行本说明书的各个实施例中以上结合图1-图7描述的各种操作和功能。具体地，可以提供配有可读存储介质的系统或者装置，在该可读存储介质上存储着实现上述实施例中任一实施例的功能的软件程序代码，且使该系统或者装置的计算机或处理器读出并执行存储在该可读存储介质中的指令。
113.在这种情况下，从可读介质读取的程序代码本身可实现上述实施例中任何一项实施例的功能，因此机器可读代码和存储机器可读代码的可读存储介质构成了本说明书的一部分。
114.可读存储介质的实施例包括软盘、硬盘、磁光盘、光盘(如cd-rom、cd-r、cd-rw、dvd-rom、dvd-ram、dvd-rw、dvd-rw)、磁带、非易失性存储卡和rom。可选择地，可以由通信网络从服务器计算机上或云上下载程序代码。
115.本领域技术人员应当理解，上面公开的各个实施例可以在不偏离发明实质的情况下做出各种变形和修改。因此，本说明书的保护范围应当由所附的权利要求书来限定。
116.需要说明的是，上述各流程和各系统结构图中不是所有的步骤和单元都是必须的，可以根据实际的需要忽略某些步骤或单元。各步骤的执行顺序不是固定的，可以根据需要进行确定。上述各实施例中描述的装置结构可以是物理结构，也可以是逻辑结构，即，有些单元可能由同一物理客户实现，或者，有些单元可能分由多个物理客户实现，或者，可以由多个独立设备中的某些部件共同实现。
117.以上各实施例中，硬件单元或模块可以通过机械方式或电气方式实现。例如，一个硬件单元、模块或处理器可以包括永久性专用的电路或逻辑(如专门的处理器，fpga或asic)来完成相应操作。硬件单元或处理器还可以包括可编程逻辑或电路(如通用处理器或其它可编程处理器)，可以由软件进行临时的设置以完成相应操作。具体的实现方式(机械方式、或专用的永久性电路、或者临时设置的电路)可以基于成本和时间上的考虑来确定。
118.上面结合附图阐述的具体实施方式描述了示例性实施例，但并不表示可以实现的或者落入权利要求书的保护范围的所有实施例。在整个本说明书中使用的术语“示例性”意味着“用作示例、实例或例示”，并不意味着比其它实施例“优选”或“具有优势”。出于提供对所描述技术的理解的目的，具体实施方式包括具体细节。然而，可以在没有这些具体细节的情况下实施这些技术。在一些实例中，为了避免对所描述的实施例的概念造成难以理解，公知的结构和装置以框图形式示出。
119.本公开内容的上述描述被提供来使得本领域任何普通技术人员能够实现或者使用本公开内容。对于本领域普通技术人员来说，对本公开内容进行的各种修改是显而易见的，并且，也可以在不脱离本公开内容的保护范围的情况下，将本文所对应的一般性原理应用于其它变型。因此，本公开内容并不限于本文所描述的示例和设计，而是与符合本文公开的原理和新颖性特征的最广范围相一致。