一种个性化推荐实时性测试方法、装置及电子设备与流程

本发明涉及电子技术领域，尤其涉及一种个性化推荐实时性测试方法、装置及电子设备。

背景技术：

当前，应用服务器可以根据用户操作的历史信息(如：用户年龄、地域、兴趣爱好、信息点击率)进行个性化推荐，由于应用信息获取的渠道多，内容杂，时效性等无法保证，导致用户需要花费大量的时间去找感兴趣的类型阅读，用户希望在尽量短的时间内出现与已点击内容关联性很强的信息，对应用服务器个性化推荐的算法实时性提出了更高的要求，因此，有必要对个性化推荐的实时性进行测试。

在现有技术方案中，首先区分出AB两部分样本用户，对这两部分的样本用户分别采用不同的统计方法，然后获取个性化推荐的实时数据并绘制成时间曲线，通过时间曲线确定实时性测试的基准数据值，但是，这种方法测试周期长，一般需要几天时间，并且测试出的数据准确性低。

技术实现要素：

本发明实施例提供一种个性化推荐实时性测试方法、装置及电子设备。可以解决现有技术方案中测试周期长、准确性低的问题。

本发明第一方面提供了一种个性化推荐实时性测试方法，包括：

选取应用信息显示列表中的多条内容信息，对所述内容信息进行操作，并向应用服务器发送所述多条内容信息的特征，记录所述多条内容信息操作完成时的第一时间点；

向所述应用服务器发送信息更新请求，记录所述信息更新请求发送时的第二时间点，所述信息更新请求用于指示所述应用服务器根据所述多条内容信息向用户终端推荐信息流；

接收所述应用服务器发送的所述信息流；

确定所述信息流中与所述多条内容信息匹配的推荐内容所占所述信息流的数量比例；

当所述数量比例大于预设阈值时，根据所述第一时间点和所述第二时间点，确定信息个性化推荐的实时性。

其中，所述选取应用信息显示列表中的内容信息包括：

根据所述应用信息显示列表的特征或所述应用信息显示列表中的内容信息的特征选取预设数量的内容信息。

其中，所述对所述内容信息进行操作包括：

根据所选取的内容信息的特征执行相应的操作以模拟浏览所述内容信息，浏览结束时完成所述操作。

其中，所述根据所述第一时间点和所述第二时间点，确定信息个性化推荐的实时性包括：

计算所述第一时间点与所述第二时间点之间的时间差值；

根据所述时间差值，确定信息个性化推荐的实时性。

其中，所述根据所述时间差值，确定信息个性化推荐的实时性包括：

若所述时间差值小于预设基准时长，则确定信息个性化推荐的实时性高；

若所述时间差值不小于预设基准时长，则确定信息个性化推荐的实时性低。

其中，所述向所述应用服务器发送信息更新请求包括：

按照预设周期向所述应用服务器发送所述信息更新请求。

其中，所述方法还包括：

确定所述多条内容信息与所述推荐内容的匹配类型，所述匹配类型包括频道匹配和关键词匹配；

根据所述匹配类型，确定所述多条内容信息与所述推荐内容的相关度。

相应地，本发明第二方面提供了一种个性化推荐实时性测试装置，包括：

信息操作模块，用于选取应用信息显示列表中的多条内容信息，对所述内容信息进行操作，并向应用服务器发送所述多条内容信息的特征，记录所述多条内容信息操作完成时的第一时间点；

请求发送模块，用于向所述应用服务器发送信息更新请求，记录所述信息更新请求发送时的第二时间点，所述信息更新请求用于指示所述应用服务器根据所述多条内容信息向用户终端推荐信息流；

信息接收模块，用于接收所述应用服务器发送的所述信息流；

比例确定模块，用于确定所述信息流中与所述多条内容信息匹配的推荐内容所占所述信息流的数量比例；

时间确定模块，用于当所述数量比例大于预设阈值时，根据所述第一时间点和所述第二时间点，确定信息个性化推荐的实时性。

其中，所述信息操作模块具体用于：

根据所述应用信息显示列表的特征或所述应用信息显示列表中的内容信息的特征选取预设数量的内容信息。

其中，所述信息操作模块具体用于：

根据所选取的内容信息的特征执行相应的操作以模拟浏览所述内容信息，浏览结束时完成所述操作。

其中，所述时间确定模块具体用于：

计算所述第一时间点与所述第二时间点之间的时间差值；

根据所述时间差值，确定信息个性化推荐的实时性。

其中，所述时间确定模块具体用于：

若所述时间差值小于预设基准时长，则确定信息个性化推荐的实时性高；

若所述时间差值不小于预设基准时长，则确定信息个性化推荐的实时性低。

其中，所述请求发送模块，还用于按照预设周期向所述应用服务器发送所述信息更新请求。

其中，所述装置还包括：

相关性确定模块，用于确定所述多条内容信息与所述推荐内容的匹配类型，所述匹配类型包括频道匹配和关键词匹配；根据所述匹配类型，确定所述多条内容信息与所述推荐内容的相关度。

相应地，本发明第三方面提供了一种电子设备，包括：处理器、存储器、通信接口和总线；

所述处理器、所述存储器和所述通信接口通过所述总线连接并完成相互间的通信；

所述存储器存储可执行程序代码；

所述处理器通过读取所述存储器中存储的可执行程序代码来运行与所述可执行程序代码对应的程序，以用于：

选取应用信息显示列表中的多条内容信息，对所述内容信息进行操作，并向应用服务器发送所述多条内容信息的特征，记录所述多条内容信息操作完成时的第一时间点；

向所述应用服务器发送信息更新请求，记录所述信息更新请求发送时的第二时间点，所述信息更新请求用于指示所述应用服务器根据所述多条内容信息向用户终端推荐信息流；

接收所述应用服务器发送的所述信息流；

确定所述信息流中与所述多条内容信息匹配的推荐内容所占所述信息流的数量比例；

当所述数量比例大于预设阈值时，根据所述第一时间点和所述第二时间点，确定信息个性化推荐的实时性。

相应地，本发明实施例提供了一种存储介质，其中，所述存储介质用于存储应用程序，所述应用程序用于在运行时执行本发明实施例第一方面公开的一种个性化推荐实时性测试方法。

相应地，本发明实施例提供了一种应用程序，其中，所述应用程序用于在运行时执行本发明实施例第一方面公开的一种个性化推荐实时性测试方法。

实施本发明实施例，首先选取应用信息显示列表中的多条内容信息，对所述内容信息进行操作，并向应用服务器发送多条内容信息的特征，记录多条内容信息操作完成时的第一时间点；然后向应用服务器发送信息更新请求，记录信息更新请求发送时的第二时间点，信息更新请求用于指示应用服务器根据多条内容信息向用户终端推荐信息流；其次接收应用服务器发送的信息流；最后确定信息流中与多条内容信息匹配的推荐内容所占信息流的数量比例；当数量比例大于预设阈值时，根据第一时间点和第二时间点，确定信息个性化推荐的实时性，从而缩短测试周期，提高测试的准确性。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明提出的一种个性化推荐实时性测试方法的第一实施例的流程示意图；

图2是本发明提出的一种个性化推荐实时性测试方法的第二实施例的流程示意图；

图3是本发明实施例提出的一种个性化推荐实时性测试装置的结构示意图；

图4是本发明实施例提出的一种电子设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

请参考图1，图1是本发明提出的一种个性化推荐实时性测试方法的第一实施例的流程示意图。如图所示，本发明实施例中的方法包括：

S101，选取应用信息显示列表中的多条内容信息，对所述内容信息进行操作，并向应用服务器发送所述多条内容信息的特征，记录所述多条内容信息操作完成时的第一时间点；

具体实现中，可以根据所述应用信息显示列表的特征或所述应用信息显示列表中的内容信息的特征选取预设数量的内容信息。例如，可以首先打开应用信息显示列表，应用信息显示列表可以包括多个信息类型频道，每个信息类型频道包括N条内容信息，内容信息可以包括视频内容、文本内容和/或图片内容，用户可以选择使用频率较低的信息类型频道，从该选择的信息类型频道中选取预设数量的内容信息，如果选取的内容信息为文本内容，可以选取20条内容信息，如果选取的内容信息为视频内容，可以选取10条内容信息。在用户选取所述多条内容信息之后，将所述多条内容信息发送到应用服务器，记录所述多条内容信息操作完成时的第一时间点，例如，记录选取的文本内容中的最后一条文本内容发送时的时间点，或记录选取的视频内容中最后一条视频内容播放完成时的时间点，其中，应用信息显示列表可以为某个应用的显示界面或某个网页的显示界面，N为大于等于1的正整数。

可选的，可以根据所选取的内容信息的特征执行相应的操作以模拟浏览所述内容信息，浏览结束时完成所述操作。对于不同类型的内容信息执行不同的操作，纯文字要模拟滑动浏览到文章底部，音视频需要等待播放完成。另外，此处模拟的意思指作为测试方法模拟普通用户的行为，可以是全自动的也可以是人为执行的。

S102，向所述应用服务器发送信息更新请求，记录所述信息更新请求发送时的第二时间点，所述信息更新请求用于指示所述应用服务器根据所述多条内容信息向用户终端推荐信息流；

具体实现中，可以按照预设周期向所述应用服务器发送信息更新请求，其中，预设周期可以为1分钟或2分钟，但不局限于上述值。也可以在等待一段时间后，接收用户输入的更新命令，通过下拉应用信息显示列表向所述应用服务器发送信息更新请求，记录所述信息更新请求发送时的第二时间点，应用服务器接收到信息更新请求之后，向用户终端推荐信息流，其中，信息流包括通过信息推荐算法获取到的与多条内容信息匹配的推荐内容，也包括与多条内容信息不匹配的内容。

S103，接收所述应用服务器发送的所述信息流；

S104，确定所述信息流中与所述多条内容信息匹配的推荐内容所占所述信息流的数量比例是否大于预设阈值；

具体实现中，可以首先确定所述信息流中与所述多条内容信息匹配的推荐内容的数量、以及所述信息流的总数量，将所述推荐内容的数量除以所述信息流的总数量，计算得到数量比例，然后将数量比例与所述预设阈值进行比较，若所述数量比例不大于预设阈值，则跳转到S102，执行向所述应用服务器发送信息更新请求的操作步骤，其中，预设阈值可以为20％或30％，但不局限于上述值。

S105，当所述数量比例大于所述预设阈值时，根据所述第一时间点和所述第二时间点，确定信息个性化推荐的实时性。

具体实现中，可以计算所述第一时间点与所述第二时间点之间的时间差值；根据所述时间差值，确定信息个性化推荐的实时性。进一步的，若所述时间差值小于预设基准时长，则确定信息个性化推荐的实时性高；若所述时间差值不小于预设基准时长，则确定信息个性化推荐的实时性低。其中，基准时长可以通过对相同类型多个应用进行测试计算出信息个性化推荐的时间平均值得到。如果信息个性化推荐的实时性高，则说明应用服务器的推荐算法的性能好，如果信息个性化推荐的实时性低，则说明应用服务器的推荐算法的性能差。

需要说明的是，如果用户终端按照预设周期T向所述应用服务器发送信息更新请求，则所述第一时间点和所述第二时间点之间的时间差值为M*T，M为大于等于1的正整数，例如，如果经过两次更新之后，信息流中与所述多条内容信息匹配的推荐内容所占所述信息流的数量比例大于预设阈值，则时间差值为2T。

在本发明实施例中，首先选取应用信息显示列表中的多条内容信息，对所述内容信息进行操作，并向应用服务器发送多条内容信息的特征，记录多条内容信息操作完成时的第一时间点；然后向应用服务器发送信息更新请求，记录信息更新请求发送时的第二时间点，信息更新请求用于指示应用服务器根据多条内容信息向用户终端推荐信息流；其次接收应用服务器发送的信息流；最后确定信息流中与多条内容信息匹配的推荐内容所占信息流的数量比例；当数量比例大于预设阈值时，根据第一时间点和第二时间点，确定信息个性化推荐的实时性，从而缩短测试周期，提高测试的准确性。

请参考图2，图2是本发明提出的一种个性化推荐实时性测试方法的第二实施例的流程示意图。如图所示，本发明实施例中的方法包括：

S201，选取应用信息显示列表中的多条内容信息，对所述内容信息进行操作，并向应用服务器发送所述多条内容信息的特征。

具体实现中，可以根据所述应用信息显示列表的特征或所述应用信息显示列表中的内容信息的特征选取预设数量的内容信息。例如，可以首先打开应用信息显示列表，应用信息显示列表可以包括多个信息类型频道，每个信息类型频道包括N条内容信息，内容信息可以包括视频内容、文本内容和/或图片内容，用户可以选择使用频率较低的信息类型频道，从该选择的信息类型频道中选取预设数量的内容信息，如果选取的内容信息为文本内容，可以选取20条内容信息，如果选取的内容信息为视频内容，可以选取10条内容信息。在用户选取所述多条内容信息之后，将所述多条内容信息发送到应用服务器，其中，应用信息显示列表可以为某个应用的显示界面或某个网页的显示界面，N为大于等于1的正整数。

可选的，可以根据所选取的内容信息的特征执行相应的操作以模拟浏览所述内容信息，浏览结束时完成所述操作。对于不同类型的内容信息执行不同的操作，纯文字要模拟滑动浏览到文章底部，音视频需要等待播放完成。另外，此处模拟的意思指作为测试方法模拟普通用户的行为，可以是全自动的也可以是人为执行的。

S202，向所述应用服务器发送信息更新请求，所述信息更新请求用于指示所述应用服务器根据所述多条内容信息向用户终端推荐信息流。

具体实现中，可以按照预设周期向所述应用服务器发送信息更新请求，其中，预设周期可以为1分钟或2分钟，但不局限于上述值。也可以在等待一段时间后，接收用户输入的更新命令，通过下拉应用信息显示列表向所述应用服务器发送信息更新请求，应用服务器接收到信息更新请求之后，向用户终端推荐信息流，其中，信息流包括通过信息推荐算法获取到的与多条内容信息匹配的推荐内容，也包括与多条内容信息不匹配的内容。

S203，接收所述应用服务器发送的所述信息流。

S204，确定所述信息流中与所述多条内容信息匹配的推荐内容所占所述信息流的数量比例是否大于预设阈值。

具体实现中，可以首先确定所述信息流中与所述多条内容信息匹配的推荐内容的数量、以及所述信息流的总数量，将所述推荐内容的数量除以所述信息流的总数量，计算得到数量比例，然后将数量比例与所述预设阈值进行比较，若所述数量比例不大于预设阈值，则跳转到S202，执行向所述应用服务器发送信息更新请求的操作步骤，其中，预设阈值可以为20％或30％，但不局限于上述值。

S205，当所述数量比例大于预设阈值时，确定所述多条内容信息与所述推荐内容的匹配类型，所述匹配类型包括频道匹配和关键词匹配。

具体实现中，如果用户选择应用信息显示列表中某个信息类型频道中的多条内容信息，并且确定所述信息流中与所述多条内容信息匹配的推荐内容所占所述信息流的数量比例大于预设阈值，则说明所述多条内容信息与所述推荐内容的匹配类型为频道匹配；如果用户选择应用信息显示列表的任意内容，并且确定所述信息流中与所述多条内容信息匹配的关键词所占所述信息流的数量比例大于预设阈值，则说明所述多条内容信息与所述推荐内容的匹配类型为关键词匹配。

S206，根据所述匹配类型，确定所述多条内容信息与所述推荐内容的相关度。

具体实现中，如果所述匹配类型为关键词匹配，则确定所述多条内容信息与所述推荐内容的相关度低，如果所述匹配类型为频道匹配，则确定所述多条内容信息与所述推荐内容的相关度高。

请参考图3，图是本发明实施例提供的一种个性化推荐实时性测试装置的结构示意图。如图所示，本发明实施例中的装置包括：

信息操作模块301，用于选取应用信息显示列表中的多条内容信息，对所述内容信息进行操作，并向应用服务器发送所述多条内容信息的特征，记录所述多条内容信息操作完成时的第一时间点。

具体实现中，可以根据所述应用信息显示列表的特征或所述应用信息显示列表中的内容信息的特征选取预设数量的内容信息。例如，可以首先打开应用信息显示列表，应用信息显示列表可以包括多个信息类型频道，每个信息类型频道包括N条内容信息，内容信息可以包括视频内容、文本内容和/或图片内容，用户可以选择使用频率较低的信息类型频道，从该选择的信息类型频道中选取预设数量的内容信息，如果选取的内容信息为文本内容，可以选取20条内容信息，如果选取的内容信息为视频内容，可以选取10条内容信息。在用户选取所述多条内容信息之后，将所述多条内容信息发送到应用服务器，记录所述多条内容信息操作完成时的第一时间点，例如，记录选取的文本内容中的最后一条文本内容发送时的时间点，或记录选取的视频内容中最后一条视频内容播放完成时的时间点，其中，应用信息显示列表可以为某个应用的显示界面或某个网页的显示界面，N为大于等于1的正整数。

可选的，可以根据所选取的内容信息的特征执行相应的操作以模拟浏览所述内容信息，浏览结束时完成所述操作。对于不同类型的内容信息执行不同的操作，纯文字要模拟滑动浏览到文章底部，音视频需要等待播放完成。另外，此处模拟的意思指作为测试方法模拟普通用户的行为，可以是全自动的也可以是人为执行的。

请求发送模块302，用于向所述应用服务器发送信息更新请求，记录所述信息更新请求发送时的第二时间点，所述信息更新请求用于指示所述应用服务器根据所述多条内容信息向用户终端推荐信息流。

具体实现中，可以按照预设周期向所述应用服务器发送信息更新请求，其中，预设周期可以为1分钟或2分钟，但不局限于上述值。也可以在等待一段时间后，接收用户输入的更新命令，通过下拉应用信息显示列表向所述应用服务器发送信息更新请求，记录所述信息更新请求发送时的第二时间点，应用服务器接收到信息更新请求之后，向用户终端推荐信息流，其中，信息流包括通过信息推荐算法获取到的与多条内容信息匹配的推荐内容，也包括与多条内容信息不匹配的内容。

信息接收模块303，用于接收所述应用服务器发送的所述信息流。

比例确定模块304，用于确定所述信息流中与所述多条内容信息匹配的推荐内容所占所述信息流的数量比例。

具体实现中，可以首先确定所述信息流中与所述多条内容信息匹配的推荐内容的数量、以及所述信息流的总数量，将所述推荐内容的数量除以所述信息流的总数量，计算得到数量比例，然后将数量比例与所述预设阈值进行比较，若所述数量比例不大于预设阈值，则跳转到S102，执行向所述应用服务器发送信息更新请求的操作步骤，其中，预设阈值可以为20％或30％，但不局限于上述值。

时间确定模块305，用于当所述数量比例大于预设阈值时，根据所述第一时间点和所述第二时间点，确定信息个性化推荐的实时性。

具体实现中，可以计算所述第一时间点与所述第二时间点之间的时间差值；根据所述时间差值，确定信息个性化推荐的实时性。进一步的，若所述时间差值小于预设基准时长，则确定信息个性化推荐的实时性高；若所述时间差值不小于预设基准时长，则确定信息个性化推荐的实时性低。其中，基准时长可以通过对相同类型多个应用进行测试计算出信息个性化推荐的时间平均值得到。如果信息个性化推荐的实时性高，则说明应用服务器的推荐算法的性能好，如果信息个性化推荐的实时性低，则说明应用服务器的推荐算法的性能差。

需要说明的是，如果用户终端按照预设周期T向所述应用服务器发送信息更新请求，则所述第一时间点和所述第二时间点之间的时间差值为M*T，M为大于等于1的正整数，例如，如果经过两次更新之后，信息流中与所述多条内容信息匹配的推荐内容所占所述信息流的数量比例大于预设阈值，则时间差值为2T。

可选的，如图3所示，本发明实施例中的装置还可以包括：

相关性确定模块306，用于确定所述多条内容信息与所述推荐内容的匹配类型，所述匹配类型包括频道匹配和关键词匹配；根据所述匹配类型，确定所述多条内容信息与所述推荐内容的相关度。

具体实现中，如果用户选择应用信息显示列表中某个信息类型频道中的多条内容信息，并且确定所述信息流中与所述多条内容信息匹配的推荐内容所占所述信息流的数量比例大于预设阈值，则说明所述多条内容信息与所述推荐内容的匹配类型为频道匹配；如果用户选择应用信息显示列表的任意内容，并且确定所述信息流中与所述多条内容信息匹配的关键词所占所述信息流的数量比例大于预设阈值，则说明所述多条内容信息与所述推荐内容的匹配类型为关键词匹配。如果所述匹配类型为关键词匹配，则确定所述多条内容信息与所述推荐内容的相关度低，如果所述匹配类型为频道匹配，则确定所述多条内容信息与所述推荐内容的相关度高。

在本发明实施例中，首先选取应用信息显示列表中的多条内容信息，对所述内容信息进行操作，并向应用服务器发送多条内容信息的特征，记录多条内容信息操作完成时的第一时间点；然后向应用服务器发送信息更新请求，记录信息更新请求发送时的第二时间点，信息更新请求用于指示应用服务器根据多条内容信息向用户终端推荐信息流；其次接收应用服务器发送的信息流；最后确定信息流中与多条内容信息匹配的推荐内容所占信息流的数量比例；当数量比例大于预设阈值时，根据第一时间点和第二时间点，确定信息个性化推荐的实时性，从而缩短测试周期，提高测试的准确性。

请参考图4，图4是本发明实施例提出的一种电子设备的结构示意图。如图所示，该电子设备可以包括：至少一个处理器401，例如CPU，至少一个通信接口402，至少一个存储器403，至少一个总线404。其中，总线404用于实现这些组件之间的连接通信。其中，本发明实施例中电子设备的通信接口402是有线发送端口，也可以为无线设备，例如包括天线装置，用于与其他节点设备进行信令或数据的通信。存储器403可以是高速RAM存储器，也可以是非不稳定的存储器(non-volatile memory)，例如至少一个磁盘存储器。存储器403可选的还可以是至少一个位于远离前述处理器401的存储装置。存储器403中存储一组程序代码，且处理器401用于调用存储器中存储的程序代码，用于执行以下操作：

选取应用信息显示列表中的多条内容信息，对所述内容信息进行操作，并向应用服务器发送所述多条内容信息的特征，记录所述多条内容信息操作完成时的第一时间点；

向所述应用服务器发送信息更新请求，记录所述信息更新请求发送时的第二时间点，所述信息更新请求用于指示所述应用服务器根据所述多条内容信息向用户终端推荐信息流；

接收所述应用服务器发送的所述信息流；

确定所述信息流中与所述多条内容信息匹配的推荐内容所占所述信息流的数量比例；

当所述数量比例大于预设阈值时，根据所述第一时间点和所述第二时间点，确定信息个性化推荐的实时性。

其中，处理器401还用于执行如下操作步骤：

根据所述应用信息显示列表的特征或所述应用信息显示列表中的内容信息的特征选取预设数量的内容信息。

其中，处理器401还用于执行如下操作步骤：

根据所选取的内容信息的特征执行相应的操作以模拟浏览所述内容信息，浏览结束时完成所述操作。

其中，处理器401还用于执行如下操作步骤：

计算所述第一时间点与所述第二时间点之间的时间差值；

根据所述时间差值，确定信息个性化推荐的实时性。

其中，处理器401还用于执行如下操作步骤：

若所述时间差值小于预设基准时长，则确定信息个性化推荐的实时性高；

若所述时间差值不小于预设基准时长，则确定信息个性化推荐的实时性低。

其中，处理器401还用于执行如下操作步骤：

按照预设周期向所述应用服务器发送所述信息更新请求。

其中，处理器401还用于执行如下操作步骤：

确定所述多条内容信息与所述推荐内容的匹配类型，所述匹配类型包括频道匹配和关键词匹配；

根据所述匹配类型，确定所述多条内容信息与所述推荐内容的相关度。

需要说明的是，本发明实施例同时也提供了一种存储介质，该存储介质用于存储应用程序，该应用程序用于在运行时执行图1所示的一种个性化推荐实时性测试方法以及图2所示的一种个性化推荐实时性测试方法中接收电子设备执行的操作。

需要说明的是，本发明实施例同时也提供了一种应用程序，该应用程序用于在运行时执行图1所示的一种个性化推荐实时性测试方法以及图2所示的一种一种个性化推荐实时性测试方法中接收电子设备执行的操作。

需要说明的是，对于前述的各个方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某一些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详细描述的部分，可以参见其他实施例的相关描述。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：闪存盘、只读存储器(英文：Read-Only Memory，简称：ROM)、随机存取器(英文：Random Access Memory，简称：RAM)、磁盘或光盘等。

以上对本发明实施例所提供的内容下载方法及相关设备、系统进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。

在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。

应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。

本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。

此外，在本发明各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。

上述提到的存储介质可以是只读存储器，磁盘或光盘等。尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。