基于用户交互组度量的网络服务性能退化的检测的制作方法

基于用户交互组度量的网络服务性能退化的检测
1.相关申请的交叉引用
2.本技术要求于2020年8月6日提交的题为“性能分析(performance analysis)”的美国专利申请第16/987,252号的优先权，其全部内容通过引用并入本文并用于所有目的。
技术领域
3.根据本文描述的各种新技术，至少一个实施例涉及用于检测和诊断基于网络的服务(web-based service)中性能退化的一个或更多个原因的处理器或计算机系统。


背景技术：

4.在基于网络的服务中自动检测和诊断性能退化的技术可能会使用大量计算资源，并且可能不准确。可以提高检测和诊断性能退化的准确性以及所使用的计算资源量。
附图说明
5.图1图示了根据至少一个实施例的基于网络的服务的时间序列分析；
6.图2示出了根据至少一个实施例的度量重采样；
7.图3示出了根据至少一个实施例的转变检测；
8.图4图示了根据至少一个实施例的基于网络的服务的时间序列分析的示例过程；
9.图5示出了根据至少一个实施例的子上下文隔离的示例过程；
10.图6示出了根据至少一个实施例的子环境隔离的示例过程；
11.图7示出了根据至少一个实施例的子环境和子上下文隔离的示例可视化；
12.图8示出了根据至少一个实施例的子环境和子上下文隔离的另一示例可视化；
13.图9示出了根据至少一个实施例的子环境和子上下文隔离的另一示例可视化；
14.图10图示了根据至少一个实施例的子环境和子上下文隔离的示例有向图可视化；
15.图11示出了根据至少一个实施例的分布式系统；
16.图12示出了根据至少一个实施例的示例性数据中心；
17.图13示出了根据至少一个实施例的客户端-服务器网络；
18.图14示出了根据至少一个实施例的计算机网络；
19.图15a示出了根据至少一个实施例的联网计算机系统；
20.图15b示出了根据至少一个实施例的联网计算机系统；
21.图15c示出了根据至少一个实施例的联网计算机系统；
22.图16示出了根据至少一个实施例的系统环境的一个或更多个组件，在该系统环境中，服务可被提供为第三方网络服务；
23.图17示出了根据至少一个实施例的云计算环境；
24.图18示出了根据至少一个实施例的由云计算环境提供的一组功能抽象层；
25.图19示出了根据至少一个实施例的在芯片级的超级计算机；
26.图20示出了根据至少一个实施例的在机架模块级处的超级计算机；
27.图21示出了根据至少一个实施例的在机架级处的超级计算机；
28.图22示出了根据至少一个实施例的在整个系统级的超级计算机；
29.图23a示出了根据至少一个实施例的推理和/或训练逻辑；
30.图23b示出了根据至少一个实施例的推理和/或训练逻辑；
31.图24示出了根据至少一个实施例的神经网络的训练和部署；
32.图25示出了根据至少一个实施例的网络系统的架构；
33.图26示出了根据至少一个实施例的网络系统的架构；
34.图27示出了根据至少一个实施例的控制平面协议栈；
35.图28示出了根据至少一个实施例的用户平面协议栈；
36.图29示出了根据至少一个实施例的核心网的组件；
37.图30示出了根据至少一个实施例的支持网络功能虚拟化(nfv)的系统的组件；
38.图31示出了根据至少一个实施例的处理系统；
39.图32示出了根据至少一个实施例的计算机系统；
40.图33示出了根据至少一个实施例的系统；
41.图34示出了根据至少一个实施例的示例性集成电路；
42.图35示出了根据至少一个实施例的计算系统；
43.图36示出了根据至少一个实施例的apu；
44.图37示出了根据至少一个实施例的cpu；
45.图38示出了根据至少一个实施例的示例性加速器集成切片；
46.图39a和39b示出了根据至少一个实施例的示例性图形处理器；
47.图40a示出了根据至少一个实施例的图形核心；
48.图40b示出了根据至少一个实施例的gpgpu；
49.图41a示出了根据至少一个实施例的并行处理器；
50.图41b示出了根据至少一个实施例的处理集群；
51.图41c示出了根据至少一个实施例的图形多处理器；
52.图42示出了根据至少一个实施例的编程平台的软件栈；
53.图43示出了根据至少一个实施例的图42的软件栈的cuda实现；
54.图44示出了根据至少一个实施例的图42的软件栈的rocm实现；
55.图45示出了根据至少一个实施例的图42的软件栈的opencl实现方式；
56.图46示出了根据至少一个实施例的由编程平台支持的软件；以及
57.图47示出了根据至少一个实施例的用于在图42-45的编程平台上执行的编译代码。
具体实施方式
58.在以下描述中，阐述了许多具体细节以提供对至少一个实施例的更透彻的理解。然而，对于本领域的技术人员将显而易见的是，可以在没有一个或更多个这些具体细节的情况下实践本发明构思。
59.图1示出了根据至少一个实施例的基于网络的服务的时间序列分析。在至少一个实施例中，在所描绘的基于网络的服务102的示例100中，包括多个服务器。在至少一个实施
例中，服务器托管一个或更多个虚拟机。在至少一个实施例中，虚拟机执行向一个或更多个用户设备提供基于网络的服务的一个或更多个应用程序。
60.在至少一个实施例中，用户会话对应于用户的设备和基于网络的服务102之间的一个或更多个交互。在至少一个实施例中，交互可以包括但不限于对数据的请求、提供数据、执行请求的操作、执行计划的或未请求的操作、连接或断开连接。例如，在至少一个实施例中，交互包括呈现与由基于网络的服务102托管并流式传输到用户设备的视频游戏相关的视频帧。在至少一个实施例中，交互包括请求或执行操作或执行与计算机化游戏玩法相关的操作。在至少一个实施例中，用户交互包括游戏玩法的用户会话或一些其他基于网络的服务的用户会话。
61.在至少一个实施例中，基于网络的服务102的性能退化被自动检测，所述退化的原因通过自动分析被识别。在至少一个实施例中，退化包括性能特征的变化。在至少一个实施例中，退化包括性能特征的意外负面变化，其原因未知。
62.在至少一个实施例中，退化的自动分析基于与基于网络的服务102的交互组的比较分析。在至少一个实施例中，所述比较分析包括针对两组或更多组的用户交互，比较退化性能度量的变化。在至少一个实施例中，所述比较分析还包括将比较相应组中的用户交互的比例的变化，与其他组中的用户交互或与用户交互的总数进行比较。在至少一个实施例中，所述用户交互组基于与组相关联的属性。例如，在至少一个实施例中，组基于属性的版本号类别，使得与应用程序的“v1.0”相关联的用户交互被放置在一个组中，并且与所述应用程序的“v2.0”相关联的用户交互放在另一个组中。在至少一个实施例中，所述比较分析基于比较这些相应的组。在至少一个实施例中，诸如版本号之类的属性类别被称为子环境，并且该类别中的属性的值被称为子上下文或子环境的子上下文。例如，在至少一个实施例中，诸如用户会话之类的用户交互根据版本号子环境被分组，诸如与“v1.0”子上下文相关联的用户交互被置于一个组中，并且与“v2.0”子上下文相关联的用户交互放置在另一个组中。
63.在至少一个实施例中，收集度量的时间序列以监控所述基于网络的服务102的性能。例如，在至少一个实施例中，度量包括指示系统性能的值，其可以包括但不限于诸如每秒处理的请求、活动会话的数量、非活动会话数、中央处理单元(“cpu”)利用率、内存利用率、带宽利用率等的测量值。在至少一个实施例中，度量的时间序列包括随时间收集的此类值的序列，并且因此表示随时间的对应度量的值。
64.在至少一个实施例中，基于网络的服务102收集度量的时间序列104。例如，在至少一个实施例中，基于网络的服务102周期性地对不活动的用户会话进行计数并且在适合于维护时间序列数据的阵列或其他存储结构中记录相应的值。
65.在至少一个实施例中，基于网络的服务102的操作特性的变化经由这里描述的技术，通过度量和其他数据的时间序列的分析来识别。在至少一个实施例中，所述操作特性是性能特性，或指示应用功能的特性。在至少一个实施例中，基于网络的服务102的操作特性的变化被反映为度量的时间序列中的转变。在至少一个实施例中，转变包括时间序列中的值的统计上显着的变化。在至少一个实施例中，这种变化表示性能的故障或退化。
66.在至少一个实施例中，使用本文描述的分析技术从多个时间序列中识别时间序列中的转变。例如，在至少一个实施例中，基于网络的服务102收集大量不同的时间序列，与各
种不同的性能特征有关。在至少一个实施例中，基于网络的服务102分析这些时间序列以检测这些时间序列之一中的转变。在至少一个实施例中，基于网络的服务102识别通过其他方式可能难以、无法或不切实际检测的转变。
67.在至少一个实施例中，基于网络的服务102具有多种属性，例如特性、特质、特点或品质。在至少一个实施例中，属性是一维或多维的，并且可以表示为标量、向量或数值或文本值的数组。在至少一个实施例中，与基于网络的服务102相关联的属性的示例是实例类型106和软件版本108属性。在至少一个实施例中，实例类型106指的是虚拟机实例的分类，并且可以表示为描述在给定时间每个分类中有多少是可操作的向量。在至少一个实施例中，软件版本108指的是在基于网络的服务102上运行的应用程序的修订号，并且类似地被表示为描述每个修订的多少实例或在给定时间运行的向量。基于网络的服务102的属性随时间改变，例如，响应于正在安装的新应用程序或对基于网络的服务102进行的一些其他配置改变，这又可能导致度量的时间序列104的转变。在至少一个实施例中，使用隔离和向下钻取过程来识别其改变导致所述转变的属性，其实施例在本文中被描述。在至少一个实施例中，基于网络的服务102具有大量属性，其中许多属性可以随时间独立地变化，使得与度量转变相关联的属性的识别否则将是困难的、不可能的或不切实际的。例如，在至少一个实施例中，虚拟机的“完整实例”和“一半实例”的数量在与度量的时间序列104的转变相关联的时间段期间均增加，而具有软件版本108的应用程序针对“v1.1”版本减少，但针对“v2.0”版本增加。在至少一个实施例中，除了所描绘的那些属性之外，还有许多这样的属性，其中每一个都可以独立于其他属性而改变。在至少一个实施例中，如本文所述的隔离和向下钻取过程用于从大量属性中识别可能与度量转变的根本原因相关联的那些属性。
68.图2图示了根据至少一个实施例的度量重采样。在至少一个实施例中，度量的时间序列202的示例200包括在一段时间内周期性采样的度量值，例如在几天的时间段内每小时一次。在至少一个实施例中，时间序列202表现出周期性或循环趋势，这可能是由于对系统的需求随时间自然波动所致。例如，在至少一个实施例中，基于网络的服务102的高峰使用时间是在傍晚时分。在至少一个实施例中，即使考虑到诸如图2中所描绘的循环模式，重采样技术也被用于促进转变点的识别。
69.在至少一个实施例中，通过从时间序列的一部分中提取值并将这些值随机分配给一定数量的桶来执行重采样。例如，在至少一个实施例中，时间序列包括在一天内以周期性间隔收集的样本。在至少一个实施例中，重采样包括将那些值随机地重新分配给多个桶之一。在至少一个实施例中，每天使用二十四个桶，但是每个桶可以包含在一天中的任何时间点收集的样本，因此这些桶不一定对应于一天中的几个小时。在至少一个实施例中，来自度量的时间序列202的值被分配给重采样时间序列内的一个且仅一个桶。在至少一个实施例中，每个桶在重采样之后包括1/n个样本，其中n表示每天使用多少桶。在至少一个实施例中，n＝24。在至少一个实施例中，选择n使得度量的时间序列202中的正常周期性波动被移除或减少，与可能与增加的n值相关联的增加的处理时间相平衡。在至少一个实施例中，较大的n值可以提高检测时间序列202的度量的总体均值的偏移的能力。
70.在至少一个实施例中，计算分配给每个桶的值的平均值。在至少一个实施例中，每个桶的平均值共同构成重采样的度量的时间序列204。在至少一个实施例中，该重采样的时间序列204可以如图2所示绘制，其中每个日内值对应于相应桶的平均值。
71.图3图示了根据至少一个实施例的转变检测。在至少一个实施例中，在示例300中，重采样的度量的时间序列304，例如图2中描绘的重采样时间序列204，被分析以识别一个或更多个转变点。
72.在至少一个实施例中，t检验用于识别转变点。在至少一个实施例中，根据等式，使用welch的t检验：
[0073][0074]
在至少一个实施例中，t与自由度结合使用，如基于每一侧上的多个样本计算的，以产生对应于零假设为真的估计概率的p值。在至少一个实施例中，所述零假设是所述时间序列的每个部分具有相等的总体均值，而备选假设是每个部分不具有相等的总体均值。
[0075]
在至少一个实施例中，采用重采样的时间序列并在给定索引位置处将其分成两部分。对于每个这样的位置，在至少一个实施例中，执行t-检验并记录t统计量和p值，并且通过定位其t-统计量具有最大绝对值的位置来识别转变点。在至少一个实施例中，具有最大绝对值并且其p值指示统计显着性的位置被认为是转变点。在至少一个实施例中，此类位置被认为是其p值低于阈值的那些位置，例如低于0.001。
[0076]
图4示出了根据至少一个实施例的基于网络的服务的时间序列分析的示例过程。在至少一个实施例中，识别度量的时间序列中的一个或更多个转变点并且使用隔离分析来识别每个转变的潜在原因。在至少一个实施例中，隔离分析的目的是隔离最可能的转变原因。在至少一个实施例中，隔离分析基于这样的假设，即时间序列中的转变可以通过与子上下文成比例的相关变化来解释。
[0077]
尽管示例过程400被描绘为一系列操作，但是应当理解，在实施例中，所描述的操作可以以各种方式改变，并且某些操作可以被省略、重新排序或与其他操作并行执行，除非明确说明或逻辑暗示顺序，例如当一个操作的输入取决于另一个操作的输出时。
[0078]
图4所描绘的操作可由诸如图1所描绘的基于网络的服务102之类的系统来执行，包括至少一个处理器和包括指令的存储器，所述指令响应于由至少一个处理器执行而使系统执行所描绘的操作。
[0079]
在402，在至少一个实施例中，识别时间序列中的转变点。在至少一个实施例中，系统使用关于图2-3描述的技术来识别所述转变点。在至少一个实施例中，基于与转变点相关联的统计特性将所述转变点确定为用于隔离和向下钻取分析的目标。
[0080]
在至少一个实施例中，对于给定的识别的转变点，隔离
[0081]
在404，在至少一个实施例中，获得与识别的转变点相关联的子上下文和子环境数据。在至少一个实施例中，子上下文对应于属性或特质的值，并且子环境对应于所述属性或特质的分类或类型。例如，在至少一个实施例中，“实例类型”对应子环境，“完整实例”或“一半实例”对应子上下文。
[0082]
在至少一个实施例中，在与转变相关联的时间段内获得子上下文和子环境数据。在至少一个实施例中，这包括在转变点经受隔离和向下钻取分析之前的数据，以及在所述转变点之后的数据。
[0083]
在406，在至少一个实施例中，对于给定子环境中的每个子上下文，计算复杂度值作为均值(mean)和比例(proportion)的变化的函数。在至少一个实施例中，给定的子环境(例如实例类型)与子上下文具有一对多关系，例如“一半实例”和“完整实例”。在至少一个实施例中，根据以下计算复杂度：
[0084]
sa＝s[after mean]*s[after proportion]
[0085]
sb＝s[before mean]*s[before proportion]
[0086][0087]
s[complexity]＝sab*s[after proportion]
[0088]
在至少一个实施例中，如果sab不是数字，则可以设置为1.0，例如，当sb等于0时。在至少一个实施例中，通过将均值乘以比例来计算之前(before)/之后(after)的近似标量等价物。在至少一个实施例中，如果标量等于零，如在引入子上下文的情况下(例如，新软件版本)，则之前的标量被设置为非数字(“nan”)。
[0089]
在至少一个实施例中，组合标量，例如上面所示的sab，被计算为两个标量之间的变化比率。在至少一个实施例中，该比率乘以“之后”分量的比例以将复杂性偏置为对于“较新”子上下文更高。这强调了按比例增加的上下文，而不是按比例减少的子上下文。例如，在至少一个实施例中，系统通过将新版本v2.0标记为负责转换而不是将“版本减少到v1.0”标记为所述转变的原因，来生成更直观的结果。
[0090]
在至少一个实施例中，如果所述比率变为零，如由于引入新上下文所以sb为零时可能发生的情况，则可以将所述标量设置为1.0以使新上下文(没有先验比例)能够被标记为转变的根本原因。
[0091]
在408，在至少一个实施例中，执行子上下文隔离。在至少一个实施例中，系统通过子上下文隔离来识别其变化被估计为转变原因的属性或特质。
[0092]
在至少一个实施例中，子上下文隔离包括将子上下文限定为转变的潜在原因。在至少一个实施例中，应用一个或更多个过滤标准。在至少一个实施例中，当存在比例低于阈值水平时，子上下文作为潜在原因被消除。例如，在至少一个实施例中，在相关时段期间与少于5％的会话相关联的子上下文可能被过滤掉而不考虑。在至少一个实施例中，在转变日期或其前后不具有值的子上下文被排除在考虑之外。
[0093]
在至少一个实施例中，当子上下文的比例高于阈值水平并且具有相应转变时间附近的数据时，子上下文被包括作为潜在原因。
[0094]
在至少一个实施例中，如上所述的复杂性度量被转换为影响因子。在至少一个实施例中，如果子上下文的均值或比例没有改变，则其影响为零。或者，在至少一个实施例中，将子上下文的影响因子初始化为所述子上下文复杂度的绝对值。
[0095]
在至少一个实施例中，然后执行逻辑以确定子上下文变化与转变是一致还是不一致。在至少一个实施例中，当转变是增加的转变时，其值正在减少的子上下文可能被取消资格。在至少一个实施例中，通过将影响因子设置为零来将子上下文标记为不合格。
[0096]
在至少一个实施例中，给定的子环境中可能存在多个子上下文，并且每个子上下文可以有它自己的比例向量和均值向量，其中向量指的是各个子上下文中的变化方向和变化量。每个子上下文的均值可以增加或减少，并且这种增加或减少可以低于转变均值、高于
所述转变均值或跨越所述转变均值。每个子上下文也可能在整体比例上增加或减少。在至少一个实施例中，子上下文基于其相对于所述转变的平均和比例的相对移动而被识别为转变的潜在原因。在至少一个实施例中，与子上下文相关联的影响因子被设置为零，如果子上下文的向量与对应转变的向量未对齐，则该子上下文不合格。
[0097]
在至少一个实施例中，与每个子上下文相关联的影响因子用于识别转变的潜在根本原因。在至少一个实施例中，如果其影响因子百分比大于阈值，则将子上下文视为根本原因。例如，在至少一个实施例中，如果子上下文的影响因子大于可归因于该转变的影响因子的20％，则该子上下文被认为是根本原因。在至少一个实施例中，如果子上下文是新的子上下文并且其比例大于阈值量，则该子上下文也可以被认为是根本原因。
[0098]
在410，在至少一个实施例中，执行子环境隔离。在至少一个实施例中，系统与许多可能的子环境相关联，并且系统执行子环境隔离以识别哪个子环境与转变最相关。
[0099]
在至少一个实施例中，子环境隔离包括与系统相关联的一个或更多个子环境的分析。在至少一个实施例中，基于各种标准从分析中排除一些子环境。在至少一个实施例中，基于与关联子上下文的移动相关联的信息增益来排除子环境。例如，在至少一个实施例中，如果子环境的所有子上下文都在压倒性地增加或压倒性地减少，则该子环境被排除，因为当其关联的子上下文的相应移动对齐时，与子环境相关联的信息增益低。
[0100]
在至少一个实施例中，跨环境中的所有子上下文计算平均绝对复杂度。在至少一个实施例中，这包括未被识别为根本原因的子上下文。在至少一个实施例中，平均绝对复杂度表示子环境内的移动量。在至少一个实施例中，选择具有最高平均绝对复杂度的子环境。
[0101]
图5示出了根据至少一个实施例的子上下文隔离的示例过程。
[0102]
尽管示例过程500被描绘为一系列操作，但是应当理解，在实施例中，所描述的操作可以以各种方式更改，并且某些操作可以省略、重新排序或与其他操作并行执行，除非明确说明或逻辑暗示顺序，例如当一个操作的输入取决于另一个操作的输出时。
[0103]
图5所描绘的操作可由诸如图1所描绘的基于网络的服务102之类的系统来执行，包括至少一个处理器和包括指令的存储器，所述指令响应于由至少一个处理器执行而使系统执行所描绘的操作。
[0104]
在502，在至少一个实施例中，基于与子上下文相关联的复杂度值，或者如果该子上下文的均值和比例相对于子环境内的其他子上下文没有改变时的零，初始化所述子上下文的影响因子。
[0105]
在504，在至少一个实施例中，基于所述子上下文的均值的相对变化来调整所述影响因子。在至少一个实施例中，将所述子上下文的变化向量与相关联子环境中的其他子上下文进行比较，其中当该向量与该子环境中的其他子上下文的变化向量相比具有更大的大小或在不同的方向上时，向上调整影响。在至少一个实施例中，当该向量与其他变化向量具有相似的大小或具有相似的方向时，向下调整影响。
[0106]
在506，在至少一个实施例中，基于所述子上下文的比例的相对变化来调整所述影响因子。在至少一个实施例中，当一个子上下文的比例相对于其他子上下文增加时，影响向上调整，而当比例减小时向下调整。
[0107]
在至少一个实施例中，如元素508所示，为每个子上下文计算影响因子。
[0108]
在510，在至少一个实施例中，基于计算的影响因子，选择一个或更多个子上下文
作为转变的潜在原因。
[0109]
图6示出了根据至少一个实施例的子环境隔离的示例过程。
[0110]
尽管示例过程600被描绘为一系列操作，但是应当理解，在实施例中，所描述的操作可以以各种方式更改，并且某些操作可以省略、重新排序或与其他操作并行执行，除非明确说明或逻辑暗示顺序，例如当一个操作的输入取决于另一个操作的输出时。
[0111]
图6所描绘的操作可由诸如图1所描绘的基于网络的服务102之类的系统来执行，该系统包括至少一个处理器和包含指令的存储器，该指令响应于由至少一个处理器执行，使系统执行所描述的操作。
[0112]
在602，在至少一个实施例中，识别子环境用于分析。在至少一个实施例中，所述识别包括基于一个或更多个标准过滤子环境。在至少一个实施例中，所述标准包括与围绕转变的子环境相关的数据的可用性。
[0113]
在604，在至少一个实施例中，分析子环境中的信息增益。在至少一个实施例中，系统通过比较其子环境中的相对变化来分析信息增益。在至少一个实施例中，当子环境中的一个或更多个子上下文在大小或方向上的变化与所述子环境中的大多数其他子上下文显着不同时，该子环境被确定为具有相对高的信息增益。在至少一个实施例中，当子环境的子上下文在大小或方向上没有显着改变，或者当其大部分子上下文在类似的大小和方向上发生变化时，子环境被确定为具有相对低的信息增益。
[0114]
在606，在至少一个实施例中，如果子环境的信息增益低，则子环境被拒绝为潜在地与转变相关。
[0115]
在608，在至少一个实施例中，对于未被拒绝的子环境，跨所述子环境中的子上下文计算复杂度值。
[0116]
在至少一个实施例中，如操作610所示，基于信息增益来分析每个识别的子环境，并且如果信息增益适当地高，则为其关联的子上下文计算复杂度度量。
[0117]
在612，在至少一个实施例中，其关联复杂度最高的子环境被选择为转变的潜在原因。在至少一个实施例中，子环境是基于其平均绝对复杂度来选择的，该平均绝对复杂度是基于与其每个子上下文相关联的复杂度值来计算的。在至少一个实施例中，选择平均绝对复杂度最高的子环境。
[0118]
图7示出了根据至少一个实施例的子环境和子上下文隔离的示例可视化。在至少一个实施例中，图700用于可视化子环境和子上下文隔离。在至少一个实施例中，图700显示一半实例构成实例类型子环境的80％，并且完整实例构成20％，并且对于所有实例702，平均值708已经增加。此外，与一半实例704相关联的平均值已经增加，而与完整实例706相关联的平均值没有改变。所述一半实例和完整实例的相对比例710没有变化，分别为20％和30％。在至少一个实施例中，该子环境与高信息增益相关联，这是由于与一半实例相关联的所述平均值的变化，如箭头704所示。
[0119]
图8示出了根据至少一个实施例的子环境和子上下文隔离的另一示例可视化。在至少一个实施例中，图800用于可视化子环境和子上下文隔离。在至少一个实施例中，图800显示，与所有实例802相比，一半实例804和完整实例806分别构成实例类型子环境的80％和20％。此外，图800表明这些各自的比例没有变化。关于平均值，图800表示度量808的平均值对于一半实例和完整实例都在类似的大小和方向上改变。在至少一个实施例中，这导致确
定子环境具有低信息增益。
[0120]
图9示出了根据至少一个实施例的子环境和子上下文隔离的另一示例可视化。在至少一个实施例中，图900用于可视化子环境和子上下文隔离。在至少一个实施例中，图900示出了与版本号有关的子环境内的子上下文的均值和比例的变化。此外，图900示出了度量908的平均值对于所有版本都降低，如箭头902所示，并且版本“v2.0”的比例已经从20％增加到40％。尽管示出了与版本2.0和v1.1相关联的平均值908的变化，在图900中元素904和906的变化相对较小，但由于版本v1.1和v2.0以相反的方向变化，图900可以被认为具有相对高的信息增益。
[0121]
图10图示了根据至少一个实施例的子环境和子上下文隔离和向下钻取的示例有向图可视化。在至少一个实施例中，系统生成诸如类似于图10中所描绘的可视化以促进对度量的转变的一个或更多个原因的识别和理解。
[0122]
在至少一个实施例中，可视化1000的元素1002描绘了度量m中的退化。在至少一个实施例中，元素1002被链接到描述子环境的元素1004，该子环境基于这里描述的隔离过程已经被识别为度量m中的所述退化的潜在原因。在至少一个实施例中，如通向元素1016的箭头1010a、b所描绘的，在实例类型子环境中“一半实例”子上下文的改变已经被识别为所述退化的潜在原因。
[0123]
在至少一个实施例中，向下钻取过程识别用户类别子环境，如元素1006所示，其包括已基于本文描述的隔离过程识别为所述退化的潜在原因的“现有”用户类别子上下文。类似地，描述为元素1008的应用程序版本子环境包括“v2.1”的子上下文，该子上下文也已基于本文描述的隔离过程被识别为度量m中的所述退化的潜在原因。
[0124]
在至少一个实施例中，可视化1000描绘了标记的子环境和子上下文之间的相关性。例如，在至少一个实施例中，可视化1000描绘了度量m中的退化可能与代表现有用户运行2.1版的应用程序的一半实例相关联。在至少一个实施例中，子上下文之间的关系被描绘为箭头1010、1012、1014。例如，箭头1104将与元素1018中与现有用户的在一半实例上运行的会话有关的统计数据与元素2020中和针对现有用户运行版本2.1的在一半实例上运行的会话有关的统计数据相关。
[0125]
在至少一个实施例中，处理器包括一个或更多个电路，其被配置为将响应于与基于网络的服务的第一组用户交互的基于网络的服务的性能度量与响应于第二组用户交互的基于网络的服务的一个或更多个性能度量进行比较。
[0126]
在至少一个实施例中，所述一个或更多个电路被配置为通过至少生成重采样的时间序列，通过至少随机地将基于网络的服务的一个或更多个性能度量的时间序列的点重新分配给重采样的时间序列的桶，确定基于网络的服务的性能已经退化。在至少一个实施例中，所述一个或更多个电路还被配置为至少部分地基于重采样的时间序列的片段的统计比较来识别重采样的时间序列中的转变点。
[0127]
在至少一个实施例中，所述一个或更多个电路被配置为将响应于第一组用户交互的基于网络的服务的一个或更多个性能度量的变化率与响应于第二组用户交互的基于网络的服务的一个或更多个性能度量的变化率进行比较。
[0128]
在至少一个实施例中，所述一个或更多个电路被配置为将第一组用户交互的比例与第二组用户交互的比例进行比较。
[0129]
在至少一个实施例中，第一组用户交互与属性类别中的第一属性相关联，并且第二组用户交互与属性类别中的第二属性相关联。
[0130]
在至少一个实施例中，所述一个或更多个电路被配置为至少部分地基于通过将第一组用户交互的一个或更多个性能度量与第二组用户交互的一个或更多个性能度量进行比较而获得的信息度量，确定与第一组用户交互相关联的属性是基于网络的服务的性能退化的可能原因。
[0131]
在至少一个实施例中，所述一个或更多个电路被配置为至少部分地基于递归地比较用户交互组，其中每个递归级别是至少部分地基于与早期递归级别中的属性类别不同的属性类别。
[0132]
在至少一个实施例中，用户交互包括与用户相关联的客户端设备对基于网络的服务的利用。
[0133]
服务器和数据中心
[0134]
以下附图阐述了但不限于可以用于实现至少一个实施例的基于示例性网络服务器和数据中心的系统。
[0135]
图11示出了根据至少一个实施例的分布式系统1100。在至少一个实施例中，分布式系统1100包括一个或更多个客户端计算设备1102、1104、1106和1108，其被配置成在一个或更多个网络1110上执行和操作客户端应用，诸如网络(web)浏览器、专有客户端和/或其变体。在至少一个实施例中，服务器1112可以经由网络1110与远程客户端计算设备1102、1104、1106和1108通信地耦合。
[0136]
在至少一个实施例中，服务器1112可适于运行一个或更多个服务或软件应用，诸如可管理跨多个数据中心的单点登录(sso)访问的会话活动的服务和应用。在至少一个实施例中，服务器1112还可以提供其他服务，或者软件应用，其可以包括非虚拟和虚拟环境。在至少一个实施例中，这些服务可作为基于web的服务或云服务或在软件即服务(saas)模型下被提供给客户端计算设备1102、1104、1106和/或1108的用户。在至少一个实施例中，操作客户端计算设备1102、1104、1106和/或1108的用户又可以利用一个或更多个客户端应用来与服务器1112交互以利用由这些组件提供的服务。
[0137]
在至少一个实施例中，系统1100的软件组件1118、1120和1122在服务器1112上实现。在至少一个实施例中，系统1100的一个或更多个组件和/或由这些组件提供的服务也可由客户端计算设备1102、1104、1106和/或1108中的一个或更多个来实现。在至少一个实施例中，操作客户端计算设备的用户然后可以利用一个或更多个客户端应用来使用由这些组件提供的服务。在至少一个实施例中，这些组件可以用硬件、固件、软件或其组合来实现。应当理解，各种不同的系统配置是可能的，其可以不同于分布式系统1100。因此，图11所示的实施例是用于实现实施例系统的分布式系统的一个示例，并且不旨在是限制性的。
[0138]
在至少一个实施例中，客户端计算设备1102、1104、1106和/或1108可以包括不同类型的计算系统。在至少一个实施例中，客户端计算设备可以包括便携式手持设备(例如，蜂窝电话、计算平板、个人数字助理(pda))或可穿戴设备(例如，google头戴式显示器)，运行软件(如microsoft windows)和/或各种移动操作系统(诸如ios、windows phone、android、blackberry 10、palm os和/或其变体)。在至少一个实施例中，设备可以支持不同应用，诸如不同互联网相关的应用、电子邮件、短消息服务
(sms)应用，并且可以使用各种其他通信协议。在至少一个实施例中，客户端计算设备还可以包括通用个人计算机，通过示例，所述通用个人计算机包括运行各种版本的microsoftapple和/或linux操作系统的个人计算机和/或膝上型计算机。在至少一个实施例中，客户端计算设备可以是运行各种可商购的或类似unix的操作系统中的任一种的工作站计算机，包括但不限于各种gnu/linux操作系统，诸如google chrome os。在至少一个实施例中，客户端计算设备还可以包括能够通过一个或更多个网络1110进行通信的电子设备，诸如瘦客户端计算机、启用互联网的游戏系统(例如，具有或不具有手势输入设备的微软xbox游戏控制台)、和/或个人消息传递设备。尽管图11中的分布式系统1100被示为具有四个客户端计算设备，但可支持任何数量的客户端计算设备。其他设备(诸如具有传感器的设备等)可与服务器1112交互。
[0139]
在至少一个实施例中，分布式系统1100中的网络1110可以是能够使用各种可用协议中的任何协议来支持数据通信的任何类型的网络，包括但不限于tcp/ip(传输控制协议/互联网协议)、sna(系统网络架构)、ipx(互联网分组交换)、appletalk和/或其变体。在至少一个实施例中，网络1110可以是局域网(lan)，基于以太网的网络、令牌环、广域网、互联网、虚拟网络、虚拟专用网(vpn)、内联网、外联网、公共交换电话网络(pstn)、红外网络、无线网络(例如，在电气与电子协会(ieee)802.11协议组、和/或任何其他无线协议中的任一者下运行的网络)，和/或这些和/或其他网络的任何组合。
[0140]
在至少一个实施例中，服务器1112可以由一个或更多个通用计算机、专用服务器计算机(通过示例，包括pc(个人计算机)服务器、服务器、中程服务器、大型计算机、机架式服务器等)、服务器农场、服务器集群或任何其他适当的布置和/或组合组成。在至少一个实施例中，服务器1112可包括运行虚拟操作系统的一个或更多个虚拟机或涉及虚拟化的其他计算架构。在至少一个实施例中，可以虚拟化一个或更多个灵活的逻辑存储设备池，以便为服务器维护虚拟存储设备。在至少一个实施例中，虚拟网络可由服务器1112使用软件定义的网络来控制。在至少一个实施例中，服务器1112可适于运行一个或更多个服务或软件应用。
[0141]
在至少一个实施例中，服务器1112可以运行任何操作系统，以及任何可商购的服务器操作系统。在至少一个实施例中，服务器1112还可以运行各种附加服务器应用和/或中层应用中的任一种，包括http(超文本传输协议)服务器、ftp(文件传输协议)服务器、cgi(公共网关接口)服务器、服务器、数据库服务器和/或其变体。在至少一个实施例中，示例性数据库服务器包括但不限于从oracle、microsoft、sybase、ibm(国际商业机器)和/或其变体可商购的那些。
[0142]
在至少一个实施例中，服务器1112可包括一个或更多个应用，用于分析和合并从客户端计算设备1102、1104、1106和1108的用户接收的数据馈送和/或事件更新。在至少一个实施例中，数据馈送和/或事件更新可以包括但不限于，从一个或更多个第三方信息源和连续数据流接收的馈送、更新或实时更新，其可以包括与传感器数据应用、金融报价器、网络性能测量工具(例如，网络监视和业务管理应用)相关的实时事件，点击流分析工具、汽车交通监测和/或其变化。在至少一个实施例中，服务器1112还可以包括用于经由客户端计算设备1102、1104、1106和1108的一个或更多个显示设备来显示数
据馈送和/或实时事件的一个或更多个应用。
[0143]
在至少一个实施例中，分布式系统1100还可包括一个或更多个数据库1114和1116。在至少一个实施例中，数据库可提供用于存储信息(诸如用户交互信息、使用模式信息、适配规则信息和其他信息)的机制。在至少一个实施例中，数据库1114和1116可以驻留在各种位置中。在至少一个实施例中，数据库1114和1116中的一个或更多个可以驻留在服务器1112本地(和/或驻留在服务器1112中)的非暂态存储介质上。在至少一个实施例中，数据库1114和1116可以远离服务器1112并且经由基于web的连接或专用连接与服务器1112通信。在至少一个实施例中，数据库1114和1116可以驻留在存储区域网络(san)中。在至少一个实施例中，用于执行归属于服务器1112的功能的任何必要的文件可以适当地本地存储在服务器1112上和/或远程存储。在至少一个实施例中，数据库1114和1116可以包括关系数据库，诸如适于响应于sql格式化的命令而存储、更新和检索数据的数据库。
[0144]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。在至少一个实施例中，基于网络的服务包括分布式系统1100。
[0145]
图12示出了根据至少一个实施例的示例性数据中心1200。在至少一个实施例中，数据中心1200包括但不限于数据中心基础设施层1210、框架层1220、软件层1230和应用层1240。
[0146]
图12示出了根据至少一个实施例的示例性数据中心1200。在至少一个实施例中，数据中心1200包括但不限于数据中心基础设施层1210、框架层1220、软件层1230和应用层1240。
[0147]
在至少一个实施例中，如图12所示，数据中心基础设施层1210可以包括资源协调器1212、分组的计算资源1214和节点计算资源(“节点c.r.”)1216(1)-1216(n)，其中“n”表示任何完整的正整数。在至少一个实施例中，节点c.r.1216(1)-1216(n)可以包括但不限于任意数量的中央处理单元(“cpu”)或其他处理器(包括加速器、现场可编程门阵列(“fpga”)、图形处理器等)、存储器设备(例如，动态只读存储器)、存储设备(例如，固态硬盘或磁盘驱动器)、网络输入/输出(“nw i/o”)设备、网络交换机、虚拟机(“vm”)、功率模块和冷却模块等。在至少一个实施例中，节点c.r.1216(1)-1216(n)中的一个或更多个节点c.r.可以是具有一个或更多个上述计算资源的服务器。
[0148]
在至少一个实施例中，分组的计算资源1214可以包括容纳在一个或更多个机架内的节点c.r.的单独分组(未示出)，或者容纳在各个地理位置的数据中心内的许多机架(也未示出)。分组的计算资源1214内的节点c.r.的单独分组可以包括可以被配置或分配为支持一个或更多个工作负载的分组的计算、网络、存储器或存储资源。在至少一个实施例中，可以将包括cpu或处理器的几个节点c.r.分组在一个或更多个机架内，以提供计算资源来支持一个或更多个工作负载。在至少一个实施例中，一个或更多个机架还可以包括任意数量的电源模块、冷却模块和网络交换机，以任意组合。
[0149]
在至少一个实施例中，资源协调器1212可以配置或以其他方式控制一个或更多个节点c.r.1216(1)-1216(n)和/或分组的计算资源1214。在至少一个实施例中，资源协调器
1212可以包括用于数据中心1200的软件设计基础结构(“sdi”)管理实体。在至少一个实施例中，资源协调器1212可以包括硬件、软件或其某种组合。在至少一个实施例中，如图12所示，框架层1220包括但不限于作业调度器1232、配置管理器1234、资源管理器1236和分布式文件系统1238。在至少一个实施例中，框架层1220可以包括支持软件层1230的软件1252和/或应用程序层1240的一个或更多个应用程序1242的框架。在至少一个实施例中，软件1252或应用程序1242可以分别包括基于web的服务软件或应用程序，例如由amazon web services、google cloud和microsoft azure提供的服务或应用程序。在至少一个实施例中，框架层1220可以是但不限于一种免费和开放源软件网络应用框架，例如可以利用分布式文件系统1238来进行大范围数据处理(例如“大数据”)的apache sparktm(以下称为“spark”)。在至少一个实施例中，作业调度器1232可以包括spark驱动器，以促进对数据中心1200的各个层所支持的工作负载进行调度。在至少一个实施例中，配置管理器1234可以能够配置不同的层，例如软件层1230和包括spark和用于支持大规模数据处理的分布式文件系统1238的框架层1220。在至少一个实施例中，资源管理器1236能够管理映射到或分配用于支持分布式文件系统1238和作业调度器1232的集群或分组计算资源。在至少一个实施例中，集群或分组计算资源可以包括数据中心基础设施层1210上的分组的计算资源1214。在至少一个实施例中，资源管理器1236可以与资源协调器1212协调以管理这些映射的或分配的计算资源。
[0150]
在至少一个实施例中，包括在软件层1230中的软件1252可以包括由节点c.r.1216(1)-1216(n)的至少一部分，分组计算资源1214和/或框架层1220的分布式文件系统1238使用的软件。一种或更多种类型的软件可以包括但不限于internet网页搜索软件、电子邮件病毒扫描软件、数据库软件和流视频内容软件。
[0151]
在至少一个实施例中，应用层1240中包括的一个或更多个应用程序1242可以包括由节点c.r.1216(1)-1216(n)的至少一部分、分组的计算资源1214和/或框架层1220的分布式文件系统1238使用的一种或更多种类型的应用程序。一种或更多种类型的应用程序可以包括但不限于cuda应用程序、5g网络应用程序、人工智能应用程序、数据中心应用程序、和/或其变体。
[0152]
在至少一个实施例中，配置管理器1234、资源管理器1236和资源协调器1212中的任何一个可以基于以任何技术上可行的方式获取的任意数量和类型的数据来实现任意数量和类型的自我修改动作。在至少一个实施例中，自我修改动作可以减轻数据中心1200的数据中心操作员做出可能不好的配置决定并且可以避免数据中心的未充分利用和/或执行差的部分。
[0153]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0154]
图13示出了根据至少一个实施例的由互连的多个网络服务器计算机1302形成的客户端-服务器网络1304。在至少一个实施例中，每个网络服务器计算机1302存储其他网络服务器计算机1302和链接到广域网1304中的客户端计算机1306和网络1308可访问的数据。在至少一个实施例中，当客户端计算机1306和一个或更多个网络1308与网络1304连接和断
开连接时，以及当一个或更多个干线服务器计算机1302被添加到网络1304或从网络1304移除时，客户端-服务器网络1304的配置可随时间改变。在至少一个实施例中，当客户端计算机1306和网络1308与网络服务器计算机1302连接时，客户端-服务器网络包括这样的客户端计算机1306和网络1308。在至少一个实施例中，术语计算机包括能够接受数据、将规定的过程应用于数据以及提供过程的结果的任何设备或机器。
[0155]
在至少一个实施例中，客户端-服务器网络1304存储网络服务器计算机1302、远程网络1308和客户端计算机1306可访问的信息。在至少一个实施例中，网络服务器计算机1302由大型计算机、小型计算机和/或各自具有一个或更多个处理器的微型计算机形成。在至少一个实施例中，服务器计算机1302通过有线和/或无线传输介质(诸如导线、光纤电缆)和/或微波传输介质、卫星传输介质或其他导电、光学或电磁波传输介质链接在一起。在至少一个实施例中，客户端计算机1306通过类似的有线或无线传输介质访问网络服务器计算机1302。在至少一个实施例中，客户端计算机1306可以使用调制解调器和标准电话通信网络链接到客户端-服务器网络1304中。在至少一个实施例中，替代性的运营商系统(如电缆和卫星通信系统)还可以用于链接到客户端-服务器网络1304中。在至少一个实施例中，可以使用其他私有或时间共享的运营商系统。在至少一个实施例中，网络1304是全球信息网络，诸如互联网。在至少一个实施例中，网络是使用与互联网类似的协议但具有添加的安全措施和受限的访问控制的私有内联网。在至少一个实施例中，网络1304是使用专有通信协议的私有或半私有网络。
[0156]
在至少一个实施例中，客户端计算机1306是任何终端用户计算机，并且还可以是具有一个或更多个微处理器的大型计算机、小型计算机或微型计算机。在至少一个实施例中，服务器计算机1302有时可用作访问另一服务器计算机1302的客户端计算机。在至少一个实施例中，远程网络1308可以是局域网、通过用于互联网的独立服务提供商(isp)被添加到广域网中的网络、或通过具有固定的或随时间改变的配置的有线或无线传输介质互连的另一组计算机。在至少一个实施例中，客户端计算机1306可以独立地或通过远程网络1308链接到网络1304中并且访问网络1304。
[0157]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0158]
图14示出了根据至少一个实施例的连接一个或更多个计算机器的计算机网络1408。在至少一个实施例中，网络1408可以是任何类型的电连接的计算机组，包括例如以下网络：互联网、内联网、局域网(lan)、广域网(wan)或这些网络类型的互连组合。在至少一个实施例中，网络1408内的连接可以是远程调制解调器、以太网(ieee 802.3)、令牌环(ieee 802.5)、光纤分布式数据链路接口(fddi)、异步传输模式(atm)或任何其他通信协议。在至少一个实施例中，链接到网络的计算设备可以是台式机、服务器、便携式、手持式、机顶盒、个人数字助理(pda)、终端、或任何其他期望的类型或配置。在至少一个实施例中，取决于它们的功能性，网络连接的设备可以在处理能力、内部存储器和其他性能方面广泛地变化。在至少一个实施例中，网络内的通信以及去往或来自连接到网络的计算设备的通信可以是有线或无线的。在至少一个实施例中，网络1408可以至少部分地包括世界范围的公共互联网，
其通常根据客户端-服务器模型根据传输控制协议/互联网协议(tcp/ip)规范连接多个用户。在至少一个实施例中，客户端-服务器网络是用于在两个计算机之间通信的主导模型。在至少一个实施例中，客户端计算机(“客户端”)向服务器计算机(“服务器”)发出一个或更多个命令。在至少一个实施例中，服务器通过访问可用网络资源并根据客户端命令向客户端返回信息来履行客户端命令。在至少一个实施例中，客户端计算机系统和驻留在网络服务器上的网络资源被分配网络地址，用于网络的元件之间的通信期间的识别。在至少一个实施例中，从其他网络连接的系统到服务器的通信将包括作为通信的一部分的相关服务器/网络资源的网络地址，使得数据/请求的适当目的地被识别为接收者。在至少一个实施例中，当网络1408包括全球互联网时，网络地址是tcp/ip格式的ip地址，其可至少部分地将数据路由到电子邮件账户、网站或驻留在服务器上的其他互联网工具。在至少一个实施例中，驻留在网络服务器上的信息和服务可以通过域名(例如www.site.com)(其映射到网络服务器的ip地址)对客户端计算机的web浏览器可用。
[0159]
在至少一个实施例中，多个客户端1402、1404和1406经由相应的通信链路连接至网络1408。在至少一个实施例中，这些客户端中的每一个可以经由任何期望形式的通信(诸如经由拨号调制解调器连接、电缆链路、数字用户线(dsl)、无线或卫星链路、或任何其他形式的通信)来访问网络1408。在至少一个实施例中，每个客户端可以使用与网络1408兼容的任何机器(例如，个人计算机(pc)、工作站、专用终端、个人数据助理(pda)或其他类似的设备)进行通信。在至少一个实施例中，客户端1402、1404和1406可以位于或可以不位于相同的地理区域中。
[0160]
在至少一个实施例中，多个服务器1410、1412和1414连接到网络1418以服务于与网络1418通信的客户端。在至少一个实施例中，每个服务器通常是管理网络资源并对客户端命令作出响应的强大的计算机或设备。在至少一个实施例中，服务器包括存储程序指令和数据的计算机可读数据存储介质，诸如硬盘驱动器和ram存储器。在至少一个实施例中，服务器1410、1412、1414运行响应于客户端命令的应用程序。在至少一个实施例中，服务器1410可以运行用于响应对html页面的客户端请求的web服务器应用，并且还可以运行用于接收和路由电子邮件的邮件服务器应用。在至少一个实施例中，在服务器1410上还可以运行其他应用程序，诸如用于将音频/视频数据流式传输至客户端的ftp服务器或媒体服务器。在至少一个实施例中，不同的服务器可以专用于执行不同的任务。在至少一个实施例中，服务器1410可以是为不同用户管理与网站相关的资源的专用web服务器，而服务器1412可以专用于提供电子邮件(email)管理。在至少一个实施例中，其他服务器可以专用于媒体(音频、视频等)、文件传输协议(ftp)或通常通过网络可用或提供的任何两个或更多个服务的组合。在至少一个实施例中，每个服务器可以在与其他服务器的位置相同或不同的位置中。在至少一个实施例中，可存在为用户执行镜像任务的多个服务器，从而减轻拥塞或最小化定向到和来自单个服务器的流量。在至少一个实施例中，服务器1410、1412、1414在维护和通过网络1418递送第三方内容的业务中的web托管提供者的控制下。
[0161]
在至少一个实施例中，web托管提供商向两个不同类型的客户端递送服务。在至少一个实施例中，可被称为浏览器的一种类型从服务器1410、1412、1414请求内容，诸如网页、电子邮件消息、视频剪辑等。在至少一个实施例中，第二类型(其可以被称为用户)雇佣web托管提供商来维护网络资源(诸如网站)并使其可用于浏览器。在至少一个实施例中，用户
与web托管提供商签订合同，以根据用户期望利用的服务器资源的量使存储器空间、处理器容量和通信带宽可用于他们期望的网络资源。
[0162]
在至少一个实施例中，为了使web托管提供商为这两个客户端提供服务，必须适当地配置管理由服务器托管的网络资源的应用程序。在至少一个实施例中，程序配置过程涉及定义参数集，所述参数集至少部分地控制应用程序对浏览器请求的响应，并且还至少部分地定义特定用户可用的服务器资源。
[0163]
在一个实施例中，内联网服务器1416经由通信链路与网络1408通信。在至少一个实施例中，内联网服务器1416与服务器管理器1418通信。在至少一个实施例中，服务器管理器1418包括在服务器1410、1412、1414中使用的应用程序配置参数的数据库。在至少一个实施例中，用户经由内联网1416修改数据库1420，并且服务器管理器1418与服务器1410、1412、1414交互以修改应用程序参数，使得它们匹配数据库的内容。在至少一个实施例中，用户通过经由计算机1402连接到内联网1416并且输入诸如用户名和密码之类的认证信息来登录到内联网1416。
[0164]
在至少一个实施例中，当用户希望登录新服务或修改现有服务时，内联网服务器1416对用户进行认证并向用户提供允许用户访问特定应用程序的配置参数的交互式屏幕显示/控制面板。在至少一个实施例中，向用户呈现描述用户的网站或其他网络资源的配置的方面的多个可修改文本框。在至少一个实施例中，如果用户期望增加在服务器上为其网站保留的存储器空间，则向用户提供其中用户指定期望的存储器空间的字段。在至少一个实施例中，响应于接收到该信息，内联网服务器1416更新数据库1420。在至少一个实施例中，服务器管理器1418将该信息转发到适当的服务器，并且在应用程序操作期间使用新的参数。在至少一个实施例中，内联网服务器1416被配置为向用户提供对用户已与web托管服务提供商签订的托管网络资源(例如，网页、电子邮件、ftp站点、媒体站点等)的配置参数的访问。
[0165]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0166]
图15a示出了根据至少一个实施例的联网计算机系统1500a。在至少一个实施例中，联网计算机系统1500a包括多个节点或个人计算机(“pc”)1502、1518、1520。在至少一个实施例中，个人计算机或节点1502包括处理器1514、存储器1516、摄像机1504、麦克风1506、鼠标1508、扬声器1510和监视器1512。在至少一个实施例中，pc 1502、1518、1520可以各自运行例如给定公司内的内部网络的一个或更多个桌面服务器，或者可以是不限于特定环境的通用网络的服务器。在至少一个实施例中，网络的每pc节点有一个服务器，使得网络的每个pc节点表示具有特定网络url地址的特定网络服务器。在至少一个实施例中，每个服务器默认为该服务器的用户的默认网页，该默认网页本身可包含指向该服务器上该用户的进一步子页面、或者指向网络上的其他服务器或其他服务器上的页面的嵌入式url。
[0167]
在至少一个实施例中，节点1502、1518、1520和网络的其他节点经由介质1522互连。在至少一个实施例中，介质1522可以是诸如综合服务数字网(“isdn”)的通信信道。在至少一个实施例中，联网计算机系统的各个节点可以通过各种通信介质连接，包括局域网
(“lan”)、简易老式电话线(“pots”)(有时被称为公共交换电话网络(“pstn”))、和/或其变体。在至少一个实施例中，网络的各个节点还可以构成经由诸如互联网之类的网络互连的计算机系统用户。在至少一个实施例中，(在给定实例处从网络的特定节点运行的)网络上的每个服务器在网络内具有唯一地址或标识，该唯一地址或标识可以根据url指定。
[0168]
在至少一个实施例中，多个多点会议单元(“mcu”)因此可以用于向会议系统的各个节点或“端点”和从会议系统的各个节点或“端点”传输数据。在至少一个实施例中，除了各种其他通信介质(诸如，通过互联网连接的节点)之外，节点和/或mcu可经由isdn链路或通过局域网(“lan”)互连。在至少一个实施例中，会议系统的节点通常可以直接连接到通信介质(诸如lan)或通过mcu连接，并且会议系统可以包括其他节点或元件，诸如路由器、服务器和/或其变体。
[0169]
在至少一个实施例中，处理器1514是通用可编程处理器。在至少一个实施例中，联网计算机系统1500a的节点的处理器还可以是专用视频处理器。在至少一个实施例中，节点的不同外围设备和组件(诸如节点1502的那些)可以与其他节点的那些不同。在至少一个实施例中，节点1518和节点1520可以被配置为与节点1502相同或不同。在至少一个实施例中，除了pc系统之外，节点还可以在任何合适的计算机系统上实现。
[0170]
图15b示出了根据至少一个实施例的联网计算机系统1500b。在至少一个实施例中，系统1500b示出了网络(诸如lan 1524)，该网络可以用于互连可以彼此通信的各种节点。在至少一个实施例中，附接到lan 1524的是多个节点，诸如pc节点1526、1528、1530。在至少一个实施例中，节点还可经由网络服务器或其他装置连接到lan。在至少一个实施例中，系统1500b包括其他类型的节点或元件，例如，其包括路由器、服务器和节点。
[0171]
图15c示出根据至少一个实施例的联网计算机系统1500c。在至少一个实施例中，系统1500c示出了具有跨主干通信网络(诸如互联网1532)的通信的www系统，主干通信网络可用于互连网络的各种节点。在至少一个实施例中，www是在互联网的顶部上操作的一组协议，并且允许图形界面系统在其上操作以便通过互联网访问信息。在至少一个实施例中，附接到www中的互联网1532的是多个节点，例如pc 1540、1542、1544。在至少一个实施例中，节点通过www http服务器(诸如服务器1534、1536)与www的其他节点对接。在至少一个实施例中，pc 1544可以是形成网络1532的节点的pc，并且pc 1544本身运行它的服务器1536，尽管为了说明的目的在图15c中单独地示出pc 1544和服务器1536。
[0172]
在至少一个实施例中，www是一种分布式类型的应用程序，其特征为www http、www的协议，它在互联网的传输控制协议/互联网协议(“tcp/ip”)的顶部上运行。在至少一个实施例中，www因此可以由在互联网上运行的一组协议(即，http)作为其“主干”来表征。
[0173]
在至少一个实施例中，web浏览器是在兼容www类型的网络系统中在网络的节点上运行的应用程序，其允许特定服务器或节点的用户查看这样的信息，并因此允许用户搜索使用嵌入在从理解http的网络上的服务器可获得的文档或文件中的超文本链接链接在一起的图形和基于文本的文件。在至少一个实施例中，当用户使用诸如互联网之类的网络上的另一服务器来检索与第一节点相关联的第一服务器的给定网页时，所检索到的文档可具有嵌入在其中的不同超文本链接，并且在检索用户的本地创建页面的本地副本。在至少一个实施例中，当用户点击超文本链接时，与所选择的超文本链接相关的本地存储的信息通常足以允许用户的机器打开通过互联网到由超文本链接指示的服务器的连接。
[0174]
在至少一个实施例中，多于一个用户可例如通过lan(诸如lan 1538，诸如关于www http服务器1534所示)耦合到每个http服务器。在至少一个实施例中，系统1500c还可以包括其他类型的节点或元件。在至少一个实施例中，www http服务器是在诸如pc的机器上运行的应用。在至少一个实施例中，每个用户可以被认为具有唯一的“服务器”，如关于pc 1544所示。在至少一个实施例中，服务器可以被认为是诸如www http服务器1534之类的服务器，该服务器为lan或多个节点或多个lan提供对网络的访问。在至少一个实施例中，存在多个用户，每个用户具有台式pc或网络的节点，每个台式pc潜在地为其用户建立服务器。在至少一个实施例中，每个服务器与特定网络地址或url相关联，当被访问时，该特定网络地址或url为该用户提供默认网页。在至少一个实施例中，网页可以包含进一步的链接(嵌入式url)，其指向该服务器上的该用户的进一步的子页面，或者指向网络上的其他服务器或者指向网络上的其他服务器上的页面。
[0175]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0176]
云计算和服务
[0177]
以下附图阐述但不限于可以用于实现至少一个实施例的示例性的基于云的系统。
[0178]
在至少一个实施例中，云计算是一种计算风格，其中动态可扩展和通常虚拟化的资源作为服务通过互联网来提供。在至少一个实施例中，用户不需要具有支持他们的技术基础设施的知识、技术基础设施的专业知识或对技术基础设施的控制，该技术基础设施可以被称为“在云中”。在至少一个实施例中，云计算将基础设施合并为服务、平台即服务、软件即服务、以及具有依赖于互联网的常见主题以满足用户的计算需求的其他变型。在至少一个实施例中，典型的云部署(诸如在私有云(例如，企业网络)中)或公共云(例如，互联网)中的数据中心(dc)可由数千个服务器(或可替代地，vm)、数百个以太网、光纤信道或以太网光纤信道(fcoe)端口、交换和存储基础设施等组成。在至少一个实施例中，云还可以由网络服务基础设施组成，如ipsec vpn集线器、防火墙、负载平衡器、广域网(wan)优化器等。在至少一个实施例中，远程订户可以通过经由vpn隧道(如ipsecvpn隧道)连接来安全地访问云应用和服务。
[0179]
在至少一个实施例中，云计算是一种用于使能对可配置计算资源(例如，网络、服务器、存储装置、应用程序和服务)的共享池的方便、按需的网络访问的模型，所述可配置计算资源可以用最小的管理努力或服务提供商交互来快速配置和释放。
[0180]
在至少一个实施例中，云计算的特征在于按需自助服务，其中消费者可根据需要自动地单方面供应计算能力，诸如服务器时间和网络存储，而无需与每个服务提供商的人类互动。在至少一个实施例中，云计算的特征在于广泛的网络访问，其中能力在网络上可用并且通过标准机制来访问，所述标准机制促进由异构的瘦或厚客户端平台(例如，移动电话、膝上型计算机和pda)的使用。在至少一个实施例中，云计算的特征在于资源池，其中提供商的计算资源被池化以使用多租户模型服务于多个消费者，其中不同的物理和虚拟资源根据消费者需求被动态地签名和重新分配。在至少一个实施例中，存在位置独立性的感觉，因为消费者通常对所提供的资源的确切位置没有控制或知识，但可能能够在较高抽象级别
(例如，国家、州或数据中心)指定位置。在至少一个实施例中，资源的例子包括存储、处理、存储器、网络带宽和虚拟机。在至少一个实施例中，云计算的特征在于快速弹性，其中能力可被快速且弹性地供应(在一些情况下是自动地)，以快速缩小和快速释放以快速放大。在至少一个实施例中，对于消费者，可用于供应的能力通常显得不受限制并且可以在任何时间以任何数量购买。在至少一个实施例中，云计算由测量的服务来表征，其中云系统通过在适合于服务类型(例如，存储、处理、带宽和活动用户账户)的某种抽象级别处利用计量能力来自动地控制和优化资源使用。在至少一个实施例中，资源使用可以被监控、控制和报告，从而为所利用的服务的提供商和消费者两者提供透明度。
[0181]
在至少一个实施例中，云计算可与各种服务相关联。在至少一个实施例中，云软件即服务(saas)可以指代提供给消费者的能力是使用在云基础设施上运行的提供商的应用的服务。在至少一个实施例中，应用可通过诸如web浏览器(例如，基于web的电子邮件)的瘦客户端接口从不同客户端设备访问。在至少一个实施例中，消费者不管理或控制包括网络、服务器、操作系统、存储或甚至各个应用能力的底层云基础结构，可能的例外是有限的用户特定的应用配置设置。
[0182]
在至少一个实施例中，云平台即服务(paas)可以指这样的服务：其中提供给消费者的能力是将消费者创建或获取的应用程序部署到云基础设施上，这些应用程序是使用由提供商支持的编程语言和工具创建的。在至少一个实施例中，消费者不管理或控制包括网络、服务器、操作系统或存储的底层云基础结构，但是具有对所部署的应用程序以及可能的应用托管环境配置的控制。
[0183]
在至少一个实施例中，云基础设施即服务(iaas)可以指这样的服务：其中向消费者提供的能力是提供处理、存储、网络和消费者能够部署和运行可包括操作系统和应用的任意软件的其他基本计算资源。在至少一个实施例中，消费者不管理或控制底层云基础设施，而是具有对操作系统、存储、所部署的应用程序的控制，以及对选择的联网组件(例如，主机防火墙)的可能有限的控制。
[0184]
在至少一个实施例中，可以不同方式部署云计算。在至少一个实施例中，私有云可指仅针对组织操作的云基础设施。在至少一个实施例中，私有云可由组织或第三方管理，并且可存在于场所内或场所外。在至少一个实施例中，社区云可以指由若干组织共享并且支持具有共享关注(例如，任务、安全要求、策略和合规性考虑)的特定社区的云基础设施。在至少一个实施例中，社区云可由组织或第三方管理，并且可存在于场所内或场所外。在至少一个实施例中，公共云可以指代对一般公众或大型产业组可用并且由提供云服务的组织拥有的云基础设施。在至少一个实施例中，混合云可以指云基础设施是两个或更多个云(私有、社区或公共的)的组成部分，这些云仍然是唯一的实体，但是通过实现数据和应用便携性的标准化或专有技术(例如，用于云之间的负载平衡的云突发)绑定在一起。在至少一个实施例中，云计算环境是面向服务的，其关注于无状态性、低耦合、模块性和语义互操作性。
[0185]
图16示出根据至少一个实施例的系统环境1600的一个或更多个组件，其中服务可被提供为第三方网络服务。在至少一个实施例中，第三方网络可被称为云、云网络、云计算网络和/或其变体。在至少一个实施例中，系统环境1600包括一个或更多个客户端计算设备1604、1606和1608，客户端计算设备1604、1606和1608可被用户用来与提供第三方网络服务(其可被称为云计算服务)的第三方网络基础设施系统1602交互。在至少一个实施例中，第
三方网络基础设施系统1602可包括一个或更多个计算机和/或服务器。
[0186]
应了解，图16中所描绘的第三方网络基础设施系统1602可具有除了所描绘的那些组件之外的其他组件。进一步地，图16描绘了第三方网络基础设施系统的实施例。在至少一个实施例中，第三方网络基础设施系统1602可具有比图16中描绘的更多或更少的组件，可组合两个或更多个组件，或可具有不同的组件配置或布置。
[0187]
在至少一个实施例中，客户端计算设备1604、1606和1608可被配置成操作客户端应用，诸如web浏览器，可由客户端计算设备的用户用来与第三方网络基础设施系统1602交互以使用由第三方网络基础设施系统1602提供的服务的专有客户端应用或一些其他应用。尽管示例性系统环境1600被示为具有三个客户端计算设备，但是可以支持任何数量的客户端计算设备。在至少一个实施例中，其他设备，诸如具有传感器的设备等，可与第三方网络基础设施系统1602交互。在至少一个实施例中，一个或更多个网络1610可以促进客户端计算设备1604、1606和1608与第三方网络基础设施系统1602之间的通信和数据交换。
[0188]
在至少一个实施例中，由第三方网络基础设施系统1602提供的服务可包括按需可用于第三方网络基础设施系统的用户的服务的主机。在至少一个实施例中，还可以提供各种服务，包括但不限于在线数据存储和备份解决方案、基于web的电子邮件服务、托管的办公套件和文档协作服务、数据库管理和处理、管理的技术支持服务、和/或其变体。在至少一个实施例中，由第三方网络基础设施系统提供的服务可以动态地扩展以满足其用户的需要。
[0189]
在至少一个实施例中，由第三方网络基础设施系统1602提供的服务的特定实例化可被称为“服务实例”。在至少一个实施例中，通常，经由通信网络(诸如互联网)从第三方网络服务提供商系统对用户可用的任何服务被称为“第三方网络服务”。在至少一个实施例中，在公共第三方网络环境中，组成第三方网络服务提供商系统的服务器和系统不同于客户自己的场所内服务器和系统。在至少一个实施例中，第三方网络服务提供商系统可以托管应用，并且用户可以经由通信网络(诸如互联网)按需订购和使用应用。
[0190]
在至少一个实施例中，计算机网络第三方网络基础设施中的服务可包括对存储、托管数据库、托管网络服务器、软件应用或由第三方网络供应商提供给用户的其他服务的受保护的计算机网络访问。在至少一个实施例中，服务可包括通过互联网对第三方网络上的远程存储装置的密码保护的访问。在至少一个实施例中，服务可以包括基于web服务的托管关系数据库和脚本语言中间件引擎，以便由联网开发者私人使用。在至少一个实施例中，服务可包括对托管在第三方网络供应商的网站上的电子邮件软件应用的访问。
[0191]
在至少一个实施例中，第三方网络基础设施系统1602可包括以自助、基于订阅、可弹性扩展、可靠、高度可用和安全方式递送给客户的一套应用、中间件和数据库服务提供物。在至少一个实施例中，第三方网络基础设施系统1602还可以提供“大数据”相关的计算和分析服务。在至少一个实施例中，术语“大数据”通常用于指可以由分析师和研究人员存储和操纵的极大数据集，以便使大量数据可视化、检测趋势、和/或以其他方式与数据交互。在至少一个实施例中，大数据和相关应用可以由基础设施系统在许多级别上和以不同规模托管和/或操纵。在至少一个实施例中，并行链接的数十个、数百个或数千个处理器可对此类数据起作用以便呈现该数据或模拟对数据或其所表示的内容的外力。在至少一个实施例中，这些数据集可涉及结构化数据(诸如在数据库中或以其他方式根据结构化模型组织的
结构化数据)和/或非结构化数据(例如，电子邮件、图像、数据blob(二进制大对象)、网页、复杂事件处理)。在至少一个实施例中，通过利用实施例的能力来将更多(或更少)计算资源相对快速地聚焦到目标上，第三方网络基础设施系统可以更好地可用于基于来自企业、政府机构、研究组织、私人个人、想法相同的个人或组织的组、或其他实体的需求在大数据集上执行任务。
[0192]
在至少一个实施例中，第三方网络基础设施系统1602可以被适配成自动地提供、管理和跟踪顾客对由第三方网络基础设施系统1602提供的服务的订阅。在至少一个实施例中，第三方网络基础设施系统1602可以经由不同的部署模型提供第三方网络服务。在至少一个实施例中，可在公共第三方网络模型下提供服务，其中第三方网络基础设施系统1602由销售第三方网络服务的组织拥有，并且使得服务可用于一般公众或不同的行业企业。在至少一个实施例中，可在私有第三方网络模型下提供服务，在该私有第三方网络模型中，第三方网络基础设施系统1602仅针对单个组织操作，并且可为组织内的一个或更多个实体提供服务。在至少一个实施例中，第三方网络服务也可在社区第三方网络模型下提供，其中第三方网络基础设施系统1602和第三方网络基础设施系统1602提供的服务由相关社区中的若干组织共享。在至少一个实施例中，也可在混合第三方网络模型下提供第三方网络服务，该混合第三方网络模型是两个或更多个不同模型的组合。
[0193]
在至少一个实施例中，由第三方网络基础设施系统1602提供的服务可包括在软件即服务(saas)类别、平台即服务(paas)类别、基础设施即服务(iaas)类别或包括混合服务的其他服务类别下提供的一个或更多个服务。在至少一个实施例中，客户经由订阅订单可订购由第三方网络基础设施系统1602提供的一个或更多个服务。在至少一个实施例中，第三方网络基础设施系统1602然后执行处理以在客户的订阅订单中提供服务。
[0194]
在至少一个实施例中，由第三方网络基础设施系统1602提供的服务可以包括但不限于应用服务、平台服务和基础设施服务。在至少一个实施例中，应用服务可由第三方网络基础设施系统经由saas平台提供。在至少一个实施例中，saas平台可被配置为提供属于saas类别的第三方网络服务。在至少一个实施例中，saas平台可以提供在集成开发和部署平台上构建并递送一套按需应用的能力。在至少一个实施例中，saas平台可以管理和控制用于提供saas服务的底层软件和基础设施。在至少一个实施例中，通过利用由saas平台提供的服务，客户可利用在第三方网络基础设施系统上执行的应用。在至少一个实施例中，客户可以获得应用服务，而不需要客户购买单独的许可证和支持。在至少一个实施例中，可提供各种不同的saas服务。在至少一个实施例中，示例包括但不限于为大组织的销售性能管理、企业集成和商业灵活性提供解决方案的服务。
[0195]
在至少一个实施例中，平台服务可由第三方网络基础设施系统1602经由paas平台提供。在至少一个实施例中，paas平台可被配置为提供属于paas类别的第三方网络服务。在至少一个实施例中，平台服务的示例可以包括但不限于使组织能够将现有应用合并在共享的公共架构上的服务，以及建立利用由平台提供的共享服务的新应用的能力。在至少一个实施例中，paas平台可以管理和控制用于提供paas服务的底层软件和基础设施。在至少一个实施例中，客户可获取由第三方网络基础设施系统1602提供的paas服务，而无需客户购买单独的许可证和支持。
[0196]
在至少一个实施例中，通过利用由paas平台提供的服务，客户可采用由第三方网
络基础设施系统支持的编程语言和工具，并且还控制所部署的服务。在至少一个实施例中，由第三方网络基础设施系统提供的平台服务可包括数据库第三方网络服务、中间件第三方网络服务和第三方网络服务。在至少一个实施例中，数据库第三方网络服务可支持共享服务部署模型，所述共享服务部署模型使组织能够汇聚数据库资源并以数据库第三方网络的形式向客户提供数据库即服务。在至少一个实施例中，在第三方网络基础设施系统中，中间件第三方网络服务可以为客户提供平台以开发和部署不同业务应用，并且第三方网络服务可以为客户提供平台以部署应用。
[0197]
在至少一个实施例中，各种不同的基础设施服务可由第三方网络基础设施系统中的iaas平台提供。在至少一个实施例中，基础设施服务促进利用由saas平台和paas平台提供的服务的客户对底层计算资源(诸如存储、网络和其他基础计算资源)的管理和控制。
[0198]
在至少一个实施例中，第三方网络基础设施系统1602还可包括用于提供用于向第三方网络基础设施系统的客户提供各种服务的资源的基础设施资源1630。在至少一个实施例中，基础设施资源1630可包括硬件(诸如服务器、存储和联网资源)的预集成和优化的组合，用于执行由paas平台和saas平台提供的服务和其他资源。
[0199]
在至少一个实施例中，第三方网络基础设施系统1602中的资源可由多个用户共享并且按照需求动态地重新分配。在至少一个实施例中，可以向不同时区中的用户分配资源。在至少一个实施例中，第三方网络基础设施系统1602可以使得第一时区中的第一组用户能够利用第三方网络基础设施系统的资源持续指定小时数，并且随后使得能够将相同资源重新分配给位于不同时区中的另一组用户，从而使资源利用率最大化。
[0200]
在至少一个实施例中，可提供由第三方网络基础设施系统1602的不同组件或模块共享的多个内部共享服务1632，用于实现由第三方网络基础设施系统1602提供服务。在至少一个实施例中，这些内部共享服务可包括但不限于安全和身份服务、集成服务、企业库服务、企业管理器服务、病毒扫描和白名单服务、高可用性、备份和恢复服务、用于使能第三方网络支持的服务、电子邮件服务、通知服务、文件传输服务和/或其变体。
[0201]
在至少一个实施例中，第三方网络基础设施系统1602可在第三方网络基础设施系统中提供第三方网络服务(例如，saas、paas和iaas服务)的全面管理。在至少一个实施例中，第三方网络管理功能可包括用于供应、管理和跟踪由第三方网络基础设施系统1602接收的客户的订阅的能力和/或其变体。
[0202]
在至少一个实施例中，如图16所示，第三方网络管理功能可以由一个或更多个模块提供，诸如订单管理模块1620、订单协调模块1622、订单供应模块1624、订单管理和监控模块1626和身份管理模块1628。在至少一个实施例中，这些模块可包括一个或更多个计算机和/或服务器或使用一个或更多个计算机和/或服务器来提供，所述一个或更多个计算机和/或服务器可以是通用计算机、专用服务器计算机、服务器农场、服务器集群或任何其他适当的布置和/或组合。
[0203]
在至少一个实施例中，在步骤1634，使用客户端设备(诸如客户端计算设备1604、1606或1608)的客户可通过请求由第三方网络基础设施系统1602提供的一个或更多个服务并对由第三方网络基础设施系统1602提供的一个或更多个服务的订阅下订单来与第三方网络基础设施系统1602交互。在至少一个实施例中，客户可访问第三方网络用户界面(ui)，诸如第三方网络ui 1612、第三方网络ui 1614和/或第三方网络ui 1616，并经由这些ui进
行订购订单。在至少一个实施例中，由第三方网络基础设施系统1602响应于客户下订单而接收的订单信息可包括识别客户和由第三方网络基础设施系统1602提供的、客户想要订阅的一个或更多个服务的信息。
[0204]
在至少一个实施例中，在步骤1636，从客户接收的订单信息可存储在订单数据库1618中。在至少一个实施例中，如果这是新订单，则可以为订单创建新记录。在至少一个实施例中，订单数据库1618可以是由第三方网络基础设施系统1618操作的并且结合其他系统元件操作的若干数据库之一。
[0205]
在至少一个实施例中，在步骤1638，可以将订单信息转发到订单管理模块1620，该订单管理模块可以被配置成执行与订单相关的计费和记账功能，诸如验证订单，并且在验证后，预订一订单。
[0206]
在至少一个实施例中，在步骤1640，关于订单的信息可被传送到订单协调模块1622，该订单协调模块1622被配置为针对由客户下的订单协调服务和资源的供应。在至少一个实施例中，订单协调模块1622可以使用订单供应模块1624的服务进行供应。在至少一个实施例中，订单协调模块1622使得能够管理与每个订单相关联的业务过程，并且应用业务逻辑来确定订单是否应继续供应。
[0207]
在至少一个实施例中，在步骤1642，当接收到新订阅的订单时，订单协调模块1622向订单供应模块1624发送分配资源和配置满足订阅订单所需的资源的请求。在至少一个实施例中，订单供应模块1624实现针对由客户订购的服务的资源分配。在至少一个实施例中，订单供应模块1624提供由第三方网络基础设施系统1600提供的第三方网络服务与用于供应用于提供所请求的服务的资源的物理实现层之间的抽象级别。在至少一个实施例中，这使得订单协调模块1622能够与实现细节隔离，诸如服务和资源实际上是实时供应的，还是预先供应的并且仅在请求时分配/指派。
[0208]
在至少一个实施例中，在步骤1644，一旦服务和资源被供应，可以向订阅客户发送指示所请求的服务现在准备好使用的通知。在至少一个实施例中，信息(例如，链接)可以被发送到客户，其使客户能够开始使用所请求的服务。
[0209]
在至少一个实施例中，在步骤1646，客户订阅的订单可由订单管理和监控模块1626管理和跟踪。在至少一个实施例中，订单管理和监控模块1626可以被配置成收集关于订阅服务的客户使用的使用统计。在至少一个实施例中，可以针对所使用的存储量、所传输的数据量、用户数量、以及系统上电时间和系统下电时间的量和/或其变化来收集统计。
[0210]
在至少一个实施例中，第三方网络基础设施系统1600可包括身份管理模块1628，该身份管理模块1628被配置成提供身份服务，诸如第三方网络基础设施系统1600中的访问管理和授权服务。在至少一个实施例中，身份管理模块1628可控制关于希望利用由第三方网络基础设施系统1602提供的服务的客户的信息。在至少一个实施例中，这样的信息可以包括认证这样的客户的身份的信息和描述那些客户被授权相对于各种系统资源(例如，文件、目录、应用、通信端口、存储器段等)执行哪些动作的信息。在至少一个实施例中，身份管理模块1628还可包括管理关于每个顾客的描述性信息以及关于可如何访问和修改该描述性信息和可由谁来访问和修改该描述性信息。
[0211]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第
二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0212]
图17示出了根据至少一个实施例的云计算环境1702。在至少一个实施例中，云计算环境1702包括一个或更多个计算机系统/服务器1704，诸如个人数字助理(pda)或蜂窝电话1706a、台式计算机1706b、膝上型计算机1706c和/或汽车计算机系统1706n之类的计算设备与该一个或更多个计算机系统/服务器1704通信。在至少一个实施例中，这允许基础设施、平台和/或软件作为服务从云计算环境1702提供，以便不需要每个客户端单独地维护这样的资源。应当理解，图17中示出的计算设备1706a-n的类型旨在仅是说明性的，并且云计算环境1702可通过任何类型的网络和/或网络/可寻址连接(例如，使用web浏览器)与任何类型的计算机化设备通信。
[0213]
在至少一个实施例中，可被表示为云计算节点的计算机系统/服务器1704可与许多其他通用或专用计算系统环境或配置一起操作。在至少一个实施例中，可以适合于与计算机系统/服务器1704一起使用的计算系统、环境和/或配置的示例包括但不限于个人计算机系统、服务器计算机系统、瘦客户机、厚客户端、手持式或膝上型设备、多处理器系统、基于微处理器的系统、机顶盒、可编程消费电子产品，网络pc、小型计算机系统、大型计算机系统和包括任何上述系统或设备的分布式云计算环境，和/或其变体。
[0214]
在至少一个实施例中，计算机系统/服务器1704可以在由计算机系统执行的计算机系统可执行指令(诸如程序模块)的一般上下文中描述。在至少一个实施例中，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、逻辑、数据结构等。在至少一个实施例中，示例性计算机系统/服务器1704可以在分布式云计算环境中实践，其中任务由通过通信网络链接的远程处理设备来执行。在至少一个实施例中，在分布式云计算环境中，程序模块可位于包括存储器存储设备的本地和远程计算机系统存储介质两者中。
[0215]
图18示出了根据至少一个实施例的由云计算环境1702(图17)提供的一组功能抽象层。应提前理解，图18中所示的组件、层和功能仅旨在是说明性的，并且组件、层和功能可以变化。
[0216]
在至少一个实施例中，硬件和软件层1802包括硬件和软件组件。在至少一个实施例中，硬件组件的示例包括大型机、基于各种risc(精简指令集计算机)架构的服务器、各种计算系统、超级计算系统、存储设备、网络、联网组件和/或其变体。在至少一个实施例中，软件组件的示例包括网络应用服务器软件、各种应用服务器软件、各种数据库软件、和/或其变体。
[0217]
在至少一个实施例中，虚拟化层1804提供抽象层，从该抽象层可以提供以下示例性虚拟实体：虚拟服务器、虚拟存储、虚拟网络(包括虚拟私有网络)、虚拟应用、虚拟客户端和/或其变体。
[0218]
在至少一个实施例中，管理层1806提供各种功能。在至少一个实施例中，资源供应提供用于在云计算环境内执行任务的计算资源和其他资源的动态获取。在至少一个实施例中，计量(metering)提供了在云计算环境内利用资源时的使用跟踪，以及针对这些资源的消耗的计费或发票。在至少一个实施例中，资源可以包括应用软件许可证。在至少一个实施例中，安全性为用户和任务提供身份验证，以及对数据和其他资源的保护。在至少一个实施
例中，用户界面为用户和系统管理员两者提供对云计算环境的访问。在至少一个实施例中，服务水平管理提供云计算资源分配和管理，使得满足所需的服务水平。在至少一个实施例中，服务水平协议(sla)管理提供云计算资源的预布置和获取，根据sla预期对该云计算资源的未来需求。
[0219]
在至少一个实施例中，工作负载层1808提供利用云计算环境的功能。在至少一个实施例中，可以从该层提供的工作负载和功能的示例包括：地图和导航、软件开发和管理、教育服务、数据分析和处理、交易处理和服务递送。
[0220]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0221]
超级计算
[0222]
以下附图阐述了但不限于可以用于实现至少一个实施例的示例性的基于超级计算机的系统。
[0223]
在至少一个实施例中，超级计算机可以指展现出显著并行性并且包括至少一个芯片的硬件系统，其中系统中的芯片通过网络互连并且被放置在分层组织的外壳中。在至少一个实施例中，用若干机架填充机房的大型硬件系统是超级计算机的一个特例，每个机架包含若干板/机架模块，每个板/机架模块包含全部由可扩展网络互连的若干芯片。在至少一个实施例中，这种大型硬件系统的单个机架是超级计算机的另一个例子。在至少一个实施例中，展现出显著并行性并且包含若干硬件组件的单个芯片同样可以被认为是超级计算机，因为随着特征尺寸可能减小，可以结合在单个芯片中的硬件数量也可能增加。
[0224]
图19示出了根据至少一个实施例的芯片级的超级计算机。在至少一个实施例中，在fpga或asic芯片内部，在被称为线程单元的有限状态机(1904)内执行主计算。在至少一个实施例中，任务和同步网络(1902)连接有限状态机并且被用于以正确的顺序分派线程和执行操作。在至少一个实施例中，使用存储器网络(1906，1910)来访问多级分区的片上高速缓存层级(1908，1912)。在至少一个实施例中，使用存储器控制器(1916)和片外存储器网络(1914)来访问片外存储器。在至少一个实施例中，当设计不适合于单个逻辑芯片时，i/o控制器(1918)用于跨芯片通信。
[0225]
图20示出根据至少一个实施例的在机架模块级别的超级计算机。在至少一个实施例中，在机架模块内，存在连接至构成主加速器存储器的一个或更多个dram单元(2004)的多个fpga或asic芯片(2002)。在至少一个实施例中，每个fpga/asic芯片使用板上的宽总线用差分高速信令(2006)连接到其相邻的fpga/asic芯片。在至少一个实施例中，每个fpga/asic芯片还连接到至少一个高速串行通信电缆。
[0226]
图21示出了根据至少一个实施例的机架级的超级计算机。图22示出了根据至少一个实施例的整个系统级的超级计算机。在至少一个实施例中，参见图21和图22，在机架中的机架模块之间并且跨整个系统的机架，使用高速串行光缆或铜电缆(2102，2202)来实现可扩展的、可能不完整的超立方体网络。在至少一个实施例中，加速器的fpga/asic芯片中的一个通过pci-express连接被连接到主机系统(2204)。在至少一个实施例中，主机系统包括应用的软件部分在其上运行的主机微处理器(2208)以及由与加速器上的存储器保持一致
的一个或更多个主机存储器dram单元(2206)组成的存储器。在至少一个实施例中，主机系统可以是机架之一上的单独模块，或可以与超级计算机的模块之一集成。在至少一个实施例中，立方体连接的循环拓扑提供通信链路以为大型超级计算机创建超立方体网络。在至少一个实施例中，机架模块上的小组fpga/asic芯片可充当单个超立方体节点，使得与单个芯片相比，每组的外部链路的总数增加。在至少一个实施例中，组包含机架模块上的芯片a、b、c和d，该机架模块具有连接环形组织中的a、b、c和d的内部宽差分总线。在至少一个实施例中，存在将机架模块连接到外部世界的12条串行通信电缆。在至少一个实施例中，机架模块上的芯片a连接至串行通信电缆0、1、2。在至少一个实施例中，芯片b连接至电缆3、4、5。在至少一个实施例中，芯片c连接至6、7、8。在至少一个实施例中，芯片d连接至9、10、11。在至少一个实施例中，构成机架模块的整个组{a，b，c，d}可以形成超级计算机系统内的超立方体节点，其中多达212＝4096个机架模块(21384fpga/asic芯片)。在至少一个实施例中，为了使芯片a在组{a，b，c，d}的链路4上向外发送消息，必须首先用板上差分宽总线连接将消息路由到芯片b。在至少一个实施例中，在链路4上到达去往芯片a的组{a，b，c，d}(即，到达b)的消息也必须首先被路由到组{a，b，c，d}内部的正确目的地芯片(a)。在至少一个实施例中，还可以实现其他大小的并行超级计算机系统。
[0227]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0228]
人工智能
[0229]
以下附图阐述了但不限于可以用于实现至少一个实施例的示例性的基于人工智能的系统。
[0230]
图23a示出了用于执行与一个或更多个实施例相关联的推理和/或训练操作的推理和/或训练逻辑2315。下面结合图23a和/或图23b提供关于推理和/或训练逻辑2315的细节。
[0231]
在至少一个实施例中，推理和/或训练逻辑2315可以包括但不限于，代码和/或数据存储2301，用于存储前向和/或输出权重和/或输入/输出数据，和/或在一个或更多个实施例的各方面中用于配置被训练和/或用于推理的神经网络的神经元或层的其他参数。在至少一个实施例中，训练逻辑2315可以包括或被耦合到代码和/或数据存储2301，用于存储图形代码或其他软件以控制定时和/或顺序，其中将加载权重和/或其他参数信息来配置逻辑，包括整数和/或浮点单元(统称为算术逻辑单元(alu))。在至少一个实施例中，代码(诸如图代码)基于这样的代码所对应的神经网络的架构将权重或其他参数信息加载到处理器alu中。在至少一个实施例中，代码和/或数据存储2301存储神经网络的每个层的权重参数和/或输入/输出数据，该神经网络在使用一个或更多个实施例的各方面的训练和/或推理期间在输入/输出数据和/或权重参数的前向传播期间与一个或更多个实施例结合训练或使用。在至少一个实施例中，代码和/或数据存储2301的任何部分可与其他片上或片外数据存储装置一起被包括，包括处理器的l1、l2或l3高速缓存存储器或系统存储器。
[0232]
在至少一个实施例中，代码和/或数据存储2301的任何部分可在一个或更多个处理器或其他硬件逻辑设备或电路内部或外部。在至少一个实施例中，代码和/或代码和/或
数据存储2301可以是高速缓存存储器、动态随机可寻址存储器(“dram”)、静态随机可寻址存储器(“sram”)、非易失性存储器(例如，闪存)或其他存储装置。在至少一个实施例中，例如，对代码和/或代码和/或数据存储2301是在处理器内部还是外部的选择，或包括dram、sram、闪存或一些其他存储类型的选择，可以取决于片上相对于片外的可用存储，正在执行的训练和/或推理功能的延时要求、在神经网络的推理和/或训练中使用的数据的批大小，或这些因素的一些组合。
[0233]
在至少一个实施例中，推理和/或训练逻辑2315可以包括但不限于：代码和/或数据存储2305，用于存储与在一个或更多个实施例的各方面中被训练和/或用于推理的神经网络的神经元或层相对应的反向和/或输出权重和/或输入/输出数据。在至少一个实施例中，代码和/或数据存储2305存储神经网络的每一层的权重参数和/或输入/输出数据，该神经网络在使用一个或更多个实施例的各方面的训练和/或推理期间的输入/输出数据和/或权重参数的反后传播期间与一个或更多个实施例结合训练或使用。在至少一个实施例中，训练逻辑2315可以包括或被耦合到代码和/或数据存储2305，以存储图代码或其他软件来控制定时和/或顺序，其中将加载权重和/或其他参数信息以配置逻辑，包括整数和/或浮点单元(统称为算术逻辑单元(alu))。
[0234]
在至少一个实施例中，代码(诸如图代码)使基于这样的代码所对应的神经网络的架构将权重或其他参数信息加载到处理器alu中。在至少一个实施例中，代码和/或数据存储2305的任何部分可与其他片上或片外数据存储包括在一起，包括处理器的l1、l2或l3高速缓存或系统存储器。在至少一个实施例中，代码和/或数据存储2305的任何部分可以在一个或更多个处理器或其他硬件逻辑设备或电路的内部或外部。在至少一个实施例中，代码和/或数据存储2305可以是高速缓存存储器、dram、sram、非易失性存储器(例如，闪存)或其他存储装置。在至少一个实施例中，例如，对代码和/或数据存储2305是在处理器内部还是外部，或包括dram、sram、闪存或一些其他存储类型的选择，可以取决于片上相对于片外的可用存储，正在执行的训练和/或推理功能的延时要求、在神经网络的推理和/或训练中使用的数据的批大小，或这些因素的一些组合。
[0235]
在至少一个实施例中，代码和/或数据存储2301和代码和/或数据存储2305可为单独的存储结构。在至少一个实施例中，代码和/或数据存储2301和代码和/或数据存储2305可以是组合的存储结构。在至少一个实施例中，代码和/或数据存储2301和代码和/或数据存储2305可部分组合且部分分离。在至少一个实施例中，代码和/或数据存储2301和代码和/或数据存储2305的任何部分可与其他片上或片外数据存储(包括处理器的l1、l2或l3高速缓存或系统存储器)包括在一起。
[0236]
在至少一个实施例中，推理和/或训练逻辑2315可以包括但不限于，一个或更多个算术逻辑单元(“alu”)2310，包括整数和/或浮点单元，用于至少部分地基于训练和/或推理代码(例如，图形代码)或由训练和/或推理代码(例如，图形代码)指示来执行逻辑和/或数学运算，其结果可以产生存储在激活存储2320中的激活(例如，来自神经网络内的层或神经元的输出值)，所述激活存储是存储在代码和/或数据存储2301和/或代码和/或数据存储2305中的输入/输出和/或权重参数数据的函数。在至少一个实施例中，根据响应于执行指令或其他代码、由alu 2310执行的线性代数和/或基于矩阵的数学来生成存储在激活存储2320中的激活，其中存储在代码和/或数据存储2305和/或数据存储2301中的权重值与其他
值(诸如偏置值、梯度信息、动量值或其他参数或超参数)一起被用作操作数，该其他值中的任何或全部值可被存储在代码和/或数据存储2305或代码和/或数据存储2301或芯片上或芯片外的另一存储中。
[0237]
在至少一个实施例中，一个或更多个alu 2310被包括在一个或更多个处理器或其他硬件逻辑器件或电路内，而在另一个实施例中，一个或更多个alu 2310可以在处理器或使用它们的其他硬件逻辑器件或电路(例如，协处理器)的外部。在至少一个实施例中，alu 2310可以被包括在处理器的执行单元内或者以其他方式在可由处理器的执行单元可访问的alu库内，所述处理器的执行单元在同一处理器内或分布在不同类型的不同处理器(例如，中央处理单元、图形处理单元、固定功能单元等)之间。在至少一个实施例中，代码和/或数据存储2301、代码和/或数据存储2305、以及激活存储2320可以共享处理器或其他硬件逻辑器件或电路，而在另一个实施例中，它们可以在不同的处理器或其他硬件逻辑器件或电路中，或在相同和不同处理器或其他硬件逻辑器件或电路的某种组合中。在至少一个实施例中，激活存储2320的任何部分可以与其他片上或片外数据存储包括在一起，所述其他片上或片外数据存储包括处理器的l1、l2或l3高速缓存或系统存储器。此外，推理和/或训练代码可与处理器或其他硬件逻辑或电路可访问并使用处理器的获取、解码、调度、执行、引退(retirement)和/或其他逻辑电路来获取和/或处理的其他代码一起存储。
[0238]
在至少一个实施例中，激活存储2320可以是高速缓存存储器、dram、sram、非易失性存储器(例如，闪存)或其他存储装置。在至少一个实施例中，激活存储2320可以完全或部分地在一个或更多个处理器或其他逻辑电路之内或外部。在至少一个实施例中，例如，对激活存储2320是在处理器内部还是外部，或包括dram、sram、闪存或一些其他存储类型的选择，可以取决于片上相对于片外的可用存储，正在执行的训练和/或推理功能的延时要求、在神经网络的推理和/或训练中使用的数据的批大小，或这些因素的一些组合。
[0239]
在至少一个实施例中，图23a中所示出的推理和/或训练逻辑2315可以与专用集成电路(“asic”)结合使用，诸如来自谷歌的处理单元、来自graphcore
tm
的推理处理单元(ipu)、或来自英特尔公司的(例如，“lake crest”)处理器。在至少一个实施例中，图23a中所示出的推理和/或训练逻辑2315可以结合中央处理单元(“cpu”)硬件、图形处理单元(“gpu”)硬件或其他硬件(如现场可编程门阵列(“fpga”))使用。
[0240]
图23b示出了根据至少一个实施例的推理和/或训练逻辑2315。在至少一个实施例中，推理和/或训练逻辑2315可包括但不限于其中计算资源是专用的或以其他方式结合与神经网络内的一个或更多个神经元层相对应的权重值或其他信息排他地使用的硬件逻辑。在至少一个实施例中，图23b中所示出的推理和/或训练逻辑2315可以结合专用集成电路(asic)(如来自谷歌的处理单元、来自graphcore
tm
的推理处理单元(ipu)、或来自英特尔公司的(例如，“lake crest”)处理器来使用。在至少一个实施例中，图23b中示出的推理和/或训练逻辑2315可结合中央处理单元(cpu)硬件、图形处理单元(gpu)硬件或其他硬件(诸如现场可编程门阵列(fpga))使用。在至少一个实施例中，推理和/或训练逻辑2315包括但不限于代码和/或数据存储2301以及代码和/或数据存储2305，其可以用于存储代码(例如，图代码)、权重值和/或其他信息，包括偏置值、梯度信息、动量值和/或其他参数或超参数信息。在图23b中所说明的至少一个实施例中，代码和/或数据存储2301和代码和/或数据存储2305中的每一者分别与专用计算资源(例如，计算硬件2302和
计算硬件2306)相关联。在至少一个实施例中，计算硬件2302和计算硬件2306中的每一个包括一个或更多个alu，该一个或更多个alu仅分别对存储在代码和/或数据存储2301和代码和/或数据存储2305中的信息执行数学函数(诸如线性代数函数)，其结果被存储在激活存储2320中。
[0241]
在至少一个实施例中，每个代码和/或数据存储2301和2305以及相应的计算硬件2302和2306，分别对应于神经网络的不同层，使得来自代码和/或数据存储2301和计算硬件2302中的一个存储/计算对2301/2302的结果激活作为输入被提供给代码和/或数据存储2305和计算硬件2306中的下一个存储/计算对2305/2306，以便镜像神经网络的概念组织。在至少一个实施例中，存储/计算对2301/2302和2305/2306中的每一个可对应于多于一个神经网络层。在至少一个实施例中，在存储/计算对2301/2302和2305/2306之后或与存储/计算对2301/2302和2305/2306并行的附加存储/计算对(未示出)可被包括在推理和/或训练逻辑2315中。
[0242]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0243]
图24示出根据至少一个实施例的深度神经网络的训练和部署。在至少一个实施例中，使用训练数据集2402来训练未经训练的神经网络2406。在至少一个实施例中，训练框架2404是pytorch框架，而在其他实施例中，训练框架2404是tensorflow、boost、caffe、microsoft cognitive toolkit/cntk、mxnet、chainer、keras、deeplearning4j或其他训练框架。在至少一个实施例中，训练框架2404对未经训练的神经网络2406进行训练，并使其能够使用本文中所描述的处理资源来训练以生成经训练的神经网络2408。在至少一个实施例中，权重可以随机选择或通过使用深度信念网络进行预训练来选择。在至少一个实施例中，训练可以以监督、部分监督或无监督的方式来执行。
[0244]
在至少一个实施例中，使用监督学习来训练未经训练的神经网络2406，其中训练数据集2402包括与用于输入的期望输出配对的输入，或者其中训练数据集2402包括具有已知输出的输入，并且神经网络2406的输出被手动地分级。在至少一个实施例中，以监督方式来训练未经训练的神经网络2406，并且处理来自训练数据集2402的输入，并将结果输出与预期或期望输出的集合进行比较。在至少一个实施例中，然后误差被反向传播通过未经训练的神经网络2406。在至少一个实施例中，训练框架2404调整控制未经训练的神经网络2406的权重。在至少一个实施例中，训练框架2404包括用于监视未经训练的神经网络2406朝向模型(诸如经训练的神经网络2408)收敛多好的工具，该模型适于基于输入数据(诸如新数据集2412)来生成正确答案(诸如结果2414)。在至少一个实施例中，训练框架2404重复地训练未经训练的神经网络2406，同时使用损失函数和调整算法(诸如随机梯度下降)来调整权重以精炼未经训练的神经网络2406的输出。在至少一个实施例中，训练框架2404训练未经训练的神经网络2406，直到未经训练的神经网络2406实现所期望的准确度。在至少一个实施例中，经训练的神经网络2408然后可被部署以实现任何数量的机器学习操作。
[0245]
在至少一个实施例中，使用无监督学习来训练未经训练的神经网络2406，其中未经训练的神经网络2406尝试使用未标记的数据来训练其自身。在至少一个实施例中，无监
督学习训练数据集2402将包括输入数据而没有任何相关联的输出数据或“地面真值”数据。在至少一个实施例中，未经训练的神经网络2406可以学习训练数据集2402内的分组，并且可以确定各个输入如何与未经训练的数据集2402相关。在至少一个实施例中，无监督训练可被用于在经训练的神经网络2408中生成能够执行在减少新数据集2412的维度中有用的操作的自组织映射。在至少一个实施例中，无监督训练还可用于执行异常检测，其允许识别新数据集2412中偏离新数据集2412的正常模式的数据点。
[0246]
在至少一个实施例中，可以使用半监督学习，半监督学习是其中在训练数据集2402中包括标记数据和未标记数据的混合的技术。在至少一个实施例中，训练框架2404可被用于执行增量学习，诸如通过转移学习技术。在至少一个实施例中，增量学习使得经训练的神经网络2408能够适应新的数据集2412，而不会忘记在初始训练期间注入在经训练的神经网络1408内的知识。
[0247]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0248]
5g网络
[0249]
以下附图阐述了但不限于可以用于实现至少一个实施例的示例性基于5g网络的系统。
[0250]
图25示出了根据至少一个实施例的网络的系统2500的架构。在至少一个实施例中，系统2500被示为包括用户设备(ue)2502和ue 2504。在至少一个实施例中，ue 2502和2504被示为智能电话(例如，可连接到一个或更多个蜂窝网络的手持触摸屏移动计算设备)，但还可包括任何移动或非移动计算设备，诸如个人数字助理(pda)、寻呼机、膝上型计算机、台式计算机、无线手持设备或包括无线通信接口的任何计算设备。
[0251]
在至少一个实施例中，ue 2502和ue 2504中的任何一个可包括物联网(iot)ue，该iot ue可包括为利用短暂ue连接的低功率iot应用设计的网络接入层。在至少一个实施例中，iot ue可利用诸如用于经由公共陆地移动网络(plmn)、基于邻近的服务(prose)或设备到设备(d2d)通信、传感器网络或iot网络与mtc服务器或设备交换数据的技术，诸如机器对机器(m2m)或机器类型通信(mtc)。在至少一个实施例中，m2m或mtc数据交换可以是机器发起的数据交换。在至少一个实施例中，iot网络描述互连iot ue，该iot ue可包括具有短寿命连接的可唯一标识的嵌入式计算设备(在互联网基础结构内)。在至少一个实施例中，iot ue可执行后台应用(例如，保活消息、状态更新等)以促进iot网络的连接。
[0252]
在至少一个实施例中，ue 2502和ue 2504可以被配置为与无线电接入网(ran)2516连接(例如，通信地耦合)。在至少一个实施例中，ran 2516可以是例如演进的通用移动电信系统(umts)陆地无线电接入网络(e-utran)、nextgen ran(ng ran)或一些其他类型的ran。在至少一个实施例中，ue 2502和ue 2504分别利用连接2512和连接2514，每个连接包括物理通信接口或层。在至少一个实施例中，连接2512和2514被示为空中接口，用于实现通信耦合，并且可以与蜂窝通信协议一致，诸如全球移动通信系统(gsm)协议，码分多址(cdma)网络协议、即按即讲(ptt)协议、蜂窝ptt(poc)协议、通用移动电信系统(umts)协议、3gpp长期演进(lte)协议、第五代(5g)协议、新无线电(nr)协议及其变型。
[0253]
在至少一个实施例中，ue 2502和2504还可经由prose接口2506直接交换通信数据。在至少一个实施例中，prose接口2506可替代地被称为边链路接口，其包括一个或更多个逻辑信道，包括但不限于物理边链路控制信道(pscch)、物理边链路共享信道(pssch)、物理边链路发现信道(psdch)和物理边链路广播信道(psbch)。
[0254]
在至少一个实施例中，ue 2504被示为配置成经由连接2508接入接入点(ap)2510。在至少一个实施例中，连接2508可以包括本地无线连接，诸如与任何ieee 802.11协议一致的连接，其中ap 2510将包括无线保真路由器。在至少一个实施例中，ap 2510被示为连接到互联网而不连接到无线系统的核心网。
[0255]
在至少一个实施例中，ran 2516可包括启用连接2512和2514的一个或更多个接入节点。在至少一个实施例中，这些接入节点(an)可被称为基站(bs)、nodeb、演进型nodeb(enb)、下一代nodeb(gnb)、ran节点等，并且可包括地面站(例如，地面接入点)或提供地理区域(例如，小区)内的覆盖的卫星站。在至少一个实施例中，ran 2516可包括用于提供宏蜂窝小区的一个或更多个ran节点(例如，宏ran节点2518)和用于提供毫微微蜂窝小区或微微蜂窝小区(例如，与宏蜂窝小区相比具有较小覆盖区域、较小用户容量、或较高带宽的蜂窝小区)的一个或更多个ran节点(例如，低功率(lp)ran节点2520)。
[0256]
在至少一个实施例中，ran节点2518和2520中的任一个可终止空中接口协议并且可以为ue 2502和2504的第一联系点。在至少一个实施例中，ran节点2518和2520中的任一个可实现ran 2516的各种逻辑功能，包括但不限于无线电网络控制器(rnc)功能，诸如无线电承载管理、上行链路和下行链路动态无线电资源管理和数据分组调度和移动性管理。
[0257]
在至少一个实施例中，ue 2502和ue 2504可被配置为使用正交频分复用(ofdm)通信信号根据各种通信技术通过多载波通信信道彼此通信或者与ran节点2518和ran节点2520中的任一个通信，通信技术诸如但不限于正交频分多址(ofdma)通信技术(例如，用于下行链路通信)或单载波频分多址(sc-fdma)通信技术(例如，用于上行链路和prose或边链路通信)，和/或其变体。在至少一个实施例中，ofdm信号可包括多个正交子载波。
[0258]
在至少一个实施例中，下行链路资源网格可以用于从ran节点2518和2520中的任一个到ue 2502和2504的下行链路传输，而上行链路传输可以利用类似的技术。在至少一个实施例中，网格可以是称为资源网格或时频资源网格的时频网格，其是每个时隙中下行链路中的物理资源。在至少一个实施例中，这种时频平面表示是ofdm系统的常见实践，这使得其对于无线电资源分配来说是直观的。在至少一个实施例中，资源网格的每列和每行分别对应于一个ofdm符号和一个ofdm子载波。在至少一个实施例中，时域中的资源网格的持续时间对应于无线电帧中的一个时隙。在至少一个实施例中，资源网格中的最小时间-频率单元被表示为资源元素。在至少一个实施例中，每个资源网格包括多个资源块，其描述某些物理信道到资源元素的映射。在至少一个实施例中，每个资源块包括资源元素的集合。在至少一个实施例中，在频域中，这可以表示当前可以被分配的最小数量的资源。在至少一个实施例中，存在使用这样的资源块传送的若干不同的物理下行链路信道。
[0259]
在至少一个实施例中，物理下行链路共享信道(pdsch)可以运载用户数据和更高层信令给ue 2502和2504。在至少一个实施例中，物理下行链路控制信道(pdcch)可运载关于与pdsch信道相关的传输格式和资源分配的信息等。在至少一个实施例中，其还可以向ue 2502和2504通知与上行链路共享信道有关的传输格式、资源分配和harq(混合自动重传请
求)信息。在至少一个实施例中，通常，下行链路调度(将控制和共享信道资源块分配给小区内的ue 2502)可以在ran节点2518和2520中的任一个处基于从ue 2502和2504中的任一个反馈的信道质量信息来执行。在至少一个实施例中，下行链路资源分配信息可以在用于(例如分配给)ue 2502和2504中的每一个的pdcch上发送。
[0260]
在至少一个实施例中，pdcch可以使用控制信道元素(cce)来传送控制信息。在至少一个实施例中，在被映射到资源元素之前，pdcch复值符号可以首先被组织成四元组，然后可以使用子块交织器对其进行置换以用于速率匹配。在至少一个实施例中，可以使用这些cce中的一个或更多个来传送每个pdcch，其中每个cce可以对应于被称为资源元素组(reg)的四个物理资源元素的九个集合。在至少一个实施例中，四个正交相移键控(qpsk)符号可以被映射到每个reg。在至少一个实施例中，取决于下行链路控制信息(dci)的大小和信道条件，可以使用一个或更多个cce来发送pdcch。在至少一个实施例中，可以有在lte中定义的具有不同数目的cce的四个或更多个不同的pdcch格式(例如，聚合等级，l＝1、2、4或8)。
[0261]
在至少一个实施例中，使用pdsch资源的增强型物理下行链路控制信道(epdcch)可以用于控制信息传输。在至少一个实施例中，可以使用一个或更多个增强型控制信道元素(ecce)来发送epdcch。在至少一个实施例中，每个ecce可以对应于被称为增强型资源元素组(ereg)的四个物理资源元素的九个集合。在至少一个实施例中，ecce在一些情况下可以具有其他数目的ereg。
[0262]
在至少一个实施例中，ran 2516被示为经由s1接口2522通信地耦合至核心网(cn)2538。在至少一个实施例中，cn 2538可以是演进的分组核心(epc)网络、nextgen分组核心(npc)网络或一些其他类型的cn。在至少一个实施例中，s1接口2522被分成两部分：s1-u接口2526，其运载ran节点2518和2520与服务网关(s-gw)2530之间的业务数据；以及s1-移动性管理实体(mme)接口2524，其为ran节点2518和2520与mme 2528之间的信令接口。
[0263]
在至少一个实施例中，cn 2538包括mme 2528、s-gw 2530、分组数据网络(pdn)网关(p-gw)2534和归属订户服务器(hss)2532。在至少一个实施例中，mme 2528可以在功能上类似于传统服务通用分组无线电服务(gprs)支持节点(sgsn)的控制平面。在至少一个实施例中，mme 2528可以管理接入中的移动性方面，例如网关选择和跟踪区域列表管理。在至少一个实施例中，hss 2532可以包括用于网络用户的数据库，该数据库包括用于支持网络实体处理通信会话的订阅相关信息。在至少一个实施例中，cn 2538可以包括一个或更多个hss 2532，这取决于移动用户的数量、设备的容量、网络的组织等。在至少一个实施例中，hss 2532可以提供对路由/漫游、认证、授权、命名/寻址解析、位置依赖性等的支持。
[0264]
在至少一个实施例中，s-gw 2530可以终止朝向ran 2516的s1接口2522，并且在ran 2516和cn 2538之间路由数据分组。在至少一个实施例中，s-gw 2530可以是用于ran间节点切换的本地移动性锚点，并且还可以提供用于3gpp间移动性的锚点。在至少一个实施例中，其他责任可以包括合法拦截、收费和一些策略强制执行。
[0265]
在至少一个实施例中，p-gw 2534可以终止朝向pdn的sgi接口。在至少一个实施例中，p-gw 2534可以经由互联网协议(ip)接口2542在epc网络2538和外部网络(诸如包括应用服务器2540(或者称为应用功能(af))的网络)之间路由数据分组。在至少一个实施例中，应用服务器2540可以是采用核心网络(例如，umts分组服务(ps)域、lte ps数据服务等)提
供使用ip承载资源的应用的元件。在至少一个实施例中，p-gw 2534被示出为经由ip通信接口2542通信地耦合到应用服务器2540。在至少一个实施例中，应用服务器2540还可被配置为经由cn 2538支持ue 2502和2504的一个或更多个通信服务(例如，互联网协议语音(voip)会话、ptt会话、群组通信会话、社交网络服务等)。
[0266]
在至少一个实施例中，p-gw 2534还可以是用于策略实施和收费数据收集的节点。在至少一个实施例中，策略和计费执行功能(pcrf)2536是cn 2538的策略和计费控制元件。在至少一个实施例中，在非漫游场景中，在与ue的互联网协议连接性接入网络(ip-can)会话相关联的归属公共陆地移动网络(hplmn)中可以存在单个pcrf。在至少一个实施例中，在具有本地流量突破的漫游场景中，可存在与ue的ip-can会话相关联的两个pcrf：hplmn内的归属pcrf(h-pcrf)和受访公共陆地移动网络(vplmn)内的受访pcrf(v-pcrf)。在至少一个实施例中，pcrf 2536可以经由p-gw 2534通信地耦合到应用服务器2540。在至少一个实施例中，应用服务器2540可以向pcrf 2536发信号，以指示新的服务流，并选择适当的服务质量(qos)和计费参数。在至少一个实施例中，pcrf 2536可以将这个规则供应到具有适当的业务流模板(tft)和标识符的qos类(qci)的策略和计费执行功能(pcef)(未示出)，所述pcef开始由应用服务器2540指定的qos和计费。
[0267]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0268]
图26示出了根据一些实施例的网络的系统2600的架构。在至少一个实施例中，系统2600被示为包括ue 2602、5g接入节点或ran节点(被示为(r)an节点2608)，用户平面功能(被示出为upf 2604)，数据网络(dn 2606)，其可以是例如，运营商服务、互联网接入或第三方服务、以及5g核心网络(5gc)(示为cn 2610)。
[0269]
在至少一个实施例中，cn 2610包括认证服务器功能(ausf 2614)；核心接入和移动性管理功能(amf 2612)；会话管理功能(smf 2618)；网络暴露功能(nef 2616)；策略控制功能(pcf 2622)；网络功能(nf)储存库功能(nrf 2620)；统一数据管理(udm 2624)；以及应用功能(af 2626)。在至少一个实施例中，cn 2610还可包括未示出的其他元件，诸如结构化数据存储网络功能(sdsf)、非结构化数据存储网络功能(udsf)及其变型。
[0270]
在至少一个实施例中，upf 2604可充当rat内和rat间移动性的锚点、互连到dn 2606的外部pdu会话点、和支持多归属pdu会话的分支点。在至少一个实施例中，upf 2604还可以执行分组路由和转发、分组检查、实施策略规则的用户平面部分、合法拦截分组(up收集)；业务使用报告、为用户平面执行qos处理(例如分组过滤、门控、ul/dl速率执行)、执行上行链路业务验证(例如，sdf到qos流映射)、上行链路和下行链路中的传输级分组标记、以及下行链路分组缓存和下行链路数据通知触发。在至少一个实施例中，upf 2604可包括上行链路分类器，用于支持将业务流路由到数据网络。在至少一个实施例中，dn 2606可表示各种网络运营商服务、互联网接入或第三方服务。
[0271]
在至少一个实施例中，ausf 2614可以存储用于ue 2602的认证的数据，并且处理与认证相关的功能。在至少一个实施例中，ausf 2614可以促进用于各种接入类型的公共认证框架。
[0272]
在至少一个实施例中，amf 2612可以负责注册管理(例如，用于注册ue 2602等)、连接管理、可达性管理、移动性管理、和amf相关事件的合法拦截、以及接入认证和授权。在至少一个实施例中，amf 2612可以为smf 2618提供sm消息的传输，并且充当用于路由sm消息的透明代理。在至少一个实施例中，amf 2612还可以提供ue 2602与sms功能(smsf)(图26未示出)之间的短消息服务(sms)消息的传输。在至少一个实施例中，amf 2612可以充当安全锚定功能(sea)，其可以包括与ausf 2614和ue 2602的交互以及接收作为ue 2602认证过程的结果而建立的中间密钥。在至少一个实施例中，在使用基于usim的认证的情况下，amf 2612可以从ausf 2614检索安全材料。在至少一个实施例中，amf 2612还可以包括安全上下文管理(scm)功能，其从sea接收它用来导出接入网络专用密钥的密钥。此外，在至少一个实施例中，amf 2612可以是ran cp接口的终止点(n2参考点)、nas(ni)信令的终止点，并且执行nas加密和完整性保护。
[0273]
在至少一个实施例中，amf 2612还可以支持通过n3互通功能(iwf)接口与ue 2602的nas信令。在至少一个实施例中，n3iwf可以用于提供对不受信实体的访问。在至少一个实施例中，n3iwf可以分别是控制平面和用户平面的n2和n3接口的终止点，因此，可针对pdu会话和qos处理来自smf和amf的n2信令，对ipsec和n3隧道的分组进行封装/解封装，在上行链路中标记n3用户平面分组，并且考虑到与通过n2接收的这种标记相关联的qos要求，实施对应于n3分组标记的qos。在至少一个实施例中，n3iwf还可以在ue 2602和amf 2612之间中继上行链路和下行链路控制平面nas(ni)信令，并且在ue 2602和upf 2604之间中继上行链路和下行链路用户平面分组。在至少一个实施例中，n3iwf还提供用于与ue 2602的ipsec隧道建立的机制。
[0274]
在至少一个实施例中，smf 2618可负责会话管理(例如，会话建立、修改和释放，包括upf和an节点之间的隧道保持)；ue ip地址分配和管理(包括可选的授权)；up功能的选择和控制；在upf处配置流量转向以将流量路由到合适的目的地；朝向策略控制功能的接口终止；策略强制执行和qos的控制部分；合法拦截(用于sm事件和到li系统的接口)；nas消息的sm部分的终止；下行链路数据通知；an特定sm信息的发起者，其经由amf在n2上发送到an；确定会话的ssc模式。在至少一个实施例中，smf 2618可包括以下漫游功能：处理本地实施以应用qos slab(vplmn)；收费数据收集和收费接口(vplmn)；合法拦截(在vplmn中用于sm事件并且接口到li系统)；支持与外部dn交互以传输用于由外部dn进行的pdu会话授权/认证的信令。
[0275]
在至少一个实施例中，nef 2616可以提供用于安全地暴露由3gpp网络功能为第三方提供的服务和能力、内部暴露/重新暴露、应用功能(例如，af 2626)、边缘计算或雾计算系统等的装置。在至少一个实施例中，nef 2616可认证、授权和/或节流af。在至少一个实施例中，nef 2616还可以转换与af 2626交换的信息和与内部网络功能交换的信息。在至少一个实施例中，nef 2616可以在af服务标识符和内部5gc信息之间转换。在至少一个实施例中，nef 2616还可以基于其他网络功能的暴露的能力从其他网络功能(nf)接收信息。在至少一个实施例中，该信息可作为结构化数据存储在nef 2616处，或使用标准化接口存储在数据存储nf处。在至少一个实施例中，所存储的信息然后可由nef 2616重新暴露给其他nf和af，和/或用于其他目的，诸如分析。
[0276]
在至少一个实施例中，nrf 2620可以支持服务发现功能，从nf实例接收nf发现请
求，以及向nf实例提供所发现的nf实例的信息。在至少一个实施例中，nrf 2620还维护可用nf实例及其支持的服务的信息。
[0277]
在至少一个实施例中，pcf 2622可向控制平面功能提供策略规则以实施它们，并且还可支持统一策略框架以管理网络行为。在至少一个实施例中，pcf 2622还可实现前端(fe)，用于访问udm 2624的udr中与策略决策相关的订阅信息。
[0278]
在至少一个实施例中，udm 2624可处理订阅相关信息以支持网络实体处理通信会话，并且可存储ue 2602的订阅数据。在至少一个实施例中，udm 2624可以包括两个部分，应用fe和用户数据存储库(udr)。在至少一个实施例中，udm可以包括udm fe，该udm fe负责处理凭证、位置管理、订阅管理等。在至少一个实施例中，若干不同前端可在不同交易中服务同一用户。在至少一个实施例中，udm-fe访问udr中存储的子订阅信息，并执行认证凭证处理；用户标识处理；接入授权；注册/移动性管理；以及订阅管理。在至少一个实施例中，udr可与pcf 2622交互。在至少一个实施例中，udm 2624还可支持sms管理，其中sms-fe实现如前所述的类似应用逻辑。
[0279]
在至少一个实施例中，af 2626可以提供对业务路由的应用影响、对网络能力暴露(nce)的接入，以及与策略框架的交互以用于策略控制。在至少一个实施例中，nce可以是允许5gc和af 2626经由nef 2616向彼此提供信息的机制，nef 2616可以用于边缘计算实现。在至少一个实施例中，网络运营商和第三方服务可被托管在ue 2602的附接接入点附近，以通过减少的端到端延时和传输网络上的负载来实现高效的服务递送。在至少一个实施例中，对于边缘计算实现，5gc可选择靠近ue 2602的upf 2604，并经由n6接口执行从upf 2604到dn 2606的业务引导。在至少一个实施例中，这可以基于由af 2626提供的ue订阅数据、ue位置和信息。在至少一个实施例中，af 2626可以影响upf(重新)选择和业务路由。在至少一个实施例中，基于运营商部署，当af 2626被认为是受信实体时，网络运营商可以允许af 2626直接与相关nf交互。
[0280]
在至少一个实施例中，cn 2610可以包括smsf，其可以负责sms订阅检查和验证，并且中继去往/来自ue 2602的sm消息到/来自其他实体，例如sms-gmsc/iwmsc/sms路由器。在至少一个实施例中，sms还可以与amf 2612和udm 2624交互，以用于ue 2602可用于sms传送的通知过程(例如，设置ue不可达标志，并且当ue 2602可用于sms时通知udm 2624)。
[0281]
在至少一个实施例中，系统2600可以包括以下基于服务的接口：namf：amf展现的基于服务的接口；nsmf：smf展现的基于服务的接口；nnef：nef展现的基于服务的接口；npcf：pcf展现的基于服务的接口；nudm：udm展现的基于服务的接口；naf：af展现的基于服务的接口；nnrf：nrf展现的基于服务的接口；以及nausf：ausf展现的基于服务的接口。
[0282]
在至少一个实施例中，系统2600可以包括以下参考点：n1：ue和amf之间的参考点；n2：(r)an和amf之间的参考点；n3：(r)an和upf之间的参考点；n4：smf和upf之间的参考点；以及n6：upf和数据网络之间的参考点。在至少一个实施例中，nf中的nf服务之间可能存在更多的参考点和/或基于服务的接口，然而，为清楚起见，这些接口和参考点已经被省略。在至少一个实施例中，ns参考点可以在pcf与af之间；n7参考点可以在pcf与smf之间；n11参考点在amf与smf之间等等。在至少一个实施例中，cn 2610可以包括nx接口，nx接口是mme和amf 2612之间的cn间接口，以便实现cn 2610和cn 7226之间的互通。
[0283]
在至少一个实施例中，系统2600可包括多个ran节点(诸如(r)an节点2608)，其中
在连接到5gc 410的两个或更多个(r)an节点2608(例如，gnb)之间，在连接到cn 2610的(r)an节点2608(例如gnb)和enb(例如宏ran节点)之间，和/或在连接到cn 2610的两个enb之间定义xn接口。
[0284]
在至少一个实施例中，xn接口可以包括xn用户平面(xn-u)接口和xn控制平面(xn-c)接口。在至少一个实施例中，xn-u可以提供用户平面pdu的无保证的递送，并且支持/提供数据转发和流控制功能。在至少一个实施例中，xn-c可提供管理和错误处理功能、管理xn-c接口的功能；对处于连接模式(例如，cm-connected)的ue 2602的移动性支持，其包括管理针对一个或更多个(r)an节点2608之间的连接模式的ue移动性的功能。在至少一个实施例中，移动性支持可包括从旧(源)服务(r)an节点2608到新(目标)服务(r)an节点2608的上下文传送；以及控制旧(源)服务(r)an节点2608至新(目标)服务(r)an节点2608之间的用户平面隧道。
[0285]
在至少一个实施例中，xn-u的协议栈可以包括在互联网协议(ip)传输层上构建的传输网络层和在udp和/或一个或更多个ip层的顶部上用于承载用户平面pdu的gtp-u层。在至少一个实施例中，xn-c协议栈可以包括应用层信令协议(称为xn应用协议(xn-ap))和建立在sctp层上的传输网络层。在至少一个实施例中，sctp层可以在ip层的顶部上。在至少一个实施例中，sctp层提供应用层消息的有保证的递送。在至少一个实施例中，在传输ip层中，点对点传输被用于递送信令pdu。在至少一个实施例中，xn-u协议栈和/或xn-c协议栈可以与本文中示出和描述的用户平面和/或控制平面协议栈相同或相似。
[0286]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0287]
图27是根据一些实施例的控制平面协议栈的图示。在至少一个实施例中，控制平面2700被示为ue 2502(或可替代地，ue 2504)、ran 2516和mme 2528之间的通信协议栈。
[0288]
在至少一个实施例中，phy层2702可以通过一个或更多个空中接口发送或接收由mac层2704使用的信息。在至少一个实施例中，phy层2702还可以执行链路自适应或自适应调制和编码(amc)、功率控制、小区搜索(例如，用于初始同步和切换目的)和由较高层(例如，rrc层2710)使用的其他测量。在至少一个实施例中，phy层2702还可以进一步对传输信道执行错误检测、传输信道的前向纠错(fec)编码/解码、物理信道的调制/解调、交织、速率匹配、映射到物理信道、以及多输入多输出(mimo)天线处理。
[0289]
在至少一个实施例中，mac层2704可执行逻辑信道和传输信道之间的映射，将来自一个或更多个逻辑信道的mac服务数据单元(sdu)复用到要经由传输信道递送到phy的传输块(tb)上，将mac sdu从经由传输信道从phy递送的传输块(tb)解复用到一个或更多个逻辑信道，将mac sdu复用到tb上、调度信息报告、通过混合自动重传请求(hard)的纠错，以及逻辑信道优先化。
[0290]
在至少一个实施例中，rlc层2706可在多种操作模式下操作，包括：透明模式(tm)、非确认模式(um)和确认模式(am)。在至少一个实施例中，rlc层2706可以执行上层协议数据单元(pdu)的传输、通过针对am数据传输的自动重复请求(arq)的纠错、以及用于um和am数据传输的rlc sdu的级联、分段和重组。在至少一个实施例中，rlc层2706还可以执行用于am
数据传输的rlc数据pdu的重新分段，对用于um和am数据传输的rlc数据pdu进行重排序，检测用于um和am数据传输的重复数据，丢弃用于um和am数据传输的rlc sdu，检测am数据传输的协议错误，以及执行rlc重建。
[0291]
在至少一个实施例中，pdcp层2708可以执行ip数据的报头压缩和解压缩，维持pdcp序列号(sn)，在重建较低层时执行较高层pdu的序列内递送，在为映射在rlc am上的无线电承载重建较低层时消除较低层sdu的复制，对控制平面数据进行加密和解密，对控制平面数据进行完整性保护和完整性验证，基于控制定时器的数据丢弃，以及执行安全操作(例如，加密、解密、完整性保护、完整性验证等)。
[0292]
在至少一个实施例中，rrc层2710的主要服务和功能可包括系统信息的广播(例如，包括在与非接入层(nas)相关的主信息块(mib)或系统信息块(sib)中)，与接入层(as)有关的系统信息的广播、ue与e-utran之间的rrc连接的寻呼、建立、维持和释放(例如，rrc连接寻呼、rrc连接建立、rrc连接修改和rrc连接释放)，点对点无线承载的建立、配置、维护和释放，包括密钥管理的安全功能，无线电接入技术(rat)间移动性，以及用于ue测量报告的测量配置。在至少一个实施例中，所述mib和sib可包括一个或更多个信息元素(ie)，每个信息元素可包括单独的数据字段或数据结构。
[0293]
在至少一个实施例中，ue 2502和ran 2516可以利用uu接口(例如，lte-uu接口)来经由包括phy层2702、mac层2704、rlc层2706、pdcp层2708和rrc层2710的协议栈交换控制平面数据。
[0294]
在至少一个实施例中，非接入层(nas)协议(nas协议2712)形成ue 2502与mme 2528之间的控制平面的最高层。在至少一个实施例中，nas协议2712支持ue 2502的移动性和会话管理过程以建立和维持ue 2502与p-gw 2534之间的ip连接。
[0295]
在至少一个实施例中，si应用协议(si-ap)层(si-ap层2722)可以支持si接口的功能并且包括基本过程(ep)。在至少一个实施例中，ep是ran 2516和cn 2528之间的交互单元。在至少一个实施例中，s1-ap层服务可以包括两个组：ue关联服务和非ue关联服务。在至少一个实施例中，这些服务执行功能，包括但不限于：e-utran无线电接入承载(e-rab)管理、ue能力指示、移动性、nas信令传输、ran信息管理(rim)和配置转移。
[0296]
在至少一个实施例中，流控制传输协议(sctp)层(可替代地称为流控制传输协议/互联网协议(sctp/ip)层)(sctp层2720)可以部分地基于ip层2718所支持的ip协议来确保ran 2516与mme 2528之间的信令消息的可靠传递。在至少一个实施例中，l2层2716和l1层2714可以指由ran节点和mme用来交换信息的通信链路(例如，有线或无线)。
[0297]
在至少一个实施例中，ran 2516和一个或更多个mme 2528可以利用s1-mme接口来经由包括l1层2714、l2层2716、ip层2718、sctp层2725和si-ap层2722的协议栈交换控制平面数据。
[0298]
图28是根据至少一个实施例的用户平面协议栈的图示。在至少一个实施例中，用户平面2800被示为ue 2502、ran 2516、s-gw 2530和p-gw 2534之间的通信协议栈。在至少一个实施例中，用户平面2800可以利用与控制平面2700相同的协议层。在至少一个实施例中，例如，ue 2502和ran 2516可以利用uu接口(例如，lte-uu接口)来经由包括phy层2702、mac层2704、rlc层2706、pdcp层2708的协议栈来交换用户平面数据。
[0299]
在至少一个实施例中，用于用户平面的通用分组无线电服务(gprs)隧道协议
(gtp-u)层(gtp-u层2804)可以用于在gprs核心网络内和在无线电接入网络和核心网络之间运载用户数据。在至少一个实施例中，所传输的用户数据可以是例如ipv4、ipv6或ppp格式中的任何格式的分组。在至少一个实施例中，udp和ip安全(udp/ip)层(udp/ip层2802)可以提供数据完整性的校验和、用于在源和目的地寻址不同功能的端口号、以及对所选数据流的加密和认证。在至少一个实施例中，ran 2516和s-gw 2530可以利用s1-u接口来经由包括l1层2714、l2层2716、udp/ip层2802和gtp-u层2804的协议栈来交换用户平面数据。在至少一个实施例中，s-gw 2530和p-gw 2534可以利用s5/s8a接口来经由包括l1层2714、l2层2716、udp/ip层2802和gtp-u层2804的协议栈交换用户平面数据。在至少一个实施例中，如以上关于图27所讨论的，nas协议支持ue 2502的移动性和会话管理过程以建立和维持ue 2502与p-gw 2534之间的ip连接。
[0300]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0301]
图29示出了根据至少一个实施例的核心网络的组件2900。在至少一个实施例中，cn 2538的组件可以在一个物理节点或单独的物理节点中实现，所述单独的物理节点包括用于从机器可读介质或计算机可读介质(例如，非暂态机器可读存储介质)读取和执行指令的组件。在至少一个实施例中，网络功能虚拟化(nfv)用于经由存储在一个或更多个计算机可读存储介质(以下进一步详细描述)中的可执行指令来虚拟化任何或所有的上述网络节点功能。在至少一个实施例中，cn 2538的逻辑实例化可以被称为网络切片2902(例如，网络切片2902被示出为包括hss 2532、mme 2528和s-gw 2530)。在至少一个实施例中，cn 2538的一部分的逻辑实例化可以被称为网络子切片2904(例如，网络子切片2904被示出为包括p-gw 2534和pcrf 2536)。
[0302]
在至少一个实施例中，nfv架构和基础设施可以用于将一个或更多个网络功能虚拟化到包括行业标准服务器硬件、存储硬件或交换机的组合的物理资源上，所述网络功能可替代地由专用硬件执行。在至少一个实施例中，nfv系统可用于执行一个或更多个epc组件/功能的虚拟或可重新配置的实现方式。
[0303]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0304]
图30是示出了根据至少一个实施例的用于支持网络功能虚拟化(nfv)的系统3000的组件的框图。在至少一个实施例中，系统3000被示为包括虚拟化基础设施管理器(被示为vim 3002)、网络功能虚拟化基础设施(如nfvi 3004所示)、vnf管理器(如vnfm 3006所示)、虚拟化网络功能(示出为vnf 3008)、元件管理器(示出为em 3010)、nfv协调器(示出为nfvo 3012)、以及网络管理器(示为nm 3014)。
[0305]
在至少一个实施例中，vim 3002管理nfvi 3004的资源。在至少一个实施例中，nfvi 3004可包括用于执行系统3000的物理或虚拟资源和应用(包括管理程序)。在至少一个实施例中，vim 3002可以利用nfvi 3004来管理虚拟资源的生命周期(例如，与一个或更
多个物理资源相关联的虚拟机(vm)的创建、维护和拆除)、跟踪vm实例、跟踪性能、vm实例和相关联的物理资源的故障和安全性、以及向其他管理系统暴露vm实例和相关联的物理资源。
[0306]
在至少一个实施例中，vnfm 3006可以管理vnf 3008。在至少一个实施例中，vnf 3008可以用于执行epc组件/功能。在至少一个实施例中，vnfm 3006可以管理vnf 3008的生命周期并且跟踪vnf 3008的虚拟方面的性能、故障和安全性。在至少一个实施例中，em 3010可以跟踪vnf 3008的功能方面的性能、故障和安全性。在至少一个实施例中，跟踪来自vnfm 3006和em 3010的数据可以包括，例如由vim 3002或nfvi 3004使用的性能测量(pm)数据。在至少一个实施例中，vnfm 3006和em 3010两者可以放大/缩小系统3000的vnf的数量。
[0307]
在至少一个实施例中，nfvo 3012可协调、授权、释放和占用nfvi 3004的资源，以便提供所请求的服务(例如，以执行epc功能、组件或切片)。在至少一个实施例中，nm 3014可提供负责管理网络的终端用户功能包，该网络可包括具有vnf、非虚拟化网络功能或两者的网络元件(vnf的管理可经由em 3010发生)。
[0308]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0309]
基于计算机的系统
[0310]
以下各图提出但不限于可用于实现至少一个实施例的示例性的基于计算机的系统。
[0311]
图31示出了根据至少一个实施例的处理系统3100。在至少一个实施例中，系统3100包括一个或更多个处理器3102和一个或更多个图形处理器3108，并且可以是单处理器台式机系统、多处理器工作站系统或具有大量处理器3102或处理器核心3107的服务器系统。在至少一个实施例中，处理系统3100是结合在片上系统(soc)集成电路内的处理平台，以用于移动、手持或嵌入式设备。
[0312]
在至少一个实施例中，处理系统3100可以包括或结合在基于服务器的游戏平台中，包括游戏和媒体控制台的游戏控制台、移动游戏控制台、手持游戏控制台或在线游戏控制台。在至少一个实施例中，处理系统3100是移动电话、智能电话、平板计算设备或移动互联网设备。在至少一个实施例中，处理系统3100还可包括与可穿戴设备耦合或集成在可穿戴设备中，例如智能手表可穿戴设备、智能眼镜设备、增强现实设备或虚拟现实设备。在至少一个实施例中，处理系统3100是电视或机顶盒设备，其具有一个或更多个处理器3102以及由一个或更多个图形处理器3108生成的图形界面。
[0313]
在至少一个实施例中，一个或更多个处理器3102每个包括一个或更多个处理器核心3107，以处理指令，该指令在被执行时执行针对系统和用户软件的操作。在至少一个实施例中，一个或更多个处理器核心3107中的每一个被配置为处理特定指令集3109。在至少一个实施例中，指令集3109可以促进复杂指令集计算(cisc)、精简指令集计算(risc)，或通过超长指令字(vliw)进行计算。在至少一个实施例中，多个处理器核心3107可以各自处理不同的指令集3109，该指令集3109可以包括有助于仿真其他指令集的指令。在至少一个实施
例中，处理器核心3107还可以包括其他处理设备，例如数字信号处理器(dsp)。
[0314]
在至少一个实施例中，处理器3102包括高速缓存存储器(cache)3104。在至少一个实施例中，处理器3102可以具有单个内部高速缓存或多个级别的内部高速缓存。在至少一个实施例中，高速缓存存储器在处理器3102的各个组件之间共享。在至少一个实施例中，处理器3102还使用外部高速缓存(例如，三级(l3)高速缓存或最后一级高速缓存(llc))(未示出)，其可以使用已知的高速缓存一致性技术在处理器核心3107之间共享该逻辑。在至少一个实施例中，处理器3102中另外包括寄存器文件3106，处理器3102可以包括用于存储不同类型的数据的不同类型的寄存器(例如，整数寄存器、浮点寄存器、状态寄存器和指令指针寄存器)。在至少一个实施例中，寄存器文件3106可以包括通用寄存器或其他寄存器。
[0315]
在至少一个实施例中，一个或更多个处理器3102与一个或更多个接口总线3110耦合，以在处理器3102与系统3100中的其他组件之间传输通信信号，例如地址、数据或控制信号。在至少一个实施例中，接口总线3110在一个实施例中可以是处理器总线，例如直接媒体接口(dmi)总线的版本。在至少一个实施例中，接口总线3110不限于dmi总线，并且可以包括一个或更多个外围组件互连总线(例如，pci，pci express)、存储器总线或其他类型的接口总线。在至少一个实施例中，处理器3102包括集成存储器控制器3116和平台控制器集线器3130。在至少一个实施例中，存储器控制器3116促进存储设备与处理系统3100的其他组件之间的通信，而平台控制器集线器(pch)3130通过本地i/o总线提供到输入/输出(i/o)设备的连接。
[0316]
在至少一个实施例中，存储器设备3120可以是动态随机存取存储器(dram)设备、静态随机存取存储器(sram)设备、闪存设备、相变存储设备或具有适当的性能以用作处理器存储器。在至少一个实施例中，存储设备3120可以用作处理系统3100的系统存储器，以存储数据3122和指令3121，以在一个或更多个处理器3102执行应用或过程时使用。在至少一个实施例中，存储器控制器3116还与可选的外部图形处理器3112耦合，其可以与处理器3102中的一个或更多个图形处理器3108通信以执行图和媒体操作。在至少一个实施例中，显示设备3111可以连接至处理器3102。在至少一个实施例中，显示设备3111可以包括内部显示设备中的一个或更多个，例如在移动电子设备或便携式计算机设备或通过显示器接口(例如显示端口(displayport)等)连接的外部显示设备。在至少一个实施例中，显示设备3111可以包括头戴式显示器(hmd)，诸如用于虚拟现实(vr)应用或增强现实(ar)应用中的立体显示设备。
[0317]
在至少一个实施例中，平台控制器集线器3130使外围设备能够通过高速i/o总线连接到存储设备3120和处理器3102。在至少一个实施例中，i/o外围设备包括但不限于音频控制器3146、网络控制器3134、固件接口3128、无线收发器3126、触摸传感器3125、数据存储设备3124(例如，硬盘驱动器、闪存等)。在至少一个实施例中，数据存储设备3124可以经由存储器接口(例如，sata)或经由外围总线来连接，诸如外围组件互连总线(例如，pci、pcie)。在至少一个实施例中，触摸传感器3125可以包括触摸屏传感器、压力传感器或指纹传感器。在至少一个实施例中，无线收发器3126可以是wi-fi收发器、蓝牙收发器或移动网络收发器，诸如3g、4g或长期演进(lte)收发器。在至少一个实施例中，固件接口3128使能与系统固件的通信，并且可以是，例如统一的可扩展固件接口(uefi)。在至少一个实施例中，网络控制器3134可以启用到有线网络的网络连接。在至少一个实施例中，高性能网络控制
器(未示出)与接口总线3110耦合。在至少一个实施例中，音频控制器3146是多通道高清晰度音频控制器。在至少一个实施例中，处理系统3100包括可选的传统(legacy)i/o控制器3140，用于将遗留(例如，个人系统2(ps/2))设备耦合到处理系统3100。在至少一个实施例中，平台控制器集线器3130还可以连接到一个或更多个通用串行总线(usb)控制器3142，该控制器连接输入设备，诸如键盘和鼠标3143组合、相机3144或其他usb输入设备。
[0318]
在至少一个实施例中，存储器控制器3116和平台控制器集线器3130的实例可以集成到离散的外部图形处理器中，例如外部图形处理器3112。在至少一个实施例中，平台控制器集线器3130和/或存储控制器3116可以在一个或更多个处理器3102的外部。例如，在至少一个实施例中，处理系统3100可以包括外部存储控制器3116和平台控制器集线器3130，其可以配置成在与处理器3102通信的系统芯片组中的存储器控制器集线器和外围控制器集线器。
[0319]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0320]
图32示出了根据至少一个实施例的计算机系统3200。在至少一个实施例中，计算机系统3200可以是具有互连的设备和组件，soc，或某种组合的系统。在至少一个实施例中，计算机系统3200由处理器3202形成，该处理器3202可以包括用于执行指令的执行单元。在至少一个实施例中，计算机系统3200可以包括但不限于组件，例如处理器3202，其采用包括逻辑的执行单元以执行用于过程数据的算法。在至少一个实施例中，计算机系统3200可以包括处理器，例如可从加利福尼亚圣塔克拉拉的英特尔公司(intel corporation of santa clara,california)获得的处理器家族、xeontm、xscaletm和/或strongarmtm，core
tm
或nervana
tm
微处理器，尽管也可以使用其他系统(包括具有其他微处理器的pc、工程工作站、机顶盒等)。在至少一个实施例中，计算机系统3200可以执行可从华盛顿州雷蒙德市的微软公司(microsoft corporation of redmond,wash.)获得的windows操作系统版本，尽管其他操作系统(例如unix和linux)、嵌入式软件和/或图形用户界面也可以使用。
[0321]
在至少一个实施例中，计算机系统3200可以用在其他设备中，例如手持设备和嵌入式应用。手持设备的一些例子包括蜂窝电话、互联网协议(internet protocol)设备、数码相机、个人数字助理(“pda”)和手持pc。在至少一个实施例中，嵌入式应用可以包括微控制器、数字信号处理器(“dsp”)、soc、网络计算机(“netpc”)、机顶盒、网络集线器、广域网(“wan”)交换机，或根据至少一个实施例可以执行一个或更多个指令的任何其他系统。
[0322]
在至少一个实施例中，计算机系统3200可包括但不限于处理器3202，该处理器3202可包括但不限于一个或更多个执行单元3208，其可以配置为执行计算统一设备架构(“cuda”)(由加利福尼亚州圣克拉拉的nvidia corporation开发)程序。在至少一个实施例中，cuda程序是用cuda编程语言编写的软件应用程序的至少一部分。在至少一个实施例中，计算机系统3200是单处理器台式机或服务器系统。在至少一个实施例中，计算机系统3200可以是多处理器系统。在至少一个实施例中，处理器3202可以包括但不限于例如cisc微处理器、risc微处理器、vliw微处理器、实现指令集组合的处理器，或任何其他处
理器设备，例如诸如数字信号处理器。在至少一个实施例中，处理器3202可以耦合到处理器总线3210，该处理器总线3210可以在处理器3202与计算机系统3200中的其他组件之间传输数据信号。
[0323]
在至少一个实施例中，处理器3202可以包括但不限于1级(“l1”)内部高速缓存存储器(“cache”)3204。在至少一个实施例中，处理器3202可以具有单个内部高速缓存或多级内部缓存。在至少一个实施例中，高速缓存存储器可以驻留在处理器3202的外部。在至少一个实施例中，处理器3202可以包括内部和外部高速缓存的组合。在至少一个实施例中，寄存器文件3206可以在各种寄存器中存储不同类型的数据，包括但不限于整数寄存器、浮点寄存器、状态寄存器和指令指针寄存器。
[0324]
在至少一个实施例中，包括但不限于执行整数和浮点运算的逻辑的执行单元3208，其也位于处理器3202中。处理器3202还可以包括微码(“ucode”)只读存储器(“rom”)，用于存储某些宏指令的微代码。在至少一个实施例中，执行单元3208可以包括用于处理封装指令集3209的逻辑。在至少一个实施例中，通过将封装指令集3209包括在通用处理器3202的指令集中，以及要执行指令的相关电路，可以使用通用处理器3202中的封装数据来执行许多多媒体应用程序使用的操作。在至少一个实施例中，可以通过使用处理器的数据总线的全宽度来在封装的数据上执行操作来加速和更有效地执行许多多媒体应用程序，这可能不需要在处理器的数据总线上传输较小的数据单元来一次对一个数据元素执行一个或更多个操作。
[0325]
在至少一个实施例中，执行单元3208也可以用在微控制器、嵌入式处理器、图形设备、dsp和其他类型的逻辑电路中。在至少一个实施例中，计算机系统3200可以包括但不限于存储器3220。在至少一个实施例中，存储器3220可以被实现为dram设备、sram设备、闪存设备或其他存储设备。存储器3220可以存储由处理器3202可以执行的由数据信号表示的指令3219和/或数据3221。
[0326]
在至少一个实施例中，系统逻辑芯片可以耦合到处理器总线3210和存储器3220。在至少一个实施例中，系统逻辑芯片可以包括但不限于存储器控制器集线器(“mch”)3216，并且处理器3202可以经由处理器总线3210与mch 3216通信。在至少一个实施例中，mch 3216可以提供到存储器3220的高带宽存储器路径3218以用于指令和数据存储以及用于图形命令、数据和纹理的存储。在至少一个实施例中，mch 3216可以在处理器3202、存储器3220和计算机系统3200中的其他组件之间启动数据信号，并且在处理器总线3210、存储器3220和系统i/o 3222之间桥接数据信号。在至少一个实施例中，系统逻辑芯片可以提供用于耦合到图形控制器的图形端口。在至少一个实施例中，mch 3216可以通过高带宽存储器路径3218耦合到存储器3220，并且图形/视频卡3212可以通过加速图形端口(accelerated graphics port)(“agp”)互连3214耦合到mch 3216。
[0327]
在至少一个实施例中，计算机系统3200可以使用系统i/o 3222作为专有集线器接口总线来将mch 3216耦合到i/o控制器集线器(“ich”)3230。在至少一个实施例中，ich 3230可以通过本地i/o总线提供与某些i/o设备的直接连接。在至少一个实施例中，本地i/o总线可以包括但不限于用于将外围设备连接到存储器3220、芯片组和处理器3202的高速i/o总线。示例可以包括但不限于音频控制器3229、固件集线器(“flash bios”)3228、无线收发器3226、数据存储3224、包含用户输入3225的传统i/o控制器3223和键盘接口、串行扩展
端口3277(例如usb)和网络控制器3234。数据存储3224可以包括硬盘驱动器、软盘驱动器、cd-rom设备、闪存设备或其他大容量存储设备。
[0328]
在至少一个实施例中，图32示出了包括互连的硬件设备或“芯片”的系统。在至少一个实施例中，图32可以示出示例性soc。在至少一个实施例中，图32中示出的设备可以与专有互连、标准化互连(例如，pcie)或其某种组合互连。在至少一个实施例中，系统3200的一个或更多个组件使用计算快速链路(cxl)互连来互连。
[0329]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0330]
图33示出了根据至少一个实施例的系统3300。在至少一个实施例中，系统3300是利用处理器3310的电子设备。在至少一个实施例中，系统3300可以是，例如但不限于，笔记本电脑、塔式服务器、机架服务器、刀片服务器、膝上型计算机、台式机、平板电脑、移动设备、电话、嵌入式计算机或任何其他合适的电子设备。
[0331]
在至少一个实施例中，系统3300可以包括但不限于通信地耦合到任何合适数量或种类的组件、外围设备、模块或设备的处理器3310。在至少一个实施例中，处理器3310使用总线或接口耦合，诸如i2c总线、系统管理总线(“smbus”)、低引脚数(lpc)总线、串行外围接口(“spi”)、高清音频(“hda”)总线、串行高级技术附件(“sata”)总线、usb(1、2、3版)或通用异步接收器/发送器(“uart”)总线。在至少一个实施例中，图33示出了系统，该系统包括互连的硬件设备或“芯片”。在至少一个实施例中，图33可以示出示例性soc。在至少一个实施例中，图33中所示的设备可以与专有互连线、标准化互连(例如，pcie)或其某种组合互连。在至少一个实施例中，图33的一个或更多个组件使用计算快速链路(cxl)互连线来互连。
[0332]
在至少一个实施例中，图33可以包括显示器3324、触摸屏3325、触摸板3330、近场通信单元(“nfc”)3345、传感器集线器3340、热传感器3346、快速芯片组(“ec”)3335、可信平台模块(“tpm”)3338、bios/固件/闪存(“bios，fw flash”)3322、dsp 3360、固态磁盘(“ssd”)或硬盘驱动器(“hdd”)3320、无线局域网单元(“wlan”)3350、蓝牙单元3352、无线广域网单元(“wwan”)3356、全球定位系统(gps)3355、相机(“usb 3.0相机”)3354(例如usb 3.0相机)或例如以lpddr3标准实现的低功耗双倍数据速率(“lpddr”)存储器单元(“lpddr3”)3315。这些组件可以各自以任何合适的方式实现。
[0333]
在至少一个实施例中，其他组件可以通过以上讨论的组件通信地耦合到处理器3310。在至少一个实施例中，加速度计3341、环境光传感器(“als”)3342、罗盘3343和陀螺仪3344可以可通信地耦合到传感器集线器3340。在至少一个实施例中，热传感器3339、风扇3337、键盘3346和触摸板3330可以通信地耦合到ec 3335。在至少一个实施例中，扬声器3363、耳机3364和麦克风(“mic”)3365可以通信地耦合到音频单元(“音频编解码器和d类放大器”)3364，其又可以通信地耦合到dsp 3360。在至少一个实施例中，音频单元3364可以包括但不限于音频编码器/解码器(“编解码器”)和d类放大器。在至少一个实施例中，sim卡(“sim”)3357可以通信地耦合到wwan单元3356。在至少一个实施例中，组件(诸如wlan单元3350和蓝牙单元3352以及wwan单元3356)可以被实现为下一代形式因素(ngff)。
[0334]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他
设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0335]
图34示出了根据至少一个实施例的示例性集成电路3400。在至少一个实施例中，示例性集成电路3400是soc，其可使用一个或更多个ip核心制造。在至少一个实施例中，集成电路3400包括一个或更多个应用处理器3405(例如，cpu)、至少一个图形处理器3410，并且可以另外包括图像处理器3415和/或视频处理器3420，其中任意一个可能是模块化ip核心。在至少一个实施例中，集成电路3400包括外围或总线逻辑，其包括usb控制器3425、uart控制器3430、spi/sdio控制器3435和i2s/i2c控制器3440。在至少一个实施例中，集成电路3400可以包括显示设备3445耦合到高清多媒体接口(hdmi)控制器3450和移动工业处理器接口(mipi)显示接口3455中的一个或更多个。在至少一个实施例中，存储可以由闪存子系统3460提供，包括闪存和闪存控制器。在至少一个实施例中，可以经由存储器控制器3465提供存储器接口以用于访问sdram或sram存储器设备。在至少一个实施例中，一些集成电路还包括嵌入式安全引擎3470。
[0336]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0337]
图35示出了根据至少一个实施例的计算系统3500。在至少一个实施例中，计算系统3500包括处理子系统3501，其具有经由可以包括存储器集线器3505的互连路径通信的一个或更多个处理器3502和系统存储器3504。在至少一个实施例中，存储器集线器3505可以是芯片组组件内的单独组件，也可以集成在一个或更多个处理器3502内。在至少一个实施例中，存储器集线器3505通过通信链路3506与i/o子系统3511耦合。在至少一个实施例中，i/o子系统3511包括i/o集线器3507，其可以使计算系统3500能够接收来自一个或更多个输入设备3508的输入。在至少一个实施例中，i/o集线器3507可以使能显示控制器，其包括在一个或更多个处理器3502中，用于向一个或更多个显示设备3510a提供输出。在至少一个实施例中，与i/o集线器3507耦合的一个或更多个显示设备3510a可以包括本地、内部或嵌入式显示设备。
[0338]
在至少一个实施例中，处理子系统3501包括经由总线或其他通信链路3513耦合到存储器集线器3505的一个或更多个并行处理器3512。在至少一个实施例中，通信链路3513可以是许多基于标准的通信链路技术或协议中的一种，例如但不限于pcie，或者可以是针对供应商的通信接口或通信结构。在至少一个实施例中，一个或更多个并行处理器3512形成计算集中的并行或向量处理系统，该系统可以包括大量的处理核心和/或处理集群，例如多集成核心(mic)处理器。在至少一个实施例中，一个或更多个并行处理器3512形成可以将像素输出到经由i/o集线器3507耦合的一个或更多个显示设备3510a之一的图形处理子系统。在至少一个实施例中，一个或更多个并行处理器3512还可以包括显示控制器和显示接口(未示出)，以使得能够直接连接到一个或更多个显示设备3510b。
[0339]
在至少一个实施例中，系统存储单元3514可以连接到i/o集线器3507，以提供用于计算系统3500的存储机制。在至少一个实施例中，i/o交换机3516可以用于提供接口机制，
以实现i/o集线器3507与其他组件之间的连接，例如可以集成到平台中的网络适配器3518和/或无线网络适配器3519，以及可以通过一个或更多个附加设备3520添加的各种其他设备。在至少一个实施例中，网络适配器3518可以是以太网适配器或另一有线网络适配器。在至少一个实施例中，无线网络适配器3519可以包括wi-fi、蓝牙、nfc的一个或更多个或其他包括一个或更多个无线电的网络设备。
[0340]
在至少一个实施例中，计算系统3500可以包括未明确示出的其他组件，包括usb或其他端口连接、光存储驱动器、视频捕获设备和/或其变体，也可以连接到i/o集线器3507。在至少一个实施例中，对图35中的各个组件进行互连的通信路径可以使用任何合适的协议来实现，诸如基于pci(外围组件互连)的协议(例如，pcie)，或其他总线或点对点通信接口和/或协议(例如，nvlink高速互连或互连协议)。
[0341]
在至少一个实施例中，一个或更多个并行处理器3512包括针对图形和视频处理而优化的电路(例如，包括视频输出电路)，并构成图形处理单元(gpu)。在至少一个实施例中，一个或更多个并行处理器3512包括针对通用处理而优化的电路。在至少一个实施例中，计算系统3500的组件可以与单个集成电路上的一个或更多个其他系统元件集成。例如，在至少一个实施例中，一个或更多个并行处理器3512、存储器集线器3505、处理器3502和i/o集线器3507可以被集成到片上系统(soc)集成电路中。在至少一个实施例中，计算系统3500的组件可以被集成到单个封装中以形成系统级封装(sip)配置。在至少一个实施例中，计算系统3500的组件的至少一部分可以被集成到多芯片模块(mcm)中，该多芯片模块可以与其他多芯片模块互连到模块化计算系统中。在至少一个实施例中，从计算系统3500中省略了i/o子系统3511和显示设备3510b。
[0342]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0343]
处理系统
[0344]
以下各图阐述了但不限于可用于实现至少一个实施例的示例性处理系统。
[0345]
图36示出了根据至少一个实施例的加速处理单元(“apu”)3600。在至少一个实施例中，apu 3600由加利福尼亚州圣克拉拉市的amd公司开发。在至少一个实施例中，apu 3600可以被配置为执行应用程序，诸如cuda程序。在至少一个实施例中，apu 3600包括但不限于核心复合体3610、图形复合体3640、结构3660、i/o接口3670、存储器控制器3680、显示控制器3692和多媒体引擎3694。在至少一个实施例中，apu 3600可以包括但不限于任意数量的核心复合体3610、任意数量的图形复合体3640、任意数量的显示控制器3692和任意数量的多媒体引擎3694的任何组合。为了说明的目的，在本文中用附图标记表示相似对象的多个实例，其中附图标记标识该对象，并且括号中的数字标识所需要的实例。
[0346]
在至少一个实施例中，核心复合体3610是cpu，图形复合体3640是gpu，并且apu 3600是将不限于3610和3640集成到单个芯片上的处理单元。在至少一个实施例中，一些任务可以被分配给核心复合体3610，而其他任务可以被分配给图形复合体3640。在至少一个实施例中，核心复合体3610被配置为执行与apu 3600相关联的主控制软件，例如操作系统。在至少一个实施例中，核心复合体3610是apu 3600的主处理器，其控制和协调其他处理器
的操作。在至少一个实施例中，核心复合体3610发出控制图形复合体3640的操作的命令。在至少一个实施例中，核心复合体3610可以被配置为执行从cuda源代码派生的主机可执行代码，并且图形复合体3640可以被配置为执行从cuda源代码派生的设备可执行代码。
[0347]
在至少一个实施例中，核心复合体3610包括但不限于核心3620(1)-3620(4)和l3高速缓存3630。在至少一个实施例中，核心复合体3610可以包括但不限于任意数量的核心3620以及任意数量和类型的高速缓存的任何组合。在至少一个实施例中，核心3620被配置为执行特定指令集架构(“isa”)的指令。在至少一个实施例中，每个核心3620是cpu核心。
[0348]
在至少一个实施例中，每个核心3620包括但不限于获取/解码单元3622，整数执行引擎3624，浮点执行引擎3626和l2高速缓存3628。在至少一个实施例中，获取/解码单元3622获取指令，对这些指令进行解码，生成微操作，并将单独的微指令分派给整数执行引擎3624和浮点执行引擎3626。在至少一个实施例中，获取/解码单元3622可以同时分派一个微指令到整数执行引擎3624和另一微指令到浮点执行引擎3626。在至少一个实施例中，整数执行引擎3624执行不限于整数和存储器操作。在至少一个实施例中，浮点引擎3626执行不限于浮点和向量运算。在至少一个实施例中，获取-解码单元3622将微指令分派给单个执行引擎，该执行引擎代替整数执行引擎3624和浮点执行引擎3626两者。
[0349]
在至少一个实施例中，每个核心3620(i)可以访问包括在核心3620(i)中的l2高速缓存3628(i)，其中i是表示核心3620的特定实例的整数。在至少一个实施例中，包括在核心复合体3610(j)中的每个核心3620经由包括在核心复合体3610(j)中的l3高速缓存3630(j)连接到包括在核心复合体3610(j)中的其他核心3620，其中j是表示核心复合体3610的特定实例的整数。在至少一个实施例中，包括在核心复合体3610(j)中的核心3620可以访问包括在核心复合体3610(j)中的所有l3高速缓存3630(j)，其中j是表示核心复合体3610的特定实例的整数。在至少一个实施例中，l3高速缓存3630可以包括但不限于任意数量的切片(slice)。
[0350]
在至少一个实施例中，图形复合体3640可以被配置为以高度并行的方式执行计算操作。在至少一个实施例中，图形复合体3640被配置为执行图形管线操作，诸如绘制命令、像素操作、几何计算以及与将图像渲染至显示器相关联的其他操作。在至少一个实施例中，图形复合体3640被配置为执行与图形无关的操作。在至少一个实施例中，图形复合体3640被配置为执行与图形有关的操作和与图形无关的操作。
[0351]
在至少一个实施例中，图形复合体3640包括但不限于任意数量的计算单元3650和l2高速缓存3642。在至少一个实施例中，计算单元3650共享l2高速缓存3642。在至少一个实施例中，l2高速缓存3642被分区。在至少一个实施例中，图形复合体3640包括但不限于任意数量的计算单元3650以及任意数量(包括零)和类型的高速缓存。在至少一个实施例中，图形复合体3640包括但不限于任意数量的专用图形硬件。
[0352]
在至少一个实施例中，每个计算单元3650包括但不限于任意数量的simd单元3652和共享存储器3654。在至少一个实施例中，每个simd单元3652实现simd架构并且被配置为并行执行操作。在至少一个实施例中，每个计算单元3650可以执行任意数量的线程块，但是每个线程块在单个计算单元3650上执行。在至少一个实施例中，线程块包括但不限于任意数量的执行线程。在至少一个实施例中，工作组是线程块。在至少一个实施例中，每个simd单元3652执行不同的线程束(warp)。在至少一个实施例中，线程束是一组线程(例如16个线
程)，其中线程束中的每个线程属于单个线程块，并且被配置为基于单个指令集来处理不同的数据集。在至少一个实施例中，可以使用预测(predication)来禁用线程束中的一个或更多个线程。在至少一个实施例中，通道是线程。在至少一个实施例中，工作项是线程。在至少一个实施例中，波前是线程束。在至少一个实施例中，线程块中的不同波前可一起同步并经由共享存储器3654进行通信。
[0353]
在至少一个实施例中，结构3660是系统互连，其促进跨核心复合体3610、图形复合体3640、i/o接口3670、存储器控制器3680、显示控制器3692和多媒体引擎3694的数据和控制传输。在至少一个实施例中，除了结构3660之外或代替结构3660，apu 3600还可以包括但不限于任意数量和类型的系统互连，该结构3660促进跨可以在apu 3600内部或外部的任意数量和类型的直接或间接链接的组件的数据和控制传输。在至少一个实施例中，i/o接口3670表示任意数量和类型的i/o接口(例如，pci，pci-extended(“pci-x”)，pcie，千兆以太网(“gbe”)，usb等)。在至少一个实施例中，各种类型的外围设备耦合到i/o接口3670。在至少一个实施例中，耦合到i/o接口3670的外围设备可以包括但不限于键盘，鼠标，打印机，扫描仪，操纵杆或其他类型的游戏控制器、媒体记录设备、外部存储设备、网络接口卡等。
[0354]
在至少一个实施例中，显示控制器amd92在一个或更多个显示设备(例如液晶显示器(lcd)设备)上显示图像。在至少一个实施例中，多媒体引擎240包括但不限于任意数量和类型的与多媒体相关的电路，例如视频解码器、视频编码器、图像信号处理器等。在至少一个实施例中，存储器控制器3680促进apu 3600与统一系统存储器3690之间的数据传输。在至少一个实施例中，核心复合体3610和图形复合体3640共享统一系统存储器3690。
[0355]
在至少一个实施例中，apu 3600实现种存储器子系统，其包括但不限于任意数量和类型的存储器控制器3680和可以专用于一个组件或在多个组件之间共享的存储器设备(例如，共享存储器3654)。组件。在至少一个实施例中，apu 3600实现高速缓存子系统，其包括但不限于一个或更多个高速缓存存储器(例如，l2高速缓存3728，l3高速缓存3630和l2高速缓存3642)，每个高速缓存存储器可以是组件私有的或在任意数量的组件(例如，核心3620，核心复合体3610，simd单元3652，计算单元3650和图形复合体3640)之间共享。
[0356]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0357]
图37示出了根据至少一个实施例的cpu 3700。在至少一个实施例中，cpu 3700由加利福尼亚州圣克拉拉市的amd公司开发。在至少一个实施例中，cpu 3700可以被配置为执行应用程序。在至少一个实施例中，cpu 3700被配置为执行主控制软件，例如操作系统。在至少一个实施例中，cpu 3700发出控制外部gpu(未示出)的操作的命令。在至少一个实施例中，cpu 3700可以被配置为执行从cuda源代码派生的主机可执行代码，并且外部gpu可以被配置为执行从这种cuda源代码派生的设备可执行代码。在至少一个实施例中，cpu 3700包括但不限于任意数量的核心复合体3710，结构3760，i/o接口3770和存储器控制器amad80。
[0358]
在至少一个实施例中，核心复合体3710包括但不限于核心3720(1)-3720(4)和l3高速缓存3730。在至少一个实施例中，核心复合体3710可以包括但不限于任意数量的核心3720以及任意数量和类型的高速缓存的任何组合。在至少一个实施例中，核心3720被配置
为执行特定isa的指令。在至少一个实施例中，每个核心3720是cpu核心。
[0359]
在至少一个实施例中，每个核心3720包括但不限于获取/解码单元3722，整数执行引擎3724，浮点执行引擎3726和l2高速缓存3728。在至少一个实施例中，获取/解码单元3722获取指令，对这些指令进行解码，生成微操作，并将单独的微指令分派给整数执行引擎3724和浮点执行引擎3726。在至少一个实施例中，获取/解码单元3722可以同时分派一个微指令至整数执行引擎3724和另一微指令至浮点执行引擎3726。在至少一个实施例中，整数执行引擎3724执行不限于整数和存储器操作。在至少一个实施例中，浮点引擎3726执行不限于浮点和向量运算。在至少一个实施例中，获取-解码单元3722将微指令分派给单个执行引擎，该引擎代替整数执行引擎3724和浮点执行引擎3726两者。
[0360]
在至少一个实施例中，每个核心3720(i)可以访问包括在核心3720(i)中的l2高速缓存3728(i)，其中i是表示核心3720的特定实例的整数。在至少一个实施例中，包括在核心复合体3710(j)中的每个核心3720经由包括在核心复合体3710(j)中的l3高速缓存3730(j)连接到核心复合体3710(j)中的其他核心3720，其中j是表示核心复合体3710的特定实例的整数。在至少一个实施例中，包括在核心复合体3710(j)中的核心3720可以访问包括在核心复合体3710(j)中的所有l3高速缓存3730(j)，其中j是表示核心复合体3710的特定实例的整数。在至少一个实施例中，l3高速缓存3730可以包括但不限于任意数量的切片。
[0361]
在至少一个实施例中，结构3760是系统互连，其促进跨核心复合体3710(1)-3710(n)(其中n是大于零的整数)、i/o接口3770和存储器控制器3780的数据和控制传输。在至少一个实施例中，除了结构3760之外或代替结构3760，cpu 3700还可以包括但不限于任意数量和类型的系统互连，该结构3760促进跨可以在cpu 3700内部或外部的任意数量和类型的直接或间接链接的组件的数据和控制传输。在至少一个实施例中，i/o接口3770表示任意数量和类型的i/o接口(例如pci，pci-x，pcie，gbe，usb等)。在至少一个实施例中，各种类型的外围设备耦合到i/o接口3770。在至少一个实施例中，耦合到i/o接口3770的外围设备可以包括但不限于显示器，键盘，鼠标，打印机，扫描仪，操纵杆或其他类型的游戏控制器、媒体记录设备、外部存储设备、网络接口卡等。
[0362]
在至少一个实施例中，存储器控制器3780促进cpu 3700与系统存储器3790之间的数据传输。在至少一个实施例中，核心复合体3710和图形复合体3740共享系统存储器3790。在至少一个实施例中，cpu 3700实现存储器子系统，其包括但不限于任意数量和类型的存储器控制器3780和可以专用于一个组件或在多个组件之间共享的存储器设备。在至少一个实施例中，cpu 3700实现了高速缓存子系统，其包括但不限于一个或更多个高速缓存存储器(例如，l2高速缓存3728和l3高速缓存3730)，每个高速缓存存储器可以是组件私有的或在任意数量的组件(例如，核心3720和核心复合体3710)之间共享。
[0363]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0364]
图38示出了根据至少一个实施例的示例性加速器集成切片3890。如本文所使用的，“切片”包括加速器集成电路的处理资源的指定部分。在至少一个实施例中，加速器集成电路代表多个图形加速模块种的多个图形处理引擎提供高速缓存管理、存储器访问、环境
管理和中断管理服务。图形处理引擎可以各自包括单独的gpu。可选地，图形处理引擎可包括gpu内的不同类型的图形处理引擎，例如图形执行单元、媒体处理引擎(例如，视频编码器/解码器)、采样器和blit引擎。在至少一个实施例中，图形加速模块可以是具有多个图形处理引擎的gpu。在至少一个实施例中，图形处理引擎可以是集成在通用封装、线卡或芯片上的各个gpu。
[0365]
系统存储器3814内的应用程序有效地址空间3882存储进程元素3883。在一个实施例中，响应于来自处理器3807上执行的应用程序3880的gpu调用3881而存储进程元素3883。进程元素3883包含对应应用程序3880的处理状态。包含在进程元素3883中的工作描述符(wd)3884可以是应用程序请求的单个作业或可能包含指向作业队列的指针。在至少一个实施例中，wd 3884是指向应用程序有效地址空间3882中的作业请求队列的指针。
[0366]
图形加速模块3846和/或各个图形处理引擎可以由系统中的全部或部分进程共享。在至少一个实施例中，可以包括用于建立处理状态并将wd 3884发送到图形加速模块3846以在虚拟化环境中开始作业的基础设施。
[0367]
在至少一个实施例中，专用进程编程模型是针对实现的。在该模型中，单个进程拥有图形加速模块3846或个体图形处理引擎。由于图形加速模块3846由单个进程拥有，因此管理程序为拥有的分区初始化加速器集成电路，并且当分配图形加速模块3846时操作系统对加速器集成电路进行初始化以用于拥有的分区。
[0368]
在操作中，加速器集成切片3890中的wd获取单元3891获取下一个wd 3884，其中包括要由图形加速模块3846的一个或更多个图形处理引擎完成的工作的指示。来自wd 3884的数据可以存储在寄存器3845被存储器管理单元(mmu)3839、中断管理电路3847和/或环境管理电路3848使用，如图所示。例如，mmu 3839的一个实施例包括用于访问os虚拟地址空间3885内的段/页表3886的段/页面漫游电路。中断管理电路3847可以处理从图形加速模块3846接收到的中断事件(int)3892。当执行图操作时，由图形处理引擎产生的有效地址3893由mmu 3839转换为实际地址。
[0369]
在一个实施例中，为每个图形处理引擎和/或图形加速模块3846复制相同的寄存器组3845，并且可以由系统管理程序或操作系统来初始化。这些复制的寄存器中的每一个都可以包含在加速器集成切片3890中。表1中显示了可由管理程序初始化的示例性寄存器。
[0370]
表1
–
管理程序初始化的寄存器
[0371]
[0372][0373]
表2中示出了可以由操作系统初始化的示例性寄存器。
[0374]
表2
–
操作系统初始化寄存器
[0375]
1进程和线程识别2有效地址(ea)环境保存/还原指针3虚拟地址(va)加速器利用率记录指针4虚拟地址(va)存储分段表指针5权威面具6工作描述符
[0376]
在一个实施例中，每个wd 3884特定于特定的图形加速模块3846和/或特定图形处理引擎。它包含图形处理引擎进行工作或工作所需的所有信息，或者它可以是指向存储器位置的指针，其中应用程序建立了要完成的工作的命令队列。
[0377]
图39a和39b示出了根据本文至少一个实施例的示例性图形处理器。在至少一个实施例中，任何示例性图形处理器可以使用一个或更多个ip核心来制造。除了图示之外，在至少一个实施例中可以包括其他逻辑和电路，包括附加的图形处理器/核心、外围接口控制器或通用处理器核心。在至少一个实施例中，示例性图形处理器用于soc内。
[0378]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0379]
图39a示出了根据至少一个实施例的soc集成电路的示例性图形处理器3910，其可以使用一个或更多个ip核心来制造。图39b示出了根据至少一个实施例的soc集成电路的额外的示例图形处理器3940，其可以使用一个或更多个ip核心来制造。在至少一个实施例中，图39a的图形处理器3910是低功耗图形处理器核心。在至少一个实施例中，图39b的图形处理器3940是更高性能的图形处理器核心。在至少一个实施例中，图形处理器3910、3940可以是图15的图形处理器1510的变体。
[0380]
在至少一个实施例中，图形处理器3910包括顶点处理器3905和一个或更多个片段处理器3915a-3915n(例如3915a、3915b、3915c、3915d至3915n-1和3915n)。在至少一个实施例中，图形处理器3910可以经由单独的逻辑来执行不同的着色器程序，使得顶点处理器3905被优化以执行针对顶点着色器程序的操作，而一个或更多个片段处理器3915a-3915n执行片段(例如，像素)着色操作用于片段或像素或着色器程序。在至少一个实施例中，顶点
处理器3905执行3d图形管线的顶点处理阶段并生成图元和顶点数据。在至少一个实施例中，片段处理器3915a-3915n使用由顶点处理器3905生成的图元和顶点数据来生成在显示设备上显示的帧缓冲区。在至少一个实施例中，片段处理器3915a-3915n被优化以执行如在opengl api中所提供的片段着色器程序，其可以用于执行与在direct 3d api中所提供的像素着色器程序类似的操作。
[0381]
在至少一个实施例中，图形处理器3910附加地包括一个或更多个mmu 3920a-3920b、高速缓存3925a-3925b和电路互连3930a-3930b。在至少一个实施例中，一个或更多个mmu 3920a-3920b提供用于图形处理器3910的虚拟到物理地址的映射，包括用于顶点处理器3905和/或片段处理器3915a-3915n，其可以引用存储在存储器中的顶点或图像/纹理数据，除了存储在一个或更多个高速缓存3925a-3925b中的顶点或图像/纹理数据之外。在至少一个实施例中，一个或更多个mmu 3920a-3920b可以与系统内的其他mmu同步，包括与图15的一个或更多个应用处理器1505、图像处理器1515和/或视频处理器1520相关联的一个或更多个mmu，使得每个处理器1505-1520可以参与共享或统一的虚拟存储器系统。在至少一个实施例中，一个或更多个电路互连3930a-3930b使图形处理器3910能够经由soc的内部总线或经由直接连接与soc内的其他ip核心相连接。
[0382]
在至少一个实施例中，图形处理器3940包括图39a的图形处理器3910的一个或更多个mmu 3920a-3920b、高速缓存3925a-3925b和电路互连3930a-3930b。在至少一个实施例中，图形处理器3940包括一个或更多个着色器核心3955a-3955n(例如，3955a、3955b、3955c、3955d、3955e、3955f、至3955n-1和3955n)，其提供了统一的着色器核心架构，其中单个核心或类型或核心可以执行所有类型的可编程着色器代码，包括用于实现顶点着色器、片段着色器和/或计算着色器的着色器程序代码。在至少一个实施例中，多个着色器核心可以变化。在至少一个实施例中，图形处理器3940包括核心间任务管理器3945，其充当线程分派器以将执行线程分派给一个或更多个着色器核心3955a-3955n和分块单元3958，以加速基于图块渲染的分块操作，其中在图像空间中细分了场景的渲染操作，例如以利用场景内的局部空间一致性或优化内部缓存的使用。
[0383]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0384]
图40a示出了根据至少一个实施例的图形核心4000。在至少一个实施例中，图形核心4000可以包括在图34的图形处理器3410内。在至少一个实施例中，图形核心4000可以是图39b中统一的着色器核心3955a-3955n。在至少一个实施例中，图形核心4000包括共享指令高速缓存4002、纹理单元4018和高速缓存/共享存储器4020，它们是图形核心4000内的执行资源所共有的。在至少一个实施例中，图形核心4000可以包括多个切片(slice)4001a-4001n或每个核心的分区，图形处理器可以包括图形核心4000的多个实例。切片4001a-4001n可以包括支持逻辑，该支持逻辑包括本地指令高速缓存4004a-4004n、线程调度器4006a-4006n、线程分派器4008a-4008n和一组寄存器4010a-4010n。在至少一个实施例中，切片4001a-4001n可以包括一组附加功能单元(afu)4012a-4012n、浮点单元(fpu)4014a-4014n、整数算术逻辑单元(alu)4016a-4016n、地址计算单元(acu)4013a-4013n、双精度浮
点单元(dpfpu)4015a-4015n和矩阵处理单元(mpu)4017a-4017n。
[0385]
在一个实施例中，fpu 4014a-4014n可以执行单精度(32位)和半精度(16位)浮点运算，而dpfpu 4015a-4015n可以执行双精度(64位)浮点运算点操作。在至少一个实施例中，alu 4016a-4016n可以以8位、16位和32位精度执行可变精度整数运算，并且可以被配置用于混合精度运算。在至少一个实施例中，mpu 4017a-4017n还可被配置用于混合精度矩阵运算，包括半精度浮点运算和8位整数运算。在至少一个实施例中，mpu4017a-4017n可以执行各种矩阵操作以加速cuda程序，包括使得能够支持加速的通用矩阵到矩阵乘法(gemm)。在至少一个实施例中，afu4012a-4012n可以执行浮点数或整数单元不支持的附加逻辑运算，包括三角运算(例如，sine、cosine等)。
[0386]
图40b示出了在至少一个实施例中的通用图形处理单元(gpgpu)4030。在至少一个实施例中，gpgpu 4030是高度并行的并且适合于部署在多芯片模块上。在至少一个实施例中，gpgpu 4030可以被配置为使得高度并行的计算操作能够由gpu阵列来执行。在至少一个实施例中，gpgpu 4030可以直接链路到gpgpu 4030的其他实例，以创建多gpu集群以提高用于cuda程序的执行时间。在至少一个实施例中，gpgpu 4030包括主机接口4032以实现与主机处理器的连接。在至少一个实施例中，主机接口4032是pcie接口。在至少一个实施例中，主机接口4032可以是厂商专用的通信接口或通信结构。在至少一个实施例中，gpgpu 4030从主机处理器接收命令，并使用全局调度器4034将与那些命令相关联的执行线程分派给一组计算集群4036a-4036h。在至少一个实施例中，计算集群4036a-4036h共享高速缓存存储器4038。在至少一个实施例中，高速缓存存储器4038可以用作计算集群4036a-4036h内的高速缓存存储器的高级高速缓存。
[0387]
在至少一个实施例中，gpgpu 4030包括经由一组存储器控制器4042a-4042b与计算集群4036a-4036h耦合的存储器4044a-4044b。在至少一个实施例中，存储器4044a-4044b可以包括各种类型的存储器设备，包括动态随机存取存储器(dram)或图形随机存取存储器，例如同步图形随机存取存储器(sgram)，包括图形双倍数据速率(gddr)存储器。
[0388]
在至少一个实施例中，计算集群4036a-4036h各自包括一组图形核心，诸如图40a的图形核心4000，其可以包括多种类型的整数和浮点逻辑单元，可以以各种精度执行计算操作，包括适合与cuda程序相关的计算。例如，在至少一个实施例中，每个计算集群4036a-4036h中的浮点单元的至少一个子集可以配置为执行16位或32位浮点运算，而不同的浮点单元的子集可以配置为执行64位浮点运算。
[0389]
在至少一个实施例中，gpgpu 4030的多个实例可以被配置为操作为计算集群。在至少一个实施例中，计算集群4036a-4036h可以实现用于同步和数据交换的任何技术上可行的通信技术。在至少一个实施例中，gpgpu 4030的多个实例通过主机接口4032进行通信。在至少一个实施例中，gpgpu 4030包括i/o集线器4039，其将gpgpu 4030与gpu链路4040耦合，使得能够直接连接至gpgpu 4030的其他的实例。在至少一个实施例中，gpu链路4040耦合到专用gpu到gpu桥接器，其使得能够在gpgpu 4030的多个实例之间进行通信和同步。在至少一个实施例中，gpu链路4040与高速互连耦合，以向其他gpgpu或并行处理器发送和接收数据。在至少一个实施例中，gpgpu 4030的多个实例位于单独的数据处理系统中，并经由可经由主机接口4032访问的网络设备进行通信。在至少一个实施例中，gpu链路4040可被配置为能够连接到主机处理器，附加或替代主机接口4032。在至少一个实施例中，gpgpu 4030
可以配置为执行cuda程序。
[0390]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0391]
图41a示出了根据至少一个实施例的并行处理器4100。在至少一个实施例中，并行处理器4100的各种组件可以使用一个或更多个集成电路设备来实现，例如可编程处理器、专用集成电路(asic)或fpga。
[0392]
在至少一个实施例中，并行处理器4100包括并行处理单元4102。在至少一个实施例中，并行处理单元4102包括i/o单元4104，其使得能够与其他设备进行通信，包括并行处理单元4102的其他实例。在至少一个实施例中，i/o单元4104可以直接连接到其他设备。在至少一个实施例中，i/o单元4104通过使用集线器或交换机接口(例如，存储器集线器1605)与其他设备连接。在至少一个实施例中，存储器集线器1605与i/o单元4104之间的连接形成通信链路。在至少一个实施例中，i/o单元4104与主机接口4106和存储器交叉开关4116连接，其中主机接口4106接收用于执行处理操作的命令，而存储器交叉开关4116接收用于执行存储器操作的命令。
[0393]
在至少一个实施例中，当主机接口4106经由i/o单元4104接收命令缓冲区时，主机接口4106可以引导工作操作以执行那些命令到前端4108。在至少一个实施例中，前端4108与调度器4110耦合，调度器4110配置成将命令或其他工作项分配给处理阵列4112。在至少一个实施例中，调度器4110确保在将任务分配给处理阵列4112中的处理阵列4112之前，处理阵列4112被正确地配置并且处于有效状态。在至少一个实施例中，调度器4110通过在微控制器上执行的固件逻辑来实现。在至少一个实施例中，微控制器实现的调度器4110可配置成以粗粒度和细粒度执行复杂的调度和工作分配操作，从而实现对在处理阵列4112上执行的线程的快速抢占和环境切换。在至少一个实施例中，主机软件可以证明用于通过多个图形处理门铃之一在处理阵列4112上进行调度的工作负载。在至少一个实施例中，工作负载然后可以由包括调度器4110的微控制器内的调度器4110逻辑在处理阵列4112上自动分配。
[0394]
在至少一个实施例中，处理阵列4112可以包括多达“n”个处理集群(例如，集群4114a、集群4114b到集群4114n)。在至少一个实施例中，处理阵列4112的每个集群4114a-4114n可以执行大量并发线程。在至少一个实施例中，调度器4110可以使用各种调度和/或工作分配算法将工作分配给处理阵列4112的集群4114a-4114n，其可以根据每种程序或计算类型产生的工作负载而变化。在至少一个实施例中，调度可以由调度器4110动态地处理，或者可以在配置为由处理阵列4112执行的程序逻辑的编译期间部分地由编译器逻辑来辅助。在至少一个实施例中，可将处理阵列4112的不同的集群4114a-4114n分配用于处理不同类型的程序或用于执行不同类型的计算。
[0395]
在至少一个实施例中，处理阵列4112可以配置成执行各种类型的并行处理操作。在至少一个实施例中，处理阵列4112配置成执行通用并行计算操作。例如，在至少一个实施例中，处理阵列4112可以包括执行处理任务的逻辑，该处理任务包括对视频和/或音频数据的过滤，执行建模操作，包括物理操作以及执行数据转换。
[0396]
在至少一个实施例中，处理阵列4112配置成执行并行图形处理操作。在至少一个实施例中，处理阵列4112可以包括附加逻辑以支持这种图形处理操作的执行，包括但不限于执行纹理操作的纹理采样逻辑，以及镶嵌逻辑和其他顶点处理逻辑。在至少一个实施例中，处理阵列4112可以配置成执行与图形处理有关的着色器程序，例如但不限于顶点着色器、曲面细分着色器、几何着色器和像素着色器。在至少一个实施例中，并行处理单元4102可以经由i/o单元4104从系统存储器传送数据以进行处理。在至少一个实施例中，在处理期间，可以在处理期间将传送的数据存储到片上存储器(例如，并行处理器存储器4122)，然后将其写回到系统存储器。
[0397]
在至少一个实施例中，当并行处理单元4102用于执行图处理时，调度器4110可以配置成将处理工作负载划分为近似相等大小的任务，以更好地将图形处理操作分配给处理阵列4112的多个集群4114a-4114n。在至少一个实施例中，处理阵列4112的部分可以配置成执行不同类型的处理。例如，在至少一个实施例中，第一部分可以配置成执行顶点着色和拓扑生成，第二部分可以配置成执行镶嵌和几何着色，并且第三部分可以配置成执行像素着色或其他屏幕空间操作，以生成用于显示的渲染图像。在至少一个实施例中，可以将由集群4114a-4114n中的一个或更多个产生的中间数据存储在缓冲区中，以允许在集群4114a-4114n之间传输中间数据以进行进一步处理。
[0398]
在至少一个实施例中，处理阵列4112可以经由调度器4110接收要执行的处理任务，该调度器4110从前端4108接收定义处理任务的命令。在至少一个实施例中，处理任务可以包括要被处理的数据的索引，例如可以包括表面(补丁)数据、原始数据、顶点数据和/或像素数据，以及状态参数和定义如何处理数据的命令(例如，要执行什么程序)。在至少一个实施例中，调度器4110可以配置成获取与任务相对应的索引，或者可以从前端4108接收索引。在至少一个实施例中，前端4108可以配置成确保在启动由传入命令缓冲区(例如，批缓冲区(batch-buffer)、推送缓冲区等)指定的工作负载之前，处理阵列4112配置成有效状态。
[0399]
在至少一个实施例中，并行处理单元4102的一个或更多个实例中的每一个可以与并行处理器存储器4122耦合。在至少一个实施例中，可以经由存储器交叉开关4116访问并行处理器存储器4122，所述存储器交叉开关4116可以接收来自处理阵列4112以及i/o单元4104的存储器请求。在至少一个实施例中，存储器交叉开关4116可以经由存储器接口4118访问并行处理器存储器4122。在至少一个实施例中，存储器接口4118可以包括多个分区单元(例如，分区单元4120a、分区单元4120b到分区单元4120n)，其可各自耦合至并行处理器存储器4122的一部分(例如，存储器单元)。在至少一个实施例中，多个分区单元4120a-4120n为配置为等于存储器单元的数量，使得第一分区单元4120a具有对应的第一存储器单元4124a，第二分区单元4120b具有对应的存储器单元4124b，第n分区单元4120n具有对应的第n存储器单元4124n。在至少一个实施例中，分区单元4120a-4120n的数量可以不等于存储器设备的数量。
[0400]
在至少一个实施例中，存储器单元4124a-4124n可以包括各种类型的存储器设备，包括动态随机存取存储器(dram)或图形随机存取存储器，例如同步图形随机存取存储器(sgram)，包括图形双倍数据速率(gddr)存储器。在至少一个实施例中，存储器单元4124a-4124n还可包括3d堆叠存储器，包括但不限于高带宽存储器(hbm)。在至少一个实施例中，可
以跨存储器单元4124a-4124n来存储诸如帧缓冲区或纹理映射的渲染目标，从而允许分区单元4120a-4120n并行地写入每个渲染目标的部分，以有效地使用并行处理器存储器4122的可用带宽。在至少一个实施例中，可以排除并行处理器存储器4122的本地实例，以有利于利用系统存储器与本地高速缓存存储器结合的统一存储器设计。
[0401]
在至少一个实施例中，处理阵列4112的集群4114a-4114n中的任何一个都可以处理将被写入并行处理器存储器4122内的任何存储器单元4124a-4124n中的数据。在至少一个实施例中，存储器交叉开关4116可以配置为将每个集群4114a-4114n的输出传输到任何分区单元4120a-4120n或另一个集群4114a-4114n，集群4114a-4114n可以对输出执行其他处理操作。在至少一个实施例中，每个集群4114a-4114n可以通过存储器交叉开关4116与存储器接口4118通信，以从各种外部存储设备读取或写入各种外部存储设备。在至少一个实施例中，存储器交叉开关4116具有到存储器接口4118的连接以与i/o单元4104通信，以及到并行处理器存储器4122的本地实例的连接，从而使不同处理集群4114a-4114n内的处理单元与系统存储器或不是并行处理单元4102本地的其他存储器进行通信。在至少一个实施例中，存储器交叉开关4116可以使用虚拟通道来分离集群4114a-4114n和分区单元4120a-4120n之间的业务流。
[0402]
在至少一个实施例中，可以在单个插入卡上提供并行处理单元4102的多个实例，或者可以将多个插入卡互连。在至少一个实施例中，并行处理单元4102的不同实例可以配置成相互操作，即使不同实例具有不同数量的处理核心，不同数量的本地并行处理器存储器和/或其他配置差异。例如，在至少一个实施例中，并行处理单元4102的一些实例可以包括相对于其他实例而言更高精度的浮点单元。在至少一个实施例中，结合并行处理单元4102或并行处理器4100的一个或更多个实例的系统可以以各种配置和形式因素来实现，包括但不限于台式机、膝上型计算机或手持式个人计算机、服务器、工作站、游戏机和/或嵌入式系统。
[0403]
图41b示出了根据至少一个实施例的处理集群4194。在至少一个实施例中，处理集群4194被包括在并行处理单元内。在至少一个实施例中，处理集群4194是图41的处理集群4114a-4114n之一的实例。在至少一个实施例中，处理集群4194可以配置成并行执行许多线程，其中术语“线程”是指在特定的一组输入数据上执行的特定程序的实例。在至少一个实施例中，单指令多数据(simd)指令发布技术用于支持大量线程的并行执行而无需提供多个独立的指令单元。在至少一个实施例中，使用单指令多线程(simt)技术来支持并行执行大量一般同步的线程，这使用了公共指令单元，该公共指令单元配置成向每个处理集群4194内的一组处理引擎发出指令。
[0404]
在至少一个实施例中，可以通过将处理任务分配给simt并行处理器的管线管理器4132来控制处理集群4194的操作。在至少一个实施例中，管线管理器4132从图41的调度器4110接收指令，通过图形多处理器4134和/或纹理单元4136管理这些指令的执行。在至少一个实施例中，图形多处理器4134是simt并行处理器的示例性实例。然而，在至少一个实施例中，处理集群4194内可以包括不同架构的各种类型的simt并行处理器。在至少一个实施例中，在处理集群4194内可以包括图形多处理器4134的一个或更多个实例。在至少一个实施例中，图形多处理器4134可以处理数据，并且数据交叉开关4140可以用于将处理后的数据分发到多个可能的目的(包括其他着色器单元)地之一。在至少一个实施例中，管线管理器
4132可以通过指定要经由数据交叉开关4140分配的处理后的数据的目的地来促进处理后的数据的分配。
[0405]
在至少一个实施例中，处理集群4194内的每个图形多处理器4134可以包括相同的一组功能执行逻辑(例如，算术逻辑单元、加载存储单元(lsu)等)。在至少一个实施例中，可以以管线方式配置功能执行逻辑，其中可以在先前的指令完成之前发出新的指令。在至少一个实施例中，功能执行逻辑支持多种运算，包括整数和浮点算术、比较操作、布尔运算、移位和各种代数函数的计算。在至少一个实施例中，可以利用相同的功能单元硬件来执行不同的操作，并且可以存在功能单元的任何组合。
[0406]
在至少一个实施例中，传送到处理集群4194的指令构成线程。在至少一个实施例中，跨一组并行处理引擎执行的一组线程是线程组。在至少一个实施例中，线程组在不同的输入数据上执行程序。在至少一个实施例中，线程组内的每个线程可被分配给图形多处理器4134内的不同处理引擎。在至少一个实施例中，线程组可包括比图形多处理器4134内的多个处理引擎更少的线程。在至少一个实施例中，当线程组包括的线程数少于处理引擎的数量时，一个或更多个处理引擎在正在处理该线程组的循环期间可能是空闲的。在至少一个实施例中，线程组还可以包括比图形多处理器4134内的多个处理引擎更多的线程。在至少一个实施例中，当线程组包括比图形多处理器4134内的处理引擎的数量更多的线程时，可以在连续的时钟周期内执行处理。在至少一个实施例中，可以在图形多处理器4134上同时执行多个线程组。
[0407]
在至少一个实施例中，图形多处理器4134包括内部高速缓存存储器，以执行加载和存储操作。在至少一个实施例中，图形多处理器4134可以放弃内部高速缓存并使用处理集群4194内的高速缓存存储器(例如，l1高速缓存4148)。在至少一个实施例中，每个图形多处理器4134还可以访问分区单元(例如，图41a的分区单元4120a-4120n)内的l2高速缓存，这些分区单元在所有处理集群4194之间共享并且可以用于在线程之间传输数据。在至少一个实施例中，图形多处理器4134还可以访问片外全局存储器，其可以包括本地并行处理器存储器和/或系统存储器中的一个或更多个。在至少一个实施例中，并行处理单元4102外部的任何存储器都可以用作全局存储器。在至少一个实施例中，处理集群4194包括图形多处理器4134的多个实例，它们可以共享可以存储在l1高速缓存4148中的公共指令和数据。
[0408]
在至少一个实施例中，每个处理集群4194可以包括配置成将虚拟地址映射为物理地址的mmu 4145。在至少一个实施例中，mmu 4145的一个或更多个实例可以驻留在图41的存储器接口4118内。在至少一个实施例中，mmu 4145包括一组页表条目(pte)，其用于将虚拟地址映射到图块(谈论有关图块的更多信息)的物理地址以及可选地映射到高速缓存行索引。在至少一个实施例中，mmu 4145可以包括地址转换后备缓冲区(tlb)或可以驻留在图形多处理器4134或l1高速缓存4148或处理集群4194内的高速缓存。在至少一个实施例中，处理物理地址以分配表面数据访问局部性，以便在分区单元之间进行有效的请求交织。在至少一个实施例中，高速缓存行索引可以用于确定对高速缓存线的请求是命中还是未命中。
[0409]
在至少一个实施例中，可以配置处理集群4194，使得每个图形多处理器4134耦合到纹理单元4136，以执行纹理映射操作，例如，可以涉及确定纹理样本位置、读取纹理数据以及过滤纹理数据。在至少一个实施例中，根据需要从内部纹理l1高速缓存(未示出)或从
图形多处理器4134内的l1高速缓存中读取纹理数据，并从l2高速缓存、本地并行处理器存储器或系统存储器中获取纹理数据。在至少一个实施例中，每个图形多处理器4134将处理后的任务输出到数据交叉开关4140，以将处理后的任务提供给另一处理集群4194以进行进一步处理或将处理后的任务存储在l2高速缓存、本地并行处理器存储器、或经由存储器交叉开关4116的系统存储器中。在至少一个实施例中，光栅前操作单元(prerop)4142配置成从图形多处理器4134接收数据，将数据引导至rop单元，该rop单元可以与本文所述的分区单元(例如，图41的分区单元4120a-4120n)一起定位。在至少一个实施例中，prerop 4142单元可以执行用于颜色混合的优化、组织像素颜色数据以及执行地址转换。
[0410]
图41c示出了根据至少一个实施例的图形多处理器4196。在至少一个实施例中，图形多处理器4196是图41b的图形多处理器4134。在至少一个实施例中，图形多处理器4196与处理集群4194的管线管理器4132耦合。在至少一个实施例中，图形多处理器4196具有执行管线，该执行管线包括但不限于指令高速缓存4152、指令单元4154、地址映射单元4156、寄存器文件4158、一个或更多个gpgpu核心4162和一个或更多个lsu 4166。gpgpu核心4162和lsu 4166与高速缓存存储器4172和共享存储器4170通过存储器和高速缓存互连4168耦合。
[0411]
在至少一个实施例中，指令高速缓存4152从管线管理器4132接收要执行的指令流。在至少一个实施例中，将指令高速缓存在指令高速缓存4152中并将其分派以供指令单元4154执行。在一个实施例中，指令单元4154可以分派指令作为线程组(例如，线程束)，将线程组的每个线程分配给gpgpu核心4162内的不同执行单元。在至少一个实施例中，指令可以通过在统一地址空间内指定地址来访问任何本地、共享或全局地址空间。在至少一个实施例中，地址映射单元4156可以用于将统一地址空间中的地址转换成可以由lsu 4166访问的不同的存储器地址。
[0412]
在至少一个实施例中，寄存器文件4158为图形多处理器4196的功能单元提供了一组寄存器。在至少一个实施例中，寄存器文件4158为连接到图形多处理器4196的功能单元(例如，gpgpu核心4162、lsu 4166)的数据路径的操作数提供了临时存储。在至少一个实施例中，在每个功能单元之间划分寄存器文件4158，使得为每个功能单元分配寄存器文件4158的专用部分。在至少一个实施例中，寄存器文件4158在图形多处理器4196正在执行的不同线程组之间划分。
[0413]
在至少一个实施例中，gpgpu核心4162可以各自包括用于执行图多处理器4196的指令的fpu和/或alu。gpgpu核心4162在架构上可以相似或架构可能有所不同。在至少一个实施例中，gpgpu核心4162的第一部分包括单精度fpu和整数alu，而gpgpu核心的第二部分包括双精度fpu。在至少一个实施例中，fpu可以实现用于浮点算法的ieee 754-4108标准或启用可变精度浮点算法。在至少一个实施例中，图形多处理器4196可以另外包括一个或更多个固定功能或特殊功能单元，以执行特定功能，诸如复制矩形或像素混合操作。在至少一个实施例中，gpgpu核心4162中的一个或更多个也可以包括固定或特殊功能逻辑。
[0414]
在至少一个实施例中，gpgpu核心4162包括能够对多组数据执行单个指令的simd逻辑。在至少一个实施例中，gpgpu核心4162可以物理地执行simd4、simd8和simd16指令，并且在逻辑上执行simd1、simd2和simd32指令。在至少一个实施例中，用于gpgpu核心的simd指令可以在编译时由着色器编译器生成，或者在执行针对单程序多数据(spmd)或simt架构编写和编译的程序时自动生成。在至少一个实施例中，可以通过单个simd指令来执行为
simt执行模型配置的程序的多个线程。例如，在至少一个实施例中，可以通过单个simd8逻辑单元并行执行执行相同或相似操作的八个simt线程。
[0415]
在至少一个实施例中，存储器和高速缓存互连4168是将图形多处理器4196的每个功能单元连接到寄存器文件4158和共享存储器4170的互连网络。在至少一个实施例中，存储器和高速缓存互连4168是交叉开关互连，其允许lsu 4166在共享存储器4170和寄存器文件4158之间实现加载和存储操作。在至少一个实施例中，寄存器文件4158可以以与gpgpu核心4162相同的频率操作，从而在gpgpu核心4162和寄存器文件4158之间进行数据传输的延迟非常低。在至少一个实施例中，共享存储器4170可以用于启用在图形多处理器4196内的功能单元上执行的线程之间的通信。在至少一个实施例中，高速缓存存储器4172可以用作例如数据高速缓存，以高速缓存在功能单元和纹理单元4136之间通信的纹理数据。在至少一个实施例中，共享存储器4170也可以用作程序管理的高速缓存。在至少一个实施例中，除了存储在高速缓存存储器4172中的自动高速缓存的数据之外，在gpgpu核心4162上执行的线程还可以以编程方式将数据存储在共享存储器中。
[0416]
在至少一个实施例中，如本文所述的并行处理器或gpgpu通信地耦合到主机/处理器核心，以加速图形操作、机器学习操作、图案分析操作以及各种通用gpu(gpgpu)功能。在至少一个实施例中，gpu可以通过总线或其他互连(例如，诸如pcie或nvlink的高速互连)通信地耦合到主机处理器/核心。在至少一个实施例中，gpu可以与核心集成在相同的封装或芯片上，并通过内部处理器总线/互连(即，封装或芯片的内部)通信地耦合到核心。在至少一个实施例中，不管gpu连接的方式如何，处理器核心可以以wd包含的命令/指令序列的形式向gpu分配工作。在至少一个实施例中，gpu然后使用专用电路/逻辑来有效地处理这些命令/指令。
[0417]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0418]
通用计算
[0419]
以下各图阐述但不限于在通用计算中用来实现至少一个实施例的示例性软件配置。
[0420]
图42示出了根据至少一个实施例的编程平台的软件栈。在至少一个实施例中，编程平台是用于利用计算系统上的硬件来加速计算任务的平台。在至少一个实施例中，软件开发人员可以通过库、编译器指令和/或对编程语言的扩展来访问编程平台。在至少一个实施例中，编程平台可以是但不限于cuda，radeon开放计算平台(“rocm”)，opencl(由khronos group开发的opencl
tm
)，sycl或intel one api。
[0421]
在至少一个实施例中，编程平台的软件栈4200为应用程序4201提供执行环境。在至少一个实施例中，应用程序4201可以包括能够在软件栈4200上启动的任何计算机软件。在至少一个实施例中，应用程序4201可以包括但不限于人工智能(“ai”)/机器学习(“ml”)应用程序，高性能计算(“hpc”)应用程序，虚拟桌面基础架构(“vdi”)或数据中心工作负载。
[0422]
在至少一个实施例中，应用程序4201和软件栈4200在硬件4207上运行。在至少一个实施例中，硬件4207可以包括一个或更多个gpu，cpu，fpga，ai引擎和/或支持编程平台的
其他类型的计算设备。在至少一个实施例中，例如采用cuda，软件栈4200可以是厂商专用的，并且仅与来自特定厂商的设备兼容。在至少一个实施例中，例如在采用opencl中，软件栈4200可以与来自不同供应商的设备一起使用。在至少一个实施例中，硬件4207包括连接到一个或更多个设备的主机，该设备可经由应用程序编程接口(api)调用被访问以执行计算任务。在至少一个实施例中，与硬件4207内的主机相比，其可以包括但不限于cpu(但还可以包括计算设备)及其存储器，硬件4207内的设备可以包括但不限于gpu，fpga，ai引擎或其他计算设备(但还可以包括cpu)及其存储器。
[0423]
在至少一个实施例中，编程平台的软件栈4200包括但不限于多个库4203，运行时(runtime)4205和设备内核驱动器4206。在至少一个实施例中，库4203中的每个库可以包括可以由计算机程序使用并在软件开发期间利用的数据和编程代码。在至少一个实施例中，库4203可以包括但不限于预写的代码和子例程，类，值，类型规范，配置数据，文档，帮助数据和/或消息模板。在至少一个实施例中，库4203包括被优化用于在一种或更多种类型的设备上执行的函数。在至少一个实施例中，库4203可以包括但不限于用于在设备上执行数学、深度学习和/或其他类型的运算的函数。在至少一个实施例中，库4303与对应的api 4302相关联，api 4302可包括一个或更多个api，其暴露在库4303中实现的函数。
[0424]
在至少一个实施例中，将应用程序4201编写为源代码，该源代码被编译成可执行代码，如下面结合图47更详细讨论的。在至少一个实施例中，应用程序4201的可执行代码可以至少部分地在由软件栈4200提供的执行环境上运行。在至少一个实施例中，在应用程序4201的执行期间，可以得到需要在设备(与主机相比)上运行的代码。在这种情况下，在至少一个实施例中，可以调用运行时4205以在设备上加载和启动必需的代码。在至少一个实施例中，运行时4205可以包括能够支持应用程序4201的执行的任何技术上可行的运行时系统。
[0425]
在至少一个实施例中，运行时4205被实现为与对应的api(其被示为api 4204)相关联的一个或更多个运行时库。在至少一个实施例中，一个或更多个这样的运行时库可以包括但不限于用于存储器管理，执行控制，设备管理，错误处理和/或同步等等的函数。在至少一个实施例中，存储器管理函数可以包括但不限于用于分配、解除分配和复制设备存储器以及在主机存储器和设备存储器之间传输数据的函数。在至少一个实施例中，执行控制函数可以包括但不限于在设备上启动函数(当函数是可从主机调用的全局函数时，有时称为“内核”)的函数，和用于在运行时库为要在设备上执行的给定函数维护的缓冲区中设置属性值的函数。
[0426]
在至少一个实施例中，可以任何技术上可行的方式来实现运行时库和相应的api 4204。在至少一个实施例中，一个(或任意数量的)api可以公开用于设备的细粒度控制的低级函数集，而另一(或任意数量的)api可以公开这样的较高级的函数集。在至少一个实施例中，可以在低级api之上构建高级运行时api。在至少一个实施例中，一个或更多个运行时api可以是在与语言无关的运行时api之上分层的特定于语言的api。
[0427]
在至少一个实施例中，设备内核驱动器4206被配置为促进与底层设备的通信。在至少一个实施例中，设备内核驱动器4206可以提供诸如api4204之类的api和/或其他软件所依赖的低级函数。在至少一个实施例中，设备内核驱动器4206可以被配置为在运行时将中间表示(“ir”)代码编译成二进制代码。在至少一个实施例中，对于cuda，设备内核驱动器
4206可以在运行时将非硬件专用的并行线程执行(“ptx”)ir代码编译为用于特定目标设备的二进制代码(高速缓存已编译的二进制代码)，其有时也称为“最终”代码。在至少一个实施例中，这样做可以允许最终代码在目标设备上运行，而当源代码最初被编译为ptx代码时，该目标设备可能不存在。备选地，在至少一个实施例中，设备源代码可以离线地编译成二进制代码，而不需要设备内核驱动器4206在运行时编译ir代码。
[0428]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0429]
图43示出了根据至少一个实施例的图42的软件栈4200的cuda实现。在至少一个实施例中，可在其上启动应用程序4301的cuda软件栈4300包括cuda库4303，cuda运行时4305，cuda驱动器4307和设备内核驱动器4308。在至少一个实施例中，cuda软件栈4300在硬件4309上执行，该硬件4309可以包括支持cuda的gpu，其由加利福尼亚州圣克拉拉市的nvidia公司开发。
[0430]
在至少一个实施例中，应用程序4301、cuda运行时4305和设备内核驱动器4308可以分别执行与应用程序4201、运行时4205和设备内核驱动器4206类似的功能，以上结合图42对其进行了描述。在至少一个实施例中，cuda驱动器4307包括实现cuda驱动器api 4306的库(libcuda.so)。在至少一个实施例中，类似于由cuda运行时库(cudart)实现的cuda运行时api 4304，cuda驱动器api 4306可以公开但不限于用于存储器管理、执行控制、设备管理、错误处理、同步和/或图形互操作性等的函数。在至少一个实施例中，cuda驱动器api 4306与cuda运行时api 4304的不同之处在于，cuda运行时api 4304通过提供隐式初始化、上下文(类似于进程)管理和模块(类似于动态加载的库)管理来简化设备代码管理。与高级cuda运行时api 4304相反，在至少一个实施例中，cuda驱动器api 4306是提供对设备的更细粒度控制的低级api，特别是关于上下文和模块加载。在至少一个实施例中，cuda驱动器api 4306可以公开没有由cuda运行时api 4304公开的用于上下文管理的函数。在至少一个实施例中，cuda驱动器api 4306也与语言无关，并且除了支持cuda运行时api 4304之外，还支持例如opencl。此外，在至少一个实施例中，包括cuda运行时4305在内的开发库可被视为与驱动器组件分离，包括用户模式的cuda驱动器4307和内核模式的设备驱动器4308(有时也称为“显示”驱动器)。
[0431]
在至少一个实施例中，cuda库4303可以包括但不限于数学库，深度学习库，并行算法库和/或信号/图像/视频处理库，并行计算应用程序(例如应用程序4301)可以利用这些库。在至少一个实施例中，cuda库4303可包括数学库，例如cublas库，其是用于执行线性代数运算的基本线性代数子程序(“blas”)的实现；用于计算快速傅立叶变换(“fft”)的cufft库，以及用于生成随机数的curand库等。在至少一个实施例中，cuda库4303可以包括深度学习库，诸如用于深度神经网络的基元的cudnn库和用于高性能深度学习推理的tensorrt平台等等。
[0432]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在
至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0433]
图44示出了根据至少一个实施例的图42的软件栈4200的rocm实现。在至少一个实施例中，可在其上启动应用程序4401的rocm软件栈4400包括语言运行时4403，系统运行时4405，thunk 4407，rocm内核驱动器4408和设备内核驱动器4409。在至少一个实施例中，rocm软件栈4400在硬件4409上执行，硬件4409可以包括支持rocm的gpu，其由加利福尼亚州圣克拉拉市的amd公司开发。
[0434]
在至少一个实施例中，应用程序4401可以执行与以上结合图42讨论的应用程序4201类似的功能。另外，在至少一个实施例中，语言运行时4403和系统运行时4405可以执行与以上结合图42讨论的运行时4205类似的功能。在至少一个实施例中，语言运行时4403和系统运行时4405的不同之处在于，系统运行时4405是实现rocr系统运行时api 4404并利用异构系统架构(“has”)运行时api的语言无关运行时。在至少一个实施例中，has运行时api是一种瘦用户模式api，它公开接口以供访问和与amd gpu交互，包括用于存储器管理、通过架构分派内核的执行控制、错误处理、系统和代理信息以及运行时初始化和关闭等的函数。在至少一个实施例中，与系统运行时4405相比，语言运行时4403是rocr系统运行时api 4404之上分层的特定于语言的运行时api 4402的实现。在至少一个实施例中，语言运行时api可以包括但不限于可移植异构计算接口(“hip”)语言运行时api，异构计算编译器(“hcc”)语言运行时api或opencl api等等。特别是，hip语言是c++编程语言的扩展，具有cuda机制的功能相似版本，并且在至少一个实施例中，hip语言运行时api包括与以上结合图43讨论的cuda运行时api 4304相似的函数，例如用于存储器管理、执行控制、设备管理、错误处理和同步等的函数。
[0435]
在至少一个实施例中，thunk(roct)4407是可用于与底层rocm驱动器4408交互的接口。在至少一个实施例中，rocm驱动器4408是rock驱动器，其是amdgpu驱动器和has内核驱动器(amdkfd)的组合。在至少一个实施例中，amdgpu驱动器是由amd开发的用于gpu的设备内核驱动器，其执行与以上结合图42讨论的设备内核驱动器4206类似的功能。在至少一个实施例中，has内核驱动器是允许不同类型的处理器经由硬件特征更有效地共享系统资源的驱动器。
[0436]
在至少一个实施例中，各种库(未示出)可以被包括在语言运行时4403上方的rocm软件栈4400中，并且提供与以上结合图43讨论的cuda库4303相似的功能。在至少一个实施例中，各种库可以包括但不限于数学、深度学习和/或其他库，例如实现与cuda cublas类似的函数的hipblas库，类似于cuda cufft用于计算fft的rocfft库等。
[0437]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0438]
图45示出了根据至少一个实施例的图42的软件栈4200的opencl实现。在至少一个实施例中，可以在其上启动应用程序4501的opencl软件栈4500包括opencl框架4505，opencl运行时4506和驱动器4507。在至少一个实施例中，opencl软件栈4500在不是特定于供应商的硬件4309上执行。在至少一个实施例中，由于由不同厂商开发的设备支持opencl，因此可能需要特定的opencl驱动器才能与来自此类厂商的硬件进行互操作。
[0439]
在至少一个实施例中，应用程序4501，opencl运行时4506，设备内核驱动器4507和硬件4508可以分别执行与上面结合图42讨论的应用程序4201、运行时4205、设备内核驱动器4206和硬件4207类似的功能。在至少一个实施例中，应用程序4501还包括具有将在设备上执行的代码的opencl内核4502。
[0440]
在至少一个实施例中，opencl定义了一种“平台”，其允许主机控制连接到该主机的设备。在至少一个实施例中，opencl框架提供平台层api和运行时api，示出为平台api 4503和运行时api 4505。在至少一个实施例中，运行时api 4505使用上下文来管理设备上内核的执行。在至少一个实施例中，每个标识的设备可以与各自的上下文相关联，运行时api4505可以使用该上下文来管理该设备的命令队列、程序对象和内核对象、共享存储器对象等。在至少一个实施例中，平台api 4503公开了允许设备上下文用于选择和初始化设备，经由命令队列将工作提交给设备，以及使得能够进行来自和去往设备的数据传输等的函数。另外，在至少一个实施例中，opencl框架提供各种内置函数(未示出)，包括数学函数、关系函数和图像处理函数等。
[0441]
在至少一个实施例中，编译器4504也被包括在opencl框架4505中。在至少一个实施例中，源代码可以在执行应用程序之前被离线编译或者在执行应用程序期间被在线编译。与cuda和rocm相反，至少一个实施例中的opencl应用程序可以由编译器4504在线编译，编译器4504被包括以代表可以用于将源代码和/或ir代码(例如标准可移植中间表示(“spir-v”)代码)编译为二进制代码的任意数量的编译器。可替代地，在至少一个实施例中，可以在执行这样的应用程序之前离线编译opencl应用程序。
[0442]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0443]
图46示出了根据至少一个实施例的由编程平台支持的软件。在至少一个实施例中，编程平台4604被配置为支持应用程序4600可以依赖的各种编程模型4603，中间件和/或库4602以及框架4601。在至少一个实施例中，应用程序4600可以是使用例如深度学习框架(mxnet，pytorch或tensorflow)实现的ai/ml应用，其可以依赖于诸如cudnn，nvidia collective communications library(“nccl”)”和/或nvidia开发人员数据加载库(“dali”)cuda库之类的库，以在底层硬件上提供加速的计算。
[0444]
在至少一个实施例中，编程平台4604可以是以上分别结合图43、图44和图45描述的cuda、rocm或opencl平台之一。在至少一个实施例中，编程平台4604支持多个编程模型4603，其是底层计算系统的抽象，其允许算法和数据结构的表达。在至少一个实施例中，编程模型4603可以暴露底层硬件的特征以便改善性能。在至少一个实施例中，编程模型4603可以包括但不限于cuda，hip，opencl，c++加速大规模并行性(“c++amp”)，开放多处理(“openmp”)，开放加速器(“openacc”)和/或vulcan计算(vulcan compute)。
[0445]
在至少一个实施例中，库和/或中间件4602提供编程模型4604的抽象的实现。在至少一个实施例中，这样的库包括可由计算机程序使用并在软件开发期间利用的数据和编程代码。在至少一个实施例中，除了可以从编程平台4604获得的那些之外，这样的中间件还包括向应用程序提供服务的软件。在至少一个实施例中，库和/或中间件4602可以包括但不限
于cublas、cufft、curand和其他cuda库，或rocblas、rocfft、rocrand和其他rocm库。另外，在至少一个实施例中，库和/或中间件4602可以包括nccl和rocm通信集合库(“rccl”)库，其提供用于gpu的通信例程，用于深度学习加速的miopen库和/或用于线性代数、矩阵和向量运算、几何变换、数值求解器以及相关算法的本征库。
[0446]
在至少一个实施例中，应用程序框架4601依赖于库和/或中间件4602。在至少一个实施例中，每个应用程序框架4601是用于实现应用软件的标准结构的软件框架。在至少一个实施例中，可以使用框架(诸如caffe，caffe2，tensorflow，keras，pytorch或mxnet深度学习框架)来实现ai/ml应用。
[0447]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0448]
图47示出了根据至少一个实施例的编译代码以在图42-45的编程平台之一上执行。在至少一个实施例中，编译器4701接收源代码4700，其包括主机代码以及设备代码两者。在至少一个实施例中，编译器4701被配置为将源代码4700转换为用于在主机上执行的主机可执行代码4702以及用于在设备上执行的设备可执行代码4703。在至少一个实施例中，源代码4700可以在执行应用程序之前离线编译，或者在执行应用程序期间在线编译。
[0449]
在至少一个实施例中，源代码4700可以包括编译器4701支持的任何编程语言的代码，例如c++、c、fortran等。在至少一个实施例中，源代码4700可以包括在单源(single-source)文件中，其具有主机代码和设备代码的混合，并在其中指示了设备代码的位置。在至少一个实施例中，单源文件可以是包括cuda代码的.cu文件或包括hip代码的.hip.cpp文件。备选地，在至少一个实施例中，源代码4700可以包括多个源代码文件，而不是单源文件，在该单源文件中主机代码和设备代码是分开的。
[0450]
在至少一个实施例中，编译器4701被配置为将源代码4700编译成用于在主机上执行的主机可执行代码4702和用于在设备上执行的设备可执行代码4703。在至少一个实施例中，编译器4701执行操作，包括将源代码4700解析为抽象系统树(ast)，执行优化以及生成可执行代码。在源代码4700包括单源文件的至少一个实施例中，编译器4701可以将设备代码与主机代码在这种单源文件中分开，将设备代码和主机代码分别编译成设备可执行代码4703和主机可执行代码4702，以及将设备可执行代码4703和主机可执行代码4702在单个文件中链接到一起，如下面关于图36更详细讨论的。
[0451]
在至少一个实施例中，主机可执行代码4702和设备可执行代码4703可以是任何合适的格式，例如二进制代码和/或ir代码。在cuda的情况下，在至少一个实施例中，主机可执行代码4702可以包括本地对象代码，而设备可执行代码4703可以包括ptx中间表示的代码。在至少一个实施例中，在rocm的情况下，主机可执行代码4702和设备可执行代码4703都可以包括目标二进制代码。
[0452]
在至少一个实施例中，参考所述图，一个或更多个电路、处理器、计算系统或其他设备或技术适于通过将与第一组和基于网络的服务的用户交互相关联的性能度量与和第二组与基于网络的服务的用户交互相关联的性能度量进行比较来识别性能退化的原因。在至少一个实施例中，这由根据本文关于图1-10描述的实施例的所述图的实施例来执行。
[0453]
本公开的至少一个实施例可以根据以下条款进行描述：
[0454]
1.一种处理器，包括：
[0455]
一个或更多个电路，被配置成比较响应于与基于网络的服务的第一组用户交互的所述基于网络的服务的一个或更多个性能度量和响应于与所述基于网络的服务的第二组用户交互的所述基于网络的服务的一个或更多个性能度量。
[0456]
2.如条款1所述的处理器，所述一个或更多个电路被配置为通过至少以下方式确定所述基于网络的服务的性能已经退化：
[0457]
通过至少随机地将所述基于网络的服务的一个或更多个性能度量的时间序列的点重新分配给重采样的时间序列的桶来生成所述重采样的时间序列；以及
[0458]
至少部分地基于所述重采样的时间序列的片段的统计比较来识别所述重采样的时间序列中的转变点。
[0459]
3.如条款1或2所述的处理器，所述一个或更多个电路被配置为将响应于所述第一组用户交互的所述基于网络的服务的所述一个或更多个性能度量的变化率和响应于所述第二组用户交互的所述基于网络的服务的所述一个或更多个性能度量的变化率进行比较。
[0460]
4.如条款1-3中任一项所述的处理器，所述一个或更多个电路被配置为将第一组用户交互的比例与第二组用户交互的比例进行比较。
[0461]
5.如条款1-4中任一项所述的处理器，其中所述第一组用户交互与属性类别中的第一属性相关联，并且所述第二组用户交互与所述属性类别中的第二属性相关联。
[0462]
6.如条款1-5中任一项所述的处理器，所述一个或更多个电路被配置为至少部分地基于通过将所述第一组用户交互的一个或更多个性能度量与所述第二组用户交互的一个或更多个性能度量进行比较而获得的信息的度量，确定与所述第一组用户交互相关联的属性可能是所述基于网络的服务性能退化的原因。
[0463]
7.如条款1-6中任一项所述的处理器，所述一个或更多个电路被配置为至少部分地基于递归地比较用户交互组，其中每个递归级别至少部分地基于与早期递归级别中的属性类别不同的属性类别。
[0464]
8.如条款1-7中任一项所述的处理器，其中用户交互包括与用户相关联的客户端设备对基于网络的服务的利用。
[0465]
9.一种系统，包括：
[0466]
一个或更多个计算设备，包括一个或更多个处理器，用于比较响应于与基于网络的服务的第一组用户交互的所述基于网络的服务的一个或更多个性能度量和响应于与所述基于网络的服务的第二组用户交互的所述基于网络的服务的一个或更多个性能度量。
[0467]
10.如条款9所述的系统，所述一个或更多个处理器用于至少部分地基于通过随机地将所述基于网络的服务的一个或更多个性能度量的时间序列的点重新分配给重采样版本的时间序列的桶来至少识别性能上的退化。
[0468]
11.如条款9或10所述的系统，所述一个或更多个处理器用于将响应于所述第一组用户交互的所述基于网络的服务的所述一个或更多个性能度量的变化率和响应于所述第二组用户交互的所述基于网络的服务的所述一个或更多个性能度量的变化率进行比较。
[0469]
12.如条款9-11中任一项所述的系统，其中响应于所述第一组用户交互的所述基于网络的服务的所述一个或更多个性能度量和响应于所述第二组用户交互的所述基于网
络的服务的所述一个或更多个性能度量的比较包括：与所述第一组用户交互的交互比例和与所述第二组用户交互的交互比例的比较。
[0470]
13.如条款9-12中任一项所述的系统，其中所述第一组用户交互是通过基于与属性类别相关联的属性对用户交互进行划分所生成的。
[0471]
14.如条款9-13中任一项所述的系统，所述一个或更多个处理器用于至少部分地基于通过比较所述第一组用户交互和第二组用户交互的比例变化率和性能度量而获得的信息的度量，确定与所述第一组用户交互相关联的属性可能是所述基于网络的服务性能退化的原因。
[0472]
15.如条款9-14中任一项所述的系统，所述一个或更多个处理器用于递归地比较用户交互组，其中在递归级别中比较的组至少部分地基于为该递归级别选择的属性类别而生成。
[0473]
16.一种机器可读介质，其上存储有一组指令，如果由一个或更多个处理器执行该组指令，则使所述一个或更多个处理器至少：
[0474]
比较响应于与基于网络的服务的第一组用户交互的所述基于网络的服务的一个或更多个性能度量和响应于与所述基于网络的服务的第二组用户交互的所述基于网络的服务的一个或更多个性能度量。
[0475]
17.如条款16所述的机器可读介质，其上存储有一组指令，如果由一个或更多个处理器执行该组指令，则使该一个或更多个处理器至少：
[0476]
将所述基于网络的服务的一个或更多个性能度量的时间序列的点随机重新分配给重采样的时间序列的桶；以及
[0477]
至少部分地基于所述重采样的时间序列的片段的统计比较来识别所述重采样的时间序列中的转变点。
[0478]
18.如条款16或17所述的机器可读介质，其上存储有一组指令，如果由一个或更多个处理器执行该组指令，则使所述一个或更多个处理器至少：将响应于所述第一组用户交互的所述基于网络的服务的所述一个或更多个性能度量的变化率和响应于所述第二组用户交互的所述基于网络的服务的所述一个或更多个性能度量的变化率进行比较。
[0479]
19.如条款16-18中任一项所述的机器可读介质，其上存储有一组指令，如果由一个或更多个处理器执行该组指令，则使所述一个或更多个处理器至少比较所述第一组用户交互的比例与所述第二组用户交互的比例。
[0480]
20.如条款16-19中任一项所述的机器可读介质，其中所述第一组用户交互与属性类别的第一属性相关联，并且所述第二组用户交互与属性类别的第二属性相关联。
[0481]
21.如条款16-20中任一项所述的机器可读介质，其上存储有一组指令，如果由一个或更多个处理器执行该组指令，则使所述一个或更多个处理器至少：至少部分地基于通过将所述第一组用户交互的一个或更多个性能度量与所述第二组用户交互的一个或更多个性能度量进行比较而获得的信息的度量，确定与所述第一组用户交互相关联的属性是所述基于网络的服务性能退化的潜在原因。
[0482]
22.如条款16-21中任一项所述的机器可读介质，其上存储有一组指令，如果由一个或更多个处理器执行该组指令，则使所述一个或更多个处理器至少：至少部分地基于递归地比较用户交互组，其中每个递归级别是至少部分地基于与早期递归级别中的属性类别
不同的属性类别。
[0483]
23.一种系统，包括：
[0484]
一个或更多个计算设备，用于为计算机化玩游戏服务生成输出，其中所述一个或更多个计算设备比较响应于与所述服务的第一组交互的所述服务的一个或更多个性能度量和响应于与所述服务的第二组交互的所述服务的一个或更多个性能度量。
[0485]
24.如条款23所述的系统，所述一个或更多个计算设备用于至少：
[0486]
通过至少将一个或更多个性能度量的时间序列的点随机重新分配给重采样的时间序列的桶来识别性能退化；以及
[0487]
至少部分地基于所述重采样的时间序列的片段的统计比较来识别所述重采样的时间序列中的转变点。
[0488]
25.如条款23或24所述的系统，其中所述比较是至少部分地基于响应于所述第一组交互的所述服务的一个或更多个性能度量的变化率。
[0489]
26.如条款23-25中任一项所述的系统，所述一个或更多个计算设备用于至少将所述第一组交互的比例与所述第二组交互的比例进行比较。
[0490]
27.如条款23-26中的任一项所述的系统，其中所述第一组交互至少部分地基于所述第一组交互中的所有交互共有的属性而被生成。
[0491]
28.如条款23-27中任一项所述的系统，所述一个或更多个计算设备用于至少部分地基于分析与用户交互的分组相关联的统计并且至少部分地基于该分析来计算指示信息增益的值，来至少识别可能是性能退化的原因的一个或更多个属性。
[0492]
其他变型在本公开的精神内。因此，尽管公开的技术易于进行各种修改和替代配置，但是某些示出的其实施例在附图中示出并且已经在上面进行了详细描述。然而，应理解，无意将公开内容限制为所公开的一种或更多种特定形式，而是相反，其意图是涵盖落入如所附权利要求书所定义的本公开内容的精神和范围内的所有修改、替代配置和等同物。
[0493]
除非另有说明或显然与上下文矛盾，否则在描述所公开的实施例的上下文中(特别是在所附权利要求的上下文中)，术语“一”和“一个”和“该”以及类似指代的使用应被解释为涵盖单数和复数，而不是作为术语的定义。除非另有说明，否则术语“包括”、“具有”、“包含”和“含有”应被解释为开放式术语(意味着“包括但不限于”)。术语“连接”(在未经修改时指的是物理连接)应解释为部分或全部包含在内、附接到或连接在一起，即使有某些介入。除非本文另外指出，否则本文中对数值范围的引用仅旨在用作分别指代落入该范围内的每个单独值的简写方法，并且每个单独值都被并入说明书中，就如同其在本文中被单独叙述一样。在至少一个实施例中，除非另外指出或与上下文矛盾，否则术语“集”(例如“项目集”)或“子集”的使用应解释为包括一个或更多个成员的非空集合。此外，除非另外指出或与上下文矛盾，否则术语相应集的“子集”不一定表示对应集的适当子集，而是子集和对应集可以相等。
[0494]
除非以其他方式明确指出或与上下文明显矛盾，否则诸如“a，b和c中的至少一个”或“a，b与c中的至少一个”形式的短语之类的连接语在上下文中理解为通常用来表示项目、条款等，其可以是a或b或c，也可以是a和b和c集的任何非空子集。例如，在具有三个成员的集的说明性示例中，连接短语“a，b和c中的至少一个”和“a，b与c中的至少一个”是指以下任意集：{a}，{b}，{c}，{a，b}，{a，c}，{b，c}，{a，b，c}。因此，这种连接语言通常不旨在暗示某
些实施例要求存在a中的至少一个，b中的至少一个和c中的至少一个。另外，除非另有说明或与上下文矛盾，否则术语“多个”表示复数的状态(例如，“多个项目”表示多个项目)。在至少一个实施例中，多个项目中项目的数量至少为两个，但如果明确指示或通过上下文指示，则可以更多。此外，除非另有说明或从上下文中可以清楚得知，否则短语“基于”是指“至少部分基于”而不是“仅基于”。
[0495]
除非本文另外指出或与上下文明显矛盾，否则本文描述的过程的操作可以任何合适的顺序执行。在至少一个实施例中，诸如本文所述的那些过程(或其变形和/或其组合)之类的过程在配置有可执行指令的一个或更多个计算机系统的控制下执行，并且被实现为代码(例如，可执行指令，一个或更多个计算机程序或一个或更多个应用程序)，该代码通过硬件或其组合在一个或更多个处理器上共同执行。在至少一个实施例中，代码以计算机程序的形式存储在计算机可读存储介质上，在至少一个实施例中，该计算机程序包括可由一个或更多个处理器执行的多个指令。在至少一个实施例中，计算机可读存储介质是非暂时性计算机可读存储介质，其排除了暂时性信号(例如，传播的瞬态电或电磁传输)，但包括非暂时性数据存储电路(例如，缓冲区、高速缓存和队列)。在至少一个实施例中，代码(例如，可执行代码或源代码)被存储在其上存储有可执行指令的一组一个或更多个非暂时性计算机可读存储介质(或用于存储可执行指令的其他存储器)上，该可执行指令在由计算机系统的一个或更多个处理器执行时(即，作为被执行的结果)，使得计算机系统执行本文所述的操作。在至少一个实施例中，一组非暂时性计算机可读存储介质包括多个非暂时性计算机可读存储介质，并且多个非暂时性计算机可读存储介质中的个体非暂时性存储介质中的一个或更多个缺少全部代码，而是多个非暂时性计算机可读存储介质共同存储全部代码。在至少一个实施例中，可执行指令被执行，以使得不同的指令由不同的处理器执行，在至少一个实施例中，非暂时性计算机可读存储介质存储指令，并且主中央处理单元(“cpu”)执行一些指令，而图形处理单元(“gpu”)执行其他指令。在至少一个实施例中，计算机系统的不同组件具有单独的处理器，并且不同的处理器执行指令的不同子集。
[0496]
因此，在至少一个实施例中，计算机系统被配置为实现单独地或共同地执行本文所述的过程的操作的一个或更多个服务，并且这样的计算机系统被配置有使能实施操作的适用的硬件和/或软件。此外，实现本公开的至少一个实施例的计算机系统是单个设备，并且在另一实施例中是分布式计算机系统，其包括以不同方式操作的多个设备，使得分布式计算机系统执行本文所述的操作，并且使得单个设备不执行所有操作。
[0497]
本文提供的任何和所有示例或示例性语言(例如，“诸如”)的使用仅旨在更好地阐明本公开的实施例，并且不对公开的范围构成限制，除非另有要求。说明书中的任何语言都不应被解释为表示任何未要求保护的要素对于实践公开内容是必不可少的。
[0498]
本文引用的所有参考文献，包括出版物、专利申请和专利，均通过引用并入本文，其程度就如同每个参考文献被单独且具体地指示为以引用的方式并入本文并且其全部内容在本文中阐述一样。
[0499]
在说明书和权利要求中，可以使用术语“耦合”和“连接”以及它们的派生词。应当理解，这些术语可能不旨在作为彼此的同义词。相反，在特定的例子中，“连接”或“耦合”可用于指示两个或更多个元件彼此直接或间接物理或电接触。“耦合”也可能意味着两个或更多个元素彼此不直接接触，但仍彼此协作或交互。
[0500]
除非另有明确说明，否则可以理解，在整个说明书中，诸如“处理”、“计算”、“计算”、“确定”等之类的术语，是指计算机或计算系统或类似的电子计算设备的动作和/或过程，其将计算系统的寄存器和/或存储器中表示为物理量(例如电子)的数据处理和/或转换为类似表示为计算系统的存储器、寄存器或其他此类信息存储、传输或显示设备中的物理量的其他数据。
[0501]
以类似的方式，术语“处理器”可以指处理来自寄存器和/或存储器的电子数据并将该电子数据转换成可以存储在寄存器和/或存储器中的其他电子数据的任何设备或存储器的一部分。作为非限制性示例，“处理器”可以是cpu或gpu。“计算平台”可以包括一个或更多个处理器。如本文所使用的，在至少一个实施例中，“软件”进程可以包括随时间执行工作的软件和/或硬件实体，诸如任务、线程和智能代理。同样，每个过程可以指代多个过程，以连续地或间歇地顺序地或并行地执行指令。术语“系统”和“方法”在本文中可以互换使用，只要系统可以体现一种或更多种方法，并且方法可以被认为是系统。
[0502]
在本文件中，可以参考获得、获取、接收或将模拟或数字数据输入子系统、计算机系统或计算机实现的机器中。在至少一个实施例中，可以通过多种方式来完成获得、获取、接收或输入模拟和数字数据的过程，例如通过接收作为函数调用或对应用程序编程接口的调用的参数的数据。在一些实现方式中，可以通过经由串行或并行接口传输数据来完成获得、获取、接收或输入模拟或数字数据的过程。在另一实现方式中，可以通过经由计算机网络将数据从提供实体传输到获取实体来完成获得、获取、接收或输入模拟或数字数据的过程。也可以参考提供、输出、传送、发送或呈现模拟或数字数据。在各种示例中，提供、输出、传送、发送或呈现模拟或数字数据的过程可以通过将数据作为函数调用的输入或输出参数、应用程序编程接口或进程间通信机制的参数进行传输来实现。
[0503]
尽管上面的讨论阐述了所描述的技术的示例实现，但是其他架构可以用于实现所描述的功能，并且旨在落入本公开的范围内。此外，尽管出于讨论的目的在上面定义了具体的职责分配，但是根据情况，可以以不同的方式分配和划分各种功能和职责。
[0504]
此外，尽管已经用特定于结构特征和/或方法动作的语言描述了主题，但是应当理解，所附权利要求书所要求保护的主题不必限于所描述的特定特征或动作。而是，公开了特定的特征和动作作为实现权利要求的示例性形式。