1.一种模型评测方法,其特征在于,所述方法包括:
2.根据权利要求1所述的模型评测方法,其特征在于,所述获取目标测评数据集包括:
3.根据权利要求1所述的模型评测方法,其特征在于,所述使用所述线性分类器对所述至少一条文本数据进行评测,得到所述待评测的大模型每一层级的知识记忆和知识理解能力包括:
4.根据权利要求1所述的模型评测方法,其特征在于,所述目标能力包括语义抽象能力时,所述根据所述目标测评数据集对所述待评测的大模型的层级进行评测,得到所述待评测的大模型的目标能力包括:
5.根据权利要求4所述的模型评测方法,其特征在于,所述基于每一层级的所述注意力得到所述待评测的大模型的语义抽象能力包括:
6.根据权利要求5所述的模型评测方法,其特征在于,所述预设注意力模式包括依次从字、词、短语、句子、段落到篇章的形式。
7.根据权利要求4所述的模型评测方法,其特征在于,所述提取所述待评测的大模型的每一层级的注意力模式包括:
8.一种模型评测装置,其特征在于,所述装置包括:
9.一种电子设备,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序;其特征在于,
10.一种可读存储介质,用于存储程序,其特征在于,所述程序被处理器执行时实现如权利要求1至7中任一项所述的方法中的步骤。