一种过载场景下数据分类查询的优化方法和装置与流程

文档序号:35134109发布日期:2023-08-16 16:27阅读:来源:国知局

技术特征:

1.一种过载场景下数据分类查询的优化方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种过载场景下数据分类查询的优化方法,其特征在于,所述本地存储的训练数据超过设定的阈值具体为:本地存储的训练数据中总文本数量超过设置的总文本数量阈值、正样本数量超过设置的正样本数量阈值以及负样本数量超过设置的负样本数量阈值。

3.根据权利要求1所述的一种过载场景下数据分类查询的优化方法,其特征在于,所述过滤器为线性支持向量机、神经网络分类器或伯努利朴素贝叶斯分类器。

4.一种过载场景下数据分类查询的优化装置,其特征在于,包括一个或多个处理器,用于实现权利要求1-3中任一项所述的过载场景下数据分类查询的优化方法。

5.一种计算机可读存储介质,其上存储有程序,其特征在于,该程序被处理器执行时,用于实现权利要求1-3中任一项所述的过载场景下数据分类查询的优化方法。


技术总结
一种过载场景下数据分类查询的优化方法和装置,通过改进查询流程来优化流数据过载场景的查询结果。本发明提出了一种在线的训练模式,包含一系列概率过滤器,概率过滤器主要基于查询中包含的语义信息来筛选数据(例如文本数据),并使用了参数搜索的方式来获取过滤器的最佳配置,同时用函数拟合的方法来控制查询的延迟。本发明着重于处理流数据场景下包含数据分类任务的查询,并致力于解决发生流数据过载场景时的查询优化问题。本发明较于基于离线场景下的查询优化工作,对查询时间不做限制,在尝试在流数据过载的场景下,给定查询的时间限制,对此类查询进行优化,取得了不错的优化效果。

技术研发人员:叶飞,杨智慧,沈筠霏,何震瀛,荆一楠,张凯,王晓阳
受保护的技术使用者:之江实验室
技术研发日:
技术公布日:2024/1/14
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1