本发明属于信息处理,具体涉及一种涉及解决投资决策的saas投研系统。
背景技术:
1、金融投研的分析需要对行业内的各种资讯进行总结和筛选,提取其中的关键信息以供分析判断使用,而现有的信息时代,海量数据分散在互联网及移动互联网各处,比如不同的消费平台(如电商平台,新零售平台,外卖平台等)中数据存在繁杂异构,非结构化,不易整理统计的特点,因此数据真实价值得不到有效挖掘,无法对各行业数据进行准确的趋势预测。
技术实现思路
1、本发明的目的是提供一种涉及解决投资决策的saas投研系统,用以解决现有技术中存在的上述问题。
2、为了实现上述目的,本发明采用以下技术方案:
3、本发明提供了一种涉及解决投资决策的saas投研系统,包括:
4、整合加工模块,用于使用数据仓库技术对商品数据采集平台中的第一商品数据进行整合加工,所述第一商品数据至少包括商品销量、商品销售额和商品均价,所述整合加工为对第一商品数据进行数据清洗以及对第一商品数据构建商品信息特征;
5、数据建模模块,用于使用预设回归模型,以及与预设回归模型相关联的相关性分析方法,对整合加工后的所述第一商品数据进行数据建模,以得到训练好的数据模型,并基于所述数据模型对商品销量、商品销售额和商品均价中的一种或多种进行预测;
6、构建模块,用于使用不同的分类体系定义各商品平台上的商品数据,并通过自然语言处理技术,对定义的商品数据构建出实体与实体之间的映射关系,并根据所述实体与实体之间的映射关系,建立不同商品平台的行业分类之间的映射关系;
7、处理模块,用于基于所述不同商品平台的行业分类之间的映射关系,对各商品平台中的商品数据进行标准化处理,以符合预设行业分类标准;
8、在线分析模块,用于基于进行标准化处理后的商品数据以及所述数据模型,通过saas系统进行数据的在线分析和呈现。
9、一些实施例中,使用预设回归模型,以及与预设回归模型相关联的相关性分析方法,对整合加工后的所述第一商品数据进行数据建模,以得到训练好的数据模型,并基于所述数据模型对商品销量、商品销售额和商品均价中的一种或多种进行预测,包括:
10、将整合加工后的所述第一商品数据分为训练集和测试集,使用训练集对预设回归模型进行训练,所述预设回归模型至少包括线性回归模型;
11、根据训练集中数据的商品信息特征和目标变量之间的关联关系调整预设回归模型中的参数,找到最佳的拟合,以得到训练好的数据模型,并基于所述数据模型对商品销量、商品销售额和商品均价中的一种或多种进行预测。
12、一些实施例中,使用所述测试集对训练好的数据模型进行评估,根据评估结果对训练好的数据模型进行超参数、商品信息特征增加和/或商品信息特征减少的优化调整,以得到优化后的数据模型,其中,评估的指标至少包括均方误差和均方根误差。
13、一些实施例中,根据优化后的数据模型对商品销量、商品销售额和商品均价中的一种或多种进行预测。
14、一些实施例中,通过网络爬虫技术从各商品平台网页或开放型api获取第一商品数据,并将所述第一商品数据存储在数据采集平台中。
15、一些实施例中,通过自然语言处理技术,对各商品平台中的商品数据构建出实体与实体之间的映射关系之前,还包括:
16、梳理各商品平台的行业分类体系,所述行业分类体系包括各级分类和子分类,并基于所述行业分类体系,采集各商品平台的商品数据,所述商品数据至少包括商品标题信息数据、商品描述信息数据和商品属性信息数据。
17、一些实施例中,通过saas系统可配置的将新增数据增加到可视化产品页面。
18、有益效果:
19、1.数据建模:实时的数据、精准的建模预测、高效的可视化呈现,帮助客户直观判断行业、赛道、公司趋势。
20、2.跨平台行业融合:不同的消费平台(如电商平台,新零售平台,外卖平台等)使用不同的分类体系定义平台上的商品,打通所有国家、所有平台、以及所有形态的消费商品数据,让客户以统一视角分析行业品类,支持多情景多视角分析。
21、3.智能化数据产品展示:采用低代码前端架构,能够高效、可配置的将数据以多种维度展示给客户。
1.一种涉及解决投资决策的saas投研系统,其特征在于,包括:
2.根据权利要求1所述的系统,其特征在于,使用预设回归模型,以及与预设回归模型相关联的相关性分析方法,对整合加工后的所述第一商品数据进行数据建模,以得到训练好的数据模型,并基于所述数据模型对商品销量、商品销售额和商品均价中的一种或多种进行预测,包括:
3.根据权利要求2所述的系统,其特征在于,还包括:
4.根据权利要求3所述的系统,其特征在于,根据优化后的数据模型对商品销量、商品销售额和商品均价中的一种或多种进行预测。
5.根据权利要求1所述的系统,其特征在于,通过网络爬虫技术从各商品平台网页或开放型api获取第一商品数据,并将所述第一商品数据存储在数据采集平台中。
6.根据权利要求1所述的系统,其特征在于,通过自然语言处理技术,对各商品平台中的商品数据构建出实体与实体之间的映射关系之前,还包括:
7.根据权利要求1所述的系统,其特征在于,通过saas系统可配置的将新增数据增加到可视化产品页面。