基于资讯数据的预警方法、计算机设备及存储介质技术

技术编号:38395710 阅读:10 留言:0更新日期:2023-08-07 11:10
本申请提供了一种基于资讯数据的预警方法,通过获取资讯数据源并对所述资讯数据源进行整合处理得到目标资讯数据;将所述目标资讯数据输入语义识别模型进行识别,得到所述目标资讯数据中的语义信息;根据所述语义信息对所述目标资讯数据进行标签分类,得到所述目标资讯数据的标签信息;利用所述标签信息以及预设标签告警条件对所述目标资讯数据进行预警,在所述目标资讯数据达到所述预设标签告警条件时,生成告警提示,并将所述告警提示发送至用户终端。本发明专利技术对规范后多源异构的资讯数据源进行标签化处理,设置预设标签告警条件对目标资讯数据进行告警提示,并将告警提示发送给指定用户,解决了资讯数据预警过程准确性低、体验效果差等问题。验效果差等问题。验效果差等问题。

【技术实现步骤摘要】
基于资讯数据的预警方法、计算机设备及存储介质


[0001]本申请涉及数据处理
,尤其涉及一种基于资讯数据的预警方法、计算机设备及计算机可读存储介质。

技术介绍

[0002]金融资讯数据在证券行业有着广泛的应用,但金融资讯数据使用的过程当中也面临着诸多挑战。如果多源异构的金融数据源没有经过整合,每日更新的金融资讯数据内容数量庞大,在缺少系统策略级支持下,仅能通过人工进行每篇阅读,再进行人为经验判定该内容属于哪些标签属性,需要耗费大量的人力进行内容分析判断,工作效率低下且缺乏科学判定标准,很多时候同一属性的文章,由于不同的运营人员进行判定,会出现标签不一致的情况。
[0003]现有券商交易软件中的预警方法没有基于整合后的数据源进行并且预警功能单一,存在及时性及准确性差的问题,导致用户的体验效果较差。

技术实现思路

[0004]本申请提供了一种基于资讯数据的预警方法及系统,以解决现有预警方法准确性低、体验效果差的技术问题。
[0005]第一方面,本申请实施方式提供了一种基于资讯数据的预警方法,所述预警方法包括:
[0006]获取资讯数据源并对所述资讯数据源进行整合处理得到目标资讯数据;
[0007]将所述目标资讯数据输入语义识别模型进行识别,得到所述目标资讯数据中的语义信息;
[0008]根据所述语义信息对所述目标资讯数据进行标签分类,得到所述目标资讯数据的标签信息;
[0009]利用所述标签信息以及预设标签告警条件对所述目标资讯数据进行预警,在所述目标资讯数据达到所述预设标签告警条件时,生成告警提示,并将所述告警提示发送至用户终端。
[0010]进一步地,所述获取资讯数据源并对所述资讯数据源进行整合处理得到目标资讯数据,包括:
[0011]获取资讯数据源,所述资讯数据源包括结构化数据源、非结构化数据源及半结构化数据源;
[0012]将所述结构化数据源、非结构化数据源及半结构化数据源输入元数据库;
[0013]利用ETL数据处理模型中的kettle执行器访问所述元数据库,以对所述资讯数据源进行数据清洗及转换,得到目标资讯数据。
[0014]进一步地,所述元数据库包括数据源配置模块、数据字典模块和数据血缘管理模块。
[0015]进一步地,所述利用ETL数据处理模型中的kettle执行器访问所述元数据库,以对所述资讯数据源进行数据清洗及转换,得到目标资讯数据之前,还包括:
[0016]基于Quartz方法建立集群调度中心模块;
[0017]根据所述集群调度中心模块中的负载均衡机制对多个所述kettle执行器进行打分,得到多个kettle执行器分数信息;
[0018]利用所述集群调度中心模块读取多个所述ETL数据处理模型的定时任务信息,根据所述定时任务信息和所述kettle执行器分数信息生成调度任务以及待使用kettle执行器;
[0019]向所述待使用kettle执行器发送所述调度任务。
[0020]进一步地,所述获取资讯数据源并对所述资讯数据源进行整合处理得到目标资讯数据之后,还包括:
[0021]利用数据校验模型对所述目标资讯数据进行字段校验、记录行校验及三方校验,得到校验信息,根据所述校验信息生成校验不通过推送信息,所述校验信息包括校验不通过数据量信息、通过率信息及异常数据明细信息;
[0022]将所述目标资讯数据存储在数据存储模块,所述数据存储模块包括存储模型设计机制以及数据分层设计机制。
[0023]进一步地,所述根据所述语义信息对所述目标资讯数据进行标签分类,得到所述目标资讯数据的标签信息,包括:
[0024]提取所述语义信息中的至少一个关键词信息,并将所述关键词信息与标签库的标签词匹配,得到相关标签词,所述标签词包括股票、债券、基金、行业、概念、板块或风险事件;
[0025]对所述相关标签词进行排序,并将排序最靠前的所述相关标签词作为所述目标资讯的标签信息。
[0026]进一步地,所述预设告警条件包括股票告警条件、债券告警条件、基金告警条件、行业告警条件、概念告警条件、板块告警条件或风险事件告警条件;所述告警提示包括股票告警提示、债券告警提示、基金告警提示、行业告警提示、概念告警提示、板块告警提示或风险事件告警提示。
[0027]第二方面,本申请还提供了一种基于资讯数据的预警装置,其特征在于,所述基于资讯数据的预警装置包括:
[0028]获取整合模块,用于获取资讯数据源并对所述资讯数据源进行整合处理得到目标资讯数据;
[0029]语义识别模块,用于将所述目标资讯数据输入语义识别模型进行识别,得到所述目标资讯数据中的语义信息;
[0030]标签分类模块,用于根据所述语义信息对所述目标资讯数据进行标签分类,得到所述目标资讯数据的标签信息;
[0031]告警提示模块,用于利用所述标签信息以及预设标签告警条件对所述目标资讯数据进行预警,在所述目标资讯数据达到所述预设标签告警条件时,生成告警提示,并将所述告警提示发送至用户终端。
[0032]进一步地,所述获取整合模块包括:
[0033]数据获取单元,用于获取资讯数据源,所述资讯数据源包括结构化数据源、非结构化数据源及半结构化数据源;将所述结构化数据源、非结构化数据源及半结构化数据源输入元数据库;利用ETL数据处理模型中的kettle执行器访问所述元数据库,以对所述资讯数据源进行数据清洗及转换,得到目标资讯数据。所述元数据库包括数据源配置模块、数据字典模块和数据血缘管理模块。
[0034]集群调度单元,用于基于Quartz方法建立集群调度中心模块;根据所述集群调度中心模块中的负载均衡机制对多个所述kettle执行器进行打分,得到多个kettle执行器分数信息;利用所述集群调度中心模块读取多个所述ETL数据处理模型的定时任务信息,根据所述定时任务信息和所述kettle执行器分数信息生成调度任务以及待使用kettle执行器;向所述待使用kettle执行器发送所述调度任务。
[0035]数据校验单元,用于利用数据校验模型对所述目标资讯数据进行字段校验、记录行校验及三方校验,得到校验信息,根据所述校验信息生成校验不通过推送信息,所述校验信息包括校验不通过数据量信息、通过率信息及异常数据明细信息;将所述目标资讯数据存储在数据存储模块,所述数据存储模块包括存储模型设计机制以及数据分层设计机制。
[0036]进一步地,标签分类模块包括:
[0037]标签匹配单元,用于提取所述语义信息中的至少一个关键词信息,并将所述关键词信息与标签库的标签词匹配,得到相关标签词,所述标签词包括股票、债券、基金、行业、概念、板块或风险事件;对所述相关标签词进行排序,并将排序最靠前的所述相关标签词作为所述目标资讯的标签信息。
[0038]第三方面,本申请还提供了一种计算机设备,所述计算机设备包括存储器和处理器;
[0039]所述存储器,本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种基于资讯数据的预警方法,其特征在于,所述基于资讯数据的预警方法包括:获取资讯数据源并对所述资讯数据源进行整合处理得到目标资讯数据;将所述目标资讯数据输入语义识别模型进行识别,得到所述目标资讯数据中的语义信息;根据所述语义信息对所述目标资讯数据进行标签分类,得到所述目标资讯数据的标签信息;利用所述标签信息以及预设标签告警条件对所述目标资讯数据进行预警,在所述目标资讯数据达到所述预设标签告警条件时,生成告警提示,并将所述告警提示发送至用户终端。2.根据权利要求1所述的基于资讯数据的预警方法,其特征在于,所述获取资讯数据源并对所述资讯数据源进行整合处理得到目标资讯数据,包括:获取资讯数据源,所述资讯数据源包括结构化数据源、非结构化数据源及半结构化数据源;将所述结构化数据源、非结构化数据源及半结构化数据源输入元数据库;利用ETL数据处理模型中的kettle执行器访问所述元数据库,以对所述资讯数据源进行数据清洗及转换,得到目标资讯数据。3.根据权利要求2所述的基于资讯数据的预警方法,其特征在于,所述元数据库包括数据源配置模块、数据字典模块和数据血缘管理模块。4.根据权利要求2所述的基于资讯数据的预警方法,其特征在于,所述利用ETL数据处理模型中的kettle执行器访问所述元数据库,以对所述资讯数据源进行数据清洗及转换,得到目标资讯数据之前,还包括:基于Quartz方法建立集群调度中心模块;根据所述集群调度中心模块中的负载均衡机制对多个所述kettle执行器进行打分,得到多个kettle执行器分数信息;利用所述集群调度中心模块读取多个所述ETL数据处理模型的定时任务信息,根据所述定时任务信息和所述kettle执行器分数信息生成调度任务以及待使用kettle执行器;向所述待使用kettle执行器发送所述调度任务。5.根据权利要求1所述的基于资讯数据的预警方法,其特征在于,所述获取资讯数据源并对所述资讯数据源进行整合处理得到目标资讯数据之后,还包括:利用数据校验模型对所述目标资讯数据进行字段校验、记录行校验及三方校验,得到校验信息,根据所述校验信息生成校验不通过推送信息,所...

【专利技术属性】
技术研发人员:张欢魏甜甜
申请(专利权)人:深圳智通财经信息科技服务有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1