【技术实现步骤摘要】
本专利技术涉及数字化转型领域，尤其涉及一种基于知识图谱的智能评分方法及系统。
技术介绍
1、银行业在数字化转型过程中，人工智能技术的应用逐渐成为银行业的关键驱动力，在银行业的应用场景非常广泛，包括智能助手、智能风控、智能信贷审批等。财务报表、年报等是企业经营活动的重要记录，包含了大量的财务数据和业务信息，准确、快速地处理和分析同业和客户企业财报对于银行管理决策具有重要意义。而财报助手作为银行数字化转型中一重要代表，目前已成为银行从业者进行同业财报数据分析、撰写专业研究报告等工作中不可或缺的一部分。
2、但由于财务报表、报告等包含了大量的财务数据和业务指标等信息，面对用户的相关查询内容，财报助手的回复质量参差不齐，用户侧往往难以判断其可靠性和准确性，需要用户侧先反馈，产品运营侧与测试侧人工进行复检记录、分析与评价，进而提出优化方案，反馈链路长且耗时。为财报助手的回复效果能得到快速、准确、可靠的反馈与优化，进而有效地提升财报助手的服务质量，为用户提供更好的体验。
3、现阶段针对财报助手在内的智能助手的回复的评分方法与系统主要有：
4、1.基于用户反馈与专业业务员人工复检、人工设计和定义的规则对智能助手的回复进行评价的方法。
5、2.基于关键词匹配和机器学习算法的智能助手评分系统。这类系统主要通过分析用户的查询内容和智能助手的回复，计算两者之间的相似度，从而给出一个评分。
6、1.基于用户反馈与专业业务员人工复检、人工设计和定义的规则对智能助手的回复进行评价的方法的缺点如下：
7、(1)依赖于人工复检和设计规则，运营或测试人员对判断标准、规则的定义方式等都可能存在人为主观的理解偏差进而导致评价结果的偏差；并且随着智能财报助手的使用场景和用户需求的变化，需要对规则进行不断的更新和优化，导致规则更新的速度较慢。
8、(2)成本较高且较为耗时：由于需要大量的人力和时间投入，这种评测方式的成本相对较高。这可能导致智能财报助手在推广和应用时，需要承担较大的成本压力。
9、2.基于关键词匹配和机器学习算法的智能助手评分系统的缺点：
10、(1)这类系统仅从相关性维度进行打分，评分指标维度过于单一，导致评分可信度不足。
11、(2)这类系统在一定程度上可以实现两者相关性的判定，但很难捕捉到文本彼此间的深层次含义，并且关键词匹配容易受到语义歧义的影响。
技术实现思路
1、鉴于上述问题，提出了本专利技术以便提供克服上述问题或者至少部分地解决上述问题的一种基于知识图谱的智能评分方法及系统。
2、根据本专利技术的一个方面，提供了一种基于知识图谱的智能评分方法，所述评分方法包括：
3、步骤s1：获取用户查询的问题的相关回答内容；
4、步骤s2：对用户查询问题进行匹配与查询，得到相关指标查询结果；
5、步骤s3：初始化评分思维链提示词；
6、步骤s4：基于步骤s1的用户查询问题、财报助手的回答内容，步骤s2中得到的知识图谱相关指标查询结果，传入步骤s3中的评分思维链提示词；
7、步骤s5：通过大语言模型api接口模块对评分思维链提示词的内容，利用大模型文本深度语义理解分析能力，运算得到综合评分结果。
8、可选的，所述步骤s1：获取用户查询的问题的相关回答内容具体包括：用户查询的问题通过财报助手得到相关回答内容。
9、可选的，所述对用户查询问题进行匹配与查询，得到相关指标查询结果具体包括：
10、采用知识图谱对用户查询问题进行匹配与查询，得到相关指标查询结果。
11、可选的，所述步骤s3：初始化评分思维链提示词具体包括：
12、重要特征包括评价回答内容的数据准确性、内容相关性、流畅性、银行领域专业性四个维度的多维度评分指标。
13、可选的，所述步骤s4中的传入步骤s3中的评分思维链提示词的重要特征包含用户查询问题、知识图谱的指标查询结果、财报助手的回答内容。
14、可选的，所述综合评分结果的重要特征包含0～100之间的综合分数、评分理由。
15、可选的，所述评分方法还包括：
16、步骤s6：将步骤s5的综合评分结果快速反馈到运营、测试人员，进而对财报助手进行相关效果优化。
17、本专利技术还提供了一种基于知识图谱的智能评分系统，应用上述所述的一种基于知识图谱的智能评分方法，所述评分系统包括：
18、相关回答内容获取模块，用于获取用户查询的问题的相关回答内容；
19、知识图谱模块，用于对用户查询问题进行匹配与查询，得到相关指标查询结果；
20、初始化评分思维链提示词模块，用于初始化评分思维链提示词；
21、大语言模型api接口模块，用于基于步骤s1的用户查询问题、财报助手的回答内容，步骤s2中得到的知识图谱相关指标查询结果，传入步骤s3中的评分思维链提示词；
22、综合评分模块，用于通过大语言模型api接口模块对评分思维链提示词的内容，利用大模型文本深度语义理解分析能力，运算得到综合评分结果。
23、本专利技术提供的一种基于知识图谱的智能评分方法及系统，所述评分方法包括：步骤s1：获取用户查询的问题的相关回答内容；步骤s2：对用户查询问题进行匹配与查询，得到相关指标查询结果；步骤s3：初始化评分思维链提示词；步骤s4：基于步骤s1的用户查询问题、财报助手的回答内容，步骤s2中得到的知识图谱相关指标查询结果，传入步骤s3中的评分思维链提示词；步骤s5：通过大语言模型api接口模块对评分思维链提示词的内容，利用大模型文本深度语义理解分析能力，运算得到综合评分结果。本专利技术既能吸取知识图谱擅长精准查询的特性、大模型对文本间深度语义理解分析的优点，又能实现端到端的多维度智能化评测，使得评分可信度更高，对智能助手回复的优化决策支持更高效，降低了人力和时间成本。
24、上述说明仅是本专利技术技术方案的概述，为了能够更清楚了解本专利技术的技术手段，而可依照说明书的内容予以实施，并且为了让本专利技术的上述和其它目的、特征和优点能够更明显易懂，以下特举本专利技术的具体实施方式。
本文档来自技高网...【技术保护点】
1.一种基于知识图谱的智能评分方法，其特征在于，所述评分方法包括：
2.根据权利要求1所述的一种基于知识图谱的智能评分方法，其特征在于，所述步骤S1：获取用户查询的问题的相关回答内容具体包括：用户查询的问题通过财报助手得到相关回答内容。
3.根据权利要求1所述的一种基于知识图谱的智能评分方法，其特征在于，所述对用户查询问题进行匹配与查询，得到相关指标查询结果具体包括：
4.根据权利要求1所述的一种基于知识图谱的智能评分方法，其特征在于，所述步骤S3：初始化评分思维链提示词具体包括：
5.根据权利要求1所述的一种基于知识图谱的智能评分方法，其特征在于，所述步骤S4中的传入步骤S3中的评分思维链提示词的重要特征包含用户查询问题、知识图谱的指标查询结果、财报助手的回答内容。
6.根据权利要求1所述的一种基于知识图谱的智能评分方法，其特征在于，所述综合评分结果的重要特征包含0～100之间的综合分数、评分理由。
7.根据权利要求1所述的一种基于知识图谱的智能评分方法，其特征在于，所述评分方法还包括：
8.一
...【技术特征摘要】
1.一种基于知识图谱的智能评分方法，其特征在于，所述评分方法包括：
2.根据权利要求1所述的一种基于知识图谱的智能评分方法，其特征在于，所述步骤s1：获取用户查询的问题的相关回答内容具体包括：用户查询的问题通过财报助手得到相关回答内容。
3.根据权利要求1所述的一种基于知识图谱的智能评分方法，其特征在于，所述对用户查询问题进行匹配与查询，得到相关指标查询结果具体包括：
4.根据权利要求1所述的一种基于知识图谱的智能评分方法，其特征在于，所述步骤s3：初始化评分思维链提示词具体包括：
5.根据权利要求1所述的一...
【专利技术属性】
技术研发人员：徐英杰，刘小成，
申请(专利权)人：北银金融科技有限责任公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。