一种基于网络爬虫技术的企业信息资产监管系统技术方案

本发明专利技术公开了一种基于网络爬虫技术的企业信息资产监管系统，涉及网络爬虫技术领域，解决了现有技术中因人工对财务分析的精准度低

【技术实现步骤摘要】
一种基于网络爬虫技术的企业信息资产监管系统


[0001]本专利技术属于企业信息资产领域，涉及网络爬虫技术，具体是一种基于网络爬虫技术的企业信息资产监管系统
。

技术介绍

[0002]企业信息资产中财务信息占据重要地位，它不仅是企业经营管理的基础，也是外部利益相关者了解企业状况的重要依据
。
[0003]财务检查是企业财会部门，依照相关法律法规和制度规定，对全部资产
、
负债
、
所有者权益和损益等会计信息的真实性
、
财务收支业务和相关经济活动的合规性
、
风险性
、
效益性进行监督
、
鉴证与评价，借以揭示错弊，维护经营纪律和秩序，促进经营管理的加强和经济效益的提高
。
[0004]在企业财务管理和分析过程中，需要提取财务的指标进行分析，以辅助企业管理决策，目前财务管理的指标的获取主要还是依赖于分析人员的人工提取，即通过进行一系列复杂繁琐的人工提取计算单元
、
进行手工计算
、
再进行人工比较分析等步骤而形成，这一过程总体来说耗费时间长，需要大量的人力资源来支撑，且大部分工作通过手工计算完成，容易出错，影响计算结果的精准性，且监测效率低，未能及时对财务进行有效管理的问题
。
[0005]因此提出一种基于网络爬虫技术的企业信息资产监管系统
。

技术实现思路

[0006]本申请的目的是提供一种基于网络爬虫技术的企业信息资产监管系统，解决了现有技术中因人工对财务分析的精准度低
、
监测效率低，导致未能及时对财务进行有效管理的问题
。
[0007]为实现上述目的，本申请提供了一种基于网络爬虫技术的企业信息资产监管系统，包括：数据采集模块
、
数据处理模块
、
综合评估模块
、
企业财务监管模块；
[0008]所述数据采集模块用于采集企业财务信息，发送至数据处理模块；
[0009]其中，企业财务信息包括历史数据和实时季度数据，并从历史数据中获取
n
个样本，每个样本包括
m
个财务指标；
[0010]所述数据处理模块用于对采集的财务信息进行处理，对企业财务状况进行评估，并将评估结果发送至综合评估模块；
[0011]所述综合评估模块对企业财务状况进行综合分析；
[0012]所述企业财务监管模块对综合评估模块发送的信号进行处理
。
[0013]进一步地，数据采集模块利用网络爬虫技术对财务信息进行采集，采集过程如下：
[0014]步骤
S1
：发起请求，使用网络爬虫程序向企业系统后端发送
HTTP
请求；其中，给定需要获取的财务信息的
URL
地址或数据接口的参数；
[0015]步骤
S2
：获取响应，接收服务器返回的响应，包含了财务信息的数据；
[0016]步骤
S3
：解析数据，对响应进行解析，提取出所需的财务信息；其中，采用解析
HTML
或解析
JSON
格式的数据；
[0017]步骤
S4
：数据清洗和处理，对获取到的原始数据进行清洗和处理，去除冗余信息
、
修复格式错误等，确保数据的准确性和一致性；
[0018]步骤
S5
：存储数据，将清洗后的财务信息存储到数据库或其他数据存储系统中，以便后续的访问和分析
。
[0019]进一步地，所述数据处理模块用于对采集的财务信息进行处理，处理步骤如下：
[0020]步骤
P1
：分析财务各项指标的权重系数；
[0021]P11
：将获取的历史数据表示为一个
n
行
m
列的矩阵
X
，并对矩阵
X
进行标准化处理，计算公式如下：
[0022]X1
＝
(X
‑
mean(X))/std(X)
[0023]其中，
X1
为标准化后的矩阵，
mean(X)
表示
X
的平均值，
std(X)
表示
X
的标准差；
[0024]P12
：计算标准化后的矩阵
X1
的协方差矩阵
C
；
[0025]P13
：将协方差矩阵
C
转化为相关系数矩阵
R
：
[0026]R
＝
Cij/(std(X1i)*std(X1j))
[0027]其中，
i
表示样本数，
j
表示财务指标数；
Cij
＝
(1/(n
‑
1))
×
∑((X1i
‑
mean(X1i))
×
(X1j
‑
mean(X1j)))
，
mean(X1i)
表示
X1i
的均值，
mean(X1j)
表示
X1j
的均值；
[0028]P14
：对相关系数矩阵
R
进行特征值分解，得到特征值
λ
j
；
[0029]P15
：根据特征值
λ
j
，计算财务各指标的权重系数
wj
；
[0030]wj
＝
λ
j/∑
λ
j
[0031]步骤
P2
：建立指标评估模型
Q
；
[0032]Q
＝
∑Kj
×
wj
[0033]其中，
Kj
表示各财务指标比率，包括营运资本比率
、
税前利润比率
、
本季度销售额比率
、
净资产收益比率以及流动比率
。
[0034]进一步地，根据财务评估模型对企业每季度的财务状况进行一次评估，获取企业财务指标评估值
Q0。
[0035]进一步地，数据采集模块用于实时采集企业所在行业的财务信息，发送至数据处理模块
。
[0036]进一步地，数据处理模块用于处理行业财务信息包括：
[0037]步骤
T1
：行业各指标数据的权重系数
w0j
，同步骤
P1
；
[0038]其中，行业各指标数据由各个企业的指标数据平均获得；
[0039]步骤
T2
：根据步本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种基于网络爬虫技术的企业信息资产监管系统，其特征在于，包括：数据采集模块
、
数据处理模块
、
综合评估模块
、
企业财务监管模块；所述数据采集模块用于采集企业财务信息，发送至数据处理模块；其中，企业财务信息包括历史数据和实时季度数据，并从历史数据中获取
n
个样本，每个样本包括
m
个财务指标；所述数据处理模块用于对采集的财务信息进行处理，对企业财务状况进行评估，并将评估结果发送至综合评估模块；所述综合评估模块对企业财务状况进行综合分析；所述企业财务监管模块对综合评估模块发送的信号进行处理
。2.
如权利要求1所述的一种基于网络爬虫技术的企业信息资产监管系统，其特征在于，数据采集模块利用网络爬虫技术对财务信息进行采集，采集过程如下：步骤
S1
：发起请求，使用网络爬虫程序向企业系统后端发送
HTTP
请求；其中，给定需要获取的财务信息的
URL
地址或数据接口的参数；步骤
S2
：获取响应，接收服务器返回的响应，包含了财务信息的数据；步骤
S3
：解析数据，对响应进行解析，提取出所需的财务信息；其中，采用解析
HTML
或解析
JSON
格式的数据；步骤
S4
：数据清洗和处理，对获取到的原始数据进行清洗和处理，去除冗余信息
、
修复格式错误等，确保数据的准确性和一致性；步骤
S5
：存储数据，将清洗后的财务信息存储到数据库或其他数据存储系统中，以便后续的访问和分析
。3.
如权利要求1所述的一种基于网络爬虫技术的企业信息资产监管系统，其特征在于，所述数据处理模块用于对采集的财务信息进行处理，处理步骤如下：步骤
P1
：分析财务各项指标的权重系数；
P11
：将获取的历史数据表示为一个
n
行
m
列的矩阵
X
，并对矩阵
X
进行标准化处理，计算公式如下：
X1
＝
(X
‑
mean(X))/std(X)
其中，
X1
为标准化后的矩阵，
mean(X)
表示
X
的平均值，
std(X)
表示
X
的标准差；
P12
：计算标准化后的矩阵
X1
的协方差矩阵
C
；
P13
：将协方差矩阵
C
转化为相关系数矩阵
R
：
R
＝
Cij/(std(X1i)*std(X1j))
其中，
i
表示样本数，
j
表示财务指标数；
Cij
＝
(1/(n
‑
1))
×
∑((X1i
‑<...

【专利技术属性】
技术研发人员：陈萌，张多福，后盾，余芳亮，朱阳，薛文婕，黄慧娟，李丽丽，杨金娥，郭全财，邹阔，周晨，杜玲玲，左珊珊，
申请(专利权)人：安徽祥盾信息科技有限公司，
类型：发明
国别省市：