一种网络数据自动采集智能计算系统及方法技术方案

本发明专利技术公开了一种网络数据自动采集智能计算系统，包括用户端和服务器。所述用户端包括输入和输出模块，支持用户输入工作职位的特征，输出智能计算结果和查询结果。所述服务器包括采集、解析、存储、计算、查询等模块，采集模块采用多线程网络爬虫搜索下载招聘网站的相关数据；解析模块运用文档对象模型、选择器、正则表达式等技术解析网页数据，生成多维特征数据集；存储模块提供数据存储管理；计算模块通过建立特征数据分析模型进行智能计算，输出图表；查询模块采用模糊查询搜索本地数据并对结果进行排序优化。本发明专利技术提供了人机对话界面，系统根据用户需求自动采集并输出智能计算结果，可以帮助用户筛选职位信息，洞悉职位需求变化。

【技术实现步骤摘要】

本专利技术属于数据科学与大数据，具体为一种网络数据自动采集智能计算系统及方法。

技术介绍

1、毕业生就业的个性化需求与企业招聘信息如何对接匹配是供需双方急需解决的现实问题。采用传统的上网模式，人们在招聘网站上每次只能浏览某种类型工作职位的相关数据，无法准确判断出某个地区某种类型工作职位的总体情况和变化，如不同薪酬水平、不同学历要求、不同工作年限和不同时期等特征的工作职位数量。

2、网络爬虫和大数据挖掘为解决该问题提供了科学可行的技术手段。网络爬虫程序可以根据用户的个性化需求选择性快速获取招聘网站上的相关工作职位数据。大数据挖掘为海量数据的统计分析提供了很多开源工具和分析模型。创新应用大数据技术不仅可以为人们迅速获取网络招聘信息，而且可以帮助人们准确分析某个地区相关职位的整体需求情况和变化，提高人们获取有价值职位信息的效率。

技术实现思路

1、为了解决上述技术问题，本专利技术提出了一种网络数据自动采集智能计算系统及方法，优势为帮助人们从招聘网站海量数据中快速获取有价值的职位信息，洞悉职位信息的变化，本文档来自技高网...

【技术保护点】

1.一种网络数据自动采集智能计算系统，包括用户端和服务器；所述用户端为WEB程序，使用网页浏览器来访问WEB页面，实现输入模块和输出模块；

2.根据权利要求1所述的一种网络数据自动采集智能计算方法，其特征在于：具体包括如下步骤：

3.根据权利要求2所述的一种网络数据自动采集智能计算方法，其特征在于：所述数据解析方法具体包括如下步骤：

4.根据权利要求2所述的一种网络数据自动采集智能计算方法，其特征在于：所述数据存储方法为：根据工作职位的薪酬水平、学历要求、工作年限、实习经验、工作技能、发布时间六个特征按照不同标准设置多等级得分，采用加权平均法计算每条工...

【技术特征摘要】

1.一种网络数据自动采集智能计算系统，包括用户端和服务器；所述用户端为web程序，使用网页浏览器来访问web页面，实现输入模块和输出模块；

2.根据权利要求1所述的一种网络数据自动采集智能计算方法，其特征在于：具体包括如下步骤：

3.根据权利要求2所述的一种网络数据自动采集智能计算方法，其特征在于：所述数据解析方法具体包括如下步骤：

4.根据权利要求2所述的一种网络数据自动采集智能计算方法，其特征在于：所述数据存储方法为：根据工作职位的薪酬水平、学历要求、工作年限、实习经验、工作技能、发布时间六个特征按照不同标准设置多等级得分，采用加权...

【专利技术属性】
技术研发人员：吴许俊，姜枫，高广银，丁勇，曹红根，
申请(专利权)人：南京理工大学泰州科技学院，
类型：发明
国别省市：