一种数据处理方法、装置、设备及可读存储介质制造方法及图纸

技术编号:17939746 阅读:28 留言:0更新日期:2018-05-15 20:08
本发明专利技术公开了一种数据处理方法,该方法包括以下步骤:接收用户发送的携带目标职业的查询请求,通过预设网络爬虫,获取与目标职业对应的数据信息,将数据信息转化为图像信息,并将图像信息发送给用户。在接收到用户发送的携带目标职业的查询请求之后,可以通过预设网络爬虫实时获取与目标职业对应的最新数据信息,将该数据信息转化给图像信息之后,将图像信息发送给用户,以便用户全面且直观地了解目标职业,可提升用户体验。本发明专利技术还公开了一种数据处理装置、设备及存储介质,具有上述技术效果,在此不再赘述。

Data processing method, device, device and readable storage medium

The present invention discloses a data processing method, which includes the following steps: receiving the query request of the target occupation sent by the user, obtaining the data information corresponding to the target profession by presupposition network crawler, transforming the data information into image information, and sending the image information to the user. After receiving the query request of the target occupations sent by the user, the latest data information corresponding to the target profession can be obtained by presupposition network crawler, and then the data is transformed to the image information, and the image information is sent to the user so that the user can understand the target career fully and intuitively. User experience. The invention also discloses a data processing device, a device and a storage medium, and has the technical effect.

【技术实现步骤摘要】
一种数据处理方法、装置、设备及可读存储介质
本专利技术涉及信息处理
,特别是涉及一种数据处理方法、装置、设备及可读存储介质。
技术介绍
随着就业形势的越发严峻,很多即将步入职场的人都开始在进入职场前期做大量的职业信息收集工作,以便制定自己的职业规划,落实自身就业问题等。根据不完全统计,在国内只有4.3%的大学生有自己明确的职业规划,另外有87.4%的大学生认为目前的职业信息获取渠道所提供的职业信息帮助有限。可见当代大学生对获取良好的职业信息,有迫切的需要。现有的,职业分析软件大多以总结大量从业者的职业信息,并进行整理后对外提供查询服务的模式。如此便可能存在数据来源单一,缺乏总体职业行情分析,职业数据不够与时俱进,向用户展示的信息单一等问题。综上所述,如何有效地解决为用户提供全面可靠的职业信息等问题,是目前本领域技术人员急需解决的技术问题。
技术实现思路
本专利技术的目的是提供一种数据处理方法、装置、设备及存储介质,为用户通过全面可靠的职业信息。为解决上述技术问题,本专利技术提供如下技术方案:一种数据处理方法,包括:接收用户发送的携带目标职业的查询请求;通过预设网络爬虫,获取与所述目标职业对应的数据信息;将所述数据信息转化为图像信息,并将所述图像信息发送给所述用户。优选地,所述通过预设网络爬虫,获取与所述目标职业对应的数据信息,包括:通过预设网络爬虫获取目标网站中与所述查询请求对应的起始URL;通过xpath技术,根据所述起始URL确定与所述查询请求匹配的URL集合;爬取所述URL集合中的每个URL中原始数据,并将所述原始数据确定为与所述查询请求对应的数据信息。优选地,在所述将所述原始数据确定为与所述查询请求对应的数据信息之后,在将所述数据信息转化为图像信息之前,还包括:将所述数据信息按照预设存储格式存入目标数据表。优选地,所述将所述数据信息转化为图像信息,包括:通过预设可视化程序,将所述目标数据表中的数据信息转化为图像信息;其中,所述图像信息包括条形图、折线图、扇形图以及频率分布图中的至少一种。一种数据处理装置,包括:查询请求接收模块,用于接收用户发送的携带目标职业的查询请求;数据信息获取模块,用于通过预设网络爬虫,获取与所述目标职业对应的数据信息;图像信息发送模块,用于将所述数据信息转化为图像信息,并将所述图像信息发送给所述用户。优选地,数据信息获取模块,包括:起始URL获取单元,用于通过预设网络爬虫获取目标网站中与所述查询请求对应的起始URL;URL集合确定单元,用于通过xpath技术,根据所述起始URL确定与所述查询请求匹配的URL集合;数据信息确定单元,用于爬取所述URL集合中的每个URL中原始数据,并将所述原始数据确定为与所述查询请求对应的数据信息。优选地,还包括:存储模块,用于在所述将所述原始数据确定为与所述查询请求对应的数据信息之后,在将所述数据信息转化为图像信息之前,将所述数据信息按照预设存储格式存入目标数据表。优选地,所述图像信息发送模块为通过预设可视化程序,将所述目标数据表中的数据信息转化为图像信息的模块;其中,所述图像信息包括条形图、折线图、扇形图以及频率分布图中的至少一种。一种数据处理设备,包括:存储器,用于存储计算机程序;处理器,用于执行所述计算机程序时实现上述数据处理方法的步骤。一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述数据处理方法的步骤。应用本专利技术实施例所提供的方法,接收用户发送的携带目标职业的查询请求,通过预设网络爬虫,获取与目标职业对应的数据信息,将数据信息转化为图像信息,并将图像信息发送给用户。在接收到用户发送的携带目标职业的查询请求之后,可以通过预设网络爬虫实时获取与目标职业对应的最新数据信息,将该数据信息转化给图像信息之后,将图像信息发送给用户,以便用户全面且直观地了解目标职业,可提升用户体验。本专利技术还提供了一种数据处理装置、设备及存储介质,具有上述技术效果,在此不再赘述。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。图1为本专利技术实施例中一种数据处理方法的实施流程图;图2为本专利技术实施例中一种数据处理装置的结构示意图;图3为本专利技术实施例中一种数据处理设备的结构示意图。具体实施方式本专利技术的核心是提供一种数据处理方法,该方法包括:接收用户发送的携带目标职业的查询请求,通过预设网络爬虫,获取与目标职业对应的数据信息,将数据信息转化为图像信息,并将图像信息发送给用户。在接收到用户发送的携带目标职业的查询请求之后,可以通过预设网络爬虫实时获取与目标职业对应的最新数据信息,将该数据信息转化给图像信息之后,将图像信息发送给用户,以便用户全面且直观地了解目标职业,可提升用户体验。本专利技术另外一个核心是提供一种数据处理装置、设备及存储介质,具有上述技术效果,在此不再赘述。需要说明的是,在本专利技术中,数据信息的来源可以为多个。例如,可以各个与职业相关的网站,如招聘网站获取职业数据,可以避免因数据来源单一,导致职业信息不够准确,全面的问题。另外,在本实施例中,在用户请求查询目标职业时,可以实时进行查询,而不是利用预先编辑的数据资料,可以使得查询的结果与实际情况紧密结合。当然,在本实施例中,也可以通过定时更新查询结果的方式为用户通过职业查询服务。为了使本
的人员更好地理解本专利技术方案,下面结合附图和具体实施方式对本专利技术作进一步的详细说明。显然,所描述的实施例仅仅是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本专利技术保护的范围。请参考图1,图1为本专利技术实施例中一种数据处理方法的流程图,该方法包括以下步骤:S101、接收用户发送的携带目标职业的查询请求。接收到用户发送的携带目标职业的查询请求。具体的,可以用户在通过图形化界面输入包括目标职业的信息的时,视为接收到用户请求查询目标职业。S102、通过预设网络爬虫,获取与目标职业对应的数据信息。在本实施例中,可以预先设置网络爬虫。其中,网络爬虫为自动提取网页的程序,具体程序可以参照常见的网络爬虫程序,对此,本专利技术实施例不再赘述。在本实施例中,可以通过预先设置的网络爬虫来获取与目标职业对应的数据消息。也就说是,在接收到用户的查询目标职业的查询请求之后,首先预设网络爬虫获取与该目标职业对应的数据信息,因而该数据信息更加符合实际情况。在本专利技术的一个实施例中,步骤S102可以包括以下步骤:步骤一、通过预设网络爬虫获取目标网站中与查询请求对应的起始URL;步骤二、通过xpath技术,根据起始URL确定与查询请求匹配的URL集合;步骤三、爬取URL集合中的每个URL中原始数据,并将原始数据确定为与查询请求对应的数据信息。为便于描述,下面将上述步骤结合起来进行说明。在本实施例中,可以预先设置网络爬虫,通过预设网络爬虫获取目标网站中与查询请求对应的起始URL(UniformResourceLoca本文档来自技高网
...
一种数据处理方法、装置、设备及可读存储介质

【技术保护点】
一种数据处理方法,其特征在于,包括:接收用户发送的携带目标职业的查询请求;通过预设网络爬虫,获取与所述目标职业对应的数据信息;将所述数据信息转化为图像信息,并将所述图像信息发送给所述用户。

【技术特征摘要】
1.一种数据处理方法,其特征在于,包括:接收用户发送的携带目标职业的查询请求;通过预设网络爬虫,获取与所述目标职业对应的数据信息;将所述数据信息转化为图像信息,并将所述图像信息发送给所述用户。2.根据权利要求1所述的数据处理方法,其特征在于,所述通过预设网络爬虫,获取与所述目标职业对应的数据信息,包括:通过预设网络爬虫获取目标网站中与所述查询请求对应的起始URL;通过xpath技术,根据所述起始URL确定与所述查询请求匹配的URL集合;爬取所述URL集合中的每个URL中原始数据,并将所述原始数据确定为与所述查询请求对应的数据信息。3.根据权利要求2所述的数据处理方法,其特征在于,在所述将所述原始数据确定为与所述查询请求对应的数据信息之后,在将所述数据信息转化为图像信息之前,还包括:将所述数据信息按照预设存储格式存入目标数据表。4.根据权利要求3所述的数据处理方法,其特征在于,所述将所述数据信息转化为图像信息,包括:通过预设可视化程序,将所述目标数据表中的数据信息转化为图像信息;其中,所述图像信息包括条形图、折线图、扇形图以及频率分布图中的至少一种。5.一种数据处理装置,其特征在于,包括:查询请求接收模块,用于接收用户发送的携带目标职业的查询请求;数据信息获取模块,用于通过预设网络爬虫,获取与所述目标职业对应的数据信息;图像信息发送模块,用于将所述数据...

【专利技术属性】
技术研发人员:李志张俊沈云辉张锋关毅江
申请(专利权)人:广东工业大学
类型:发明
国别省市:广东,44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1