一种任务分解及并行处理方法技术

技术编号:17704657 阅读:54 留言:0更新日期:2018-04-14 17:43
一种任务分解及并行处理方法,本发明专利技术涉及电力系统的数据处理方法;目前常用的单线程的处理机制无法满足客户端高时效、高并发的数据需求。本发明专利技术包括以下步骤:外部系统发起数据请求,对象参数进行解析;区分按单位查询数据和非与单位相关数据;用电信息采集系统统一接口服务平台进一步分析单位层级;匹配预先配置的分解规则;将市级单位进行单位分化;将县级单位转化为多个所级;根据系统当前资源情况分配处理线程数量,执行数据抽取和组织工作;对于分解的外部需求,用电信息采集系统统一接口服务平台告知外部系统生成的文件名称。本技术方案可将一个线程分解为多个处理,合理利用线程池空闲资源,提高信息响应速度。

【技术实现步骤摘要】
一种任务分解及并行处理方法
本专利技术涉及电力系统的数据处理方法,尤其指一种任务分解及并行处理方法。
技术介绍
电力系统的统一接口平台将要承接多个系统的数据发布请求,采集系统数据量不但种类繁多,数据量也十分庞大,因而目前常用的单线程的处理机制无法满足客户端高时效、高并发的数据需求。数据查询处理时间和整合时间多,处理效率低,当查询的数据量过大时,存在大文件读写异常风险,为了解决这些问题,亟需一种任务分解及并行处理方法。
技术实现思路
本专利技术要解决的技术问题和提出的技术任务是对现有技术方案进行完善与改进,提供一种任务分解及并行处理方法,以达到提高处理速度,减少大文件读写异常风险的目的。为此,本专利技术采取以下技术方案。一种任务分解及并行处理方法,外部系统包括配网抢修指挥平台、调度电能量系统、营销业务系统及电能质量在线监测系统,任务分解及并行处理方法的特征在于其包括以下步骤:1)外部系统发起数据请求,用电信息采集系统统一接口服务平台验证通过后,首先对对象参数进行解析;2)用电信息采集系统统一接口服务平台解析外部需求入参,区分按单位查询数据和非与单位相关数据;3)用电信息采集系统统一接口服务本文档来自技高网...
一种任务分解及并行处理方法

【技术保护点】
一种任务分解及并行处理方法,外部系统包括配网抢修指挥平台、调度电能量系统、营销业务系统及电能质量在线监测系统,任务分解及并行处理方法的特征在于其包括以下步骤:1)外部系统发起数据请求,用电信息采集系统统一接口服务平台验证通过后,首先对对象参数进行解析;2)用电信息采集系统统一接口服务平台解析外部需求入参,区分按单位查询数据和非与单位相关数据;3)用电信息采集系统统一接口服务平台进一步分析单位层级,单位层级包括市级、县级、或供电所级;4)用电信息采集系统统一接口服务平台根据单位层级与数据需求、时间要求估算系统需要支出的性能,匹配预先配置的分解规则;对于外部请求的账号,用电信息采集系统统一接口服务...

【技术特征摘要】
1.一种任务分解及并行处理方法,外部系统包括配网抢修指挥平台、调度电能量系统、营销业务系统及电能质量在线监测系统,任务分解及并行处理方法的特征在于其包括以下步骤:1)外部系统发起数据请求,用电信息采集系统统一接口服务平台验证通过后,首先对对象参数进行解析;2)用电信息采集系统统一接口服务平台解析外部需求入参,区分按单位查询数据和非与单位相关数据;3)用电信息采集系统统一接口服务平台进一步分析单位层级,单位层级包括市级、县级、或供电所级;4)用电信息采集系统统一接口服务平台根据单位层级与数据需求、时间要求估算系统需要支出的性能,匹配预先配置的分解规则;对于外部请求的账号,用电信息采集系统统一接口服务平台对每一个账号配置分解规则,若该账号没有配置,则使用通用分解规则;5)如果是市级单位,将市级单位进行单位分化,将市级单位转化为多个县级或所级单位;如果是县级单位,并且可以进行单位分化时,将县级单位转化为多个所级;6)根据系统当前资源情况分配处理线程数量,执行数据查询和组织工作;统一平台为数据发布配置三个线程池:少量数据查询池、小单位查询池、大单位查询池,任务处理时根据各数据请求特点选择合理的线程池执行;7)对于分解的外部需求,用电信息采集系统统一接口服务平台告知外部系统生成的文件名称,外部系统根据文件名称下...

【专利技术属性】
技术研发人员:祝恩国窦建叶方彬王伟峰王朝亮刘颖赵羚严华江
申请(专利权)人:国网浙江省电力公司浙江华云信息科技有限公司国家电网公司
类型:发明
国别省市:浙江,33

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1