【技术实现步骤摘要】
一种查询请求的调度方法、装置及计算机系统
本专利技术涉及大数据分析领域,尤其涉及一种查询请求的调度方法、装置及计算机系统。
技术介绍
随着各类公司大数据平台的不断演进和推广,各类OLAP(联机分析处理)平台不断接入各种业务场景,OLAP底层引擎的查询场景和复杂度不断提升,尝尝出现资源分配不合理,导致资源利用率低。同时,各个查询请求之间也容易互相影响,例如数据量大的查询可能会导致数据量小的查询长时间等待、优先级高的查询会因优先级较低的查询而不得不等待。因此,亟需一种能够对OLAP的资源进行合理调度的技术方案。
技术实现思路
为了解决现有技术的不足,本专利技术的主要目的在于提供一种查询请求的调度方法、装置及计算机系统,以实现对OLAP资源的合理调度。为了达到上述目的,第一方面本专利技术提供了一种查询请求的调度方法,所述方法包括:接收用户的查询请求;解析并确定所述查询请求对应的待查询数据;根据所述待查询数据对应的元数据,确定所述待查询数据对应的待查询数据量;根据所 ...
【技术保护点】
1.一种查询请求的调度方法,其特征在于,所述方法包括:/n接收用户的查询请求;/n解析并确定所述查询请求对应的待查询数据;/n根据所述待查询数据对应的元数据,确定所述待查询数据对应的待查询数据量;/n根据所述待查询数据量对应的预设分配策略将所述待查询数据分配给预设线程,所述预设线程用于获取所述待查询数据以便返回给所述用户。/n
【技术特征摘要】
1.一种查询请求的调度方法,其特征在于,所述方法包括:
接收用户的查询请求;
解析并确定所述查询请求对应的待查询数据;
根据所述待查询数据对应的元数据,确定所述待查询数据对应的待查询数据量;
根据所述待查询数据量对应的预设分配策略将所述待查询数据分配给预设线程,所述预设线程用于获取所述待查询数据以便返回给所述用户。
2.根据权利要求1所述的方法,其特征在于,所述查询请求包括聚合查询,所述方法包括:
根据所述待查询数据对应的元数据,确定所述待查询数据对应的基数;
根据所述基数,确定聚合所述待查询数据所需的内存容量;
确定内存容量不小于所述所需的内存容量的内存块中内存容量最小的内存块为目标内存块,每一内存块具有预设大小的内存容量;
在所述目标内存块中对获取的所述待查询数据进行聚合,将聚合后的所述待查询数据返回给所述用户。
3.根据权利要求1或2所述的方法,其特征在于,所述查询请求包括对应的目标优先级,所述根据所述待查询数据量对应的预设分配策略将所述待查询数据分配给预设线程,所述预设线程用于获取所述待查询数据以便返回给所述用户包括:
根据所述待查询数量对应的预设分配策略,将所述待查询数据分配给所述目标优先级对应的线程池内的第一预设线程,所述第一预设线程用于获取所述待查询数据以便返回给所述用户。
4.根据权利要求3所述的方法,其特征在于,所述方法包括:
当所述目标优先级对应的线程池内的第一预设线程不可用时,将所述待查询数据分配给优先级低于所述目标优先级的线程池内的第二预设线程,所述第二预设线程用于获取所述待查询数据以便返回给所述用户。
5.根据权利要求1或2所述的方法,其特征在于,所述待查询数据预先存储在数据段内,待查询数据量包括所述数据段的数量,所述根据所述待查询数据量对应的预设分配策略将所述待查询数据分配给预设线程,所述预设线程用于获取所述待查询数据以便返回给所述用户包括:
根据所述数据段的数量对应的预设分配策略将所述数据段分配给预设线程,所述预设线程用于从所述数据段获取所述待查询数据以便返回给所述用户。
6.根据权利要求1或2所述的方法,其特征在于,所述查询请求包括待查询SQL语句,所述解析并确定...
【专利技术属性】
技术研发人员:汤国强,孙迁,汪金忠,李成露,范东,
申请(专利权)人:苏宁云计算有限公司,
类型:发明
国别省市:江苏;32
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。