日志的处理方法、装置以及系统制造方法及图纸

技术编号:32356669 阅读:19 留言:0更新日期:2022-02-20 03:17
本申请公开了一种日志的处理方法、装置以及系统。其中,该方法包括:接收日志获取任务,其中,日志获取任务用于指示从第一内容分发服务平台获取用户日志,用户日志用于记录目标平台的用户对内容分发服务的使用记录;从原始日志获取目标平台的用户对内容分发服务的使用记录,其中,原始日志记录有各平台的用户对内容分发服务的使用记录;按照目标平台的要求,对从原始日志中获取的使用记录进行转换,得到用户日志。本申请解决了相关技术中获得日志的操作较为繁琐的技术问题。操作较为繁琐的技术问题。操作较为繁琐的技术问题。

【技术实现步骤摘要】
日志的处理方法、装置以及系统


[0001]本申请涉及互联网领域,具体而言,涉及一种日志的处理方法、装置以及系统。

技术介绍

[0002]cdn的全称是content delivery network,即内容分发网络。cdn是构建在现有网络基础之上的智能虚拟网络,依靠部署在各地的边缘服务器,通过中心平台的负载均衡、内容分发、调度等功能模块,使用户就近获取所需内容,降低网络拥塞,提高用户访问响应速度和命中率。
[0003]相关技术中,用户在使用服务方的cdn服务之后,会从cdn服务方下载cdn日志(即使用服务方的cdn服务时产生的日志),通过核对cdn日志来核对计费带宽。每个cdn服务的使用平台在下载自己的cdn日志时,需要了解服务方的接口规则来实现日志下载,并且根据自身需求来实现日志处理等功能,操作较为繁琐。
[0004]针对上述的问题,目前尚未提出有效的解决方案。

技术实现思路

[0005]本申请实施例提供了一种日志的处理方法、装置以及系统,以至少解决相关技术中获得日志的操作较为繁琐的技术问题。
[0006]根据本申请实施例的一个方面,提供了一种日志的处理方法,包括:接收日志获取任务,其中,日志获取任务用于指示从第一内容分发服务平台获取用户日志,用户日志用于记录目标平台的用户对内容分发服务的使用记录;从原始日志获取目标平台的用户对内容分发服务的使用记录,其中,原始日志记录有各平台的用户对内容分发服务的使用记录;按照目标平台的要求,对从原始日志中获取的使用记录进行转换,得到用户日志。
[0007]根据本申请实施例的另一方面,还提供了一种日志的处理装置,包括:接收单元,用于接收日志获取任务,其中,日志获取任务用于指示从第一内容分发服务平台获取用户日志,用户日志用于记录目标平台的用户对内容分发服务的使用记录;获取单元,用于从原始日志获取目标平台的用户对内容分发服务的使用记录,其中,原始日志记录有各平台的用户对内容分发服务的使用记录;转换单元,用于按照目标平台的要求,对从原始日志中获取的使用记录进行转换,得到用户日志。
[0008]根据本申请实施例的另一方面,还提供了一种日志的处理系统,包括:日志管理者模块,用于在接收到日志获取任务的情况下,执行由日志获取任务拆分成的多个子任务,以从原始日志获取目标平台的用户对内容分发服务的使用记录,并按照目标平台的要求,对从原始日志中获取的使用记录进行转换,得到用户日志,其中,用户日志用于记录目标平台的用户对内容分发服务的使用记录;处理模块,用于按照目标平台的要求,对从原始日志中获取的使用记录进行转换得到用户日志。
[0009]根据本申请实施例的另一方面,还提供了一种存储介质,该存储介质包括存储的程序,程序运行时执行上述的方法。
[0010]根据本申请实施例的另一方面,还提供了一种电子装置,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器通过计算机程序执行上述的方法。
[0011]根据本申请的一个方面,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述方法中任一实施例的步骤。
[0012]在本申请实施例中,服务器在接收到目标平台发送的日志获取任务,从原始日志获取所述目标平台的用户对内容分发服务的使用记录,按照所述目标平台的要求,对从所述原始日志中获取的使用记录进行转换,得到所述用户日志;并将所述用户日志发送给所述目标平台,由于整个过程中是在cdn的日志服务器侧完成的,不需要目标平台对日志做任何处理,可以解决相关技术中获得日志的操作较为繁琐的技术问题。
附图说明
[0013]此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
[0014]图1是根据本申请实施例的日志的处理系统的硬件环境的示意图;
[0015]图2是根据本申请实施例的一种可选的日志的处理系统的示意图;
[0016]图3是根据本申请实施例的一种可选的日志的处理系统的示意图;
[0017]图4是根据本申请实施例的一种可选的系统配置界面的示意图;
[0018]图5是根据本申请实施例的一种可选的系统配置界面的示意图;
[0019]图6是根据本申请实施例的一种可选的系统配置界面的示意图;
[0020]图7是根据本申请实施例的一种可选的系统配置界面的示意图;
[0021]图8是根据本申请实施例的一种可选的日志的处理方法的流程图;
[0022]图9是根据本申请实施例的一种可选的日志的处理方法的示意图;
[0023]图10是根据本申请实施例的一种可选的日志的处理装置的示意图;以及,
[0024]图11是根据本申请实施例的一种终端的结构框图。
具体实施方式
[0025]为了使本
的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
[0026]需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于
清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0027]根据本申请实施例的一方面,提供了一种日志的处理方法和系统的实施例。
[0028]可选地,在本实施例中,上述日志的处理方法可以应用于如图1所示的环境中,包括内容分发服务的cdn平台1、一个或者多个cdn平台2(cdn平台1可以调用cdn平台2的cdn服务)、使用cdn平台1提供的cdn服务的目标平台(如视频服务平台),目标平台上的用户(如在平台上观看视频的用户)在使用cdn平台1提供的内容服务的过程中,目标平台可以根据需要调用平台2为用户服务。目标平台根据需要根据流量使用情况向cdn平台1付款,故而需要核对流量使用情况,为此,目标平台可以定期自动触发日志获取任务或者由后台维护人员在目标平台的后台运维终端上手动触发日志获取任务。
[0029]在一个可选的实施例中,在本申请的日志的处理系统中,至少可以包括以下两个模块,此处的模块主要是从功能层面来做的区分本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种日志的处理方法,其特征在于,包括:接收日志获取任务,其中,所述日志获取任务用于指示从第一内容分发服务平台获取用户日志,所述用户日志用于记录目标平台的用户对内容分发服务的使用记录;从原始日志获取所述目标平台的用户对内容分发服务的使用记录,其中,所述原始日志记录有各平台的用户对内容分发服务的使用记录;按照所述目标平台的要求,对从所述原始日志中获取的使用记录进行转换,得到所述用户日志。2.根据权利要求1所述的方法,其特征在于,从原始日志获取所述目标平台的用户对内容分发服务的使用记录,包括:从第一原始日志中获取所述目标平台的用户的第一使用记录,其中,所述第一使用记录为对所述第一内容分发服务平台的内容分发服务的使用记录;并,从第二原始日志中获取所述目标平台的用户的第二使用记录,其中,所述第二使用记录为对第二内容分发服务平台的内容分发服务的使用记录,所述第二内容分发服务平台是所述第一内容分发服务平台在为所述目标平台的用户提供内容分发服务的过程中,允许被所述第一内容分发服务平台调用的内容分发服务平台。3.根据权利要求2所述的方法,其特征在于,按照所述目标平台的要求,对从所述原始日志中获取的使用记录进行转换,得到所述用户日志,包括:从每条所述第一使用记录中提取出所述目标平台所指定的字段,并将从所述第一使用记录中提取的字段按照所述目标平台所指定的顺序,拼接为对应的第三使用记录;并,从每条所述第二使用记录中提取出所述目标平台所指定的字段,并将从所述第二使用记录中提取的字段按照所述目标平台所指定的顺序,拼接为对应的第四使用记录;将所有所述第三使用记录和所有所述第四使用记录按照所述目标平台所指定的顺序,拼接为所述用户日志。4.根据权利要求3所述的方法,其特征在于,从第一原始日志中获取所述目标平台的用户的第一使用记录包括:从所述第一原始日志中获取记录时间位于指定时段内的所有所述第一使用记录,其中,所述指定时段是所述日志获取任务指示的时段;从每条所述第一使用记录中提取出所述目标平台所指定的字段,并将从所述第一使用记录中提取的字段按照所述目标平台所指定的顺序,拼接为对应的第三使用记录,包括:获取所有所述第一使用记录中未被处理过的目标使用记录;在所述目标使用记录包括所述目标平台所指定的所有字段的情况下,直接从所述目标使用记录中解析出所述目标平台所指定的所有字段,并拼接为所述第三使用记录;在所述目标使用记录包括所述目标平台所指定的第一字段的情况下,从所述目标使用记录中解析出所述第一字段,并将所述第一字段和第二字段拼接为所述第三使用记录,其中,所述目标平台所指定的所有字段包括所述第一字段和所述第二字段,所述第三使用记录中所述第一字段携带的内容与所述第一使用记录中所述第一字段携带的内容相同,所述第三使用记录中所述第二字段携带的内容为默认内容或是根据所述第一使用记录中第三字段携带的内容确定的,所述第三字段为与所述第二字段关联的字段。5.根据权利要求3所述的方法,其特征在于,将所有所述第三使用记录和所有所述第四
使用记录按照所述目标平台所指定的顺序,拼接为所述用户日志,包括:将所有所述第三使用记录和所有...

【专利技术属性】
技术研发人员:王奋逸王子文
申请(专利权)人:深圳市云帆加速科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1