一种数据处理方法、装置和电子设备制造方法及图纸

本发明专利技术提供了一种数据处理方法、装置和电子设备，通过按照各条用户打点数据中的消息接收时间升序顺序对各条用户打点数据进行排列，并对排列后的用户打点数据进行处理，得到不同用户的用户打点数据，并以此确定所述在线课堂的直播开始时间、以及不同用户的用户打点数据的消息接收时间与所述直播开始时间之间的偏移时长，从而根据不同用户的用户打点数据的消息接收时间与所述直播开始时间之间的偏移时长，可以在任意时间下进行在线课堂的直播数据的压测，极大的提高了压测的效率；而且，可以使用实际发生过的在线课堂的直播数据进行压测，大大提高了压测结果的真实性。大大提高了压测结果的真实性。大大提高了压测结果的真实性。

【技术实现步骤摘要】
一种数据处理方法、装置和电子设备


[0001]本专利技术涉及计算机
，具体而言，涉及一种数据处理方法、装置和电子设备。

技术介绍

[0002]目前，网校为用户提供在线直播课程，为了保证用户在直播过程中的体验，必须保证系统在预估的并发量范围内提供稳定可靠的在线教育直播服务，保证老师和学生之间的互动流畅且稳定。为了保证服务质量，全链路压测可以说是必不可缺少的一环。因为在线教育直播的互动场景很丰富，所以网络层面的流量回放很难实现复杂的业务场景的压测。而且又因为在线教育直播课的互动性很强，且老师与学生的行为的随机性较强，很难提前预测，所以，导致业务峰值很不稳定，即波峰与波谷的差距很大，也就给传统的压测方式的带来了很大的困难。

技术实现思路

[0003]为解决上述问题，本专利技术实施例的目的在于提供一种数据处理方法、装置和电子设备。
[0004]第一方面，本专利技术实施例提供了一种数据处理方法，包括：
[0005]获取进行流量回放的在线课堂的直播数据；其中，所述在线课堂的直播数据，包括：多条用户打点数据；多条所述用户打点数据中的各条用户打点数据，分别包括：用户标识、消息类型、以及消息接收时间；
[0006]按照各条用户打点数据中的消息接收时间升序顺序，对各条用户打点数据进行排列；
[0007]按照各条所述用户打点数据中记录的用户标识对排序后的各所述用户打点数据进行分类，得到不同用户的用户打点数据；
[0008]基于不同用户的用户打点数据的消息接收时间，确定所述在线课堂的直播开始时间、以及不同用户的用户打点数据的消息接收时间与所述直播开始时间之间的偏移时长；
[0009]将不同用户的用户打点数据分配到各压测机上，并对各所述压测机同时发送压测指令，确定发送压测指令的时刻，使得各所述压测机进行流量回放的在线课堂的压测；其中，当当前时刻与所述发送压测指令的时刻之间的间隔时间长度达到各所述压测机上分配的用户的用户打点数据的消息接收时间与所述直播开始时间之间的偏移时长时，将各所述压测机上所述偏移时长与所述间隔时间长度相同的用户打点数据发送到服务端，进行压测。
[0010]第二方面，本专利技术实施例还提供了一种数据处理装置，包括：
[0011]获取模块，用于获取进行流量回放的在线课堂的直播数据；其中，所述在线课堂的直播数据，包括：多条用户打点数据；多条所述用户打点数据中的各条用户打点数据，分别包括：用户标识、消息类型、以及消息接收时间；
[0012]排列模块，用于按照各条用户打点数据中的消息接收时间升序顺序，对各条用户打点数据进行排列；
[0013]分类模块，用于按照各条所述用户打点数据中记录的用户标识对排序后的各所述用户打点数据进行分类，得到不同用户的用户打点数据；
[0014]确定模块，用于基于不同用户的用户打点数据的消息接收时间，确定所述在线课堂的直播开始时间、以及不同用户的用户打点数据的消息接收时间与所述直播开始时间之间的偏移时长；
[0015]压测模块，用于将不同用户的用户打点数据分配到各压测机上，并对各所述压测机同时发送压测指令，确定发送压测指令的时刻，使得各所述压测机进行流量回放的在线课堂的压测；其中，当当前时刻与所述发送压测指令的时刻之间的间隔时间长度达到各所述压测机上分配的用户的用户打点数据的消息接收时间与所述直播开始时间之间的偏移时长时，将各所述压测机上所述偏移时长与所述间隔时间长度相同的用户打点数据发送到服务端，进行压测。
[0016]第三方面，本专利技术实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行上述第一方面所述的方法的步骤。
[0017]第四方面，本专利技术实施例还提供了一种电子设备，所述电子设备包括有存储器，处理器以及一个或者一个以上的程序，其中所述一个或者一个以上程序存储于所述存储器中，且经配置以由所述处理器执行第一方面所述的方法的步骤。
[0018]本专利技术实施例上述第一方面提供的方案中，通过按照各条用户打点数据中的消息接收时间升序顺序对各条用户打点数据进行排列，并对排列后的用户打点数据进行处理，得到不同用户的用户打点数据，并以此确定所述在线课堂的直播开始时间、以及不同用户的用户打点数据的消息接收时间与所述直播开始时间之间的偏移时长，从而根据不同用户的用户打点数据的消息接收时间与所述直播开始时间之间的偏移时长，可以在任意时间下进行在线课堂的直播数据的压测，极大的提高了压测的效率；而且，可以使用实际发生过的在线课堂的直播数据进行压测，大大提高了压测结果的真实性。
[0019]为使本专利技术的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
[0020]为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0021]图1示出了本专利技术实施例1所提供的一种数据处理方法的流程图；
[0022]图2示出了本专利技术实施例2所提供的一种数据处理装置的结构示意图；
[0023]图3示出了本专利技术实施例3所提供的一种电子设备的结构示意图。
具体实施方式
[0024]在本专利技术的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本专利技术和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本专利技术的限制。
[0025]此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本专利技术的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
[0026]网校为用户提供在线直播课程，为了保证用户在直播过程中的体验，我们必须保证系统在预估的并发量的范围内提供稳定可靠的在线教育直播服务，保证老师和学生之间的互动流畅且稳定。为了保证服务质量，全链路压测可以说是必不可缺少的一环。因为在线教育直播的互动场景很丰富，所以网络层面的流量回放很难实现复杂的业务场景的压测。而且又因为在线教育直播课的互动性很强，且老师与学生的行为的随机性较强，很难提前预测，所以导致业务峰值很不稳定，即波峰与波谷的差距很大，也就给传统方式的压测带来了很大的困难。传统方式的压测一般会长时间模拟稳定的系统需要接受的最大峰值长时间的压测。这其实会导致压测与实际线上的流量很不准确，为了撑住压测，不断的增加本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法，其特征在于，包括：获取进行流量回放的在线课堂的直播数据；其中，所述在线课堂的直播数据，包括：多条用户打点数据；多条所述用户打点数据中的各条用户打点数据，分别包括：用户标识、消息类型、以及消息接收时间；按照各条用户打点数据中的消息接收时间升序顺序，对各条用户打点数据进行排列；按照各条所述用户打点数据中记录的用户标识对排序后的各所述用户打点数据进行分类，得到不同用户的用户打点数据；基于不同用户的用户打点数据的消息接收时间，确定所述在线课堂的直播开始时间、以及不同用户的用户打点数据的消息接收时间与所述直播开始时间之间的偏移时长；将不同用户的用户打点数据分配到各压测机上，并对各所述压测机同时发送压测指令，确定发送压测指令的时刻，使得各所述压测机进行流量回放的在线课堂的压测；其中，当当前时刻与所述发送压测指令的时刻之间的间隔时间长度达到各所述压测机上分配的用户的用户打点数据的消息接收时间与所述直播开始时间之间的偏移时长时，将各所述压测机上所述偏移时长与所述间隔时间长度相同的用户打点数据发送到服务端，进行压测。2.根据权利要求1所述的方法，其特征在于，所述消息类型，包括：登录类型；基于不同用户的用户打点数据的消息接收时间，确定所述在线课堂的直播开始时间，包括：获取所有用户消息类型为登陆类型的用户打点数据；根据获取到的所述登陆类型的用户打点数据中消息接收时间，统计所述不同用户登录所述在线课堂的登录时间；当在一段时间内登录所述在线课堂的用户的用户数量达到用户数量阈值时，确定所述在线课堂的直播授课已经开始，并获取所述一段时间内登录用户的用户打点数据；将所述一段时间内登录用户的所有的用户打点数据中记录的消息接收时间按照时间的先后顺序进行排序，并将排序后最靠前的消息接收时间确定为所述在线课堂的直播开始时间。3.根据权利要求1所述的方法，其特征在于，基于不同用户的用户打点数据的消息接收时间，确定不同用户的用户打点数据的消息接收时间与所述直播开始时间之间的偏移时长，包括：利用不同用户的用户打点数据的消息接收时间分别减去所述在线课堂的直播开始时间得到时间差值；将得到的不同用户的用户打点数据的消息接收时间分别与所述在线课堂的直播开始时间的时间差值，确定为不同用户的用户打点数据的消息接收时间与所述直播开始时间之间的偏移时长。4.根据权利要求2所述的方法，其特征在于，所述消息类型，包括：登出类型；在获取所有用户消息类型为登陆类型的用户打点数据步骤之前，所述基于不同用户的用户打点数据的消息接收时间，确定所述在线课堂的直播开始时间，还包括：当有用户的用户打点数据的消息接收时间在所述用户的所述登陆类型的用户打点数据的消息接收时间的前面时，将在所述登陆类型的用户打点数据的消息接收时间前面接收到的用户打点数据的消息接收时间，与所述登陆类型的用户打点数据的消息接收时间进行
互换，得到所述用户消息接收时间互换后的用户打点数据；按照所述消息接收时间的升序顺序对所述用户消息接收时间互换后的用户打点数据进行排序；当有用户的用户打点数据的消息接收时间在所述用户的所述登出类型的用户打点数据的消息接收时间的后面时，将在所述登出类型的用户打点数据的消息接收时间后面接收到的用户打点数据的消息接收时间，与所述登出类型的用户打点数据的消息接收时间进行互换，得到所述用户消息接收时间互换后的用户打点数据；按照所述消息接收时间的升序顺序对所述用户消息接收时间互换后的用户打点数据进行排序。5.一种数据处理装置，其特征在于，包括：获取模块，用于获取进行流量回放的在线课堂的直播数据；其中，所述在线课堂的直播数据，包括：多条用户打点数据；多条所述用户打点数据中的各条用户打点数据，分别包括：用户标识、...

【专利技术属性】
技术研发人员：潘大庆，
申请(专利权)人：北京一起教育科技有限责任公司，
类型：发明
国别省市：