一种数据处理方法、装置、电子设备及存储介质制造方法及图纸

本公开关于一种数据处理方法、装置、电子设备及存储介质，涉及网络技术领域，能够提高电子设备对消息数据处理的效率，降低数据占用存储空间、数据传输带宽、数据传输耗时。包括：获取当前待传输的目标信令数据，并确定目标信令数据对应的目标数据类型；根据目标数据类型和多个预先训练好的数据字典，确定目标信令数据对应的目标数据字典；目标数据字典用于指示目标数据类型与目标压缩算法的对应关系，目标数据字典所指示的目标压缩算法为目标数据类型所对应的多种压缩算法中压缩比最高的压缩算法；通过目标数据字典所指示的目标压缩算法对目标信令数据进行压缩处理，得到压缩处理后的目标信令数据，并将压缩处理后的目标信令数据进行传输。据进行传输。据进行传输。

【技术实现步骤摘要】
一种数据处理方法、装置、电子设备及存储介质


[0001]本公开涉及网络
，尤其涉及一种数据处理方法、装置、电子设备及存储介质。

技术介绍

[0002]当前，用户对象在通过直播类应用程序观看直播视频时，用户对象(即直播间的观众对象)能够收到主播对象和其他观众对象发送的消息(比如评论消息、点赞消息等)。具体的，这些消息数据是通过一个TCP长连接传递给用户对象的，直播视频对应的服务端需要对这些消息数据进行加工处理，以使得这些消息数据在不同的服务之间进行传递，因此需要在存储介质中存储这些消息数据。
[0003]然而上述方法中，传递、存储的消息数据为原始数据，在消息数据的数据量较大的情况下，需要使用数据压缩工具对消息数据进行压缩处理。随着直播视频对应的业务量增长，消息数据的种类数量也在增长，因此这种消息数据的传递所引起的存储、带宽成本越来越高。从而处理消息数据的效率较差，存在数据占用存储空间多、数据传输带宽大、数据传输耗时高的问题。

技术实现思路

[0004]本公开提供一种数据处理方法、装置、电子设备及存储介质，能够提高电子设备对消息数据处理的效率，降低数据占用存储空间、数据传输带宽、数据传输耗时。本公开的技术方案如下：
[0005]根据本公开的第一方面，提供一种数据处理方法，该方法包括：获取当前待传输的目标信令数据，并确定目标信令数据对应的目标数据类型；根据目标数据类型和多个预先训练好的数据字典，确定目标信令数据对应的目标数据字典；目标数据字典用于指示目标数据类型与目标压缩算法的对应关系，目标数据字典所指示的目标压缩算法为目标数据类型所对应的多种压缩算法中压缩比最高的压缩算法；通过目标数据字典所指示的目标压缩算法对目标信令数据进行压缩处理，得到压缩处理后的目标信令数据，并将压缩处理后的目标信令数据进行传输。
[0006]由上可知，在需要传输目标信令数据时，可以获取当前待传输的目标信令数据，并确定目标信令数据对应的目标数据类型；进一步的，再根据目标信令数据对应的目标数据类型和多个预先训练好的数据字典，确定目标信令数据对应的目标数据字典，以根据目标信令数据对应的目标数据字典确定目标数据类型所对应的多种压缩算法中压缩比最高的压缩算法；并通过目标数据字典所指示的目标压缩算法对目标信令数据进行压缩处理，得到压缩处理后的目标信令数据，从而将压缩处理后的目标信令数据进行传输。通过这种实现方式，电子设备可以预先确定当前待传输的目标信令数据对应的目标数据类型，从而通过目标信令数据对应的目标数据字典所指示的压缩比最高的压缩算法，对目标信令数据进行压缩处理，得到压缩处理后的目标信令数据。而无需直接传递、存储原始数据，从而可以
在业务量增长，消息数据的种类数量增长的情况下，提高处理消息数据的效率，降低数据占用存储空间、数据传输带宽、数据传输耗时。
[0007]可选地，在上述“获取当前待传输的目标信令数据，并确定目标信令数据对应的目标数据类型”的方法之前，具体还包括：获取多个历史信令数据，并分别确定多个历史信令数据中每个历史信令数据对应的数据类型，得到多种数据类型的历史信令数据；分别通过多种压缩算法对多种数据类型的历史信令数据进行压缩处理，得到多个数据字典；每个数据字典用于指示一种数据类型与一种压缩算法的对应关系，数据字典所指示的一种压缩算法为一种数据类型所对应的多种压缩算法中压缩比最高的压缩算法。
[0008]由上可知，可以预先获取多个历史信令数据，并分别确定多个历史信令数据中每个历史信令数据对应的数据类型，得到多种数据类型的历史信令数据；进一步的，可以通过多种压缩算法对多种数据类型的历史信令数据进行压缩处理，以得到多个数据字典，从而可以通过每个数据字典指示一种数据类型与该数据类型所对应的多种压缩算法中压缩比最高的压缩算法的对应关系。从而可以在后续传输信令数据时，根据该多个数据字典确定每个信令数据所对应的数据字典，以确定每个信令数据所对应的压缩比最高的压缩算法。
[0009]可选地，上述“分别确定多个历史信令数据中每个历史信令数据对应的数据类型，得到多种数据类型的历史信令数据”的方法具体包括：分别将多个历史信令数据存储至数据训练器中；数据训练器用于对多个历史信令数据按照数据类型进行分类；根据多个历史信令数据中每个历史信令数据对应的数据类型，得到多种数据类型的历史信令数据。
[0010]由上可知，在获取到多个历史信令数据之后，可以分别将多个历史信令数据存储至用于对多个历史信令数据按照数据类型进行分类的数据训练器中；从而根据多个历史信令数据中每个历史信令数据对应的数据类型，得到多种数据类型的历史信令数据，从而快速、准确的根据多个历史信令数据，得到多种数据类型的历史信令数据。
[0011]可选地，上述“分别通过多种压缩算法对多种数据类型的历史信令数据进行压缩处理，得到多个数据字典”的方法具体包括：在多种数据类型的历史信令数据中的任一种数据类型的历史信令数据中包括的数据量大于或等于目标阈值的情况下，通过多种压缩算法对任一种数据类型的历史信令数据进行压缩处理，确定多个数据字典中任一种数据类型对应的数据字典。
[0012]由上可知，可以进一步判断多种数据类型的历史信令数据中，每种数据类型的历史信令数据所包括的数据量，以在多种数据类型的历史信令数据中的任一种数据类型的历史信令数据中包括的数据量大于或等于目标阈值的情况下，再通过多种压缩算法对任一种数据类型的历史信令数据进行压缩处理，从而可以在任一种数据类型的历史信令数据中包括的数据量满足条件时，准确的确定多个数据字典中任一种数据类型对应的数据字典。
[0013]可选地，在上述“获取多个历史信令数据，并分别确定多个历史信令数据中每个历史信令数据对应的数据类型，得到多种数据类型的历史信令数据”的方法之前，具体还包括：配置数据传输接口；数据传输接口用于在接收信令数据时，确定每个信令数据的数据类型。
[0014]由上可知，还可以预先配置数据传输接口，从而在通过数据传输接口传输信令数据时，快速、准确的确定每个信令数据的数据类型。
[0015]可选地，在上述“分别通过多种压缩算法对多种数据类型的历史信令数据进行压
缩处理，得到多个数据字典”的方法之后，具体还包括：每间隔预设时长获取预设时长内所传输的多个第一信令数据；通过多种压缩算法对多个第一信令数据中包括的多种数据类型的第一信令数据进行压缩处理，得到多个压缩处理结果；多个压缩处理结果中一个压缩处理结果对应一个压缩比；对比多个压缩处理结果和多个数据字典，确定多种数据类型中每种数据类型所对应的压缩比最高的一种压缩算法；根据多种数据类型中每种数据类型所对应的压缩比最高的一种压缩算法，重新确定多种数据类型对应的多个数据字典。
[0016]由上可知，在根据多种数据类型的历史信令数据，得到多个数据字典之后，还可以进一步的每间隔预设时长获取预设时长内所传输的多个第一信令数据，从而通过多种压缩算法对多个第一信令数据中包括的多种数据类型的第一信令数据进行压缩处理，得到多个压缩处理结果本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法，其特征在于，所述方法包括：获取当前待传输的目标信令数据，并确定所述目标信令数据对应的目标数据类型；根据所述目标数据类型和多个预先训练好的数据字典，确定所述目标信令数据对应的目标数据字典；所述目标数据字典用于指示目标数据类型与目标压缩算法的对应关系，所述目标数据字典所指示的目标压缩算法为所述目标数据类型所对应的多种压缩算法中压缩比最高的压缩算法；通过所述目标数据字典所指示的目标压缩算法对所述目标信令数据进行压缩处理，得到压缩处理后的目标信令数据，并将所述压缩处理后的目标信令数据进行传输。2.根据权利要求1所述的方法，其特征在于，所述获取当前待传输的目标信令数据，并确定所述目标信令数据对应的目标数据类型之前，所述方法还包括：获取所述多个历史信令数据，并分别确定所述多个历史信令数据中每个历史信令数据对应的数据类型，得到多种数据类型的历史信令数据；分别通过所述多种压缩算法对所述多种数据类型的历史信令数据进行压缩处理，得到多个数据字典；每个数据字典用于指示一种数据类型与一种压缩算法的对应关系，所述数据字典所指示的一种压缩算法为所述一种数据类型所对应的所述多种压缩算法中压缩比最高的压缩算法。3.根据权利要求2所述的方法，其特征在于，所述分别确定所述多个历史信令数据中每个历史信令数据对应的数据类型，得到多种数据类型的历史信令数据，包括：分别将所述多个历史信令数据存储至数据训练器中；所述数据训练器用于对所述多个历史信令数据按照数据类型进行分类；根据所述多个历史信令数据中每个历史信令数据对应的数据类型，得到多种数据类型的历史信令数据。4.根据权利要求2或3所述的方法，其特征在于，所述分别通过所述多种压缩算法对所述多种数据类型的历史信令数据进行压缩处理，得到多个数据字典，包括：在所述多种数据类型的历史信令数据中的任一种数据类型的历史信令数据中包括的数据量大于或等于目标阈值的情况下，通过所述多种压缩算法对所述任一种数据类型的历史信令数据进行压缩处理，确定所述多个数据字典中所述任一种数据类型对应的数据字典。5.根据权利要求2或3所述的方法，其特征在于，所述获取所述多个历史信令数据，并分别确定所述多个历史信令数据中每个历史信令数据对应的数据类型，得到多种数据类型的历史信令数据之前，所述方法...

【专利技术属性】
技术研发人员：李学，
申请(专利权)人：北京达佳互联信息技术有限公司，
类型：发明
国别省市：