产品反馈分析系统及方法技术方案

技术编号：43356114 阅读：14 留言：0更新日期：2024-11-19 17:42

本发明专利技术提供了一种产品反馈分析系统及方法，包括数据同步模块和数据湖平台；数据同步模块用于从多种数据源获取目标产品的用户反馈数据，并对用户反馈数据进行流批一体处理，得到标准化数据，将标准化数据同步至数据湖平台；数据湖平台用于采用Paimon存储标准化数据，以及响应产品分析任务，基于标准化数据生成反馈分析结果，并通过数据同步模块进行输出。本发明专利技术通过设计一种流批一体的数据处理分析架构实现产品反馈分析系统，支持对多种数据源接入的用户反馈数据进行流批一体处理，并结合产品分析任务对市场趋势进行分析，实现全栈式流批一体的数据处理和分析，能够快速、准确地得到产品的反馈分析结果，为产品的迭代提供更加精准的数据支撑。

全部详细技术资料下载

【技术实现步骤摘要】

本专利技术涉及数据处理，特别涉及一种产品反馈分析系统及方法。

技术介绍

1、现有的数据湖管理框架，如apache hudi、apache iceberg和delta lake，在处理流式数据和批式数据时虽然提供了基础的数据处理能力，但在整合用户反馈和市场数据方面存在不足。这些数据湖管理框架通常需要依赖复杂的系统和工具，难以有效应对用户需求驱动的流批一体数据处理场景，无法满足数据快速驱动决策的业务需求。

技术实现思路

1、为解决上述技术问题，本专利技术提供一种产品反馈分析系统及方法。

2、本专利技术是通过下述技术方案来解决上述技术问题：

3、第一方面，本专利技术提供一种产品反馈分析系统，包括数据同步模块和数据湖平台；

4、所述数据同步模块用于从多种数据源获取目标产品的用户反馈数据，并对所述用户反馈数据进行流批一体处理，得到标准化数据，将所述标准化数据同步至数据湖平台；

5、所述数据湖平台用于采用paimon存储所述标准化数据，以及响应产品分析任务，基于所述标准化数据生成反馈分析结果，并通过所述数据同步模块进行输出。

6、在本方案中，基于paimon设计了一种流批一体的数据处理分析架构，并基于此架构实现了一种产品反馈分析系统，支持对多种数据源接入的用户反馈数据进行流批一体处理，并结合产品分析任务对市场趋势进行分析，实现全栈式流批一体的数据处理和分析，能够快速、准确地得到产品的反馈分析结果，为产品的迭代提供更加精准的数据支撑。</p>

7、可选地，所述数据同步模块用于通过seatunnel连接所述多种数据源并获取所述用户反馈数据。

8、在本方案中，采用paimon作为上述用户反馈数据的核心存储，支持实时的数据流和批式的数据集的统一存储和管理，结合seatunnel实现流批一体的数据同步和存储，能够减少数据迁移和数据转换的需要，降低数据处理和分析的复杂度。

9、可选地，所述用户反馈数据包括流式的实时反馈数据和批式的历史反馈数据中的至少一种；

10、所述数据同步模块用于利用所述seatunnel的默认引擎对所述实时反馈数据进行预处理，得到第一标准化数据；

11、所述数据同步模块还用于利用所述默认引擎对所述历史反馈数据进行预处理，得到第二标准化数据。

12、在本方案中，采用seatunnel的默认引擎实现流批一体的数据预处理，能够保证数据质量，便于后续进行分析，可以减少因数据质量存在问题导致的分析误差。

13、可选地，所述数据湖平台基于所述标准化数据生成反馈分析结果包括：

14、根据所述产品分析任务从所述paimon中读取得到目标时间段内的目标数据；

15、从所述目标数据提取若干个预设产品特性对应的评价信息；

16、根据所述评价信息生成对应的所述预设产品特性在所述目标时间段内的所述反馈分析结果。

17、在本方案中，根据产品分析任务读取对应的目标数据进行分析，得到涉及的预设产品特性及其评价信息，进而生成相应的反馈分析结果，实现根据产品分析任务得到针对性的产品特性的反馈分析结果。

18、可选地，所述数据湖平台根据所述评价信息确定对应的所述预设产品特性的所述反馈分析结果包括：

19、确定所述评价信息对应的用户情感得分；

20、计算对应同一所述预设产品特性的所述用户情感得分的平均值；

21、根据所述平均值确定所述预设产品特性的所述用户情感倾向。

22、在本方案中，将评价信息量化成用户情感得分，通过平均值的形式来综合体现用户对预设产品特性的用户情感倾向，使得反馈分析结果更加直观。

23、可选地，所述数据湖平台计算对应同一所述预设产品特性的所述用户情感得分的平均值包括：

24、按照预设时间颗粒度计算对应的同一所述预设产品特性的所述用户情感得分的平均值；

25、所述数据湖平台根据所述平均值确定所述预设产品特性的所述用户情感倾向包括：

26、根据所述平均值确定对应的所述预设产品特性在所述目标时间段内的用户情感变化情况。

27、在本方案中，按照预设时间颗粒度计算用户情感得分的平均值，可以体现出预设产品特性在目标时间段内的用户情感变化情况，使得反馈分析结果更加全面。

28、可选地，所述数据湖平台基于所述标准化数据生成反馈分析结果之后，还包括：

29、根据所述反馈分析结果，从所述若干个预设产品特性中确定待迭代产品特性。

30、在本方案中，根据反馈分析结果可以确定待迭代产品特性，为企业提供产品的优化方向。

31、可选地，所述数据湖平台基于所述标准化数据生成反馈分析结果之后，还包括：

32、根据所述反馈分析结果，确定新的所述产品分析任务。

33、在本方案中，根据反馈分析结果还可以确定新的产品分析任务，为产品的反馈分析提供更多的方向，并且保持对产品的用户反馈进行持续监控，以便于及时响应用户需求和市场变化。

34、可选地，所述数据湖平台通过所述数据同步模块进行输出包括：

35、根据所述产品分析任务确定目标输出形式；

36、按照所述目标输出形式，基于所述paimon将所述反馈分析结果输出至所述数据同步模块；

37、所述数据同步模块用于将所述反馈分析结果同步至目标系统。

38、在本方案中，基于paimon实现流批一体的数据输出，即根据产品分析任务需要的目标输出形式，可以选择流式或批式地输出反馈分析结果，以便于目标系统能够快速、准确地得到产品的反馈分析结果，为产品的迭代提供更加精准地数据支撑。

39、可选地，所述产品反馈分析系统还包括所述目标系统；

40、所述目标系统用于对所述反馈分析结果进行可视化显示。

41、在本方案中，通过可视化的形式使用户能够更加直观地接收反馈分析结果，充分发挥用户反馈数据和反馈分析结果的价值。

42、第二方面，本专利技术提供一种产品反馈分析方法，所述产品反馈分析方法包括：

43、通过数据同步模块从多种数据源获取目标产品的用户反馈数据；

44、采用所述数据同步模块对所述用户反馈数据进行流批一体处理，得到标准化数据，并将所述标准化数据同步至数据湖平台；所述数据湖平台用于采用paimon存储所述标准化数据；

45、响应产品分析任务，利用所述数据湖平台基于所述标准化数据生成反馈分析结果，并通过所述数据同步模块进行输出。

46、在符合本领域常识的基础上，上述各优选条件，可任意组合，即得本专利技术各较佳实例。

47、本专利技术的积极进步效果在于：针对用户对于产品的反馈数据，通过设计一种流批一体的数据处理分析架构实现产品反馈分析系统，支持对多种数据源接入的用户反馈数据进行流批一体处理，并结合产品分析任务对市场趋势进行分析，实现全栈式流批一本文档来自技高网...

【技术保护点】

1.一种产品反馈分析系统，其特征在于，所述产品反馈分析系统包括数据同步模块和数据湖平台；

2.如权利要求1所述的产品反馈分析系统，其特征在于，所述数据同步模块用于通过Seatunnel连接所述多种数据源并获取所述用户反馈数据。

3.如权利要求2所述的产品反馈分析系统，其特征在于，所述用户反馈数据包括流式的实时反馈数据和批式的历史反馈数据中的至少一种；

4.如权利要求1-3中任一项所述的产品反馈分析系统，其特征在于，所述数据湖平台基于所述标准化数据生成反馈分析结果包括：

5.如权利要求4所述的产品反馈分析系统，其特征在于，所述数据湖平台根据所述评价信息确定对应的所述预设产品特性的所述反馈分析结果包括：

6.如权利要求5所述的产品反馈分析系统，其特征在于，所述数据湖平台计算对应同一所述预设产品特性的所述用户情感得分的平均值包括：

7.如权利要求1所述的产品反馈分析系统，其特征在于，所述数据湖平台基于所述标准化数据生成反馈分析结果之后，还包括：

8.如权利要求1所述的产品反馈分析系统，其特征在于，所述数

9.如权利要求1所述的产品反馈分析系统，其特征在于，所述数据湖平台通过所述数据同步模块进行输出包括：

10.一种产品反馈分析方法，其特征在于，所述产品反馈分析方法包括：

...

【技术特征摘要】

1.一种产品反馈分析系统，其特征在于，所述产品反馈分析系统包括数据同步模块和数据湖平台；

2.如权利要求1所述的产品反馈分析系统，其特征在于，所述数据同步模块用于通过seatunnel连接所述多种数据源并获取所述用户反馈数据。

3.如权利要求2所述的产品反馈分析系统，其特征在于，所述用户反馈数据包括流式的实时反馈数据和批式的历史反馈数据中的至少一种；

4.如权利要求1-3中任一项所述的产品反馈分析系统，其特征在于，所述数据湖平台基于所述标准化数据生成反馈分析结果包括：

5.如权利要求4所述的产品反馈分析系统，其特征在于，所述数据湖平台根据所述评价信息确定对应的所述预设...

【专利技术属性】
技术研发人员：陈志强，何浩，黄勇波，蒋青松，王晓洪，
申请(专利权)人：重庆赛力斯新能源汽车设计院有限公司，
类型：发明
国别省市：

全部详细技术资料下载我是这个专利的主人