一种业务数据索引构建方法及系统技术方案

本发明专利技术实施例提供一种业务数据索引构建方法及系统，该方法包括：索引构建模块获取数据业务模块的业务数据更新事件，并根据业务数据更新事件获取发生信息变更的数据源信息，数据源信息包括业务数据编码，业务数据编码与数据源一一对应；根据业务数据编码回调数据业务模块提供的增量接口，获取业务数据编码对应的索引基本信息，并根据索引基本信息构建索引数据或更新索引数据。本发明专利技术实施例提供的业务数据索引构建方法及系统，通过获取业务数据更新事件获取发生信息变更的数据源信息，通过回调数据业务模块的增量接口获取对应的索引基本信息并构建或更新索引数据，实现了业务数据和索引数据的解耦，提高了索引数据构建的实时性和可扩展性。

A business data index construction method and system

【技术实现步骤摘要】
一种业务数据索引构建方法及系统
本专利技术实施例涉及计算机
，具体涉及一种业务数据索引构建方法及系统。
技术介绍
对业务数据进行检索是常见应用场景，比如，现有的房产企业对外展现的数据提供房源搜索以及检索服务。这些通用的检索数据依赖于底层数据的索引构建，而现有的索引构建方式大多数采用这种方式：当业务数据变更并存储在本地数据库之后，业务方根据自己的业务去数据库查询变更数据，并根据自己的业务规则，构建对应的索引数据，然后对外提供数据的检索服务。现有技术中业务方根据自己的业务规则构建对应的索引数据，比如，根据楼层中的低层、中层和高层的计算规则，构建对应的索引数据；如果楼层的枚举发生改变，比如增添了低层和顶层，则索引数据的构建规则相应要发生改变。理论上数据本身的更新不应该和索引数据的更新耦合在一起，业务方只管保证自己的业务数据变更正常即可。但是，现有的索引构建技术中，索引数据与业务数据耦合太严重，业务方不仅需要关注数据变更是否成功，还需要关注索引数据是否正常变更，由此造成索引构建的实时性和扩展性较差。一方面，业务数据变更和索引变更绑定在一起，如果大量的数据变更会导致索引更新不及时；并且，如果有一方的变更失败都会导致数据更新失败，进一步导致数据更新不及时，甚至数据丢失的情况发生。另一方面，索引数据的构建严重依赖业务方数据库的数据，如果数据库的格式以及字段枚举发生变更，都需要改动索引构建的方式，导致扩展性差。
技术实现思路
为解决现有技术中的问题，本专利技术实施例提供一种业务数据索引构建方法及系统。第一方面，本专利技术实施例提供一种业务数据索引构建方法，该方法包括：索引构建模块获取数据业务模块的业务数据更新事件，并根据所述业务数据更新事件获取发生信息变更的数据源信息，所述数据源信息包括业务数据编码，所述业务数据编码与数据源一一对应；索引构建模块根据所述业务数据编码回调所述数据业务模块提供的增量接口，通过所述增量接口获取所述业务数据编码对应的索引基本信息，并根据所述索引基本信息构建索引数据或更新索引数据。进一步地，所述索引构建模块获取数据业务模块的业务数据更新事件，包括：通过事件监听服务模块监听所述数据业务模块的所述业务数据更新事件，并将所述业务数据更新事件存储入中间存储介质；所述索引构建模块通过监听所述中间存储介质获取所述业务数据更新事件。进一步地，在所述索引构建模块获取数据业务模块的业务数据更新事件之前，所述方法还包括：所述索引构建模块通过调用所述数据业务模块提供的全量接口获取全量业务数据编码信息，所述全量业务数据编码信息包括全部数据源的所述业务数据编码信息；根据所述全量业务数据编码信息调用所述增量接口获取全部数据源的所述索引基本信息；根据所述全部数据源的所述索引基本信息构建全量的索引数据。进一步地，所述方法还包括：所述数据业务模块根据所述数据源信息的变更内容生成或更新对应数据源的所述索引基本信息。进一步地，所述方法还包括：所述业务数据模块记录数据源信息变更的第一时间，并记录所述索引构建模块回调所述增量接口获取对应的索引基本信息的第二时间；若所述第二时间早于所述第一时间，则所述业务数据模块通过再次更新相应数据源的数据源信息的方式，等待所述索引构建模块的下一次的增量接口回调；重复上述步骤，直至所述第二时间晚于所述第一时间。第二方面，本专利技术实施例提供一种业务数据索引构建系统，包括：索引构建模块，所述索引构建模块用于：获取数据业务模块的业务数据更新事件，并根据所述业务数据更新事件获取发生信息变更的数据源信息，所述数据源信息包括业务数据编码，所述业务数据编码与数据源一一对应；根据所述业务数据编码回调所述数据业务模块提供的增量接口，通过所述增量接口获取所述业务数据编码对应的索引基本信息，并根据所述索引基本信息构建索引数据或更新索引数据。进一步地，所述系统还包括事件监听服务模块，所述事件监听服务模块用于：监听所述数据业务模块的所述业务数据更新事件，并将所述业务数据更新事件存储入中间存储介质；所述索引构建模块在用于获取数据业务模块的业务数据更新事件时，具体用于：通过监听所述中间存储介质获取所述业务数据更新事件。进一步地，所述索引构建模块还用于：通过调用所述数据业务模块提供的全量接口获取全量业务数据编码信息，所述全量业务数据编码信息包括全部数据源的所述业务数据编码信息；根据所述全量业务数据编码信息调用所述增量接口获取全部数据源的所述索引基本信息；根据所述全部数据源的所述索引基本信息构建全量的索引数据。第三方面，本专利技术实施例提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如第一方面所提供的方法的步骤。第四方面，本专利技术实施例提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如第一方面所提供的方法的步骤。本专利技术实施例提供的业务数据索引构建方法及系统，通过获取业务数据更新事件获取发生信息变更的数据源信息，通过回调数据业务模块的增量接口获取对应的索引基本信息并构建或更新索引数据，实现了业务数据和索引数据的解耦，提高了索引数据构建的实时性和可扩展性。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1是本专利技术实施例提供的业务数据索引构建方法流程图；图2是本专利技术实施例提供的业务数据索引构建方法的原理示意图；图3是本专利技术实施例提供的业务数据索引构建系统结构示意图；图4是本专利技术另一实施例提供的业务数据索引构建系统结构示意图。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。图1是本专利技术实施例提供的业务数据索引构建方法流程图。如图1所示，所述方法包括：步骤101、索引构建模块获取数据业务模块的业务数据更新事件，并根据所述业务数据更新事件获取发生信息变更的数据源信息，所述数据源信息包括业务数据编码，所述业务数据编码与数据源一一对应；索引构建模块用于索引数据的构建，所述业务数据模块存储有业务数据；所述索引构建模块可以独立于业务数据模块，二者的程序可以运行于不同的服务器。比如，索引构建模块的程序可以运行于C端应用的服务器，数据业务模块的程序可以运行于数据服务器等。要根据业务数据的变化实时地更新索引，首先需要获取业务数据更新的信息。索引构建模块可以通过监听的方式获取数据业务模块的业务数据更本文档来自技高网...

【技术保护点】
1.一种业务数据索引构建方法，其特征在于，包括：/n索引构建模块获取数据业务模块的业务数据更新事件，并根据所述业务数据更新事件获取发生信息变更的数据源信息，所述数据源信息包括业务数据编码，所述业务数据编码与数据源一一对应；/n索引构建模块根据所述业务数据编码回调所述数据业务模块提供的增量接口，通过所述增量接口获取所述业务数据编码对应的索引基本信息，并根据所述索引基本信息构建索引数据或更新索引数据。/n

【技术特征摘要】
1.一种业务数据索引构建方法，其特征在于，包括：
索引构建模块获取数据业务模块的业务数据更新事件，并根据所述业务数据更新事件获取发生信息变更的数据源信息，所述数据源信息包括业务数据编码，所述业务数据编码与数据源一一对应；
索引构建模块根据所述业务数据编码回调所述数据业务模块提供的增量接口，通过所述增量接口获取所述业务数据编码对应的索引基本信息，并根据所述索引基本信息构建索引数据或更新索引数据。


2.根据权利要求1所述的业务数据索引构建方法，其特征在于，所述索引构建模块获取数据业务模块的业务数据更新事件，包括：
通过事件监听服务模块监听所述数据业务模块的所述业务数据更新事件，并将所述业务数据更新事件存储入中间存储介质；
所述索引构建模块通过监听所述中间存储介质获取所述业务数据更新事件。


3.根据权利要求1或2所述的业务数据索引构建方法，其特征在于，在所述索引构建模块获取数据业务模块的业务数据更新事件之前，所述方法还包括：
所述索引构建模块通过调用所述数据业务模块提供的全量接口获取全量业务数据编码信息，所述全量业务数据编码信息包括全部数据源的所述业务数据编码信息；
根据所述全量业务数据编码信息调用所述增量接口获取全部数据源的所述索引基本信息；
根据所述全部数据源的所述索引基本信息构建全量的索引数据。


4.根据权利要求1或2所述的业务数据索引构建方法，其特征在于，所述方法还包括：
所述数据业务模块根据所述数据源信息的变更内容生成或更新对应数据源的所述索引基本信息。


5.根据权利要求4所述的业务数据索引构建方法，其特征在于，所述方法还包括：
所述业务数据模块记录数据源信息变更的第一时间，并记录所述索引构建模块回调所述增量接口获取对应的索引基本信息的第二时间；
若所述第二时间早于所述第一时间，则所述业务数据模块通过再次更新...

【专利技术属性】
技术研发人员：卫海波，
申请(专利权)人：贝壳技术有限公司，
类型：发明
国别省市：天津;12