一种基于时间戳且支持删除操作的增量数据捕获方法

摘要

本发明涉及的一种基于时间戳且支持删除操作的增量数据捕获方法，主要通过数据表中的时间戳信息来识别变化的数据，从而实现增量数据的捕获，旨在解决数据交换领域中增量数据抽取的问题，尤其是从数据表中解决物理删除的场景，以达到快速、高效、准确捕获增量数据的目的。

主权项

一种基于时间戳模式且支持删除操作的增量数据捕获方法，其特征在于，包括1）配置基于时间戳的增量数据捕获规则；2）按照增量捕获规则捕获增量数据；其中：1）配置基于时间戳的增量数据捕获规则包括以下步骤：（1）在源数据表中配置“创建时间戳”与“最后修改时间戳”字段；（2）配置源数据表对应的删除记录表；（3）配置增量捕获规则，包括增量捕获的结构、时间戳标识以及删除记录表配置；2）按照增量捕获规则捕获增量数据，为实现基于时间戳的增量捕获，包括以下步骤：（1）比较源数据表中的创建时间戳字段的值与上次捕获时间，创建时间戳大于上次捕获时间的数据即为增加Insert操作的数据；（2） 比较删除记录表中的删除时间戳字段的值与上次捕获时间，删除时间戳大于上次捕获时间的数据即为删除Delete操作的数据；（3） 比较源数据表中的最后修改时间戳字段的值与上次捕获时间，最后修改时间戳大于上次捕获时间的数据即为修改（Update）操作的数据。