首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
您找到你想要的搜索结果了吗?
是的
没有找到

一般数据库增量数据处理和数据仓库增量数据处理的几种策略

当 CreateDate 和 UpdateDate 相同的时候说明这一条数据是插入操作,但是这个会员的信息是可以被编辑和修改的,于是每次更新的同时也更新了 UpdateDate 时间戳。...那么像这种情况下增量数据处理的策略就可以是: 第一次加载动作完成以后,记录一下最大的 UpdateDate 时间戳,保存到一个加载记录表中。...(第一次是 2010-10-23) 在第二次加载数据的时候,用加载记录表中的时间戳与源表里的 UpdateDate 相比较,比时间戳大的说明是新添加的或者修改的数据。...(大于 2010-10-23 的是第一条 Update 的数据和第四条新增的数据) 当整个加载过程成功之后,更新最大的 UpdateDate到记录表中。...这样的话,在每次加载的过程中可能就需要同时比较 CreateDate 和 UpdateDate 了。

2.8K30
领券