让决策更智能
新一代智能数据分析平台

增量更新如何补齐数据?

观小智发表于:2020年10月14日 17:14:16更新于:2021年01月26日 10:35:42

背景:

在我们设置增量更新之后,可能会因为中途服务不可用或者更新时间过长导致期间有数据没有及时抽到平台上来导致数据缺失,这种情况下需要我们手动来把数据补齐。

示例:

如图是一个Oracle数据库抽取的数据集,并且配置了去重主键:

image.png

这里配置的增量条件是每天增加昨天之后的数据,并根据MEMBER_ID去重。

如果今天是10号按照上述更新逻辑,会增量更新9号之后的数据,但是如果因为一些原因漏掉了8号的数据集应该怎样去补齐?

1,首先手动触发更新

image.png

2,会有“数据更新”窗口出现,需要手动修改SQL,增量更新8号之后的数据,这里的SQL仅对本次更新有效。

image.png

更新方式选择“添加新数据”,点击“确定”即可,等待更新完成数据就会补齐。

注:此示例为Oracle语法,其他数据库请按照该逻辑,使用对应语法编写SQL。



    您需要登录后才可以回复