我们在做kettle数据同步的时候需要处理的几个步骤:
源端数据删除、新增、更新时,目标端数据也需要进行同步删除、新增、更新

解决方案:
kettle所需组件:表输入、字段选择、排序记录、合并记录、数据同步
在这里插入图片描述
1、表输入,针对最新的数据输入的表
在这里插入图片描述2、目标表,需要更新的表(如果两个表输入组件的对应字段数据类型不一致,需要添加字段选择组件)
在这里插入图片描述
3、两个表都需要进行排序操作
在这里插入图片描述
4、合并,根据id进行合并
在这里插入图片描述
5、数据同步(包括更新、插入、删除)
在这里插入图片描述
在这里插入图片描述
6、点击运行,就可以实现数据同步了。

Logo

DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。

更多推荐