NIUCLOUD是一款SaaS管理后台框架多应用插件+云编译。上千名开发者、服务商正在积极拥抱开发者生态。欢迎开发者们免费入驻。一起助力发展! 广告
### Q :请简述产品支持的目标端冲突数据处理机制? A: 对于SQL类型的数据目的地,有主键情况下,DataPipeline提供了覆盖机制,根据主键进行插入或覆盖。如果用户希望保留历史数据,DataPipeline也支持增加DML列(Insert、Update、Delete)不断追加数据。文件类型、Kafka、Hive目的地,数据是不断追加的,DataPipeline同样可以将DML类型(Insert、Update、Delete)作为额外列写入,便于下游进行业务去重。