244
人物
可重跑与幂等性__进阶与深入_数据集成-阿里云
CDP定位在为各类数据存储提供数据传输通道功能,在定期自动化运行数据同步场景,如数仓ETL流程,要求所有的数据同步Job能够做到多次数据同步能够和单次数据同步最终结果一致。例如当一次数据同步Job出现Fail情况,用户可以直接重启CDP任务而不需要到目的数据端进行线上数据清理操作。这在数仓领域属于Job幂等性要求。
CDP Job的幂等性是通过Writer插件的前置条件来实现的,例如用户可写ODPS配置中提供数据写入前的清理工作,该配置可以保证每次数据导入前都会先清除当前表或者分区的现有数据,这样能够保证数据多次写入的结果和当前一次性写入结果一致。
最后更新:2016-05-06 10:43:33
上一篇:
类型转换__进阶与深入_数据集成-阿里云
下一篇:
原子语义__进阶与深入_数据集成-阿里云
报警管理__用户指南_E-MapReduce-阿里云
DomainLogType__数据类型_API文档_云解析-阿里云
弹性Web托管FAQ(持续更新)__产品相关问题_使用问题_弹性 Web 托管-阿里云
创建数据订阅通道__快速入门_数据传输-阿里云
监控报警__控制台使用指南_消息队列 MQ-阿里云
SSH 登录时出现如下错误:Too many authentication failures for root__远程登录 (SSH)_Linux操作运维问题_云服务器 ECS-阿里云
添加转码配置__直播流操作接口_API 手册_CDN-阿里云
数据订阅SDK容灾__最佳实践_数据传输-阿里云
图片服务__开发人员指南_对象存储 OSS-阿里云
阿里云MaxCompute香港开服 将引入更多人工智能服务
相关内容
常见错误说明__附录_大数据计算服务-阿里云
发送短信接口__API使用手册_短信服务-阿里云
接口文档__Android_安全组件教程_移动安全-阿里云
运营商错误码(联通)__常见问题_短信服务-阿里云
设置短信模板__使用手册_短信服务-阿里云
OSS 权限问题及排查__常见错误及排除_最佳实践_对象存储 OSS-阿里云
消息通知__操作指南_批量计算-阿里云
设备端快速接入(MQTT)__快速开始_阿里云物联网套件-阿里云
查询API调用流量数据__API管理相关接口_API_API 网关-阿里云
使用STS访问__JavaScript-SDK_SDK 参考_对象存储 OSS-阿里云