Flink CDC里如果sink的并行度是2,其中一个sink失败了怎么保证extract ?
Flink CDC里如果sink的并行度是2,其中一个sink失败了,怎么保证extract once?2个sink属于同一个事务还是两个独立的事务?如果是独立的事务,重试时source会重新抽了,会不会有重复数据写入sink了?两阶段提交是指某个sink里还是所有sink一起成功才成功,否则所有sink一起回滚吗?
Flink CDC有什么办法或者什么方法可以回滚这种操作之类的吗?
Flink CDC我现在有个这个场景就是监听mysql读出来的数据我会落库到日志表中,但是如果这条数据因为网络原因反正各种原因抛出了异常,虽然有重新执行机制但是有次数限制,打比方3次执行完3次都异常然后监听会停止,这个时候我重新启动监听,那么他不会读我异常的这条数据,而是继续读取新的数据,这样就永远丢失这条数据了,有什么办法或者什么方法可以回滚这种操作之类的吗?
flink-sqlserver-cdc-2.4.0 ,回滚到 2.3.0 版本,就没有问题,为什么?
flink-sqlserver-cdc-2.4.0 ,采用的默认的配置'scan.startup.mode' = 'initial',只能完成之前的全量数据,增量数据不能同步,但是配置为latest-offset,是可以获取增量数据的。回滚到 2.3.0 版本,initial 就没有问题,sqlserver 版本 2017?
对于Flink CDC,有没其他办法latest动态加表能刷新schema信息能回滚?
2.3.0 MySQL cdc回滚数据的时候,启动模式timestamp和specialoffset都会存在报schema change的异常而回滚不了,latest存在动态加表不能回滚问题,initial虽然能动态加班,但每次都是全量抽,就很难搞了,有没其他办法latest动态加表能刷新schema信息能回滚?
大佬们,Flink cdc 抽MySQL,回滚到之前的checkpoint的时候,之前的tablel
大佬们,Flink cdc 抽MySQL,回滚到之前的checkpoint的时候,之前的tablelist会不起作用吗,就是不会按这个过滤表?
,Flink cdc 抽MySQL,回滚到之前的checkpoint的时候,之前的tablelist
,Flink cdc 抽MySQL,回滚到之前的checkpoint的时候,之前的tablelist会不起作用吗,就是不会按这个过滤表?
本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。
实时计算 Flink版您可能感兴趣
- 实时计算 Flink版prometheus
- 实时计算 Flink版实例
- 实时计算 Flink版请求
- 实时计算 Flink版服务
- 实时计算 Flink版询问
- 实时计算 Flink版云服务
- 实时计算 Flink版checkpoint
- 实时计算 Flink版adbmysql
- 实时计算 Flink版adb
- 实时计算 Flink版注册
- 实时计算 Flink版CDC
- 实时计算 Flink版数据
- 实时计算 Flink版SQL
- 实时计算 Flink版mysql
- 实时计算 Flink版报错
- 实时计算 Flink版同步
- 实时计算 Flink版任务
- 实时计算 Flink版实时计算
- 实时计算 Flink版flink
- 实时计算 Flink版版本
- 实时计算 Flink版oracle
- 实时计算 Flink版kafka
- 实时计算 Flink版表
- 实时计算 Flink版配置
- 实时计算 Flink版产品
- 实时计算 Flink版Apache
- 实时计算 Flink版设置
- 实时计算 Flink版作业
- 实时计算 Flink版模式
- 实时计算 Flink版数据库