问答 2024-05-31 来自:开发者社区

Flink CDC里oracle上要开启归档日志,否则无法cdc,并且开启这个之后怎么处理?

Flink CDC里oracle上要开启归档日志,否则无法cdc,并且开启这个之后,对实际oracle是有很大性能影响,特别是事务。怎么处理?

文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之采集Oracle数据库时,归档日志大小暴增的原因是什么

问题一:Flink CDC中datax可能了解多一点,觉得对比一下,为什么flink不适合做全量同步了吗? Flink CDC中datax可能了解多一点,觉得对比一下,你知道为什么flink不适合做全量同步了,有哪些因素考虑?现在用到datax 参考答案: flink针对oracle全量是基于闪回查询的模式,如果表DML特别多完全从undo里面构建前镜...

问答 2024-05-23 来自:开发者社区

Flink CDC最新版本支持oracle 带分区的表获取对应的变更日志吗?

--配置oracle分区表的时候获取不到对应的变更数据,其他不区分的表可以正常获取?这是为什么呢?

文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之从Oracle数据库同步数据时,checkpoint恢复后无法捕获到任务暂停期间的变更日志,如何处理

问题一:Flink CDC用oracle-cdc?它是不是不能从ckp恢复? Flink CDC用oracle-cdc?它是不是不能从ckp恢复。我用cdc同步oracle,中间把任务停掉,然后从ckp恢复,发现暂停期间的变更日志会漏掉,scan.mode设的:latest-offset? 参考答案: 从savepoint恢复试下 ...

实时计算 Flink版产品使用合集之从Oracle数据库同步数据时,checkpoint恢复后无法捕获到任务暂停期间的变更日志,如何处理
文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之Oracle归档日志一天就达到了15GB并导致数据库崩溃,是什么导致的

问题一:Flink CDC15.2的版本跟17的版本有啥区别的文章吗? Flink CDC15.2的版本跟17的版本有啥区别的文章吗? 参考回答: Flink CDC 1.5.2 和 1.17 版本的主要区别可能在于一些新特性、性能改进以及bug修复。然而,具体的区别需要查阅官方的更新日志或者开发者社区的讨论来获取详细信息。此外,Flink CDC的版...

实时计算 Flink版产品使用合集之Oracle归档日志一天就达到了15GB并导致数据库崩溃,是什么导致的
文章 2024-05-17 来自:开发者社区

实时计算 Flink版产品使用合集之在读取Oracle归档日志时出现日志数量大幅增加的情况如何解决

问题一:1.13.6的flink,该事务执行时间稍长由比较多的数据被处理,但与该job关注的表无关? 1.13.6的flink,cdc读mysql的binlog,卡在一个binlog点上,就在一直卡在这里。在这期间附近有个其他表的大事务操作发生,该事务执行时间稍长由比较多的数据被处理,但与该job关注的表无关?io.debezium.connector.mysql.MySqlS...

实时计算 Flink版产品使用合集之在读取Oracle归档日志时出现日志数量大幅增加的情况如何解决
问答 2024-05-01 来自:开发者社区

Flink CDC里oracle上要开启归档日志,否则无法cdc,这个怎么处理?

flink cdc一般生产环境mysql的binlog会开启滚动日志,也就是为了节省空间,会删除掉之前的binlog,由于source和sink在同一个线程中,那么当出现back pressure时,可能会导致binlog被删除,而此时,应用由于异常导致重启并从checkpoint重新读取的问题。怎么处理?

问答 2024-05-01 来自:开发者社区

Flink CDC里Oracle cdc 这个日志要打印 很久才回同步数据,这个咋处理啊?

Flink CDC里Oracle cdc 这个日志要打印 很久才回同步数据,这个咋处理啊? Capturing structure of table

问答 2024-04-24 来自:开发者社区

flink cdc 在从Oracle拉取数据的时候造成Oracle归档日志暴涨,是什么原因?

flink cdc 在从Oracle拉取数据的时候造成Oracle归档日志暴涨,是什么原因?

问答 2024-04-15 来自:开发者社区

Flink CDC里oracle 记录的日志,为啥只有变更的字段?

Flink CDC里oracle 记录的日志,为啥只有变更的字段,没有未变更的字段?flink有支持只读变更字段的能力不?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

+关注