问答 2023-09-20 来自:开发者社区

mysql-cdc获取到的数据中有一个pos是开始读取当前数据binlog的开始位置我应该怎样获取?

mysql-cdc中获取到的数据中有一个pos是开始读取当前数据binlog的开始位置我应该怎样获取到这条数据截止位置我想在flink中获取到这个位置方便以后程序退出了手动指定需要从那个位置读取,应该扩展哪个方法能获取到?日志里面有这么一样就是这个我应该怎样获取到

问答 2023-08-08 来自:开发者社区

咱们flink采集mysql增量数据是通过读取binlog吗?

咱们flink采集mysql增量数据是通过读取binlog吗?

问答 2023-06-29 来自:开发者社区

巨佬们,请教个问题: 我使用flinkCDC 采集MySQL数据,MySQL中的binlog清理策?

巨佬们,请教个问题: 我使用flinkCDC 采集MySQL数据,MySQL中的binlog清理策略是(1.占磁盘30%;2.binlog存储超过18个小时;3.binlog文件超过60个),这种策略导致采集任务经常性找不到binlog, 请问,在不动mysql端的情况下,flink端有什么参数可以解决这个问题的吗?

问答 2023-04-26 来自:开发者社区

用flink-cdc同步mysql的数据,有没有办法监控任务的同步情况,比如同步到哪个binlog

用flink-cdc同步mysql的数据,有没有办法监控任务的同步情况,比如同步到哪个binlog 哪个位置了

问答 2023-04-05 来自:开发者社区

请教一个问题,使用cdc同步mysql数据的时候,如果全量同步耗费时间比较久,而数据库的binlog

请教一个问题,使用cdc同步mysql数据的时候,如果全量同步耗费时间比较久,而数据库的binlog保存时间已经过了,被清理了。 从而导致之前快照读的时候,保存的binlog位点读取失败,这样是不是全量同步数据就出问题了?

问答 2023-04-03 来自:开发者社区

我flink cdc实时同步MySQL数据,这个过程会产生binlog_dump行为吗?但是如果我按

我flink cdc实时同步MySQL数据,这个过程会产生binlog_dump行为吗?但是如果我按照这个 官网指定server_id,好像会有对应的serve_id的binlog_dump, 我问了chatgpt好像只有MySQL自己进行主从同步才会产生binlog_dump? 还有一点,我又测试别的数据库,flink cdc实时同步MySQL数据,又没有产生binlog_dump行为。

问答 2023-02-27 来自:开发者社区

使用flinkcdc 连接mysql读取数据,会提示找不到binlog信息,为什么?

使用flinkcdc 连接mysql读取数据,当mysql集群发生主从切换时,如果从指定的checkpoint重启,就会提示找不到binlog信息,导致出现这种情况只能手动去补数据,为什么?

问答 2022-08-20 来自:开发者社区

flinkcdc同步mysql数据到doris,全量数据同步也需要开binlog权限吗?

flinkcdc同步mysql数据到doris,全量数据同步也需要开binlog权限吗?

问答 2022-08-18 来自:开发者社区

flinkcdc接入mysql的数据 历史的接完接binlog的时候 数据就不继续进了 有遇到过这样

flinkcdc接入mysql的数据 历史的接完接binlog的时候 数据就不继续进了 有遇到过这样的问题吗

问答 2022-08-12 来自:开发者社区

大家有没有出现过 FLINK MySQL cdc 数据量太大时 无法接收到MySQL binlog情

大家有没有出现过 FLINK MySQL cdc 数据量太大时 无法接收到MySQL binlog情况,数据量少的时候没有问题,怎么解决的?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。