问答 2023-05-23 来自:开发者社区

Flink CDC中源 oracle19.15.2 目标 doris flinkCDC ?

Flink CDC中Caused by: io.debezium.DebeziumException: The db history topic or its content is fully or partially missing. Please check database history topic configuration and re-execute the snapshot.源 ....

问答 2023-05-01 来自:开发者社区

我在用flink cdc的从oracle同步历史数据到doris,请教一下存量数据是先全部拉到内存,

我在用flink cdc的从oracle同步历史数据到doris,请教一下存量数据是先全部拉到内存,拉完后再从内存存入doris吗?小数据量的时候没有问题,当我拉一个大表(2千万数据量,2个G大小)历史数据的时候,跑3-5分钟就报错了,怀疑是不是资源问题。有大佬指点一下吗。

问答 2023-05-01 来自:开发者社区

付费寻求Oracle flinkcdc增量到doris?我遇到问题,全量OK,增量不行,是的,目前

付费寻求Oracle flinkcdc增量到doris?我遇到问题,全量OK,增量不行,是的,目前我们有个客户oracle单表到100亿,但是使用cdc有很大的问题一个是会给oracle造成很大的负载,还有就死blob字段同步过啦是null值,嗯,checkpoint都弄了 oracle归档也开了,目前使用flink1.15 cdc2.3和2.2版本的oracle cdc都会有这个问题

问答 2023-04-26 来自:开发者社区

请教大家一个问题,我在flink中创建了oracle的source和doris同步数据,但发现dor

请教大家一个问题,我在flink中创建了oracle的source和doris同步数据,但发现doris中数据全是null 实际oracle的数据应该是这样

问答 2023-04-26 来自:开发者社区

大佬们,我用flinkcdc同步一些Oracle数据库的数据到Doris,偶尔出现这种报错。从che

大佬们,我用flinkcdc同步一些Oracle数据库的数据到Doris,偶尔出现这种报错。从checkpoint恢复过来之后,UI显示任务异常,但不同步数据了。 不知道有没有遇到过的大佬分享一下解决思路? 大佬,这个是Oracle方面要配置吗? 因为源库我没法上去看,原来是这样 一般是改成啥。或者有啥博客资料我学习下和dba说说,我配置的是online_catelog。为了加快...

问答 2023-04-13 来自:开发者社区

flink cdc 同步oracle 到 doris报错

Caused by: java.lang.IllegalStateException: Retrieve schema history failed, the schema records for engine a43da638-25e2-42dc-a368-a12df187a11c has been removed, this might because the debezium engine....

问答 2023-03-29 来自:开发者社区

oracle 11gr2 source 同步到下游 doris,当表只有字符能同步,别的就不行?

oracle 11gr2 source 同步到下游 doris。 当表只有 字符能同步过去,当有别的就不能同步到下游。 听说 cdc 有个配置解决此类问题?

问答 2023-02-27 来自:开发者社区

从Oracle同步数据到doris怎么操作才能避免在同步时数据出现较大的问题呢,有知道的吗?

场景是:从Oracle同步数据到doris 增量同步的流程是: 1、flink cdc通过datastream获取到Oracle 74张表的数据,然后通过Flink JDBC的方式,将数据写入到Doris, 2、全量是全量使用DataX工具进行同步, 由于公司服务器配置低,需要全量和增量分开做,我怎么操作才能避免在同步时数据出现较大的问题呢,有知道的吗

问答 2023-02-14 来自:开发者社区

用flink oracle cdc同步数据到Doris,怎么才能加快同步速度?

用flink oracle cdc同步数据到Doris,测试发现一秒钟差不多16000行数据,1亿条数据需要一小时。因为oraclecdc是单线程的,加并行度似乎没有用,怎么才能加快同步速度?我现在有一百多亿条数据要同步

问答 2023-02-06 来自:开发者社区

大家在同步Oracle到doris的时候,是采用的Rowdata方式,还是其他方式进行完成增删改的?

大家在同步Oracle到doris的时候,是采用的Rowdata方式,还是其他方式进行完成插入,更新,删除操作的?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

相关镜像