问答 2023-05-08 来自:开发者社区

MySQL binlog 表名大小写 产生的kafka动态匹配规则错误

环境信息 canal version 1.1.3 mysql version 5.7 问题描述 在集成kafka的情况下,canal在拉取到binlog之后,匹配topic的时候,如果topic字母相同但大小写不同会引发kafka的日志恢复并resize,报错如下:(之前已有一个topic:redis_cachecloud_QRTZ_FIRED_TRIGGERS) ERROR Error whi....

问答 2023-05-01 来自:开发者社区

各位老师好,我遇到一个flink mysql cdc动态加表从checkpoint恢复报错的问题,c

各位老师好,我遇到一个flink mysql cdc动态加表从checkpoint恢复报错的问题,cdc2.3.0,flink1.15.4,一开始同步test2.table1,initial模式,生成chk-1之后,cancle了任务,table list新增tedt2.table2,test2.table3之后报错 操作方式跟2.3官网提供的一样,不知道哪位老师能帮忙解下惑,谢谢 这是我两次执....

问答 2023-01-29 来自:开发者社区

怎么使用flink sql,用cdc同步mysql中的json,然后写入es的动态字段啊?

怎么使用flink sql,用cdc同步mysql中的json,然后写入es的动态字段啊?

问答 2023-01-15 来自:开发者社区

当前版本的Flink Mysql CDC, 支持动态更改SQL任务吗?

当前版本的Flink Mysql CDC, 支持动态更改SQL任务吗,Mysql 数据组装写入ES时想要动态新增字段,重新提交flink 初始化数据的时间开销太大了,总共需要向写入ES数据2千万条数据

问答 2022-12-09 来自:开发者社区

PolarDB MySQL动态脱敏是什么?

PolarDB MySQL动态脱敏是什么?

问答 2022-11-27 来自:开发者社区

大佬,可以问下,mysql cdc MySQLsource 中库表可以做成动态配置嘛?又或者加载所有

大佬,可以问下,mysql cdc MySQLsource 中库表可以做成动态配置嘛?又或者加载所有库表对于下游处理影响大嘛?

文章 2022-11-26 来自:开发者社区

flink cdc通过配置表动态感知mysql并分流

简介由于 FlinkCDC 是把全部数据统一写入一个 Topic 中, 这样显然不利于日后的数据处理。所以需要把各个表拆开处理。但是由于每个表有不同的特点,有些表是维度表,有些表是事实表。在实时计算中一般把维度数据写入存储容器,一般是方便通过主键查询的数据库比如HBase,Redis,MySQL 等。一般把事实数据写入流中,进行进一步处理,最终形成宽表。这样的配置不适合写在配置文件中,因为这样的....

flink cdc通过配置表动态感知mysql并分流
问答 2022-11-17 来自:开发者社区

mysql cdc 2.3.0从savepoint动态加表,我发现那个savepoint只能是,从头

mysql cdc 2.3.0从savepoint动态加表,我发现那个savepoint只能是,从头读的savepoint,假如我这个savepoint是失败恢复过的,动态加表就不行了

文章 2022-10-29 来自:开发者社区

IDEA下创建SpringBoot+MyBatis+MySql项目实现动态登录与注册功能

Just Code It一、搭建SpringBoot项目1.1、file ——> new ——> project——> Spring Initializr——> next——> next——> next——> finish注意选择包依赖关系Web下的Spring Web。 Template Engines下的Thymeleaf。 SQL下的JDBC AP....

IDEA下创建SpringBoot+MyBatis+MySql项目实现动态登录与注册功能
文章 2022-10-21 来自:开发者社区

MySQL 8.0.30动态redo log初探

MySQL从5.7版本开始支持在线动态修改 innodb_buffer_pool_size,8.0开始支持在线添加undo表空间,以及临时表空间的自动回收,真的是越来越方便了。从8.0.30开始,又新增支持动态调整redo log的大杀器,对DBA来说又是一大福音。在8.0.30里,新增选项 innodb_redo_log_capacity,用于定义redo log总大小。如果设置了该选项,则原....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。