文章 2023-05-25 来自:开发者社区

《Apache Flink 案例集(2022版)》——1.数据集成——XTransfer-基Flink MongoDB CDC 在 XTransfer 的生产实践(上)

作者:孙家宝 用户背景 XTransfer 专注为跨境 B2B 电商中小企业提供跨境金融和风控服务,通过建立数据化、自动化、互联网化和智能化的风控基础设施,搭建通达全球的财资管理平台,提供开立全球和本地收款账户、外汇兑换、海外外汇管制国家申报等多种跨境金融服务的综合解决方案。 业务需求在业务发展早期,XTransfer选择了传...

《Apache Flink 案例集(2022版)》——1.数据集成——XTransfer-基Flink MongoDB CDC 在 XTransfer 的生产实践(上)
文章 2023-05-25 来自:开发者社区

《Apache Flink 案例集(2022版)》——1.数据集成——XTransfer-基Flink MongoDB CDC 在 XTransfer 的生产实践(下)

《Apache Flink 案例集(2022版)》——1.数据集成——XTransfer-基Flink MongoDB CDC 在 XTransfer 的生产实践(上) https://developer.aliyun.com/article/1228399生产实践 在实际的生产使用过程当中,XTransfer积累了如下的实践...

问答 2023-05-23 来自:开发者社区

大佬,Flink CDC中为啥使用MongoDB CDC只能获取到insert变更事件呀?

问题1:大佬,Flink CDC中为啥使用MongoDB CDC只能获取到insert变更事件呀?update没反应是什么原因呢?DataStream api那里看变更日志呀?我本地都没启动flink,加了个时间窗口函数, 问题2:官方文档是指这个莫 还有其他文档吗?

问答 2023-04-26 来自:开发者社区

flink cdc监听mongodb使用datastream是不是还没支持断点恢复这个功能呀

flink cdc监听mongodb使用datastream是不是还没支持断点恢复这个功能呀

文章 2023-04-12 来自:开发者社区

Flink MongoDB CDC 在 XTransfer 的生产实践|Flink CDC 专题

Flink-learning 学训平台和 Flink CDC 专题课程来啦!为帮助开发者更系统化、更便捷地学习应用 Flink,我们搭建了 Flink-learning 学训平台,为开发者提供丰富的图文、音频、视频、动手实验等多形式课程和学习素材,助力开发者提升自身技术能力。首期 Flink CDC 专题正式发布,后续将逐步上线更多精品课程。本期 Flink CDC 专题从技术原理、生产应用到动....

Flink MongoDB CDC 在 XTransfer 的生产实践|Flink CDC 专题
问答 2023-03-29 来自:开发者社区

请问flink cdc 对mongodb的3.4版本有办法支持吗?文档显示>=3.6版本

请问flink cdc 对mongodb的3.4版本有办法支持吗?文档显示>=3.6版本

问答 2023-03-13 来自:开发者社区

flink cdc 能捕获 mongodb 的 DDL 事件吗?

flink cdc 能捕获 mongodb 的 DDL 事件吗?有人用过flink cdc 抓 mongodb 的数据吗?

问答 2023-03-13 来自:开发者社区

问下 java 项目 中使用 flink cdc mongodb 获得的数据 如何快速将数据转对象?

问下 java 项目 中使用 flink cdc mongodb 获得的数据 看文档是用 JsonDebeziumDeserializationSchema 进行序列化,但是 mongodb数据比较麻烦有其他方式快速将数据转对象吗?

文章 2023-02-26 来自:开发者社区

flink自定义sink,以入solr、mongodb为例

flink在对很多数据库sink的时候都提供了connector,比如:es、kafka等。但我们有些场景不仅没有对应的sink,而且有时候还需要在sink的时候还有做一些查询工作。自定义sink需要继承 RichSinkFunction,重写open、invoke、close三个方法,open方法主要实现一些公共资源的开启工作,如mongo、solr的连接客户端。invoke会在每条数据进入后....

问答 2023-02-20 来自:开发者社区

flink cdc能把mongodb的数据进行处理后存入postgresql数据库里嘛?

flink cdc能把mongodb的数据进行处理后存入postgresql数据库里嘛?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注