问答 2024-07-27 来自:开发者社区

要在DataWorks上同时使用EMR Spark和Flink应用,应该怎么选择技术架构?

要在DataWorks上同时使用EMR Spark和Flink应用,应该怎么选择技术架构?

问答 2024-06-09 来自:开发者社区

Flink Runtime层的主要架构是什么

Flink Runtime层的主要架构是什么

问答 2024-06-05 来自:开发者社区

这架构holo替换为select DB 支持吗?在flink文档没有找到对应的支持

这架构holo替换为select DB 支持吗?在flink文档没有找到对应的支持

文章 2024-03-11 来自:开发者社区

新一代实时数据集成框架 Flink CDC 3.0 —— 核心技术架构解析

本文整理自阿里云开源大数据平台吕宴全关于新一代实时数据集成框架 Flink CDC 3.0 的核心技术架构解析,内容主要分为以下四部分: Flink CDC 演进历程 Flink CDC 3.0 的架构设计 Flink CDC 3.0 的核心实现 未来规划 一、Flink CDC 演进历程 Flink CDC 是基于数据库日志 CDC(Change Dat...

新一代实时数据集成框架 Flink CDC 3.0 —— 核心技术架构解析
文章 2024-03-10 来自:开发者社区

Flink【基础知识 01】(简介+核心架构+分层API+集群架构+应用场景+特点优势)(一篇即可大概了解flink)

目前比较流行的大数据混合处理引擎 Spark【基于内存】,基本上已经取代了Hadoop 的 MapReduce 【基于IO】成为当前大数据处理的标准。Spark-Streaming 的流计算本质上还是批(微批)计算,Flink 是近年来在开源社区不断发展的技术中的能够同时支持高吞吐、低延迟、高性能的纯实时的分布式处理框架【Flink的开窗函数丰富】。 1. 简介 Flink 在德语中是快速和...

Flink【基础知识 01】(简介+核心架构+分层API+集群架构+应用场景+特点优势)(一篇即可大概了解flink)
文章 2024-01-25 来自:开发者社区

Flink 2.0 状态管理存算分离架构演进

本文整理自阿里云智能 Flink 存储引擎团队负责人梅源在 Flink Forward Asia 2023 的分享,梅源结合阿里内部的实践,分享了状态管理的演进和 Flink 2.0 存算分离架构的选型。内容主要分为以下五部分: 引言为什么状态对 Flink 如此重要状态存储提升 ——社区和商业版状态存储状态管理存算分离架构 ——架构演进和挑战总结 ...

Flink 2.0 状态管理存算分离架构演进
问答 2024-01-10 来自:开发者社区

Flink什么时候开通深圳区?容量用户可以直接用这个CPU架构?

Flink什么时候开通深圳区?容量用户可以直接用这个CPU架构?

文章 2023-12-29 来自:开发者社区

京东实时计算架构演进之路

一、背景:从2004年开始,京东进军互联网线上化开始到至今,随着京东的高速发展,京东商城的订单量从万级到百万级、最终到达亿级。而对于实时的数据需求也是层出不穷,实时计算架构随着数据量的增长,不断进行革新。二、京东实时计算架构演进之路(1)订单量万级、百万级(以京东海外站为例)在订单量万级、百万级别的时候,也存在不少实时的数据需求,比如:商家需要看看自己每天的成交量、老板需要看看整体的成交金额,以....

京东实时计算架构演进之路
文章 2023-12-29 来自:开发者社区

线上产品实时计算架构设计

一、背景:在用户打开电商购物等app时,经常会需要给用户推荐匹配的商品。那这样一个流程是如何完成的呢?1.离线推荐基于hive离线表的数据,提前计算好用户的偏好信息,整理逻辑相对简单,但是推送的商品转换率会相对较差2.实时推荐接入用户实时点击、浏览日志信息写入到kafka,flink 接入kafka 消息数据,做一些特征的加工,结合算法模型做一个偏好识别,实时进行推荐商品显然第二种方案:实时推荐....

线上产品实时计算架构设计
问答 2023-12-28 来自:开发者社区

Flink这个地方是hologres的版本吗?是不是太低了不支持上午的实时数仓那个架构,得升级?

Flink这个地方是hologres的版本吗?是不是太低了不支持上午的实时数仓那个架构,得升级?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注