在挂载文件存储HDFS版的Hadoop集群上安装及使用ApacheFlink
本文介绍如何在挂载文件存储 HDFS 版的Hadoop集群上安装及使用Apache Flink。
Apache Flink 的迁移之路,2 年处理效果提升 5 倍
作者:肖强(TalkingData 资深工程师) 一、背景与痛点 在 2017 年上半年以前,TalkingData 的 App Analytics 和 Game Analytics 两个产品,流式框架使用的是自研的 td-etl-framework。该框架降低了开发流式任务的复杂度,对于不同的任务只需要实现一个 changer 链即可,并且支持水平扩展,性能尚可,曾经可以满足业务需求。 但是到....

Apache Flink 为什么能够成为新一代大数据计算引擎?
作为公认的新一代大数据计算引擎,Flink 究竟以何魅力成为阿里、腾讯、滴滴、美团、字节跳动、Netflix、Lyft 等国内外知名公司建设流计算平台的首选?
Apache Flink 为什么能够成为新一代大数据计算引擎?
众所周知,Apache Flink(以下简称 Flink)最早诞生于欧洲,2014 年由其创始团队捐赠给 Apache 基金会。如同其他诞生之初的项目,它新鲜,它开源,它适应了快速转的世界中更重视的速度与灵活性。 大数据时代对人类的数据驾驭能力提出了新的挑战,Flink 的诞生为企业用户获得更为快速、准确的计算能力提供了前所未有的空间与潜力。作为公认的新一代大数据计算引擎,Flink 究竟以何魅....

带你读《Flink原理、实战与性能优化》之一:Apache Flink介绍
大数据技术丛书点击查看第二章点击查看第三章Flink原理、实战与性能优化 张利兵 著第1章 Apache Flink介绍本章对Apache Flink从多个方面进行介绍,让读者对Flink这项分布式处理技术能够有初步的了解。1.1节主要介绍了Flink的由来及其发展历史,帮助读者从历史的角度了解Flink这项技术发展的过程。1.2节重点介绍了Flink能够支持的各种实际业务场景、Flink所具.....
企业实践 | 如何更好地使用 Apache Flink 解决数据计算问题?
业务数据的指数级扩张,数据处理的速度可不能跟不上业务发展的步伐。基于 Flink 的数据平台构建、运用 Flink 解决业务场景中的具体问题等随着 Flink 被更广泛的应用于广告、金融风控、实时 BI、实时数仓、实时推荐等多种业务场景,在生产实践中已有丰富的案例与优秀的经验。 Flink Forward Asia 倒计时 28 天,企业实践专题大会邀请了字节跳动、滴滴出行、快手、Bilibil....
Apache Flink : Checkpoint 原理剖析与应用实践
Checkpoint 与 state 的关系Checkpoint 是从 source 触发到下游所有节点完成的一次全局操作。下图可以有一个对 Checkpoint 的直观感受,红框里面可以看到一共触发了 569K 次 Checkpoint,然后全部都成功完成,没有 fail 的。 state 其实就是 Checkpoint 所做的主要持久化备份的主要数据,看下图的具体数据统计,其 state .....

Apache Flink 进阶(三):Checkpoint 原理解析与应用实践
作者:唐云(茶干) 大家好,今天我将跟大家分享一下 Flink 里面的 Checkpoint,共分为四个部分。首先讲一下 Checkpoint 与 state 的关系,然后介绍什么是 state,第三部分介绍如何在 Flink 中使用state,第四部分则介绍 Checkpoint 的执行机制。 Checkpoint 与 state 的关系 Checkpoint 是从 source 触发到下游所....

Apache Flink 进阶(一):Runtime 核心机制剖析
作者:高赟(云骞) 1. 综述 本文主要介绍 Flink Runtime 的作业执行的核心机制。首先介绍 Flink Runtime 的整体架构以及 Job 的基本执行流程,然后介绍在这个过程,Flink 是怎么进行资源管理、作业调度以及错误恢复的。最后,本文还将简要介绍 Flink Runtime 层当前正在进行的一些工作。 2. Flink Runtime 整体架构 Flink ...

Apache Flink 在同程艺龙实时计算平台的研发与应用实践
本文主要介绍 Apache Flink 在同程艺龙的应用实践,从当前同程艺龙实时计算平台现状、建设过程、易用性提升、稳定性优化四方面分享了同城艺龙实时计算平台的建设经验,供大家参考。 1.背景介绍 在 2015 年初,为了能够采集到用户在 PC,APP 等平台上的行为轨迹,我们开始开发实时应用。那时可选的技术架构还是比较少的,实时计算框架这块,当时比较主流的有 Storm 和 Spark-str....
本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。
Apache更多flink相关
- Apache flink框架
- 大数据Apache flink
- Apache flink数据
- Apache flink分析
- Apache flink kafka
- Apache flink技术
- Apache flink版本
- Apache flink连接
- Apache flink推理
- Apache flink流处理
- Apache flink场景
- Apache flink实时计算
- Apache flink优化
- 官宣Apache flink
- Apache flink案例
- Apache flink meetup北京站
- Apache flink客户端
- flink caused Apache
- Apache flink应用实践
- Apache flink fault tolerance
- Apache flink spark
- Apache flink引擎
- Apache flink ml
- Apache hudi flink
- flink Apache实时计算
- Apache flink下载
- Apache flink window
- Apache flink开源
- Apache flink join
- Apache flink教程
Apache您可能感兴趣
- Apache场景
- Apache数据
- Apache doris
- Apache版本
- Apache实践
- Apache榜单
- Apache seata
- Apache开源项目
- Apache开源
- Apache日志
- Apache配置
- Apache rocketmq
- Apache安装
- Apache php
- Apache dubbo
- Apache tomcat
- Apache服务器
- Apache linux
- Apache spark
- Apache开发
- Apache服务
- Apache报错
- Apache mysql
- Apache微服务
- Apache访问
- Apache kafka
- Apache从入门到精通
- Apache hudi
- Apache应用
- Apache web
Apache Spark 中国技术社区
阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!
+关注