文章
Flink 最佳搭档:开发部署平台 Zeppelin 的自白
Flink的学习者或者爱好者想必十分了解,除了需要熟悉Flink本身之外,如果能有一款简单上手的Flink开发部署工具,不用写前端代码就能实现实时大屏、支持全部语言接口、支持多条SQL,还能管理FlinkJob,这样的开发部署平台是不是完全无法拒绝?很幸运,Apache社区就有
Flink 1.11 Unaligned Checkpoint 解析
作为Flink最基础也是最关键的容错机制,Checkpoint快照机制很好地保证了Flink应用从异常状态恢复后的数据准确性。同时Checkpoint相关的metrics也是诊断Flink应用健康状态最为重要的指标,成功且耗时较短的Checkpoint表明作业运行状况良好,
Flink学习--Flink SQL 窗口函数
flink窗口函数包含滚动窗口、滑动窗口、会话窗口和OVER窗口滚动窗口滚动窗口(TUMBLE)将每个元素分配到一个指定大小的窗口中。通常,滚动窗口有一个固定的大小,并且不会出现重叠。例如,如果指定了一个5分钟大小的滚动窗口,无限流的数据会根据时间划分为<code0:0
Flink学习--Flink on Yarn
本文转载自:https://ververica.cn/develope...(https://link.segmentfault.com/?encKuWBJ6C2nMTmcCVrtnUScg%3D%3D.LLEvXr6qfDAYSasb3f3zJ4AvE0OntaXWLsaxJORETIyqh
【赵渝强老师】Flink的Watermark机制(基于Flink 1.11.0实现)
!(https://imghelloworld.osscnbeijing.aliyuncs.com/imgs/13ab3f04773ca8f80f9de14123d3d138.png)在使用eventTime的时候如何处理乱序数据?我们知道,流处理从事件产生,到流经source,再到
Flink学习--管理大型状态之增量 Checkpoint 详解
文章转载自:https://ververica.cn/develope...(https://link.segmentfault.com/?encEgIpSmXrm4Hp5lOpVbOjLQ%3D%3D.3N7m6QiM3qiHR8nbKIgKZrb2zIHf%2F6NvmVqpsNjXfq%
flink on native kubernetes
上一章讲了flink的applicationmode。今天我们主要通过该模式提交<codeWordCount</code作业,并且选择的是nativekubernetes。NativeKubernetes原理下图描述了flink如何与kubernetes集成:
Flink 生态:Pulsar Connector 机制剖析
ApachePulsar是Yahoo开源的下一代分布式消息系统,在2018年9月从Apache软件基金会毕业成为顶级项目。Pulsar特有的分层分片的架构,在保证大数据消息流系统的性能和吞吐量的同时,也提供了高可用性、高可扩展性和易维护性。分片架构将消息流数据的存储粒度从分区拉低到
探究 flink1.11 Application 模式
随着流式计算的兴起,实时分析成为现代商业的利器。越来越多的平台和公司基于ApacheFlink构建他们的实时计算平台,并saas化。这些平台旨在通过简化应用的提交来降低最终用户的使用负担。通常的做法是,会提供一个诸如管理平台的web程序,方便使用者提交应用,并且该平台集成了一些权限,监控等内
Flink学习--内存管理
本文转载自:https://ververica.cn/develope...(https://link.segmentfault.com/?encPfe7Nhto0Kz0Q78U01K2kg%3D%3D.4NpTKwWai3kpy5tH39Fods1l1skbItKmmNugBDNuimyzn
已加载文章中没有匹配内容,试试其他关键词或清空搜索。