文章
【赵渝强】《大数据原理与实战》新书上市!!!
经过近一年的等待,《大数据原理与实战》新书上市!!先睹为快!!!点击这里查看详情(https://link.segmentfault.com/?encyiL4JYiwO1hhdbf7fjnG2w%3D%3D.6PHZ7sLolB9c2olzGsFYZfnOnK7f%2F
解构流存储 — Pravega,与 Flink 构建端到端的大数据流水处理线
<blockquote<p本篇内容整理自Pravega中国社区创始人、戴尔科技集团软件工程技术总监滕昱在FlinkForwardAsia2021主会场的演讲。主要内容包括:</p<ol<li存储抽象的现状</li<liPravega性能架构详解</li<liPrav
大数据培训:在 flink 中使用 hive udf的原因分析
1.序篇废话不多说,咱们先直接上本文的目录和结论,小伙伴可以先看结论快速了解博主期望本文能给小伙伴们带来什么帮助:背景及应用场景介绍:博主期望你能了解到,其实很多场景下实时数仓的建设都是随着离线数仓而建设的(相同的逻辑在实时数仓中重新实现一遍),因此能够在flinksql中复用hive
大数据培训:Flink调度器性能的提高
分发模式描述了消费者任务如何连接到生产者任务。目前,Flink中有两种分布模式:pointwise和alltoall。当分布模式在两个顶点之间是逐点分布时,遍历所有边的计算复杂度为O(n)。当分布模式为alltoall时,遍历所有边的复杂度为O(n2),这意味着随着规模的增
Flink SQL 在快手的扩展和实践
<blockquote<p摘要:本文整理自快手实时计算团队技术专家张静、张芒在FlinkForwardAsia2021的分享。主要内容包括:</p<ol<liFlinkSQL在快手</li<li功能扩展</li<li性能优化</li<li稳定性提升</li<li
BIGO 使用 Flink 做 OLAP 分析及实时数仓的实践和优化
<blockquote<p本文整理自BIGOStaffEngineer邹云鹤在FlinkForwardAsia2021的分享。主要内容包括:</p<ol<li业务背景</li<li落地实践&特色改进</li<li应用场景</li<li未来规划</l
Flink采坑-bean对象规范
<pre<codeStreamExecutionEnvironmentenvStreamExecutionEnvironment.getExecutionEnvironment();env.setStreamTimeCharacteristic(TimeCharacteristic.E
读Flink源码谈设计:Exactly Once
<blockquote本文首发于<ahref"https://link.segmentfault.com/?encSWNapNvCuF%2FZpWmI%2Bnk%2FfA%3D%3D.WbRm%2B8ki0t%2FBwDY1U6vBBWoLmtEEmdwpxPgRKoXktLA%3D"re
Flink 流式写入Iceberg实现原理
Iceberg作为凌驾于HDFS和S3等存储系统之上的数据组织框架,提供了数据写入、读取、文件管理和元数据管理等基本功能,虽然Iceberg提供了丰富的API接口,但是面向API开发需要使用方比较了解其原理和实现细节,还是显得门槛过高。此外,在面向实时数据读写场景,需要有一个桥接框架来自动完成数据的
读Flink源码谈设计:图的抽象与分层
<blockquote本文首发于<ahref"https://link.segmentfault.com/?enc9TOhEnJCSRj%2BIHuPRfyCTg%3D%3D.TmcESqL065DdoCVVBSXk01I1hL7jEfKrwLWr1fAUNJY%3D"rel"nofol
已加载文章中没有匹配内容,试试其他关键词或清空搜索。