HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

Flink Slot详解与Job Execution Graph优化

前言近期将FlinkJob从Standalone迁移至了OnYarn,随后发现Job性能较之前有所降低:迁移前有8.3W/S的数据消费速度,迁移到Yarn后分配同样的资源但消费速度降为7.8W/S,且较之前的消费速度有轻微的抖动。经过原因分析和测试验证,最终采用了在保持分配给Job

即将发版!Apache Flink 1.9 版本有哪些新特性?

2019阿里云峰会·上海开发者大会于7月24日盛大开幕,本次峰会与未来世界的开发者们分享开源大数据、IT基础设施云化、数据库、云原生、物联网等领域的技术干货,共同探讨前沿科技趋势。本文整理自开源大数据专场中阿里巴巴高级技术专家杨克特(鲁尼)先生的精彩演讲,主要讲解了ApacheFlink过去和现在

Flink 1.8.0中的状态生存时间特性:如何自动清理应用程序的状态

对于许多状态流式计算程序来说,一个常见的需求是自动清理应用程序的状态(state),以便有效地控制状态大小,或者控制程序访问状态的有效时间(例如受限于诸如GDPR等法律条规)。ApacheFlink自1.6.0版本引入了状态的生存时间(timetolive,TTL)功能,使得应用程序的状态清理

日均处理万亿数据!Flink在快手的应用实践与技术演进之路

作者介绍:董亭亭,快手大数据架构实时计算引擎团队负责人。目前负责Flink引擎在快手内的研发、应用以及周边子系统建设。2013年毕业于大连理工大学,曾就职于奇虎360、58集团。主要研究领域包括:分布式计算、调度系统、分布式存储等系统。本次的分享包括以下三个部分:介绍Flin

应用案例 | 从Storm到Flink,有赞五年实时计算效率提升实践

作者|贺飞公司介绍:有赞是一个商家服务公司,提供全行业全场景的电商解决方案。在有赞,大量的业务场景依赖对实时数据的处理,作为一类基础技术组件,服务着有赞内部几十个业务产品,几百个实时计算任务,其中包括交易数据大屏,商品实时统计分析,日志平台,调用链,风控等多个业务场景,本文将

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。