HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

状态一致性

状态flink中通过状态来实现容错、状态一致性以及checkpoint机制,对于状态通俗来讲就是将数据或者程序运算的中间结果进行备份,这样可以保证程序中途出错可以从这里恢复;状态类型程序中保存的状态保存的具体类型是什么,哪些状态可以保存呢?!

Flink海量数据去重方案

前言数据去重(datadeduplication)是我们大数据攻城狮司空见惯的问题了。除了统计UV等传统用法之外,去重的意义更在于消除不可靠数据源产生的脏数据——即重复上报数据或重复投递数据的影响,使流式计算产生的结果更加准确。本文以Flink处理日均亿级别及以上的日志数据为背景,讨

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。