HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

Spark Streaming连接Kafka的两种方式 direct 跟receiver 方式接收数据的区别

Receiver是使用Kafka的高层次ConsumerAPI来实现的。Receiver从Kafka中获取的数据都是存储在SparkExecutor的内存中的,然后SparkStreaming启动的job会去处理那些数据。然而,在默认的配置下,这种方式可能会因为底层的失败而丢失数据。如果要启用高可靠机制,让数据零丢失,就必须启用Spark

SkyWalking 分布式链路追踪:最新 Kafka 通信模型设计

\\SkyWalking\\是一个开源\\APM\\系统,包括针对\\CloudNative\\体系结构中的分布式系统的监视、跟踪、诊断功能。核心功能如下:\服务、服务实例、端点指标分析\根本原因分析,在运行时分析代码\服务拓扑图分析\服务、服务实例和端点依赖性分析\检测到慢

Serverless 在游戏运营行业进行数据采集分析的最佳实践

众所周知,游戏行业在当今的互联网行业中算是一棵常青树。在疫情之前的2019年,中国游戏市场营收规模约2884.8亿元,同比增长17.1%。2020年因为疫情,游戏行业更是突飞猛进。玩游戏本就是中国网民最普遍的娱乐方式之一,疫情期间更甚。据不完全统计,截至2019年,中国移动游戏用户规模约6.6亿人,占中国总网民规模8.47亿的77.92%,可见游戏作为一种低

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。