HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

[Spark]Shuffle

Spark丰富了任务类型,有些任务之间数据流转不需要通过Shuffle,但是有些任务之间还是需要通过Shuffle来传递数据,比如widedependency的groupbykey。为了方便理解,在Shuffle操作中,我们称负责分发数据的Executor叫做<codeMapper</c

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。