HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

Hadoop 及Spark 分布式HA运行环境搭建

作者:京东物流秦彪工欲善其事必先利其器,在深入学习大数据相关技术之前,先手动从0到1搭建一个属于自己的本地Hadoop和Spark运行环境,对于继续研究大数据生态圈各类技术具有重要意义。本文旨在站在研发的角度上通过手动实践搭建运行环境,文中不拖泥带水过多讲述基础知识,结合Hado

Spark 在 KaiwuDB 中的应用与实践

01走进Spark1、Spark介绍(1)Spark是用于大规模数据处理的统一分析引擎;(2)运行速度快:Spark使用先进的DAG执行引擎,以支持循环数据流与内存计算,基于内存的执行速度可比HaddopMapReduce快上百倍,基于磁盘的执行速度也能快十倍;

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。