碳基程序员的头像 ID: 18882005892

碳基程序员

HelloWorld 社区成员

6039706791

文章4
个人网站0
加入社区2025

关于在hive任务中number of reducers的探讨

1.在默认情况下(setmapreduce.job.reduces1),实际运行计算过程中reducer的数量会由所读取文件的大小来决定。文件默认大小是256M,即每256M对应一个reduce。比如当文件大小为1G时,会启用4个reducer处理数据;当文件大小为400M时,会启用2个red

dart系列之:安全看我,dart中的安全特性null safety

简介在Dart2.12中引入了nullsafety的新特性,也就是说dart程序中默认类型都是非空的,除非你显示告诉编译器,这个类型可以为空。看起来是一个小小的改动,但是这个小小的改动导致了很多Dart包的大版本升级,从而导致使用Dart2.12之前的版本跟使用dart2.12之

Java基础17:Java IO流总结

更多内容请关注微信公众号【Java技术江湖】这是一位阿里Java工程师的技术小站,作者黄小斜,专注Java相关技术:SSM、SpringBoot、MySQL、分布式、中间件、集群、Linux、网络、多线程,偶尔讲点Docker、ELK,同时也分享技术干货和学习经验,致力于Ja