文章
大数据 论文
PapersPublishedin2014Publishedin2013Publishedin2012Publishedin2011Publishedin2010Publishedin2009Publishedin20
Big Data Ecosystem Dataset
BigDataEcosystemDatasetDataProjectsFrameworksDistributedProgrammingDistributedFilesystemKeyMapDataModelDocumen
scala 实现 hadoop 多重文件输出
<pre<codepackagecom.timger.tools/Createdbytimgeron15126./importcom.timger.etl.TokenizerMapperimportorg.apache.hadoop.conf.Co
Coursera数据工程师董飞:硅谷大数据的过去与未来
<blockquote<p非商业转载请注明作译者、出处,并保留本文的原始链接:<arel"nofollow"href"http://www.ituring.com.cn/article/177529"target"_blank"http://www.ituring.com.c
Impala的神奇指令「COMPUTE STATS」
项目迭代中用Impala逐步替换原有的Hive作为查询组件,速度有了脱胎换骨的飞跃。但在把原先按列存储的表转换成两个按行存储的表之后,联表查询的表现不那么给力了(原先对Hive的十倍速度优势变成了两倍)。考虑到项目转用Impala是我的提议,调整存储结构也是我的提议,这个结果确实是个让我丢面子的事情
基于大数据的中文舆情分析
引言社交媒体发展日益瞩目,博客、微博社交网络等悄然改变着人们的生活方式。微博,微信,包括天猫,京东等用户日益增多,用户主动发布的微博或者评论数量十分可观。在这个社会化的媒体时代,用户成为企业最好的品牌推广大使。如何从这些可观的数据中分析出用户的潜在且准确的购物意愿及用户需求,将成为提高品牌价
Mac下搭建Hadoop单节点
安装Homebrew(http://brew.sh/)rubye&34;$(curlfsSLhttps://raw.githubusercontent.com/Homebrew/install/master/install(https://raw.githubuser
MapReduce学习笔记 —— Map的中间结果
《Hadoop技术内幕——深入解析MapReduce架构设计与实现原理》(董西城著)一书中,第8章《Task运行过程分析》中第3小结详细介绍了MapTask的内部实现,过程如图所示:!MapTask计算流程,图片来自原书(https://imghelloworld.osscnbeij
MapReduce学习笔记
MapOutputBuffer中有一个变量叫做mapOutputFile。在sortAndSpill函数中(被flush调用),会通过这个变量拿到文件地址,并写出中间结果,在该方法中,调用了下文中提到的<codewriter.append(key,value)</code来写出数据。看起来没有
linux+hadoop 权限管理
hadoop体系权限<pre<coderoot@com~hadoopfsmkdir/tmp/tmp_authorityroot@com~hadoopfslsh/tmpFound7itemsdrwxrwxrwxhdfs
已加载文章中没有匹配内容,试试其他关键词或清空搜索。