HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

用于大数据测试、学习的测试数据

近期在做一个数据报表的项目,原数据在mysql中,现数据量上百万后,整个报表无法查询。故学习hadoop、kylin相关知识,学习过程中碰到了不少问题,后续讲统一整理发布本篇主要为记录为学习准备的测试数据模拟订单测试数据,文件为mysql导出的csv文件,比较好处理,可以导入hive,或者导入m

Hadoop小文件解决方案-Hadoop小文件的前因后果

Hadoop不适用于大量小文件,而是需要更少的大文件。这可能是您之前听过的声明。但是,为什么Hadoop会出现大量小文件的问题?而且,“小”究竟是什么意思呢?在本系列的第一部分中,我将回答这些问题。后续部分将讨论解决或解决小文件问题。什么是小文件?小文件可以定义为

搭建hadoop分布式环境

Hadoop分布式安装<code说明</code<blockquote<ol<li本文利用三台机器,均安装centos6</li<li除了最后启动和停止,所有操作均要在三台机器上做</li<li有些配置文件可以先在一台机器上完成配置,然后通过scp发

以智能数据架构,挖掘增长金矿

对很多技术团队来说,在搭建智能数据架构的过程中,或多或少会遇到一些疑惑和挑战,经过多次实践后,有些团队已经破除疑惑,成功探索出一条搭建智能数据架构之路,那么他们是如何实现这一技术的呢?在近日的个推技术沙龙成都站,几位架构大师在现场开启了数据技术的“脑暴时间”。诺基亚网络成都

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。