HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

体系结构方案 -ETL 中间件

【摘要】ETL常常做成ELT甚至LET!这样做带来的恶果是:1)数据库臃肿、负担重,数据管理混乱;2)性能低下,时间成本高(数据库写入很慢),影响ETL窗口时间。解决方案:引入库外计算引擎集算器,直接计算多样数据源,不依赖于数据库,真正做成ETL。集算器是一种擅长处理复杂

优化体系结构 - 解决多样性数据源

【摘要】多样性数据源普遍存在,且本身没有计算能力,常规手段总是需要建设专门的数据仓库及ETL转入工作,增加额外工作量,且实时性也不好。若采用专业的数据计算引擎,这些不足将迎刃而解!去乾学院看个究竟吧!优化体系结构解决多样性数据源(https://link.segmentfault.co

美图离线ETL实践

美图收集的日志需要通过ETL程序清洗、规整,并持久化地落地于HDFS/Hive,便于后续的统一分析处理。!clipboard.png(/img/bVbgbZ8?w925&h419)什么是ETL?ETL即ExtractTransformLoad

DataPipeline CTO陈肃:从ETL到ELT,AI时代数据集成的问题与解决方案

引言:2018年7月25日,DataPipelineCTO陈肃在第一期公开课上作了题为《从ETL到ELT,AI时代数据集成的问题与解决方案》的分享,本文根据陈肃分享内容整理而成。大家好!很高兴今天有机会和大家分享一些数据集成方面的看法和应用经验。先自我介绍一下。我叫陈肃,博士毕业于中国科学院大

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。