文章

全链路数据治理实操演练营,互联网、金融、制造等行业都适用!

<blockquote<strong简介:</strong全链路数据治理全域数据集成训练营已上线!大数据开发治理平台DataWorks推出多个大数据训练营(持续更新中),全域数据集成训练营可完成多种数据源、多种网络环境下的离线同步与实时同步。参营还可领取定制无线充、定制折扇!</blockq

阿里大淘系模型治理阶段性分享

<blockquote<strong简介:</strong阿里大淘系数据体系经过多年发展,通过丰富的数据和产品支撑了复杂的业务场景,在数据领域取得了非常大的领先优势。随着数据规模越来越大,开发人员越来越多,虽有阿里大数据体系规范进行统一管理,但是由于没有在产品侧进行有效的模型设计和管控,在模型

阿里开源 支持10万亿模型的自研分布式训练框架EPL(Easy Parallel Library)

作者:王林、飒洋导读最近阿里云机器学习PAI平台和达摩院智能计算实验室一起发布“低碳版”巨模型M610T,模型参数已经从万亿跃迁到10万亿,规模远超业界此前发布的万亿级模型,成为当前全球最大的AI预训练模型。同时做到了业内极致的低碳高效,使用512GPU在10天内即训练

MapReduce 基本原理(MP用于分布式计算)

hadoop最主要的2个基本的内容要了解。上次了解了一下HDFS,本章节主要是了解了MapReduce的一些基本原理。MapReduce文件系统:它是一种编程模型,用于大规模数据集(大于1TB)的并行运算。MapReduce将分为两个部分:Map(映射)和Reduce(归约)。当你向mapreduce框架提交一个计算作业,它会首先把计算作业分成若干个

Fourinone四合一分布式计算框架整体介绍

FourInOne(中文名字“四不像”)是一个四合一分布式计算框架,在写这个框架之前,我对分布式计算进行了长时间的思考,也看了老外写的其他开源框架,当我们把复杂的hadoop当作一门学科学习时,似乎忘记了我们想解决问题的初衷:我们仅仅是想写个程序把几台甚至更多的机器一起用起来计算,把更多的cpu和内存利用上,来解决我们数量大和计算复杂的问题,当然这个过程中要

已加载文章中没有匹配内容,试试其他关键词或清空搜索。