Johnny21 Johnny21
3年前
深度剖析什么是 SLI、SLO和SLA?
前言SLO和SLA是大家常见的两个名词:服务等级目标和服务等级协议。云计算时代,各大云服务提供商都发布有自己服务的SLA条款,比如Amazon的EC2和S3服务都有相应的SLA条款。这些大公司的SLA看上去如此的高达上,一般是怎么定义出来的呢?本文就尝试从技术角度解剖一下SLA的制定过程。说SLA不能不提SLO,这个是众所周知的,但是还有一个概念知道的人
Stella981 Stella981
2年前
Apache iceberg:Netflix 数据仓库的基石
天前!(https://oscimg.oschina.net/oscnet/474ff64ad4a65883c370bd3672b1a39cb8e.png)ApacheIceberg是一种用于跟踪超大规模表的新格式,是专门为对象存储(如S3)而设计的。本文将介绍为什么Netflix需要构建Iceberg,ApacheIceberg 的高
Stella981 Stella981
2年前
Amazon S3 设置对象的生命周期Lifecycle
保存在S3上面的文件,有些是长期保存的,而有一些我们却不希望保存太久,过一段时间后就可以删除了。例如备份文件,太旧的就要删除;又或如日志文件,只保存某段时间的就行了。在S3中,可以通过Buckets的Lifecycle生命周期来设置文件对象的过期时间。文件一旦到达其设置的过期时间,就会自动被删除。我们现创建一个文件夹“temp”,在temp里上传一个
Stella981 Stella981
2年前
Jenkins+Gradle+Docker打docker镜像包上传至s3
gradle打包跟maven打包的环境搭建有相似之处,可参考maven打包https://www.cnblogs.com/chenchentester/p/6408815.html进入Jenkins,系统管理》插件管理,下载所需插件GitPlugin项目目录!(https://oscimg.oschina.net/oscnet/e0f
Wesley13 Wesley13
2年前
CEPH篇 块存储、文件存储和对象存储意义和差异
理解块存储、文件存储和对象存储的应用场景和选择应用场景(王豪迈(麦子迈|wheats))  分布式存储的应用场景相对于其存储接口,现在流行分为三种:对象存储:也就是通常意义的键值存储,其接口就是简单的GET、PUT、DEL和其他扩展,如七牛、又拍、Swift、S3块存储:这种接口通常以
Stella981 Stella981
2年前
Coding and Paper Letter(三十九)
资源整理。1Coding:1.Python库benchmarkrios3,用于在访问S3上的文件时对Rasterio/GDAL的多线程性能进行基准测试的工具。benchmarkrios3(https://www.oschina.net/action/GoToLink?urlhttps%3A%2F%2Fgit
Wesley13 Wesley13
2年前
Upload a file with $.ajax to AWS S3 with a pre
转载自:https://gist.github.com/guumaster/9f18204aca2bd6c71a24生成预签名的Demo文档:https://docs.aws.amazon.com/zh\_cn/AmazonS3/latest/dev/PresignedUrlUploadObjectJavaSDK.html前端写法:生成签名:(.
Stella981 Stella981
2年前
Flink的分布式缓存
分布式缓存Flink提供了一个分布式缓存,类似于hadoop,可以使用户在并行函数中很方便的读取本地文件,并把它放在taskmanager节点中,防止task重复拉取。此缓存的工作机制如下:程序注册一个文件或者目录(本地或者远程文件系统,例如hdfs或者s3),通过ExecutionEnvironment注册缓存文件并为它起一个名称。
芝士年糕 芝士年糕
1年前
windows安装minio
一、概述最近在学习使用minio,在这里对自己的学习过程做一个记录和总结,方便自己查阅。Minio是GlusterFS创始人之一AnandBabuPeriasamy发布新的开源项目。Minio兼容Amason的S3分布式对象存储项目,采用Golang实现,客户端支持Java、Python、Javacript、Golang语言。Minio可以做为云存储的
绣鸾 绣鸾
6个月前
QSpace Pro 4 for Mac(多面板文件管理器)
是一个干净高效的多面板文件管理器,也可以连接到FTP,SFTP,WebDAV,Dropbox,OneDrive,GoogleDrive,AmazonS3(和S3兼容),AliyunOSS。它具有与Finder相同的工作原理和界面视图,但也支持更灵活和实用的