HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

巧用 JuiceFS Sync 命令跨云迁移和同步数据

近年来,云计算已成为主流,企业从自身利益出发,或是不愿意被单一云服务商锁定,或是业务和数据冗余,或是出于成本优化考虑,会尝试将部分或者全部业务从线下机房迁移到云或者从一个云平台迁移到另一个云平台,业务迁移涉及到数据的迁移。正好JuiceFS已经对接了各种对象存储的API,也实现了数据同步的逻

云上共享文件系统的兼容性大比拼

「一切皆文件」是UNIX的基本设计哲学。文件按照层级关系组织为树形目录,构成了文件系统的基本形态。用户使用文件系统来保存数据时,不必关心数据底层的存储方式,便可以按照约定的接口规范进行访问。概念篇关于文件系统的接口规范,应用最为广泛的莫过于POSIX,源于IEEE

hdfs数据误删后恢复方式

我们知道hdfs是hadoop体系上的文件系统,负责具体的数据文件存储,且如果一旦hdfs文件被误删除后,尤其是重要数据,对公司来说影响非常大。所以需要提前做一些安全预防措施,例如使用HdfsTrash机制,或者重要目录应用HdfsSnapShot功能,然后针对于删除的文件或者目录可以通过tra

Hadoop学习总结

HDFS相关HDFS写数据的流程首先由客户端向NameNode服务发起写数据请求NameNode收到请求后会进行基本验证验证类容包括对请求上传的路径进行合法验证对请求的用户进行权限验证验证没有问题后,NameNode会响应客户端允许上传接下来客户端会对文件按照blocksize大小进行切块,切完后依次以块为单位上传此时客户端会请求上传

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。