HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

主流分布式文件系统对比

本文较长,建议细细品读,必有不同的收获。一、概述分布式文件系统是分布式领域的一个基础应用,其中最著名的毫无疑问是HDFS/GFS。如今该领域已经趋向于成熟,但了解它的设计要点和思想,对我们将来面临类似场景/问题时,具有借鉴意义。并且,分布式文件系统并非只有HDFS/GFS

【云原生AI】Fluid + JindoFS 助力微博海量小文件模型训练速度提升 18 倍

简介:深度学习平台在微博社交业务扮演着重要的角色。计算存储分离架构下,微博深度学习平台在数据访问与调度方面存在性能低效的问题。本文将介绍微博内部设计实现的一套全新的基于Fluid(内含JindoRuntime)的新架构方案,显著提升了海量小文件场景模型训练的性能和稳定性,多机多卡分布式训练场景

FRP指定访问者:安全地暴露内网服务

之前的教程介绍的frp内网穿透都是用tcp模式,但是tcp模式是直接把端口映射到公网IP上,很容易被扫描爆破,还是存在一定的风险。我们可以使用frp提供的stcp模式来避免公开暴露端口,要求访问者运行一个frpc作为身份认证和流量转发,把访问者的本地端口绑定到内网frpc服务上。不再公开映射内网fr

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。