HelloWorld 开发者社区
科技资讯
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
qData 1.6.7 发布:修复增量读取与 ETL 字段传递问题
Apple HomeView 在部分地区开售,整合家庭控制与视频通话
Cloudflare 推出 Spend Management Beta,为 Workers 增加支出限制
Cloudflare 开源 Kitesurf:面向 AI 智能体的轻量浏览器引擎
JeecgBoot 与敲敲云介绍分层方案,连接低代码开发与业务搭建
开源项目
全部项目推荐好文
Linux 进程卡住了怎么办?
在我们使用Linux系统时,如果网络或者磁盘等I/O出问题,会发现进程卡住了,即使用<codekill9</code也无法杀掉进程,很多常用的调试工具,比如<codestrace</code,<codepstack</code等也都失灵了,是怎么回事?!(h
JuiceFS 数据加密原理
JuiceFS作为分布文件系统,每天与海量的数据打着交道,因此数据的安全性尤为关键,今天就来介绍一下JuiceFS在数据加密方面所做的努力。传输中数据加密JuiceFS在网络上传输时会对数据进行加密,以防止未经授权的用户窃听网络通信。JuiceFS客户端始终使用HT
巧用符号链接迁移 HDFS 数据,业务完全无感知!
问题JuiceFS是一个基于对象存储的分布式文件系统,在之前跟对象存储比较的文章中已经介绍了JuiceFS能够保证数据的强一致性和极高的读写性能,因此完全可以用来替代HDFS。但是数据平台整体迁移通常是一个费时费力的大工程,需要做到迁移超大规模数据的同时尽量不影响上层业务。下面将
大数据之面试篇之Hadoop/HDFS/Yarn
MapReduce篇Hadoop解决大规模数据分布式计算的方案是MapReduce。MapReduce既是一个编程模型,又是一个计算框架。也就是说,开发人员必须基于MapReduce编程模型进大数据培训(https://link.segmentfault.com/?encmUeFEux
Hdfs学习(一)
HDFS1、HDFS概述1.1简介HDFS(HadoopDistributedFileSystem),Hadoop分布式文件系统,用来解决海量数据的存储问题。核心组件:HDFS(分布式文件系统)YARN(运算资源调度系统)MAPREDUCE(分布式运算编程
大数据开发基础之HDFS参数调优步骤分享
1.NameNode数据目录dfs.name.dir,dfs.namenode.name.dir指定一个本地文件系统路径,决定NN在何处存放fsimage和editlog文件。可以通过逗号分隔指定多个路径.目前我们的产线环境只配大数据培训(https://link.segme
大数据开发之HDFS的API操作过程
创建maven工程并导入jar包<repositories><pre<code<repository><id>cloudera</id><url>https://repository.cloudera.co
大数据开发中相关HDFS的这几个问题应该知道
1.Namenode的安全模式?安全模式是Namenode的一种状态(Namenode主要有active/standby/safemode三种模式)。2.哪些情况下,Namenode会进入安全模式?a.Namenode发现集群中的block丢失率达到一定比例时(默认
Structured Streaming 之状态存储解析
引言我们知道,持续查询的驱动引擎StreamExecution会持续不断地驱动每个批次的执行。对于不需要跨批次的持续查询,如map(),filter()等,每个批次之间的执行相互独立,不需要状态支持。而比如类似count()的聚合式持续查询,则需要跨批次的状态支持,这样本批次的执行只需依赖上一个批次的结果,而不需要
Sqoop 使用shell命令的各种参数的配置及使用方法
点击上方蓝色字体,选择“设为星标”回复”资源“获取更多资源!(https://oscimg.oschina.net/oscnet/7d6949c98cb712bb657c3be769edf05846b.jpg)本文作者:SheepSun本文链接:https://www.cnblogs.com/yangxusun9/p/1
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。