HelloWorld 开发者社区
科技资讯
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
开源项目
全部项目推荐好文
【mlflow系列2】mlflow migrate元数据从基于文件存储迁移到基于mysql存储
对于需要进行mlflow进行元数据迁移,可以参考该项目(https://link.segmentfault.com/?encdwxJFKdfV%2FgquQ7nMjjJwQ%3D%3D.0SiwupxrjDlNoK5dXrdEqmftn96ImDdTFO4TzGraJF4SnMT9ZIVpXR
【spark系列2】spark 合并github (pull request)pr 的正确姿势
最近在做内部spark版本升级的工作,涉及到github上合并pr的工作,具体的是spark2.x升级到spark3.0.1时兼容hdfscdh2.6.05.13.1,报编译错误<pre<codeINFOCompiling25Scalasourcesto/Use
2. Spark原理-RDD及共享变量
说明本篇仅讨论运行在集群模式下的Spark。本篇阅读时间在15min。本篇用例均在sparkshell交互式脚本。Spark有两个重要的概念,一个是RDD,另一个是ShardVariable。下面详细介绍。1RDDRDD全称是Resilient
1. Spark架构
说明本篇仅讨论运行在集群模式下的Spark。本篇阅读时间在10min。Spark在hadoop组件集的位置Spark是大数据集群的一种计算框架,其在大数据组件的位置如下。!image(https://imghelloworld.osscnbeijin
Scala简明教程
阅读说明本教程面向有一定编程经验的开发者。本教程预计花费30min语言说明scala是基于java开发的,结合了面向对象编程技术及函数式编程技术。scala的静态类型避免了复杂程序的大部分BUG。它的JVM和Js运行环境让你可以构建高性能系统。开始
踩坑记 | Flink 天级别窗口中存在的时区问题
<blockquote本系列每篇文章都是从一些实际的case出发,分析一些生产环境中经常会遇到的问题,抛砖引玉,以帮助小伙伴们解决一些实际问题。本文介绍Flink时间以及时区问题,分析了在天级别的窗口时会遇到的时区问题,如果对小伙伴有帮助的话,欢迎点赞再看~<br/本文主要分为两部
Uber jvm profiler 使用
背景uberjvmprofiler(https://link.segmentfault.com/?encsvlSycmajiVxUcrL2UvQXQ%3D%3D.mYEMuN6NcGHd2K2t1ekQZAJTIFwen%2BHxJMItrudv1ib%2Fa6fId7jg7U
【k8s系列2】spark on k8s(kubernetes) DynamicResourceAllocation(DRA)
<pre<code随着大数据时代的到来,以及kubernetes的愈发火热,好多公司已经把spark应用从yarn迁移到k8s,当然也踩了不少的坑,现在我们来分析一下sparkonk8s的DynamicResourceAllocation这个坑</code</pre注意
【k8s系列1】spark on k8s 与 spark on k8s operator的对比
对于目前基于k8s的的spark应用,主要采用两种方式运行spark原生支持的sparkonk8s(https://link.segmentfault.com/?encVRceSoYHHLNbvjSYKBYrmw%3D%3D.Bf5UmireLB%2B8Dhhswc0
【k8s系列3】kubernetes(k8s) scheduler backend调度的实现
背景<pre<code随着k8s快来越火热,以及自动部署,自动伸缩等优点,我们今天来探讨一下,基于k8s的backend的调度怎么来实现</code</pre组件图!k8sbackend组件(https://imghelloworld.ossc
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。