HelloWorld 开发者社区
科技资讯
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
开源项目
全部项目推荐好文
sbt编译Spark App依赖问题
背景简介SparkApp(用SparkAPIs编写的)需要submit到SparkCluster运行,对于Scala编写的代码,提交之前要用sbt或者maven把以下内容:源代码依赖的jar包全部打包成一个大的jar文件,这样代码就不会因为没有依赖无法在
Spark 源码解析之SparkContext
SparkContextSparkContext是Spark应用的主入口,通过它可以连接Spark集群,并在集群中创建RDD,累加器,广播变量等;每一个启动JVM上只能有一个SparkContext,在启动一个新的SparkContext之前,必须停掉处于活动状态的Spar
Spark Streaming 避坑的注意事项
两个RDD不能嵌套计算:<pre<codeCausedby:org.apache.spark.SparkException:RDDtransformationsandactionscanonlybeinvokedbythedriver,notinsi
用Spark解决一些经典MapReduce问题
摘要Spark是一个Apache项目,它被标榜为“快如闪电的集群计算”。它拥有一个繁荣的开源社区,并且是目前最活跃的Apache项目。Spark提供了一个更快、更通用的数据处理平台。和Hadoop相比,Spark可以让你的程序在内存中运行时速度提升100倍,或者在磁盘上运行时速度提升1
Spark RDD学习: aggregate函数
最近在做项目的时候遇到了SparkRDD里面的一个aggregate函数,觉得它的用法挺有意思的,在此记录一下。Spark文档中对aggregate的函数定义如下:<pre<codedefaggregateU(zeroValue:U)(seqOp:
距离全方位掌握Apache spark 2.0你就差最后两步
<blockquote<p经过前面两篇对于Spark概念和核心结构的介绍,让我们继续深入了解Spark:)本篇讲述了SparkStreaming和机器学习,大数据中Spark到底做了啥,快来看看吧!</p</blockquote传送门:全方位掌握ApacheSpark2.0七步
全方位掌握Apache Spark 2.0七步走(二)
<blockquote<p在上一篇普及过<ahref"https://link.segmentfault.com/?encoSTXqTKCEtLOwUvkM5O1tw%3D%3D.iZJDLTJ8k4wW9dGS8Tvxj8cFFWC9wIsJoJXWzr4nI90%3D"rel"no
[译]使用Google Cloud计算引擎和机器学习算法实现产品推荐
翻译自 GoogleCloudPlatform原文标题:_UsingMachineLearningonComputeEnginetoMakeProductRecommendations_原文地址:https://cloud.google.com/solu...(ht
全方位掌握Apache Spark 2.0七步走(一)
<blockquote<p在这个人人都谈<ahref"https://link.segmentfault.com/?encpiAZn7%2BccFWyNc%2BYewnIXA%3D%3D.nN2zFfujKg2DFT%2FiMHlTmr6fjHOa5VtiLD5Sw1zs%2B2w%3D"
带你入门Spark(资源整理)
Spark入门学习资源:Spark入门系列实验课程(https://link.segmentfault.com/?encZGhjDp9s1jUmDNkkdL6eHg%3D%3D.7%2F82mcIXbY4%2BadMegb%2FIzWqXNyUxNIunJx%2FWBzRNl%2Bv1Kc
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。