HelloWorld 开发者社区
科技资讯
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
开源项目
全部项目推荐好文
Spark序列化
序列化常用于网络传输和数据持久化以便于存储和传输,Spark通过两种方式来创建序列化器1.序列化器SparkEnv<pre<code//serializer序列化器,主要用于序列化Shuffle数据,以及RDDCache等场合valserializer
使用Spark分析拉勾网招聘信息(四): 几个常用的脚本与图片分析结果
概述前一篇文章,已经介绍了BMR的基础用法,再结合Spark和Scala的文档,我想应该是可以开始你的数据分析之路的.这一篇文章,着重进行一些简单的思路上的引导和分析.如果你分析招聘数据时,卡在了某个环节,可以试着阅读本文.在继续下面的各种分析前,请确保已经读完了本系列文章的第三篇,
spark-kafka-wordcount
maven<pre<code<properties><project.build.sourceEncoding>UTF8</project.build.sourceEncoding><project.r
spark简单wordcount实例
docker<pre<codedockerpullsequenceiq/spark:1.6.0dockerrunitp8088:8088p8042:8042p4040:4040hsandboxsequenceiq/spark:1.6.0bas
使用Spark分析拉勾网招聘信息(二): 获取数据
要获取什么样的数据?我们要获取的数据,是指那些公开的,可以轻易地获取地数据.如果你有完整的数据集,肯定是极好的,但一般都很难通过还算正当的方式轻易获取.单就本系列文章要研究的实时招聘信息来讲,能获取最近一个月的相关信息,已是足矣.如何获取数据?爬虫,也是可以的,作为
使用Spark分析拉勾网招聘信息(一):准备工作
本系列专属github地址:https://github.com/ios122/spark_lagou(https://link.segmentfault.com/?enc92vqzru0aI7l6hrDTc456g%3D%3D.KGXqqeTZEbYdg9V0qnc6akegangFK1Os
搭建Spark集群?没想到你是这样的k8s
在本文的例子中,你将使用Kubernetes和Docker创建一个功能型ApacheSpark集群。你将使用Sparkstandalone模式安装一个Sparkmaster服务和一组Sparkworkers。对于已熟悉这部分内容的读者,可以直接跳到tl;dr章节。
Spark安装
安装Hadoop及Spark(Ubuntu16.04)安装JDK下载jdk(以jdk8u91linuxx64.tar.gz为例)新建文件夹<codesudomkdir/usr/lib/jvm</code解压下载的jdk文件并
《全栈数据之门》初稿完成
《全栈数据之门》(暂定书名)是末学近5年来工作技能的积累,从8个月前开通公众号写的第一篇起,中间也不知度过了多少个寂寞的夜晚。写文章本来就是一个很费力的活,况且写书要求还得高些。原计划写的是七章,每章七篇,共计七七得四十九篇。只是在写作过程中,舍弃了部分原计划的篇幅。感觉以目前的功力,或是写
飞驰在Mesos的涡轮引擎上
回想起第一次接触Mesos,当时有很多困惑:&34;这到底是用来做啥的?跟YARN比有什么优势?有哪些大公司在使用么?&34;。然而现在技术日新月异地发展,Mesos这个生态圈也开始被越来越多的团队熟悉关注,像k8s,Swarm之类的重量级竞品一个个地涌现。!clipb
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。