HelloWorld 开发者社区
科技资讯
微软 MAI Code 2 系列进入 Copilot:按工程任务选择编程模型
OpenAI 发布 GPT-6.2 Astra 与 Sol:专业交付、编程效率与团队选型
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
开源项目
全部项目推荐好文
大数据开发技术之Spark Job物理执行解析
一个复杂job逻辑执行图:!(https://imghelloworld.osscnbeijing.aliyuncs.com/imgs/561b3afb4caa5ee2bb84c5a8b0b603b5.png)代码贴在本章最后。给定这样一个复杂数据依赖图,如何合理划分stage
个推分享Spark性能调优指南:性能提升60%↑ 成本降低50%↓
前言Spark是目前主流的大数据计算引擎,功能涵盖了大数据领域的离线批处理、SQL类处理、流式/实时计算、机器学习、图计算等各种不同类型的计算操作,应用范围与前景非常广泛。作为一种内存计算框架,Spark运算速度快,并能够满足UDF、大小表Join、多路输出等多样化的数据计算和处理需求。作为国内专业的数据智能服务商,个推从早期的1.3版本便引入Spark,

Flink 实时 metrics
目前我们的flink任务跑在yarn集群上,在面对以下问题时常驻实时job是否在稳定运行?实时数据的处理能力如何?消费过慢?是否需要申请更多资源提升消费能力?实时数据质量可靠?是否有丢数据的风险?实时任务现有的资源是否足够支撑现有的数据量?资源是否闲置浪费?虽
基于 MaxCompute + Hologres 的人群圈选和数据服务实践
简介:本文主要介绍如何通过MaxCompute进行海量人群的标签加工,通过Hologres进行分析建模,从而支持大规模人群复杂圈选场景下的交互式体验,以及基于API的数据服务最佳实践。本文作者刘一鸣阿里云智能高级产品专家人群圈选系统基本逻辑架构人群圈选并不是一
基于MaxCompute分布式Python能力的大规模数据科学分析
简介:如何利用云上分布式Python加速数据科学。如果你熟悉numpy、pandas或者sklearn这样的数据科学技术栈,同时又受限于平台的计算性能无法处理,本文介绍的MaxCompute可以让您利用并行和分布式技术来加速数据科学。也就是说只要会用numpy、pandas和
ClickHouse单机和分片集群安装与特点介绍
介绍ClickHouse是俄罗斯的Yandex于2016年开源的列式存储数据库(DBMS),使用C语言编写,主要用于在线分析处理查询(OLAP)适合单条sql的查询多表join能力较差特点列式储存<pre<code对应列的
大数据开发技术之Spark SQL的多种使用方法
SparkSQL支持多种数据源,如JDBC、HDFS、HBase。它的内部组件,如SQL的语法解析器、分析器等支持重定义进行扩展,能更好的满足不同的业务场景。与SparkCore无缝集成,大数据培训(https://link.segmentfault.com/?encjBWCiZQcqZs
大数据开发之Hive SQL优化思路分享
Hive的优化主要分为:配置优化、SQL语句优化、任务优化等方案。其中在开发过程中主要涉及到的可能是SQL优化这块。优化的核心思想是:•减少数据量(例如分区、列剪裁)•避免数据倾斜(例如加参数、Key打散)•避免全表扫描(例如on添加加上分区等)•减少job数(例如相同的on条件的join放
37 手游基于 Flink CDC + Hudi 湖仓一体方案实践
<blockquote<p本文作者是37手游大数据开发徐润柏,介绍了37手游为何选择Flink作为计算引擎,并如何基于FlinkCDCHudi构建新的湖仓一体方案,主要内容包括:</p<ol<liFlinkCDC基本知识介绍</li<liHudi基本知识介
Flink 在 58 同城的应用与实践
<blockquote<p本文整理自58同城实时计算平台负责人冯海涛在FlinkForwardAsia2020分享的议题《Flink在58同城应用与实践》,内容包括:</p<ol<li实时计算平台架构</li<li实时SQL建设</li<liStorm迁移
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。


