HelloWorld 开发者社区
科技资讯
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
qData 1.6.7 发布:修复增量读取与 ETL 字段传递问题
Apple HomeView 在部分地区开售,整合家庭控制与视频通话
Cloudflare 推出 Spend Management Beta,为 Workers 增加支出限制
Cloudflare 开源 Kitesurf:面向 AI 智能体的轻量浏览器引擎
JeecgBoot 与敲敲云介绍分层方案,连接低代码开发与业务搭建
开源项目
全部项目推荐好文
【Iceberg+Alluxio】助力加速数据通道(上篇)
!image.png(https://imghelloworld.osscnbeijing.aliyuncs.com/imgs/3273ba6630fa7d7f87d5dc4a54894b7f.png)!image.png(https://imghelloworld.osscn
Apache Iceberg 源码分析:schema 进化
<blockquote<p前置:需要对icebergschema信息有基本了解</p<pTime:2022/02/15第一版</p</blockquote几个问题能做什么?为什么能这么做?表任意位置新增字段表任务位置删除字段分区字段变
【赵渝强】《大数据原理与实战》新书上市!!!
经过近一年的等待,《大数据原理与实战》新书上市!!先睹为快!!!点击这里查看详情(https://link.segmentfault.com/?encyiL4JYiwO1hhdbf7fjnG2w%3D%3D.6PHZ7sLolB9c2olzGsFYZfnOnK7f%2F
Apache hudi 源码分析 - zorder 布局优化
<blockquote<p本篇文章意在通过某个功能逐步熟悉hudi整体架构上的实现,不会讨论算法的实现细节</p<phudi新人,有问题欢迎指正</p<pspark:version,3.1.2</p<phudi:branch,master</p<pTime:
大数据开发之通过 Spark 来扩展 Presto
概述Presto最初设计是对数据仓库中的数据运行交互式查询,但现在它已经发展成为一个位于开放数据湖分析之上的统一SQL引擎,用于交互式和批处理工作负载,数据湖上的流行工作负载包括:•报告和仪表盘:这包括为内部和外部开发人员提供自定义报告以获取业务洞察力,以及许多使用Presto
Flink,Spark,Storm,Hadoop框架比较
引言大数据分析作为一种用于分析大量按需数据的工具,越来越受到人们的欢迎。四个最常见的大数据处理框架包括ApacheHadoop,ApacheSpark,ApacheStorm和ApacheFlink。虽然这四个都支持大数据处理,但是这些框架的用法和支持该用法的基础体系结构不同。
揭秘阿里云神龙团队拿下TPCx-BB排名第一的背后技术
简介:近日,TPCBenchmarkExpressBigBench(简称TPCxBB)公布了最新的世界排名,阿里云自主研发的神龙大数据加速引擎获得了TPCxBBSF3000排名第一的成绩。TPCxBB测试分为性能与性价比两个维度。其中,在性能维度,在本次排名中,阿里云领先第二名高达41
大数据开发之Spark SQL 的 Catalyst介绍
一、SQL解析细节(通用)Parse:SQL语句解析生成ASTBind:元数据绑定Optimize:优化执行策略Execute:执行二、Catalyst概念SQL优化器核心执行策略主要分为两个大的方向:基于规则优化(RBO)以及基于代价优化(CBO),基于规则优化是一
大数据开发之SparkSQL面试篇
1.谈谈你对SparkSQL的理解SparkSQL是一个用来处理结构化数据的Spark组件,前身是shark,但是shark过多的依赖于hive如采用hive的语法解析器、查询优化器等,制约了Spark各个组件之间的相互集成,因此SparkSQL应运而生大数据培训(https://
大数据开发之Spark Shuffle 原理分析
Shuffle的产生在Spark作业中当父RDD与子RDD的分区对应关系为多对多或者一对多的情况下会发生宽依赖,也即一个父RDD的分区需要分发到多个子RDD所在的任务中大数据培训去执行,这种情况就会涉及数据的重新分布,也即产生了shuffle。Spark算子是否引入shuffle与各算子
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。