HelloWorld 开发者社区
科技资讯
Qwen4-Max 发布:百万 Token 上下文、多模态与长任务如何落地
Jync 2.2.1 发布:完善告警通知,修复 CDC 与 ETL 可靠性问题
phimint 0.10.0 发布:终端智能体加入交互输入处理
Cursor 更新安全事件调查:扩展分发、历史凭据与团队排查
SoduWork 开源,尝试用独立审查与插件治理组织智能体交付
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
开源项目
全部项目推荐好文
基于 Log 的通用增量 Checkpoint 在美团的进展
<blockquote<p摘要:本文整理自美团计算引擎工程师王非凡,在FlinkForwardAsia2022核心技术专场的分享。本篇内容主要分为四个部分:</p<ol<liLogbasedCheckpoint基本原理介绍</li<li美团应用场景及测试效果</li<
流批一体的近实时数仓的思考与设计
作者|张剑<blockquote摘要:基于对数据时间旅行的思考,引出了对目前三种数仓形态和两种数仓架构的思考。结合数据湖在Flink的应用和数据湖元数据类型的思考,探索了基于数据湖的FlinkSQL流批一体的实践,在流批一体SQL表达一致、结果一致性、流批任务分离、混合调度依赖
ZooKeeper 避坑实践: Zxid溢出导致选主
背景线上flink用户使用ZooKeeper做元数据中心以及集群选主,一些版本的flink在ZooKeeper选主时,会重启Job,导致一些非预期的业务损失。而ZooKeeper在zxid溢出时,会主动触发一次选主,就会导致flinkJob的非预期重启,造
尘锋信息基于 Apache Paimon 的流批一体湖仓实践
<blockquote<p尘锋信息基于ApachePaimon构建流批一体湖仓,主要分享:</p<ol<li整库入湖,TB级数据近实时入湖</li<li基于FlinkPaimon的数仓批ETL建设</li<li基于FlinkPaimon的数仓流
B 站构建实时数据湖的探索和实践
<blockquote<p摘要:本文整理自bilibili大数据实时团队资深开发工程师周晖栋,在FlinkForwardAsia2022实时湖仓专场的分享。本篇内容主要分为四个部分:</p<ol<li背景和痛点</li<li场景探索</li<li基建优化</li<l
Flink中parquet文件的类型是在建表的时候指定的么?
要在shellshell的那个黑框命令行里面,读取一下你的parquet文件,然后打印下他的Schema,再跟你的hive表的建表语句:showcreatetable__里面的字段类型逐一compare一下,然后看看他们的differentia,一般应该是parquet的schema里面有
行业实践专栏上线|互娱领域专家解读 Flink 企业应用实践
Flinklearning学训平台第3期课程——互娱行业实践专栏上线啦!本期课程涵盖6位互娱行业实时计算领域专家详细解读Flink在快手、爱奇艺、小红书、B站、BIGO、斗鱼等企业内的应用与落地。围绕业务场景、业务痛点、面临挑战、如何破局等宝贵实践经验倾囊相授,帮助开发者更全面
Flink SQL 的数据脱敏解决方案
FlinkSQL的数据脱敏解决方案,支持面向用户级别的数据脱敏访问控制,即特定用户只能访问到脱敏后的数据。此方案是实时领域Flink的解决思路,类似于离线数仓Hive中RangerColumnMasking方案。一、基础知识1.1数据脱敏数据脱敏(
蚂蚁实时低代码研发和流批一体的应用实践
<blockquote<p摘要:本文整理自蚂蚁实时数仓架构师马年圣,在FlinkForwardAsia2022流批一体专场的分享。本篇内容主要分为四个部分:</p<ol<li实时应用场景与研发体系</li<li低代码研发</li<li流批一体</li<li规划展望</
Hive SQL on Flink 构建流批一体引擎
<blockquote<p摘要:本文整理自阿里巴巴开发工程师罗宇侠&方盛凯,在FlinkForwardAsia2022流批一体专场的分享。本篇内容主要分为五个部分:</p<ol<li构建流批一体引擎的挑战</li<liHiveSQLonFlink</li<li
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。