文章
网易互娱基于 Flink 的支付环境全关联分析实践
<blockquote<p摘要:本文整理自网易互娱技术中心计费实时平台与SDK技术负责人林佳在FlinkForwardAsia2021行业实践专场的演讲。本篇内容主要分为三个部分:</p<ol<li从一次APP内购买支付聊起</li<li实时SDK与平台化的双线发
Apache DolphinScheduler ASF 孵化器毕业一周年,汇报来了!
不知不觉,ApacheDolphinScheduler已经从Apache软件基金会(以下简称ASF)孵化器毕业一年啦!北京时间2021年4月9日,ASF官方宣布ApacheDolphinScheduler毕业成为Apache顶级项目,让首个由国人主导并贡献到A
大数据培训关于数据采集面试问题分享
以下文章来源于数据社什么是大数据采集数据采集是大数据的基石,不论是现在的互联网公司,物联网公司或者传统的IT公司,每个业务流程环节都会产生大量的数据,同时用户操作的日志也会产生大量的数据,为了将这些结构化和非结构化的数据进行采集,我们必须要有一套完整的数据采集方案流程,为后续的数据分
大数据培训如何实现集成Kafka与Storm的结合
文章转载来源于数据仓库与Python大数据到目前为止,我们已经知道Storm的作用主要是进行流式计算,对于源源不断的均匀数据流流入处理是非常有效的,而现实生活中大部分场景并不是均匀的数据流,而是时而多时而少的数据流入,这种情况下显然用批量处理是不合适的,如果使用Storm做实时计算的话可能因为数
一个小目标的达成——Milvus 10,000 星!
!(https://imghelloworld.osscnbeijing.aliyuncs.com/imgs/a3a50acd806ba3f3a7acb07216319efa.png)近日,开源项目Milvus在向量数据库征程上取得了新的里程碑——GitHub10,000星。
百度工程师教你快速提升研发效率小技巧
互联网的发展,无时无刻不在争分夺秒,更快速的研发落地,意味着能抢占市场先机,所以研发效率一直是研发工程师关注的核心问题之一。本文以Web项目为例,从架构设计、辅助工具、编码技巧、测试提效等视角,给出一些可快速落地的实用小技巧,希望对大家有所帮助。01架构设计:前后端分离架构传统MVC模型应用
论语音社交视频直播平台与 Apache DolphinScheduler 的适配度有多高
在ApacheDolphinScheduler&ApacheShenYu(Incubating)Meetup上,YY直播软件工程师袁丙泽为我们分享了《YY直播基于ApacheDolphinScheduler的适配与探索》。本次演讲主要包括四个部分:YY直播
大数据培训Hive如何控制map个数与性能调优参数
以下文章来源于涤生大数据1Hive有哪些参数,如何查看这些参数Hive自带的配置属性列表封装在HiveConfJava类中,因此请参阅该HiveConf.java文件以获取Hive版本中可用的配置属性的完整列表。具体可以下载hive.src通过eclipse查看。全部属性有上千个吧,一般H
大数据培训spark SQL中count(*)和count(1)源码分析
以下文章来源于数据仓库践行者本文基于spark3.2先给结论,在sparksql中count()不管在运行效率方面,还是在最终展示结果方面都等同于count(1)。案例展示sql:SELECTA,COUNT()ASCNTFROMTESTDATA2GROUP
智能化时代的数据集成技术革新
可管理,可调用,可计算,可变现的数据资源才能成为资产,信息系统的互联互通使得多源和多维度的数据集成需求巨大,这就对数据处理和集成的工具提出了严苛的要求。智能化时代,在“智慧城市”、“智慧治理”、“产品智能化”等的趋势下,企业大多面临如何实现高效数据推送,提高平台质量,以及保障数据安全的挑战。选对
已加载文章中没有匹配内容,试试其他关键词或清空搜索。