HelloWorld 开发者社区

数据库与数据工程

一种元数据同步的方法

一、技术背景在面向数字能源领域,KaiwuDB就元数据同步存在以下应用场景:源端执行元数据操作语句,同时对应源端元数据变化;这些元数据需要在目标的一端进行同步,而实现这一目标的方法是通过数据复制同步模块来完成。元数据复制同步可以分为两个部分:元数据回放表的复制模

Hive 和 Spark 分区策略剖析

<blockquote作者:vivo互联网搜索团队DengJie</blockquote随着技术的不断的发展,大数据领域对于海量数据的存储和处理的技术框架越来越多。在离线数据处理生态系统最具代表性的分布式处理引擎当属Hive和Spark,它们在分区策略方面有着一些相似之处,但也存在一

聊聊Kafka Reactor线程模型?

1、能否简单描述下reactor线程模型?三个点,事件驱动、一个或者多个数据源、多路复用事件驱动简单理解:场景1:比如说小AHR要招聘一个NB的程序员,既要Java基础厉害,又涉及大数据领域(不单单只会皮毛的)的人,突然小A在xxx招聘网站看到了一个小B,发现小B就是我想要找的

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。