HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

EMR Spark Runtime Filter性能优化

背景Join是一个非常耗费资源耗费时间的操作,特别是数据量很大的情况下。一般流程上会涉及底层表的扫描/shuffle/Join等过程,如果我们能够尽可能的在靠近源头上减少参与计算的数据,一方面可以提高查询性能,另一方面也可以减少资源的消耗(网络/IO/CPU等),在同样的资源的情况下可

MySQL 常用命令

大学学的数据库系统概论工作后几年没有使用都已忘了,现在项目需要用到数据库,但来不及细看相关书籍了,遂将一些常用的记录下来.常用类型<codeMySQL</code支持多种类型,大致可以分为三类:数值,日期/时间和字符串(字符)类型,大致如下:数值类型

跨库数据表的运算

        跨库数据表的运算,一直都是一个说难不算太难,说简单却又不是很简单的、总之是一个麻烦的事。大量的、散布在不同数据库中的数据表们,明明感觉要把它们合并起来,再来个小小的计算,似乎也就那么回事……但真要做起来,需要这又忘了那的,却又不像仅仅就那么回事?        想要给这些小麻烦们,来

优化 Join 运算的系列方法(1)

JOIN是关系数据库中常用运算,用于把多个表进行关联,关联条件一般是判断某个关联字段的值是否相等。随着关联表的增多或者关联条件越来越复杂,无论理解查询含义、实现查询语句,还是在查询的性能方面,可以说JOIN都是最具挑战的SQL运算,没有之一。特别是JOIN的性能,一直是个老大难问题。下面我们将基

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。