TiDB 源码阅读系列文章(七)基于规则的优化
作者:毛康力在TiDB里面,SQL优化的过程可以分为逻辑优化和物理优化两个部分。逻辑优化主要是基于规则的优化,简称RBO(rulebasedoptimization)。物理优化会为逻辑查询计划中的算子选择某个具体的实现,需要用到一些统计信息,决定哪一种方式代价最低,所以是基于代价的优化CBO(costbasedoptimizatio
作者:毛康力在TiDB里面,SQL优化的过程可以分为逻辑优化和物理优化两个部分。逻辑优化主要是基于规则的优化,简称RBO(rulebasedoptimization)。物理优化会为逻辑查询计划中的算子选择某个具体的实现,需要用到一些统计信息,决定哪一种方式代价最低,所以是基于代价的优化CBO(costbasedoptimizatio
在TiDBDevCon2018上,我们对外宣布了TiDB源码阅读分享活动,承诺对外发布一系列文章以及视频帮助大家理解TiDB源码。大家一直很关心这项活动的时间,而我们忙于新版本的开发,一直不得闲。在春节放假期间,终于有时间开始动手写这个系列。\\为什么我们要做这件事情?\\事情的起因是随着TiDB项目逐渐发展,代码日渐复杂,
本文转载自InfoQ网站作者:唐刘策划:赵钰莹原文链接:https://www.infoq.cn/article/bxGvrb\_CxAZD6Wv3fUj8(https://www.oschina.net/action/GoToLink?urlhttps%3A%2F%2Fwww.infoq.cn%2Farticle%2FbxGvrb_C
作者:张博康在TiDB的架构中,所有的数据按照range划分成一个个Region分布在多个TiKV实例上。随着数据的写入,一个集群中会产生上百万,甚至千万个Region。而量变引起质变,单TiKV实例上过多的Region无疑会带来比较大的负担,进而影响整个集群的性能表现。本文将介绍TiKV核心模块Raftstore的
作者:SuLi,ZhaoMingJava是当前非常流行的开发语言,很多TiDB用户的业务层都是使用Java开发的,本文将从Java数据库交互组件开发的角度出发,介绍各组件的推荐配置和推荐使用方式,希望能帮助Java开发者在使用TiDB时能更好的发挥数据库性能。Java应用中的数据库相关组件
作者:ShirlyTiDB最佳实践系列是面向广大TiDB用户的系列教程,旨在深入浅出介绍TiDB的架构与原理,帮助用户在生产环境中最大限度发挥TiDB的优势。我们将分享一系列典型场景下的最佳实践路径,便于大家快速上手,迅速定位并解决问题。在前两篇的文章中,我们分别介绍了TiDB高并发写入常见热点问题及规避方法(https:/
两周前,我们发布了TiDB挑战赛第一季(https://www.oschina.net/action/GoToLink?urlhttps%3A%2F%2Fpingcap.com%2Fblogcn%2Fpcpreport202002%2F)结赛公告,选手们在过去3个月里一顿炫酷的操作,让TiDB的「性能」产生了“惊人”的提升,比如
作者:黄东旭很久没有写文章了,正好今天有一些闲暇的时间,写写最近的一些Update。关注TiDB的同学,最近可能注意到TiKV这边合并了一个不大不小的PR5051(https://www.oschina.net/action/GoToLink?urlhttps%3A%2F%2Fgithub.com%2Ftikv%2Ftikv%2Fp
据我所知,目前很多公司都在生产环境使用TiDB了,例如:小米,小红书,饿了吗,美团等。如今硬件的性价比越来越高,网络传输速度越来越快,数据库分层的趋势逐渐显现,人们已经不再强求用一个解决方案来解决所有的存储问题,而是通过分层,让缓存与数据库负责各自擅长的业务场景。当前数据库领域面临各种问题,如在缩放、一致性、大数据分析、与云基础架构集成等方面均存在
TiDB实现了快照隔离级别的分布式事务,支持悲观锁、乐观锁,同时也解决了大事务的难点。事务是数据库的基础,提供高效的、支持完整ACID的分布式事务更是分布式数据库的立足之本。事务是数据库执行的最小单元,允许用户将多个读写操作组合为一个逻辑单元。事务需要满足原子性、一致性、隔离性和持久性,也就是ACID。数据库有多种并发控制方法,乐观并发控制(
TiKV的Service层的代码位于src/server文件夹下,提供RPC服务、将storeid解析成地址、TiKV之间的相互通信等。Service层封装了TiKV在网络上提供服务和RaftGroup成员之间相互通信的逻辑。TiKV包含多个GRPCService。KVService定义了TiKV
下载tikv与pd源码,tikvv4.0.8版本可以编译,但是pd发布版本源码不可用,需要从masterbranch编译。使用make命令进行编译。!(https://oscimg.oschina.net/oscnet/up269278214f68c48649b0e88df444c908c77.png)!(https://osc
作者简介:秦天爽,PingCAP解决方案事业部架构总监。纵观现有业务系统的分布式改造,其中一个难点在于数据库的迁移:迁移使用全量还是增量?在线还是离线?使用现成的工具还是开发作业?……用户往往面对多种选择。下面将为大家分享PingCAP团队在多年的实践中积攒的大量异构平台迁移经验,以及数据库复制技术
作者:申砾本系列文章旨在帮助社区开发者了解TiDB项目的全貌,更好的参与TiDB项目开发。大致会分两个角度进行描述:从社区参与者的角度描述如何更好的参与TiDB项目开发;从PingCAP内部团队的角度展示TiDB的开发流程,包括版本规划、开发流程、Roadmap制定等。希望通过一内一
作者介绍:黄潇,TUG北京区Leader,TUG2020年度MOA。如今分布式数据库百花齐放,在做数据库架构选型时应该从哪些方面进行考虑?在TUG陆金所企业行活动上,TUG北京区Leader黄潇分享了TiDB的常见架构应用场景,以下内容整理自当天活动分享实录。本文主要分为以下三部分:1.当今分布式数据库
作者:申砾本文档用于描述如何为TiDB新增builtin函数。首先介绍一些必需的背景知识,然后介绍增加builtin函数的流程,最后会以一个函数作为示例。背景知识SQL语句在TiDB中是如何执行的。SQL语句首先会经过parser,从文本parse成为AST(抽象语法树),通过optimize
作者介绍:康文权,马上消费金融总账高级研发工程师。李银龙,原腾讯云运维工程师,马上消费金融容器云TiDB负责人,西南区TUGLeader。背景介绍马上消费金融于2015年6月营业,截止到2020年1月,历经4年多风雨,总注册用户数8000万,活跃用户数2500万,累计放
作者介绍:于振华,北京银行软件开发部资深架构师,长期从事银行核心系统研发、规划,参与过多个核心信息系统建设工作,包括一、二代支付系统、第四代银行核心系统建设、分布式核心系统建设等企业级项目工作。当前主要研发方向集中在构建先进、高效、面向OLTP的银行交易系统,提升银行信息系统服务能力。!(http://uploadimages.jians
TiDB作为一款高效稳定的开源分布式数据库,在国内外的银行、证券、保险、在线支付和金融科技行业得到了普遍应用,并在约20多种不同的金融业务场景中支撑着用户的关键计算。在TiDB在金融行业关键业务场景的实践(上篇)(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F%2Fmp.weixin.
TiDB作为一款高效稳定的开源分布式数据库,在国内外的银行、证券、保险、在线支付和金融科技行业得到了普遍应用,并在约20多种不同的金融业务场景中支撑着用户的关键计算。本篇文章将为大家介绍分布式关系型数据库TiDB在金融行业关键应用领域的实践。金融关键业务场景银行的业务系统非常复杂,包括从核心上的账户、账务、结算等业务到外围