KubeSphere 部署 TiDB 云原生分布式数据库

Stella981
• 阅读 591

TiDB 是 PingCAP 公司自主研发的开源分布式关系型数据库 TiDB,为企业关键业务打造,具备「分布式强一致性事务、在线弹性水平扩展、故障自恢复的高可用、跨数据中心多活」等核心特性,助力企业最大化发挥数据价值,释放企业增长空间。

KubeSphere 部署 TiDB 云原生分布式数据库

KubeSphere 是在 Kubernetes 之上构建的以应用为中心的多租户容器平台,完全开源,支持多云与多集群管理,提供全栈的 IT 自动化运维的能力,简化企业的 DevOps 工作流。KubeSphere 提供了运维友好的向导式操作界面,帮助企业快速构建一个强大和功能丰富的容器云平台。

KubeSphere 部署 TiDB 云原生分布式数据库

本文将介绍如何在 KubeSphere 上部署 TiDB。

部署环境准备

KubeSphere 是由青云 QingCloud 开源的容器平台,支持在任何基础设施上安装部署。在青云公有云上支持一键部署 KubeSphere(QKE)。

下面以在青云云平台快速启用 KubeSphere 容器平台为例部署 TiDB 分布式数据库,至少需要准备 3 个可调度的 node 节点。你也可以在任何 Kubernetes 集群或 Linux 系统上安装 KubeSphere,可以点击【阅读原文】参考KubeSphere 官方文档。

1. 登录青云控制台:https://console.qingcloud.com/,点击左侧容器平台,选择 KubeSphere,点击创建并选择合适的集群规格:

KubeSphere 部署 TiDB 云原生分布式数据库

2. 创建完成后登录到 KubeSphere 平台界面:

KubeSphere 部署 TiDB 云原生分布式数据库

3. 点击下方的 Web Kubectl 集群客户端命令行工具,连接到 Kubectl 命令行界面。执行以下命令安装 TiDB Operator CRD:

kubectl apply -f https://raw.githubusercontent.com/pingcap/tidb-operator/v1.1.6/manifests/crd.yaml

 4. 执行后的返回结果如下:

KubeSphere 部署 TiDB 云原生分布式数据库

5. 点击左上角平台管理,选择访问控制,新建企业空间,这里命名为 dev-workspace

KubeSphere 部署 TiDB 云原生分布式数据库

6. 进入企业空间,选择应用仓库,添加一个 TiDB 的应用仓库:

KubeSphere 部署 TiDB 云原生分布式数据库

7. 将 PingCAP 官方 Helm 仓库添加到 KubeSphere 容器平台,Helm 仓库地址如下:

https://charts.pingcap.org

8. 添加方式如下:

KubeSphere 部署 TiDB 云原生分布式数据库

部署 TiDB-Operator

1. 首选创建一个项目(namespace)用于运行 TiDB 集群:

KubeSphere 部署 TiDB 云原生分布式数据库

2. 创建完成后点击进入项目,选择应用,部署新应用:

KubeSphere 部署 TiDB 云原生分布式数据库

3. 选择来自应用模板:

KubeSphere 部署 TiDB 云原生分布式数据库

4. 选择 PingCAP,该仓库包含了多个 Helm Chart,当前主要部署 TiDB Operator 和TiDB Cluster。

KubeSphere 部署 TiDB 云原生分布式数据库

5. 点击TiDB Operator 进入 Chart 详情页,点击配置文件可查看或下载默认的 values.yaml,选择版本,点击部署:

KubeSphere 部署 TiDB 云原生分布式数据库

6. 配置应用名称并选择应用版本,确认应用部署位置:

KubeSphere 部署 TiDB 云原生分布式数据库

7. 继续下一步,该步骤可以在界面直接编辑 values.yaml 文件,自定义配置,当前保留默认即可:

KubeSphere 部署 TiDB 云原生分布式数据库

8. 点击部署,等待应用状态变为活跃:

KubeSphere 部署 TiDB 云原生分布式数据库

9. 点击工作负载(Deployment),查看TiDB Operator 部署了 2 个 Deployment 类型资源:

KubeSphere 部署 TiDB 云原生分布式数据库

部署 TiDB-Cluster

1.TiDB Operator 部署完成后,可以继续部署TiDB Cluster。与部署TiDB Operator 操作相同,选择左侧应用,点击TiDB Cluster:

KubeSphere 部署 TiDB 云原生分布式数据库

2. 切换到配置文件,选择版本,下载 values.yaml 到本地: 

KubeSphere 部署 TiDB 云原生分布式数据库

3. TiDB Cluster 中部分组件需要持久存储卷,青云公有云平台提供了以下几种类型的 StorageClass:

/ # kubectl get sc
NAME                       PROVISIONER     RECLAIMPOLICY   VOLUMEBINDINGMODE   ALLOWVOLUMEEXPANSION   AGE
csi-high-capacity-legacy   csi-qingcloud   Delete          Immediate           true                   101m
csi-high-perf              csi-qingcloud   Delete          Immediate           true                   101m
csi-ssd-enterprise         csi-qingcloud   Delete          Immediate           true                   101m
csi-standard (default)     csi-qingcloud   Delete          Immediate           true                   101m
csi-super-high-perf        csi-qingcloud   Delete  

4. 这里选择 csi-standard 类型,values.yaml 中的 StorageClassName 字段默认配置为 local-storage。因此,在下载的 yaml 文件中直接替换所有的 local-storage 字段为 csi-standard。在最后一步使用修改后的 values.yaml 覆盖应用配置文本框中的内容,当然也可以手动编辑配置文件逐个替换:

KubeSphere 部署 TiDB 云原生分布式数据库

5. 这里仅修改 storageClassName 字段用于引用外部持久存储,如果需要将TiDB、TiKV 或 PD 组件调度到独立节点,可参考 NodeAffinity 相关参数进行修改。点击部署,将TiDB Cluster 部署到容器平台,最终在应用列表中可以看到如下 2 个应用:

KubeSphere 部署 TiDB 云原生分布式数据库

查看 TiDB 集群监控

1. TiDB 集群部署后需要一定时间完成初始化,选择工作负载,查看 Deployment 无状态应用:

KubeSphere 部署 TiDB 云原生分布式数据库

2. 查看有状态副本集(StatefulSets),其中TiDB、TiKV 和 PD 等组件都为有状态应用:

KubeSphere 部署 TiDB 云原生分布式数据库

3. 在 KubeSphere 监控面板查看TiDB负载情况,可以看到 CPU、内存、网络流出速率有明显的变化:

KubeSphere 部署 TiDB 云原生分布式数据库

4. 在 KubeSphere 监控面板查看 TiKV 负载情况:

KubeSphere 部署 TiDB 云原生分布式数据库

5. 查看容器组(Pod)列表,TiDB集群包含了 3 个 PD、2 个TiDB以及 3 个 TiKV 组件:

KubeSphere 部署 TiDB 云原生分布式数据库

6. 点击存储管理,查看存储卷,其中 TiKV 和 PD 这 2 个组件使用了持久化存储:

KubeSphere 部署 TiDB 云原生分布式数据库

7. 查看某个存储卷用量信息,以 TiKV 为例,可以看到当前存储的存储容量和剩余容量等监控数据。

KubeSphere 部署 TiDB 云原生分布式数据库

8. 在 KubeSphere 项目首页查看TiDB Cluster 项目中资源用量排行:

KubeSphere 部署 TiDB 云原生分布式数据库

访问 TiDB 集群

1. 点击左侧服务,查看 TiDB 集群创建和暴露的服务信息。

KubeSphere 部署 TiDB 云原生分布式数据库

2. 其中 TiDB 服务 4000 端口绑定的服务类型为 NodePort,直接可以在集群外通过 nodeIP 访问。测试使用 MySQL 客户端连接数据库。

[root@k8s-master1 ~]# docker run -it --rm mysql bash


[root@0d7cf9d2173e:/# mysql -h 192.168.1.102 -P 32682 -u root    
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 201
Server version: 5.7.25-TiDB-v4.0.6 TiDB Server (Apache License 2.0) Community Edition, MySQL 5.7 compatible
 
Copyright (c) 2000, 2020, Oracle and/or its affiliates. All rights reserved.
 
Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.


Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.
 
mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| INFORMATION_SCHEMA |
| METRICS_SCHEMA     |
| PERFORMANCE_SCHEMA |
| mysql              |
| test               |
+--------------------+
5 rows in set (0.01 sec)
 
mysql>

查看 Grafana 监控面板

另外,TiDB 自带了 Prometheus 和 Grafana,用于数据库集群的性能监控,可以看到 Grafana 界面的 Serivce 3000 端口同样绑定了 NodePort 端口。访问 Grafana UI,查看某个指标:

KubeSphere 部署 TiDB 云原生分布式数据库

总结

KubeSphere 容器平台对于云原生应用部署非常友好,对于还不熟悉 Kubernetes 的应用开发者而又希望通过在界面简单配置完成 TiDB 集群的部署,可以参考以上步骤快速上手。我们将在下一期的文章中,为大家分享另一种部署玩法:将 TiDB 应用上架到 KubeSphere 应用商店实现真正的一键部署。

另外,TiDB 还可以结合 KubeSphere 的多集群联邦功能,部署 TiDB 应用时可一键分发 TiDB 不同的组件副本到不同基础设施环境的多个 Kubernetes 集群,实现跨集群、跨区域的高可用。如果大家感兴趣,我们将在后续的文章中为大家分享 TiDB 在 KubeSphere 实现多集群联邦的混合云部署架构。

点赞
收藏
评论区
推荐文章
blmius blmius
2年前
MySQL:[Err] 1292 - Incorrect datetime value: ‘0000-00-00 00:00:00‘ for column ‘CREATE_TIME‘ at row 1
文章目录问题用navicat导入数据时,报错:原因这是因为当前的MySQL不支持datetime为0的情况。解决修改sql\mode:sql\mode:SQLMode定义了MySQL应支持的SQL语法、数据校验等,这样可以更容易地在不同的环境中使用MySQL。全局s
Easter79 Easter79
2年前
swap空间的增减方法
(1)增大swap空间去激活swap交换区:swapoff v /dev/vg00/lvswap扩展交换lv:lvextend L 10G /dev/vg00/lvswap重新生成swap交换区:mkswap /dev/vg00/lvswap激活新生成的交换区:swapon v /dev/vg00/lvswap
Jacquelyn38 Jacquelyn38
2年前
2020年前端实用代码段,为你的工作保驾护航
有空的时候,自己总结了几个代码段,在开发中也经常使用,谢谢。1、使用解构获取json数据let jsonData  id: 1,status: "OK",data: 'a', 'b';let  id, status, data: number   jsonData;console.log(id, status, number )
皕杰报表之UUID
​在我们用皕杰报表工具设计填报报表时,如何在新增行里自动增加id呢?能新增整数排序id吗?目前可以在新增行里自动增加id,但只能用uuid函数增加UUID编码,不能新增整数排序id。uuid函数说明:获取一个UUID,可以在填报表中用来创建数据ID语法:uuid()或uuid(sep)参数说明:sep布尔值,生成的uuid中是否包含分隔符'',缺省为
Wesley13 Wesley13
2年前
mysql设置时区
mysql设置时区mysql\_query("SETtime\_zone'8:00'")ordie('时区设置失败,请联系管理员!');中国在东8区所以加8方法二:selectcount(user\_id)asdevice,CONVERT\_TZ(FROM\_UNIXTIME(reg\_time),'08:00','0
Easter79 Easter79
2年前
TiDB 部署及数据同步
简介TiDB是PingCAP公司受GoogleSpanner/F1论文启发而设计的开源分布式HTAP(HybridTransactionalandAnalyticalProcessing)数据库,结合了传统的RDBMS和NoSQL的最佳特性。TiDB兼容MySQL,支持无限的水平扩展,具备强一致性和高可用
Wesley13 Wesley13
2年前
00:Java简单了解
浅谈Java之概述Java是SUN(StanfordUniversityNetwork),斯坦福大学网络公司)1995年推出的一门高级编程语言。Java是一种面向Internet的编程语言。随着Java技术在web方面的不断成熟,已经成为Web应用程序的首选开发语言。Java是简单易学,完全面向对象,安全可靠,与平台无关的编程语言。
Stella981 Stella981
2年前
Django中Admin中的一些参数配置
设置在列表中显示的字段,id为django模型默认的主键list_display('id','name','sex','profession','email','qq','phone','status','create_time')设置在列表可编辑字段list_editable
Wesley13 Wesley13
2年前
MySQL部分从库上面因为大量的临时表tmp_table造成慢查询
背景描述Time:20190124T00:08:14.70572408:00User@Host:@Id:Schema:sentrymetaLast_errno:0Killed:0Query_time:0.315758Lock_
Python进阶者 Python进阶者
3个月前
Excel中这日期老是出来00:00:00,怎么用Pandas把这个去除
大家好,我是皮皮。一、前言前几天在Python白银交流群【上海新年人】问了一个Pandas数据筛选的问题。问题如下:这日期老是出来00:00:00,怎么把这个去除。二、实现过程后来【论草莓如何成为冻干莓】给了一个思路和代码如下:pd.toexcel之前把这