MySQL&MongoDB监控利器PMM

Wesley13
• 阅读 590

MySQL&MongoDB监控利器PMM

MySQL&MongoDB监控利器PMM

张伟科

0.4 2018.03.13 18:15* 字数 1889 阅读 4760评论 0喜欢 10

一、PMM介绍

Percona Monitoring and Management (PMM)是一款开源的用于管理和监控MySQL和MongoDB性能的开源平台,通过PMM客户端收集到的DB监控数据用第三方软件Grafana画图展示出来。

PMM提供了对MyISAM、InnoDB、TokuDB和PXC/Glarera的监控,另外也提供了Query Analytics的功能,可以检视执行了哪些SQL指令,并对执行效能较差的语法进行优化。另外在新版本还支持了MySQL复制拓扑图结构构造。Demo官网:http://pmmdemo.percona.com

PMM针对操作系统的部份也提供了硬盘、网络、CPU和RAM的监控,特别的是它提供了Context switches、Processes和interrupts的监控,Context Switches可以看到CPU上下切换文的状况,Processes可以方便了解系统有多少程序在等待I/O。

二、PMM架构解析

PMM架构如下图所示

MySQL&MongoDB监控利器PMM

PMM Server是作为Docker镜像distributed,而PMM Client就是一般的RPM,它需要安装Server端和Client端软件。

Server组件

Query Analytics(QAN)是用来搜集指令并作性能分析的,其组件分别说明如下:

QAN API:作为percona-qan-agent后端储存和读取Query资料用。

QAN APP:提供图形化分析介面。

Metrics Monitor(MM)组件提供了MySQL和MongoDB历史监控信息,其组件分别说明如下:

Prometheus:一个开源的服务监控系统和时间序列数据库,它连接到PMM Client上的exporter聚集DB的监控数据。

– Consul:提供API让PMM Client可以远端替Prometheus新增、移除hosts,同时它也储存了监控的metadata。

Grafana:这是一个第三方Dashboard和图形构建器,用于可视化Prometheus中聚合的数据,以Web呈现。

– Percona Dashboards:是由Percona开发的一组用于Grafana的仪表板。

上述的2个Web页面都能从PMM Landing Page(就是PMM首页)直接连结。

Client组件

ppm-admin:命令行的PMM Client管理工具,用来新增、移除监控的资料Instance。

percona-qan-agent:是一种管理QAN代理的服务,收集查询性能数据并将其发送到PMM服务器上的QAN API。

node_exporter:Prometheus exporter用于搜集一般系统信息(https://github.com/prometheus/node_exporter)。

mysqld_exporter:Prometheus exporter用于搜集MySQL Server的信息(https://github.com/percona/mysqld_exporter)。

mongodb_exporter:Prometheus exporter用于搜集MongoDB server的信息(https://github.com/percona/mongodb_exporter)。

三、安装运行PMM Server

3.1、安装docker

yum -y install docker

3.2、运行docker

systemctl start docker

systemctl enable docker

3.3、下载容器镜像

docker pull percona/pmm-server:latest

3.4、建立数据卷容器

docker create -v /opt/prometheus/data -v /opt/consul-data -v /var/lib/mysql -v /var/lib/grafana --name pmm-data percona/pmm-server:latest /bin/true

3.5、运行PMM Server

docker run -d -p80:80 --volumes-from pmm-data --name pmm-server {-e METRICS_RETENTION=48h 可选,数据只留48小时} --restart always percona/pmm-server:latest

注意:如果执行上面这条命令出现如下错误:

/usr/bin/docker-current: Error response from daemon: driver failed programming external connectivity on endpoint pmm-server (1263128b75956bbdc024ab564e717e33bfa929c7cff60e2524d45c921879e46f): exec: "docker-proxy": executable file not found in $PATH.

则要建立软连接:

cd /usr/libexec/docker

ln -s docker-init-current docker-init

ln -s docker-proxy-current docker-proxy

ln -s docker-runc-current docker-runc

3.6、查看Docker运行状态

docker ps -a

通过使用运行容器的主机的IP地址连接到PMM Web界面来验证PMM服务器是否正在运行,然后在要监视的所有数据库主机上安装PMM Client。

3.7、验证PMM服务器

运行PMM Server之后,你应该可以使用运行容器的主机的IP地址访问PMM Web界面。例如,如果在默认端口80上运行10.1.83.175,则应该可以访问以下内容:

MySQL&MongoDB监控利器PMM

四、安装运行PMM Client

PMM Client是安装在你要监视的MySQL或MongoDB主机上的一组代理组件。组件收集关于一般系统和数据库性能的各种数据,并将该数据发送到相应的PMM服务器组件。

在数据库主机上安装PMM Client软件包之前,请确保你的PMM Server主机可访问。

你将需要在数据库主机上使用root用户访问安装PMM Client(以具有root权限的用户身份登录或能够运行命令的sudo权限)。

查询分析(QAN)的最低要求是:

MySQL 5.1或更高版本(如果使用慢查询日志)

MySQL 5.6.9或更高版本(如果使用性能模式)

PMM Client可以运行在任何Linux发行版上,但是Percona提供的PMM Client软件包只能从Ubuntu或CentOS发行版的软件仓库进行自动安装:

下面我们以在Red Hat或CentOS上安装PMM Client。

4.1 安装PMM Client

yum -y install http://www.percona.com/downloads/percona-release/redhat/0.1-4/percona-release-0.1-4.noarch.rpm

yum -y install pmm-client

安装PMM Client之后,它不会自动连接到PMM Server。要将客户端连接到PMM服务器,请使用该命令指定IP地址。

pmm-admin config --server 10.1.83.175

注意,如果在运行PMM Server时更改了默认端口80 ,请在服务器的IP地址之后指定。

五、添加MySQL监控

5.1、添加MySQL监控和主机监控

pmm-admin add mysql --query-source perfschema --user root --password 91160

5.2、查看配置后的结果

pmm-admin list

5.3、****系统相关指标:

MySQL&MongoDB监控利器PMM

5.4、MySQL指标监控

MySQL&MongoDB监控利器PMM

5.5、慢查询分析,以下图片显示了Query Analytics:

MySQL&MongoDB监控利器PMM

六、添加MongoDB监控

6.1 安装PMM Client

yum -y install http://www.percona.com/downloads/percona-release/redhat/0.1-4/percona-release-0.1-4.noarch.rpm

yum -y install pmm-client

安装PMM Client之后,它不会自动连接到PMM Server。要将客户端连接到PMM服务器,请使用该命令指定IP地址。

pmm-admin config --server 10.1.83.175

注意,如果在运行PMM Server时更改了默认端口80 ,请在服务器的IP地址之后指定。

6.2、添加MongoDB监控

pmm-admin add mongodb --cluster rep --uri mongodb://username:password@localhost:27017

6.3、查看配置后的结果

pmm-admin list

6.4、指标监控

MongoDB指标监控:

MySQL&MongoDB监控利器PMM

七、设置grafana登录用户

7.1、进入容器

MySQL&MongoDB监控利器PMM

7.2、修改grafana.ini,禁止匿名登录

[root@c74f5be8ed88 opt]# vi /etc/grafana/grafana.ini 

#################################### Anonymous Auth ##########################

[auth.anonymous]

# enable anonymous access

#enabled = True

把enabled = Ture注释掉,这样既禁止匿名用户登陆了

现在如果重启容器(systemctl restart docker),再打开页面,你会发现自己进不去了

7.3、修改登录账号admin的密码

登录数据库:

sqlite3 /var/lib/grafana/grafana.db

修改user表,把admin密码改成admin:

update user set password='59acf18b94d7eb0694c61e60ce44c110c7a683ac6a8f09580d626f90f4a242000746579358d77dd9e570e83fa24faa88a8a6', salt ='F3FAxVm33R' where login ='admin';

安全起见,也可以把admin密码改成TdPXP4sg:

update user set password='11cf3a1ee21b046b939b5f0cdc9d92ab70ba66e4e53f301fb2456ee7b6a665d8abf0d5b387ae0ec53f5f5fc8e477bfbe073e',salt='AHxOW2Fn34',name='admin',is_admin=1 where login='admin';

7.4、开启用户注册

我们可以通过开启用户注册,自己创建用户,然后再查看user表的数据来自己定义密码(不要忘记salt列也要更新) 

####################################Users####################################

[users]

# disable user signup / registration

allow_sign_up =true

取消allow_sign_up =true注释

点赞
收藏
评论区
推荐文章
blmius blmius
2年前
MySQL:[Err] 1292 - Incorrect datetime value: ‘0000-00-00 00:00:00‘ for column ‘CREATE_TIME‘ at row 1
文章目录问题用navicat导入数据时,报错:原因这是因为当前的MySQL不支持datetime为0的情况。解决修改sql\mode:sql\mode:SQLMode定义了MySQL应支持的SQL语法、数据校验等,这样可以更容易地在不同的环境中使用MySQL。全局s
Jacquelyn38 Jacquelyn38
2年前
2020年前端实用代码段,为你的工作保驾护航
有空的时候,自己总结了几个代码段,在开发中也经常使用,谢谢。1、使用解构获取json数据let jsonData  id: 1,status: "OK",data: 'a', 'b';let  id, status, data: number   jsonData;console.log(id, status, number )
皕杰报表之UUID
​在我们用皕杰报表工具设计填报报表时,如何在新增行里自动增加id呢?能新增整数排序id吗?目前可以在新增行里自动增加id,但只能用uuid函数增加UUID编码,不能新增整数排序id。uuid函数说明:获取一个UUID,可以在填报表中用来创建数据ID语法:uuid()或uuid(sep)参数说明:sep布尔值,生成的uuid中是否包含分隔符'',缺省为
Stella981 Stella981
2年前
KVM调整cpu和内存
一.修改kvm虚拟机的配置1、virsheditcentos7找到“memory”和“vcpu”标签,将<namecentos7</name<uuid2220a6d1a36a4fbb8523e078b3dfe795</uuid
Easter79 Easter79
2年前
Twitter的分布式自增ID算法snowflake (Java版)
概述分布式系统中,有一些需要使用全局唯一ID的场景,这种时候为了防止ID冲突可以使用36位的UUID,但是UUID有一些缺点,首先他相对比较长,另外UUID一般是无序的。有些时候我们希望能使用一种简单一些的ID,并且希望ID能够按照时间有序生成。而twitter的snowflake解决了这种需求,最初Twitter把存储系统从MySQL迁移
Wesley13 Wesley13
2年前
mysql设置时区
mysql设置时区mysql\_query("SETtime\_zone'8:00'")ordie('时区设置失败,请联系管理员!');中国在东8区所以加8方法二:selectcount(user\_id)asdevice,CONVERT\_TZ(FROM\_UNIXTIME(reg\_time),'08:00','0
Wesley13 Wesley13
2年前
00:Java简单了解
浅谈Java之概述Java是SUN(StanfordUniversityNetwork),斯坦福大学网络公司)1995年推出的一门高级编程语言。Java是一种面向Internet的编程语言。随着Java技术在web方面的不断成熟,已经成为Web应用程序的首选开发语言。Java是简单易学,完全面向对象,安全可靠,与平台无关的编程语言。
Stella981 Stella981
2年前
Django中Admin中的一些参数配置
设置在列表中显示的字段,id为django模型默认的主键list_display('id','name','sex','profession','email','qq','phone','status','create_time')设置在列表可编辑字段list_editable
Wesley13 Wesley13
2年前
MySQL部分从库上面因为大量的临时表tmp_table造成慢查询
背景描述Time:20190124T00:08:14.70572408:00User@Host:@Id:Schema:sentrymetaLast_errno:0Killed:0Query_time:0.315758Lock_
Python进阶者 Python进阶者
3个月前
Excel中这日期老是出来00:00:00,怎么用Pandas把这个去除
大家好,我是皮皮。一、前言前几天在Python白银交流群【上海新年人】问了一个Pandas数据筛选的问题。问题如下:这日期老是出来00:00:00,怎么把这个去除。二、实现过程后来【论草莓如何成为冻干莓】给了一个思路和代码如下:pd.toexcel之前把这