文章详情

短信预约-IT技能 免费直播动态提醒

请输入下面的图形验证码

提交验证

短信预约提醒成功

PMM--简介与部署

2023-01-31 08:23

关注

Percona Monitoring and Management是percona一款开源的用于管理和监控MySQL 和MongoDB性能的开源平台,通过PMM客户端收集到的DB监控数据用第三方软件Grafana画图展示出来,包括两个部分:

PMM client:部署在每个监控数据库主机。搜集主机,数据库和查询分析数据等。

PMM Server:汇集数据并展示。提供表,dashboards和graph的web界面。

其架构如下图所示:

1.png

PMM Client由以下部分组成:

pmm-admin:提供命令行交互界面管理pmm client,包括新增、删除数据库实例等。

pmm-mysql-query-0: 管理 mysql QAN代理的服务,从数据库实例搜集查询性能数据并发送到pmm server上的QAN API。

pmm-mongdb-query-0:管理mongdb QAN代理的服务。

node_exporter:搜集系统性能数据,基于prometheus exporter。更多信息查询:https://github.com/percona/node_exporter.

mysqld_exporter:mysql性能搜集。

mongodb_exporter:mongodb性能搜集。

proxysql_exporter:ProxySQL性能数据搜集。

PMM Server运行在中央监控数据上,目前可以基于容器,虚拟机或者AMI(amazon machine image)部署。

pmm server包含以下工具:

QAN(Query Analytics):分析mysql数据库的查询性能,相对于qan agent,它包含:

—qan api:后端存储和获取由agent采集的查询性能数据。

—qan web:提供数据展示。

metrics monitor:提供mysql和mongodb的历史性能数据查询。

—prometheus:第三方的时序数据库,连接到pmm client的exporter并汇集数据。consul给pmm client提供api用于远程list,添加,删除prometheus上的配置主机,并存储监控的元数据。

—grafana:第三方的图形展示界面。

Orchestrator:提供mysql复制的拓扑工具和图形界面。

参考:

端口:以下端口必须在pmm server和client之间开放;

pmm server需要开放80或443端口用于pmm client访问pmm web。

pmm client端必须开放以下默认端口采集数据,可以通过pmm-admin addc命令进行修改。

42000 For PMM to collect genenal system metrics.

42001 This port is used by a service which collects query performance data and makes it available to QAN.

42002 For PMM to collect MySQL server metrics.

42003 For PMM to collect MongoDB server metrics.

42004 For PMM to collect ProxySQL server metrics.

1、安装PMM Server

PMM安装有三种方式:docker、虚拟机和AWS marketplace。

本文主要通过容器方式部署,pmm server容器镜像发布在https://hub.docker.com/r/percona/pmm-server/tags/,docker版本必须高于1.12.6。pmm server部署范围三步:获取镜像,创建持久化的pmm data镜像以及创建启动pmm server镜像。

从dock hub拉取最新的镜像版本

docker pull percona/pmm-server:latest

 

创建持久化的pmm-data镜像

docker create -v /opt/prometheus/data -v /opt/consul-data -v /var/lib/mysql -v /var/lib/grafana --name pmm-data percona/pmm-server:latest /bin/true

 

参数说明:

docker create:该命令指示Docker守护程序从映像创建容器。

-v:该选项初始化数据卷的容器。

--name:该选项为你可以用于引用Docker网络中的容器的容器分配一个自定义名称。

percona/pmm-server:latest :是导出容器的镜像名称和版本标签。

/bin/true :是容器运行的命令。

注:该镜像不启动,只为了保证pmm server的数据持久化以用于版本升级等场景。注意不要移动或者重新创建该镜像,除非确保数据不再需要。

注:确保镜像-v的数据卷存在,并最好是单独绑定挂载。

创建并启动pmm-server容器

docker run -d -p 80:80 --volumes-from pmm-data --name pmm-server --restart always percona/pmm-server:latest

 

参数说明:

docker run:该命令指示守护程序从镜像运行容器。

-d:该选项在分离模式(即后台)中启动容器。

-p:该选项映射用于访问PMM服务器 Web UI的端口。例如-p 8080:80,如果端口80不可用,则可以使用登陆页面映射到端口8080 。

--volumes-from:该选项从pmm-date容器中装入卷。

--name:该选项为你可以用于引用Docker网络中的容器分配一个自定义名称。

--restart:该选项定义容器的重新启动策略,设置它以always确保Docker守护程序在启动时启动容器,并在容器退出时重新启动它。

其他参数说明:

通过docker run的-e参数可以增加pmm-server启动的额外功能

 

启用Orchestrator复制拓扑:

docker run ... -e ORCHESTRATOR_ENABLED=true ... percona/pmm-server:latest

 

关闭telemetry(pmm server数据每24小时会上报percona.com,包括pmm server ID、pmm version、操作系统、数据库版本、perl版本等):

docker run ... -e DISABLE_TELEMETRY=true ... percona/pmm-server:latest

 

关闭更新,可以通过web界面关闭,也可以通过命令行关闭:

docker run ... -e DISABLE_UPDATES=true ... percona/pmm-server:latest

 

PMM Server访问方式:

组件URL

PMM home page http://192.168.1.24

QAN http://192.168.1.24/qan/

Metrics Monitor (MM)http://192.168.1.24/graph/

User name: admin

Password: admin

Orchestrator http://192.168.1.24/orchestrator

2、安装PMM Client

PMM client可以通过rpm包安装,添加percona repository,直接执行yum或者apt-get安装:

下载链接:

https://www.percona.com/downloads/pmm/

 

下载deb包

https://www.percona.com/downloads/pmm/1.17.1/binary/debian/xenial/x86_64/pmm-client_1.17.1-1.xenial_amd64.deb

安装deb包

dpkg -i pmm-client_1.17.1-1.xenial_amd64.deb

 

同样提供了tar包和源码方式安装:

Generic tarball 解压缩后执行install脚本安装

源码压缩包解压后安装

3、PMM Client连接到PMM Server

先安装mysql-server

apt-get install -y mysql-server

修改监听地址

vim /etc/mysql/mysql.conf.d/mysqld.cnf

将bind改为:

bind-address            = 0.0.0.0

 

开启慢查询

slow_query_log=1
long_query_time=1
slow_query_log_file=/var/lib/mysql/mysql-slow.log

重启Mysql

/etc/init.d/mysql restart

 

对root用户做授权,允许远程访问

root@ubuntu:~# mysql -u root -proot
mysql> grant all PRIVILEGES on *.* to root@'%' identified by 'root';
mysql> flush privileges;

使用pmm-admin  config --server命令添加客户端,假如服务器端地址为192.168.100.1,客户端地址为192.168.200.1,添加命令如下(需要root或者sudo权限):

root@ubuntu:/etc/mysql/mysql.conf.d# pmm-admin config --server 192.168.1.24
OK, PMM server is alive.

PMM Server      | 192.168.1.24 
Client Name     | ubuntu
Client Address  | 192.168.1.24

 

如果修改了默认的80端口,则需要在ip后面加上自定义端口,如:

pmm-admin config --server 192.168.100.1:8080

 

4、搜集性能数据

使用pmm-admin add命令添加所需要监控的服务名。

如监控主机、mysql以及mysql的慢查询,命令如下(需要root或者sudo权限):

root@ubuntu:~# pmm-admin add mysql  --user root --password root --host 192.168.1.24 --port 3306[linux:metrics] OK, already monitoring this system.
[mysql:metrics] OK, now monitoring MySQL metrics using DSN root:***@tcp(192.168.1.24:3306)
[mysql:queries] OK, now monitoring MySQL queries from slowlog using DSN root:***@tcp(192.168.1.24:3306)

监控mongodb主机、数据库和慢查询:

sudo pmm-admin add mongodb

 

监控ProxySQL性能:

sudo pmm-admin add proxysql:metrics

 

查看被监控项:

sudo pmm-admin list

 

访问页面:

http://192.168.1.24/graph/d/Fxvd1timk/home-dashboard?orgId=1

效果如下:

1.png

 

访问qan

http://192.168.1.24/qan/

1.png

这个页面之所有,没有数据,是因为慢查询日志还没有产生。

创建一张表,插入3000万条数据,参考链接:

http://www.py3study.com/Article/details/id/313.html

 

执行一条慢sql语句

SELECT * from userinfo
WHERE `name` like '%a%'

 

点击Query Analytics

1.png

 

下方就是慢sql

1.png

 

再次访问页面

http://192.168.1.24/qan

 

效果如下:


 1.png

 

本文参考链接:

https://www.jianshu.com/p/bf32e5d63ffb


阅读原文内容投诉

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

软考中级精品资料免费领

  • 历年真题答案解析
  • 备考技巧名师总结
  • 高频考点精准押题
  • 2024年上半年信息系统项目管理师第二批次真题及答案解析(完整版)

    难度     813人已做
    查看
  • 【考后总结】2024年5月26日信息系统项目管理师第2批次考情分析

    难度     354人已做
    查看
  • 【考后总结】2024年5月25日信息系统项目管理师第1批次考情分析

    难度     318人已做
    查看
  • 2024年上半年软考高项第一、二批次真题考点汇总(完整版)

    难度     435人已做
    查看
  • 2024年上半年系统架构设计师考试综合知识真题

    难度     224人已做
    查看

相关文章

发现更多好内容

猜你喜欢

AI推送时光机
位置:首页-资讯-后端开发
咦!没有更多了?去看看其它编程学习网 内容吧
首页课程
资料下载
问答资讯