在Linux系统中，经常会因为负载过高导致各种性能问题。那么如何进行排查，其实是有迹可循，而且模式固定。
从上面可以看到，服务器有 2 个 CPU（分别为0、1），每个 CPU 核的资源使用情况，也能很清晰的展示。
对一个固定的技术组件的分析优化思路，即组件不是我们开发的，但又要分析优化它，怎么办？
数据库90%的性能问题由于SQL引起，线上SQL的执行快慢，直接影响着系统的稳定性。
本文主要介绍了一种基于MySQL数据库的表结构设计，旨在解决大数据量、高并发访问场景下，数据库的查询性能问题。通过合理的表结构设计、索引优化、缓存策略，使得数据库能够在大流量、高并发的情况下，仍然保持较高的查询性能。同时，针对可能出现的性能问题，提供了相应的优化建议。
之前做 MySQL 参数优化的时候，为了寻找瓶颈，我通常是观察 MySQL 的 status ，看哪些计数器有问题，以便确认问题的大致范围和应该调整的参数。虽然这一套屡试不爽，但是玩久了也想换一个新的视角。既然 MySQL 是运行在操作系统之上的，那我们观测操作系统的内核事件，应该也能发现性能问题。
适当的调整MySQL的编译参数，可以极大的提升MySQL的性能，官方文档说可以提升10-30％的性能。
◆ CPU 占用过高常见现象 在使用 MySQL 的过程中会遇到各种瓶颈问题，常见的是 IO 瓶颈，但是有时候会出现服务器 CPU 使用率超过 100%，应用页面访问慢，登录服务器负载很高。而导致这个问题竟然是 MySQL 进程，按理说如果 MySQL 运行稳定，服务器的 CPU 资源并不会跑满，如果出现这个问题，初步可以断定，是 MySQL 实例中出现了问题 SQL。 ◆ CPU 占用过高常见原因 CPU 占用过高常见原因： 服务器硬件问题 内存溢出 业务高并发 如果是业务高并发引起，可以理解为一种业务繁
登入服务器后，我们的目的是首先要确认当前到底是哪些进程引起的负载高，以及这些进程卡在什么地方，瓶颈是什么。
在「3306π」社区广州站5月22日的分享会上，万里数据库CTO娄帅给出了他建议的配置参考，我们一起来看下：
Prometheus 是一种开源的监控系统和时序数据库，旨在收集和处理大量数据并提供可视化、监控警报等功能。它支持多种语言、多种部署方式，并且非常灵活，而且社区支持非常活跃，为用户提供了很多优秀的解决方案。 MySQL 是一种流行的关系型数据库管理系统，用于存储和管理结构化数据。MySQL 数据库对于 web 应用程序、企业级应用程序和数据仓库等应用场景都非常适用。
出处：https://www.cnblogs.com/YangJiaXin/p/11234591.html
测试mysql5.7和mysql8.0 分别在读写、只读、只写模式下不同并发时的性能（tps，qps）
出于对Linux操作系统的兴趣，以及对底层知识的强烈欲望，因此整理了这篇文章。本文也可以作为检验基础知识的指标，另外文章涵盖了一个系统的方方面面。如果没有完善的计算机系统知识，网络知识和操作系统知识，文档中的工具，是不可能完全掌握的，另外对系统性能分析和优化是一个长期的系列。
系统的吞吐量瓶颈往往出现在数据库的访问速度上 随着应用程序的运行，数据库的中的数据会越来越多，处理时间会相应变慢 数据是存放在磁盘上的，读写速度无法和内存相比 优化原则：减少系统瓶颈，减少资源占用，增加系统的反应速度。
测试mysql5.7和mysql8.0分别在读写，选定，只写模式下不同并发时的性能（tps，qps）
https://cdn.mysql.com//archives/mysql-5.7/mysql-5.7.9-linux-glibc2.5-x86_64.tar.gz
测试MySQL5.7和mysql8.0 分别在读写、只读、只写模式下不同并发时的性能（tps，qps）
On-CPU性能问题可以借助On-CPU火焰图解决，但是无法了解进程和线程不在CPU上运行所花费的时间。如果有很多的时间花在同步请求上，也会很容易影响性能表现。
爱可生南区交付服务部团队 DBA，负责客户 MySQL 的故障处理以及公司数据库集群管理平台 DMP 的日常运维。
本文介绍Prometheus的Exporter组件的作用，原理，已经使用该组件对主机，MySQL,Redis等实施监控的实践。
好久没有更新文章了，请相信我绝对不是因为投资亏麻了心情不好。而是因为我去准备黑科技了。
对于任何数据库管理系统，尤其是MySQL，了解其性能指标以及如何监控这些指标是至关重要的。这不仅可以确保数据库的高效运行，还可以在出现问题时迅速定位并解决。
前面已经针对MySQL数据库进行了介绍，并说明了为什么选择MySQL数据库，以及MySQL数据库在Linux系统下的多种安装方式，同时以单实例讲解了如何以编译方式安装MySQL和基础安全优化等内容，本章将为大家讲解更为实用的MSQL多实例安装，百度、淘宝、阿里、新浪等大公司无一例外地都会使用多实例的方式部署数据库，那么是什么原因促使他们选择多实例数据库的部署方式呢?
1、 docker pull mysql:5.7 mkdir -p /mysql/data mkdir -p /mysql/conf mkdir -p /mysql/log chmod 777 -R /mysql/log chmod 777 -R /mysql/data
eBPF (扩展的伯克利数据包过滤器) 是一项强大的网络和性能分析工具，被广泛应用在 Linux 内核上。eBPF 使得开发者能够动态地加载、更新和运行用户定义的代码，而无需重启内核或更改内核源代码。这个特性使得 eBPF 能够提供极高的灵活性和性能，使其在网络和系统性能分析方面具有广泛的应用。此外，eBPF 还支持使用 USDT (用户级静态定义跟踪点) 捕获用户态的应用程序行为。
银河麒麟高级服务器操作系统V10是针对企业级关键业务，适应虚拟化、云计算、大数据、工业互联网时代对主机系统可靠性、安全性、性能、扩展性和实时性的需求，依据CMMI 5级标准研制的提供内生安全、云原生支持、国产平台深入优化、高性能、易管理的新一代自主服务器操作系统；同源支持飞腾、龙芯、申威、兆芯、海光、鲲鹏等自主CPU及x86平台；可支撑构建大型数据中心服务器高可用集群、负载均衡集群、分布式集群文件系统、虚拟化应用和容器云平台等，可部署在物理服务器和虚拟化环境、私有云、公有云和混合云环境；应用于政府、国防、金融、教育、财税、公安、审计、交通、医疗、制造等领域。
top 命令 是每个人都在使用的用于 监控 Linux 系统性能 的最好的命令。你可能已经知道 top 命令的绝大部分操作，除了很少的几个操作，如果我没错的话，批处理模式就是其中之一。
斗佛视频号最新的一期讲解了硬件性能数据的基础知识，包括了CPU各级缓存、内存、机械/固态硬盘、网卡、机房等延时和吞吐量数据，我认为是非常有用的内容，虽然只是一些经验值，但是了解这些，就能为我们进行系统设计、技术选型等工作的时候，提供更科学的数据参考，做到有"数"可依，定量评估，更加科学。
以上单机版的prometheus服务端就部署完成了，接下来我们部署下node_export 和 mysqld_export 来采集系统和 MySQL 的监控数据。
yum localinstall Percona-Server-client-57-5.7.18-15.1.el6.x86_64.rpm Percona-Server-shared-57-5.7.18-15.1.el6.x86_64.rpm Percona-Server-server-57-5.7.18-15.1.el6.x86_64.rpm Percona-Server-tokudb-57-5.7.18-15.1.el6.x86_64.rpm
在服务器运维工作中，CPU负载过高是比较常见的问题之一。当CPU负载过高时，服务器的性能会明显下降，甚至可能导致系统崩溃或服务不可用。因此，及时发现和解决CPU负载过高的问题十分重要。本文将介绍如何通过一系列步骤来诊断和解决服务器CPU负载过高问题。
本文介绍的三种调优方法是按照金字塔的调优顺序排列的，如下图所示。一般来说，自底向上调优的效果是成反比的，而越往下层调优效果越好，但是难度也越大。
上周五下午的时候，线上的一个服务器出了一个报警，报警内容是CPU利用率大于80%，持续时间五分钟。
性能分析中的一项常见任务是确定哪些代码段消耗的 CPU 时间最多。这通常需要对堆栈跟踪进行剖析。Flame 图形的出现改变了我们对这些剖析进行可视化的方式。它能直观地显示应用程序中占用 CPU 最多的部分。本文将介绍如何使用 perf 生成这些火焰图。
超大的分页一般从两个方向上来解决:数据库层面,这也是我们主要集中关注的(虽然收效没那么大),类似于select * from table where age > 20 limit 1000000,10这种查询其实也是有可以优化的余地的. 这条语句需要load1000000数据然后基本上全部丢弃,只取10条当然比较慢. 当时我们可以修改为select * from table where id in (select id from table where age > 20 limit 1000000,10).这样虽然也load了一百万的数据,但是由于索引覆盖,要查询的所有字段都在索引中,所以速度会很快. 同时如果ID连续的好,我们还可以select * from table where id > 1000000 limit 10,效率也是不错的,优化的可能性有许多种,但是核心思想都一样,就是减少load的数据从需求的角度减少这种请求…主要是不做类似的需求(直接跳转到几百万页之后的具体某一页.只允许逐页查看或者按照给定的路线走,这样可预测,可缓存)以及防止ID泄漏且连续被人恶意攻击
出于对Linux操作系统的兴趣，以及对底层知识的强烈欲望，因此整理了这篇文章。本文也可以作为检验基础知识的指标，另外文章涵盖了一个系统的方方面面。如果没有完善的计算机系统知识，网络知识和操作系统知识，文档中的工具，是不可能完全掌握的，另外对系统性能分析和优化是一个长期的系列。 本文档主要是结合Linux 大牛，搜集Linux系统性能优化相关文章整理后的一篇综合性文章，主要是结合博文对涉及到的原理和性能测试的工具展开说明。 背景知识：具备背景知识是分析性能问题时需要了解的。比如硬件 cache；再比如操作系统
3.服务监控。如apache,nginx,tomcat,redis,TCP连接数等。
1999年至 2000 年，Monty 成立了MySQL AB 这个公司。 2000 年，MySQL 公布了自己的源代码，并采用了 GPL 许可协议，正式进入开源的世界，这让 MySQL 迅速发展。2005 年 10 月 MySQL 发布了一个里程碑式的版本 MySQL 5.0 。
在Linux系统中，内存管理是一个至关重要的方面，尤其在生产环境中，了解系统内存的使用情况可以帮助管理员优化系统性能，检测内存泄漏，合理分配资源，从而确保系统的稳定运行。本文将详细介绍在CentOS 7系统中如何使用常见的内存监控工具，如free、top、ps等，并深入探讨这些工具的各种参数和用法，以便读者能够全面掌握系统内存的监控与管理。
1. [client] default-character-set=utf8 2. port = 3309 3. socket = /home/mysql/mysql/tmp/mysql.sock 4. [mysqld] character_set_server=utf8 5. !include /home/mysql/mysql/etc/mysqld.cnf #包含的配置文件 ，把用户名，密码文件单独存放 6. port = 3309 7.
#*** client options 相关选项 ***# #以下选项会被MySQL客户端应用读取。注意只有MySQL附带的客户端应用程序保证可以读取这段内容。如果你想你自己的MySQL应用程序获取这些值。需要在MySQL客户端库初始化的时候指定这些选项。 [client] port = 3309 socket = /usr/local/mysql/tmp/mysql.sock [mysqld] #服务器端配置 !include /usr/local/mysql/etc/mysqld.cnf #包含的
由于内核CPU为sy 6.5%并不是很高，而等待I/O的CPU时间为93.8%是比较高的，另外在进程信息中心可以看到Python3的进程CPU占有率为7.2%，也是比较高的，它的PID为16520。可以定位在I/O上出现了瓶颈，可能是Python3引起的。于是用iostat来分析。
本文由马哥教育面授班23期学员推荐，转载自恒生研究院，作者为董西孝，内容略经小编改编和加工，观点跟作者无关，最后感谢作者的辛苦贡献与付出。 出于对Linux操作系统的兴趣，以及对底层知识的强烈欲望，因此整理了这篇文章。本文也可以作为检验基础知识的指标，另外文章涵盖了一个系统的方方面面。如果没有完善的计算机系统知识，网络知识和操作系统知识，文档中的工具，是不可能完全掌握的，另外对系统性能分析和优化是一个长期的系列。 本文档主要是结合Linux 大牛，Netflix 高级性能架构师 Brendan Greg
step1、根据 top -H -p 9120 显示出线程级别的监控信息（这里的9120是mysqld的进程号）
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
