在专栏之前的几篇文章中，我们总结了缓冲池，缓存页，redo log，undo log，以及数据页和数据行在底层是如何进行存储的，后续介绍了表空间，段，区等概念。这一节比较特殊，讲述的是和Linux有关的交互原理，因为多数的mysql都是部署在linux的服务器上面，本节会简单介绍一下linux是如何处理mysql的请求的，以及linux系统会带来哪些问题
为什么使用消息队列? •解耦•异步•削峰 (1) 解耦 现有系统A, B, C, 系统B和C需要系统A的数据, 然后我们就修改系统A的代码, 给系统B, C发送数据. 这时系统D也需要系统A的数据,
大家好，我是黄啊码，最近在手动安装mysql的时候遇到了一点问题，然后按照网友们的操作，没一次成功，最终在一位大佬的指导下，终于解决了，特地整理如下：
运营push发送数量较大，发送时间密集，同一时间段调用baixin发送push的数量几十万上百万不等。
当新连接 经过安全设备的时候 被拦截了. 比如安全设备记录/连接满了, 不允许新连接. 有其它连接释放之后, 就可以有新连接了.
在 Linux 上自建 MySQL 服务器，经常遇到各种无法启动或启动后异常的问题，本文列举一些常见问题的解决办法。
作为一个后端工程师，想必没有人没用过数据库，跟我一起复习一下MySQL吧，本文是我学习《MySQL实战45讲》的总结笔记的第五篇，总结了MySQL索引相关的实践使用问题。
磁盘空间占满了，有两种解决办法：开源节流。这里我讲节流。 一个命令（从根目录开始）： du -h --max-depth=1 该命令用于罗列当前目录下一级以内东西大小，转换成普通人能看的。 递归。 找到病灶之后，如果不敢删，百度一下。一般如果是日志啥的但删无妨。 我找到是在 var 下面的 docker，于是百度了一下解决方法： docker system prune -a 使用的时候建议将要保留的镜像打开，不然会全给你清理了。它有给英文提示。
https://mp.weixin.qq.com/s/_OHDxCIWQDEMa3vsEXgVDA
我们在搞清楚如何加速Linux计算机之前，需要知道哪些方法可以帮助我们找到引导时启动的服务、以更高或更低优先级运行的进程、CPU运行状况、内存是否塞满了过多数据，还要检查交换内存区是否已满。最后，我们还要检查硬盘是否运行正常。
今天在线上运维过程中，遇到了一个TiDB写满操作系统磁盘的问题，最终通过查阅官方文档解决，这里记录一下。
前段时间和一个师兄聊天反馈一个问题：在一个大分区(24T)中使用xfs文件系统，用来做历史文件备份，突然提示没有磁盘空间错误！ 先检查下： [[email protected] ~]# df -hT Filesystem Type Size Used Avail Use% Mounted on /dev/sdb1 xfs 19T 16T 2.4T 88% /backup [[email protected] ~]# df -hi Filesystem
前言：在安装好Go环境之后万事俱备只欠东风的情况下，我充满了喜悦，正准备go get -u github.com/gogits/gogs，然而fatal: write error: No space
Hbase单表可以有百亿行、百万列，数据矩阵横向和纵向两个维度所支持的数据量级都非常具有弹性
前面我们说了为了吧buffer pool的数据持久化到磁盘上，比如修改了一条数据，不可能每次吧整个页的数据都刷新过去，这样耗费性能，innoDB就是把修改的数据记录在redo日志里，redo日志格式主要是spaceId，type，page_number，offset，Data等。Offset记录上一条数据的地址，为了修改上一条记录头部新的next record，data记录的就是真实数据。Redo日志主要关注的就是一条语句修改了多少b+树，针对其中某颗树，可能增加了页，也可能更新了叶子节点或者内节点。他会记录修改日志或者删除日志，而删除日志格式又会分为开始和结束，MLOG_COMP_LIST_START_DELETE和MLOG_COMP_LIST_END_DELETE。
我在slelect一个数据量很大的merge表时，并同时将select结果集insert到另外一张表中，报了如下错误：
摘要： 什么是多级缓存 所谓多级缓存，即在整个系统架构的不同系统层级进行数据缓存，以提升访问效率，这也是应用最广的方案之一。我们应用的整体架构如图1所示： 图1 多级缓存方案 整体流程如上图所示： 1）首先接入Nginx将请求负载均衡到应用Nginx，此处常用的负载均衡算法是轮询或者一致性哈希，轮询可以使服务器的请求更加均衡，而一致性哈希可以提升应用Nginx的缓存命中率，相对于轮询，一致性哈希会存在单机热点问题，一种解决办法是热点直接推送到接入层Nginx，一种办法是设置一个阀值，当超过阀值，改为轮询算法。
IOPS：(Input/Output operations Per Second,既每秒处理I/O的请求次数)
中移信息平台能力中心数据库团队成员，主要负责 MySQL、TiDB、Redis、clickhouse 等开源数据库的维护工作。
扩展磁盘 1. 关闭实例，找到磁盘镜像文件 2. 将virtualbox安装目录下的 VBoxManage命令路径添加到环境变量 VBoxManage.exe clonehd box-disk1.vmdk box-disk1.vdi -format VDI # 复制镜像并转化格式 3. 自动启动服务 打开Vagrantfile文件，编辑 config.vm.provision "shell", inline: <<-SHELL # apt-get update # apt-get install -y apache2 systemctl stop firewalld /server/apache/bin/httpd -k start /etc/init.d/mysql.server start SHELL 重新启动虚拟机 vagrant reload --provision
MYSQL用法(十二) Can't connect to MySQL server on 解决方案
在使用MySQL中，我们对于执行时间过长的SQL想要放弃的方法就是kill这个SQL。在MySQL中kill有两个命令：
EasyNVR是基于RTSP/Onvif协议接入的安防视频云服务平台，它可以将前端设备进行快速便捷地接入、采集、视频转码、处理及分发，分发的视频流包括：RTSP、RTMP、HTTP-FLV、WS-FLV、HLS、WebRTC等。
此前的文章中，我们介绍了 mysql 最常用的存储引擎 — innodb 的性能优化。 主要围绕参数、索引设置等方面进行。 Mysql Innodb 性能优化
/var/run/yum.pid被锁定的情况，这种情况很好解决，正常来说只需要把这个文件删掉即可，但是我们删掉之后依然报错，于是发现该文件所在的磁盘分区已满，所以怀疑是这个导致的，于是就看下到底是什么占用导致。
可能是开的进程太多了，占用太多的内存以致占用了很多的缓存，也可能是别的进程死了，但是缓存没有清除。
文章目录 缓冲池 Buffer Pool 刷脏页的时机 MySQL定时刷 MySQL内存(buffer pool)不足的时候 MySQL正常关闭的时候 redo log满了的时候 刷脏导致的性能问题
我们在此前的文章中讲解过，TSINGSEE青犀视频各个平台的默认数据库是SQLite，用户可以根据自己的需求更换为MySQL，以此来解决海量数据的使用与存储问题，并提高数据库的灵活性。关于数据库的切换操作步骤与注意事项，大家可以参考这篇文章：EasyGBS平台切换为MySQL数据库的操作步骤及注意事项。
像我们去面试一些大公司的时候，就会遇到一些关于缓存的问题。可能很多同学都是接触过，多多少少了解一些，但是如果没有好好记录这些内容，不熟练精通的话，在真正面试的时候，就很难答出来了。
今天中午，搭建好的一套主从环境中磁盘报警，登陆到相关环境，发现是MySQL的错误日志量非常大，于是使用tail -f命令查看了日志文件，发现该错误日志增长的速度非常快，日志内容为：
在执行一个有1000万条记录的MySQL查询语句时，出现了上面的错误。百度折腾了很长时间，终于解决，特此记录。
分享者：叶金荣，万里数据库开源生态负责人，Oracle MySQL ACE总监，腾讯云TVP。
接到了一台 MySQL5.7 服务器磁盘空间不足的报警，该业务的数据量 20G 的样子，是什么造成磁盘空间不足呢？
如何解决消息队列的延时以及过期失效问题？消息队列满了以后该怎么处理？有几百万消息持续积压几小时，说说怎么解决？
主从复制，是用来建立一个和主数据库完全一样的数据库环境，称为从数据库；主数据库一般是准实时的业务数据库。
去mysql的数据目录/data看看，如果存在mysql-bin.index，就赶快把它删除掉吧，它就是罪魁祸首了。
随着互联网的不断发展，日常生活中越来越多的需求通过网络来实现，从衣食住行到金融教育，从口袋到身份，人们无时无刻不依赖着网络，而且越来越多的人通过网络来完成自己的需求。 作者 / 张弸中，达观数据后端工程师 收录 / InfoQ 前言 作为直接面对来自客户请求的web服务端，无疑是要同时承受更多的请求，并为用户提供更好的体验。这个时候web端的性能常常会成为业务发展的瓶颈，提升性能刻不容缓。 达观数据在开发过程中总结了一些提升web服务端性能的经验，与大家分享。 问题分析 对于web服务端性能，首先我们分
最近忙着给YOUZAN的数据库服务器升级系统版本，从centos6 升级到centos7。centos/redhat 7 默认将文件系统设置为xfs。咨询了很多DBA朋友,他们已经升级到7 并且使用xfs很久。于是我们也随大流打算使用xfs文件系统。
国内大佬翻译的文章，因为文章较长，不适合碎片化阅读，因此分为几篇文章来转载，满满的干货，外链在微信上不能显示，建议从第一篇文章开始看起
LAMP是Linux Apache MySQL PHP的缩写，即把Apache、MySQL以及PHP安装在Linux系统上，组成一个环境来运行PHP的脚本语言。Apache是最常用的Web服务软件，而MySQL是比较小型的数据库软件。三个角色可以安装在一台机器上，也可以分开（但httpd和php要在一起的）
环境准备 自建MySQL环境主机 主机：iZbp1e*****krn92qrx0Z 内网ip: 10.26.254.217 客户端ecs主机 主机：iZbp1e6*****zkrn92qrwzZ 内网ip: 10.24.236.231 说明 说明：mysql的account的组成为’user’@’host’ 常见问题分析 ERROR 1045 (28000) 现象描述 ERROR 1045 (28000): Access denied for user 'testcon'@'10.24.236.231' (
前段时间做了一个 nodejs 应用，项目架构是 前端 vue 单页应用，后端 nodejs 其实有考虑 ssr，但是因开发时间比较紧张，就没能使用。 下面是开发过程中的一些经验以及遇到的一些问题。
集群 场景一 LAMP http,web object简单无状态连接 200,50dynamic prefork,2M 10M 50*10+150*2 M apache：进程切换，查询mysql， 网络IO，磁盘IO 200--->1000 800,200 1600+2000 解决方式 Scale ON :向上扩展 换更好的硬件，如换主机 注意：Scale On向上扩展，硬件增长比例与性能增长比例是不
视频集中存储/云存储/视频监控管理平台EasyCVR能在复杂的网络环境中，将分散的各类视频资源进行统一汇聚、整合、集中管理，实现视频资源的鉴权管理、按需调阅、全网分发、智能分析等。AI智能大数据视频分析EasyCVR平台已经广泛应用在工地、工厂、园区、楼宇、校园、仓储等场景中。
这两天看到几台服务器比较异常，平常流量跑满，突然就没有了流量，TCP 连接也没了。于是登录上服务器查看，首先想重启 nginx 服务，结果报错，大致意思就是磁盘空间已满。通过 df -h 命令查看，发现各个分区还有很充足的空间，然后 df -i 一看，发现分区 inode 已经满了。
OLTP 联机事务处理， on-line transaction processing 强调数据库内存效率 ，强调内存各种指标的命令率 ，强调绑定变量， 强调并发操作 数据在系统中产生 ，对响应时间要求非常高， 用户数量非常庞大，主要是操作人员，数据库的各种操作主要基于索引进行。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
