在数据库里内存使用比较高是正常的， 数据库会将磁盘中的数据缓存到内存里 ，这样在访问数据的时候如果可以直接在内存里操作数据就会很快。长期运行的数据库服务内存里会持续缓存热数据的。这部分内存如果空闲不用就等于浪费，数据库会尽可能的占满这部分空间 ，所以一般运行一段时间的数据库内存都会占用比较高，并且占用会稳定到一个值 。
PolarDB Serverless脱胎于 PolarDB 团队发表在SIGMOD 2021的论文，是选取其中成熟的技术最终产品化的结果。我们借助两大核心技术，高性能全局一致性SCC和热备无感秒切，无论在跨机扩展还是跨机切换，都达到了业界领先的能力。PolarDB MySQL Serverless于去年底正式上线，目前已经有1000+用户开始上手使用。本文期望从实践角度，演示如何测试PolarDB Serverless的弹性能力。
所谓Apache出现CPU高占用率就是指Apache在一段时间内持续占用很高的CPU使用率，甚至达到CPU100％，这个时候造成网站无法访问。解决的方法就是仔细观察Apache的日志文件，查阅错误的信息。 下面针对几种错误信息进行分析并给出解决的方法： 1.Apache与WinSockv2相冲突 Apache官方提供的手册中提到，在Windows系统下Apache2.x为了提高性能而使用了MicrosoftWinSockv2API，但是一些常见的防火墙软件会破坏他的正确性，从而使得Apache出现死循环操作造成CPU100％。 可以依次采用下面的方法来解决上问题，如果进行了一步还有问题就继续下一步： 1)在httpd.conf文件中使用Win32DisableAcceptEx禁止Apache使用MicrosoftWinSockv2API： Win32DisableAcceptEx#禁止使用AcceptEx() 2)使用SystemRepairEngineer(SREng)查看WinSocket供应者，如果出现非MS的陌生项则将其删除，并使用软件的“重置WinSocket”按钮进行重置。 3)卸载与Apache相冲突的杀毒软件或防火墙软件。 如果进行上面的三个步骤之后还有问题，那应该看看是不是还有下面的错误。 2.是否加载了第三方模块(so文件) Apache2.x要求所有的第三方模块都必须是线程安全的，但有很多第三方的模块可能存在内存泄露，因此时间一长就可以极大的消耗Apache资源。所以可以采用将所有的第三方模块逐个关闭的方法看看运行一段时间之后Apache对资源的占用是否有所改善。 3.“Terminating1threadsthatfailedtoexit”错误 上面错误中的数字1有可能是其他数字，造成这个错误的原因是Apache在关闭并发线程的时候出现线程溢出，从而造成内存泄露，表现出来的就是Apache所占用的系统资源持续增长。 具体来说，Apache的子进程在结束当前请求之前会首先将所有的并发线程进行关闭，在关闭的时候会等待3分钟，如果3分钟之内没有将所有的线程关闭则会抛出上述的错误提示，然后强制关闭。这样就造成了内存溢出，时间一长会使得Apache所占用资源持续增长直到无法工作。这个时候可以适当将MaxRequestsPerChild的值降低，使得Apache子进程所并发的线程数量减少，从而降低该错误出现的几率。 但是这种方式并不能彻底解决问题，幸好Apache2.0.x的最新版本(2.0.63)解决了之前版本的这个问题，如果3分钟之内有线程没有关闭的话会自动根据时间情况再增加等待结束的时间直到最终将所有的线程结束。日志文件中会出现类似下面的信息： Child1952:Waiting150moresecondsfor2workerthreadstofinish. Child1952:Waiting120moresecondsfor1workerthreadstofinish. Child1952:Allworkerthreadshaveexited. 4.“file.//server//mpm//winnt//child.c,line1078,assertion“(rv>=0)&&(rv 这个错误是Apache的一个bug(#11997)，可以通过Win32DisableAcceptEx禁止Apache使用WinSocketv2来避免此bug，具体设置见前述。 5.PHP5.2.1以上版本的libmysql.dll与MySQL5不兼容 PHP5.2.1以后的新版本(截止目前最新版本为5.2.5)中用于连接MySQL的libmysql.dll组件与MySQL5不兼容，在Apache中运行PHP的时候会造成Apache产生CPU100%的问题。 解决的方法就是从http://www.php.net/releases/下载5.2.1版本，将压缩包中的libmysql.dll文件覆盖现在的文件，然后重启Apache就可以了。 6.病毒或木马程序命名为Apache.exe 有的时候病毒或木马程序会将其名称命名为Apache.exe文件达到一种掩饰的目的，这个时候使用第三方进程分析器查看进程的路径然后将其删除或使用杀毒软件清除就可以了。 7.程序编写不严谨造成死循环等错误 如果上面的问题都不存在Apache依然产生CPU100%的问题的话，通常来说就应该是Web程序自身的问题了，例如死循环等等。这个时候需要在日志中设置HTTP请求的文件及执行的时间，然后查找出执行时间比较长的地址进行分析排查。
什么是CPU时间片？我们现在所使用的Windows、Linux、Mac OS都是“多任务操作系统”，就是说他们可以“同时”运行多个程序，比如一边打开Chrome浏览器浏览网页还能一边听音乐。
最近在维护公司线上的服务器，排查了一些问题，所以做一个总结。有一段时间，线上环境变得很卡，客户端请求很多都报超时，因为线上没有良好的apm监控，所以只能通过流量高峰期和日志去排查问题。通过排查，发现数据库的慢查询日志在比之间的暴涨了十倍，然后发现，memcache服务器（8核）负载很高，cpu一直在50%的左右，原因就是memcache服务器内存用完，导致内存的淘汰十分频繁，这样就导致很多请求落到数据库。下面说下主要的排查思路和用到的工具
在MongoDB中，加载各种依赖的lib到内存、管理客户端请求、元数据管理存储等工作都需要占用内存，但其实内存使用的大部分还是在存储引擎和客户端连接请求处理方面。
操作系统：CentOS Linux release 7.5.1804 (Core) 64核64G
TiDB集群上线运行一段时间，近期巡检的时候发现一个问题，集群中TiKV节点内存占用比较高，尤其在导入数据的时候，节点的内存会更高
有时候某个端口被占用，导致我们想要的软件运行不了。这时候就要找出是什么软件占用，及如何杀死后台对应程序。
作者：13 GitHub：https://github.com/ZHENFENG13 版权声明：本文为原创文章，未经允许不得转载。 简介 这是一篇关于Redis使用的总结类型文章，会先简单的谈
业务介绍 中华万年历的头条数据是根据推荐算法聚合而成的数据，包括ALS算法数据、用户画像数据、时效数据、非时效数据、定投数据、惊喜数据、频道数据、热榜数据、用户相关阅读推荐数据等。启动方式分为冷启动和用户画像启动。 冷启动：无用户画像或用户画像得分<8分。 用户画像：根据用户浏览头条数据给用户打的一系列标签，标签采用Long型的数字进行标记，譬如娱乐285L,旅游1127L。 时效数据：和时间相关的数据，会随着时间的推移自动消失，譬如新闻、娱乐。 非时效数据：和时间不相关的数据，会长期存在，譬如养生。 定投
最近发现还有老外看我的东西, 我就纳闷了，这中文您......., 好吧精神可嘉。话归正题，与MYSQL，PG 不同的SQL SERVER 其实在慢查询排查中一直是没有什么日志的，而通过DMV 或者工具来查询总觉得和其他两种数据库比较是有一定缺陷的。
线上web应用系统java进程运行一段时候后，出现系统响应延迟飙升，访问系统出现偶发白屏
（下面很多指标术语在不同的语境下可能会有不同的含义，在评价性能指标时，通常是指他们能够达到的最优值。比如吞吐量是指服务能承受的最大吞吐量。）
当app经过一段儿时间的迭代，往往会出现一些性能问题，这时能够协助开发同学解决这些性能问题也成为我们测试同学的重要工作。凑巧最近一段时间小编就一直在协助开发同学去进行app内存优化。这里小编整理了一份关于内存优化的心得分享给大家。
Relay log 类似 binary log，是指一组包含数据库变更事件的文件，加上相关的 index 和 mata 文件，具体细节参考 官方文档 。在 DM 中针对某个上游开启 relay log 后，相比不开启，有如下优势：
星球一位小伙伴面试了 网易，遇到了一个 性能类的面试题：CPU飙升900%，该怎么处理？
我们知道，直接从物理内存读写数据要比从硬盘读写数据要快的多，因此，我们希望所有数据的读取和写入都在内存完成，而内存是有限的，这样就引出了物理内存与虚拟内存的概念。 物理内存就是系统硬件提供的内存大小，是真正的内存，相对于物理内存，在linux下还有一个虚拟内存的概念，虚拟内存就是为了满足物理内存的不足而提出的策略，它是利用磁盘空间虚拟出的一块逻辑内存，用作虚拟内存的磁盘空间被称为交换空间（Swap Space）。 作为物理内存的扩展，linux会在物理内存不足时，使用交换分区的虚拟内存，更详细的说，就是内核会将暂时不用的内存块信息写到交换空间，这样以来，物理内存得到了释放，这块内存就可以用于其它目的，当需要用到原始的内容时，这些信息会被重新从交换空间读入物理内存。 Linux的内存管理采取的是分页存取机制，为了保证物理内存能得到充分的利用，内核会在适当的时候将物理内存中不经常使用的数据块自动交换到虚拟内存中，而将经常使用的信息保留到物理内存。
上节讲到如何利用Python获取Oracle已使用过的索引名称，这节讲如何将他们存入MySQL数据库中
程序中分配的堆内存空间没有被及时释放或无法释放，导致的内存占用过多，造成程序运行速度减慢甚至卡顿、崩溃。
提到CPU利用率，就必须理解时间片。什么是CPU时间片？我们现在所使用的Windows、Linux、Mac OS都是“多任务操作系统”，就是说他们可以“同时”运行多个程序，比如一边打开Chrome浏览器浏览网页还能一边听音乐。
分布式系统中，全局唯一 ID 的生成是一个老生常谈但是非常重要的话题。随着技术的不断成熟，大家的分布式全局唯一 ID 设计与生成方案趋向于趋势递增的 ID，这篇文章将结合我们系统中的 ID 针对实际业务场景以及性能存储和可读性的考量以及优缺点取舍，进行深入分析。本文并不是为了分析出最好的 ID 生成器，而是分析设计 ID 生成器的时候需要考虑哪些，如何设计出最适合自己业务的 ID 生成器。
|--- USER|用户说明 PID|进程识别号 %CPU|进程占用cpu百分比 %MEM|进程占用物理内存百分比 VSZ|进程占用虚拟内存大小(KB) RSS|进程占用物理内存大小(KB) TTY|终端机号 STAT|进程状态，S睡眠，s代表是会话的先导进程，N代表进程拥有比普通进程更高的优先级，R正在运行，D短期等待，Z僵死进程，T被跟踪或被停止 STARTED|进程启动的时间 TIME|此进程所消耗的CPU时间 COMMAND|正在执行的命令或进程名
① 判断置换算法好坏的标准： 具有较低的页面置换频率。 ② 内存抖动： 页面的频繁更换，导致整个系统效率急剧下降，这个现象称为内存抖动。 一、最佳置换算法 1.作用 其所选择的被淘汰页，
随着公司规模的增长，对大数据的离线应用开发的需求越来越多，这些需求包括但不限于离线数据同步(MySQL/Hive/Hbase/Elastic Search 等之间的离线同步)、离线计算(Hive/MapReduce/Spark 等)、定时调度、运行结果的查询以及失败场景的报警等等。
有很长一段时间没有做PHP开发了，最近有做PHP开发的小伙伴在个人微信公众号后台留言，能够分享一些PHP有关的面试题。于是给安排上。
爱可生 DBA 团队成员，负责项目日常问题处理及公司平台问题排查。热爱 IT，喜欢在互联网里畅游，擅长摄影、厨艺，不会厨艺的 DBA 不是好司机，didi~
Vmstat是一个很全面的性能分析工具，可以观察到系统的进程状态、内存使用、虚拟内存使用、磁盘的IO、中断、上下文切换、CPU使用等。系统性能分析工具中，使用最多的是这个，除了sysstat工具包外，这个工具能查看的系统资源最多。
Redis 中数据库键的过期时间都保存在过期字典中，当一个键过期了，Redis 存在三种不同的删除策略：定时删除、惰性删除和定期删除
ssh root@172.26.117.243 ps aux|grep kol.|awk '{print $2}'|xargs kill
这次分享是腾讯后端面经，面试接近 1 小时，问了非常多的问题，涵盖Linux、数据库、C++、操作系统、计算机网络。
将程序的逻辑地址空间划分为固定大小的页(page)，而物理内存划分为同样大小的页框(pageframe)。程序加载时，可将任意一页放人内存中任意一个页框，这些页框不必连续，从而实现了离散分配。也就是把内存等分成N份，存放运行的程序时，按分成的快放置即可。但放置时要考虑主存里哪些块已经被占用，这个用主存分配表（位示图）来表示。
1、在Linux中启动项目：java -cp ref-jvm.jar -XX:+PrintGC -Xms200M -Xmx200M ex13.FullGCProblem
作者：沃趣科技数据库专家 董红禹 问题概述 最近我们遇到一个MySQL的问题，分析后很有代表意义，特地写出来供大家参考。出现问题是，数据库先是被置为只读，然后过了一段时间，MySQL直接Cras
Redis中有个设置时间过期的功能，即对存储在 redis 数据库中的值可以设置一个过期时间。作为一个缓存数据库，这是非常实用的。如我们一般项目中的 token 或者一些登录信息，尤其是短信验证码都是有时间限制的，按照传统的数据库处理方式，一般都是自己判断过期，这样无疑会严重影响项目性能。
虽然前端有垃圾回收机制，但当某块无用的内存，却无法被垃圾回收机制认为是垃圾时，也就发生内存泄漏了
高产似母猪，废话少说，今天刚好读到一篇关于 MySQL 语句底层如何执行的文章，以下是我的理解，分享给你们。
在实际生产环境中使用Redis时，偶然会觉得Redis的内存占用要比自己预想的大。事实上，Redis占用的内存除了保存键值对所需的开销外，还有一些运行时产生的额外内存，包括：
三、API的生命周期：Design（设计）、Build（构建）、Test（测试）、Document（文档）、Share（发布）、run（运行）、DownLine（下线）。
看了这段代码，你知道是哪里发生内存泄漏了嘛？我先来告诉大家，这里time.After(time.Millisecond * 5)会发生内存泄漏，具体原因嘛别着急，我们一步步分析。
这个工具我第一次看到是在填坑群里面看到，是由研发-北京-蓝星同学分享的，看到比较有趣，就写一篇相关的记录下用法
工欲善其事必先利其器，学会使用工具也是一种本领。本篇文章就把自己之前工作中用到的一个内存分析工具给大家介绍下。
phpMyAdmin使用方便，已成为大多数站长的常用工具，对于小型网站来讲phpmyadmin已经绰绰有余了，但是对于中大型网站，在数据库较为庞大的时候，phpmyadmin就显得力不从心了！ 一般情况下，phpMyAdmin最大限制上传2M以内的文件，但是当网站运营一段时间后，即使把sql格式的数据库压缩成zip格式，想变成2M以内是不太现实的。 个人并不推荐使用phpMyAdmin来导入大数据库，因为大多数用户使用的是虚拟主机，很多文件没有服务器权限是无法修改的，而且phpmyadmin对大数据库的执行效率也非常低，容易出现错误。 导入大数据库的解决方案
MYSQL 8 已经上线一段时间了,每个数据库系统的内存方面都有自己的特点,MYSQL的内存的特点,下面总结了一些同学们经常会问的一些内存方面的问题.
（1）表的存储会出现碎片化，每当删除了一行内容，该段空间就会变为空白、被留空，而在一段时间内的大量删除操作，会使这种留空的空间变得比存储列表内容所使用的空间更大；
在日常工作中，时不时会收到内存使用率高的告警，那么我们应该如何处理呢？本文将从Linux和MySQL两个层面，介绍内存管理的相关知识点，希望能给大家带来一些帮助，以便更好地应对内存问题。
都以两个 consumer 计算： 一条消息占用内存：140+ 535*2 + 536*2 =2282byte存储三天：TPS * 86400 * 3=TPS*259200 条 总存储：2282*TPS*259200≈ 百GB
这是由iOS系统管理决定的，但APP退出在后台后，只有10秒的持续运行时间，然后暂停。但该APP还在内存中，当出现内存警告，也就是别的APP要运行，而此时内存又不足的情况下，系统会回收停在后台APP所占用的内存。如果出现这种情况，那么你再次打开你的APP，就会重新启动。 不知道你是为什么要让APP在后台还要继续运行，如果非得这样，那可以使用多线程技术中的gcd，可以让APP退出后继续运行很长一段时间（大概10分钟） iOS APP类型： 1. 保存现场。按下Home键10秒内直接杀死进程，并释放内存。 2
Redis 的缓存淘汰算法则是通过实现 LFU 算法来避免「缓存污染」而导致缓存命中率下降的问题（Redis 没有预读机制）。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
