（外部）内存碎片是一个历史悠久的 Linux 内核编程问题，随着系统的运行，页面被分配给各种任务，随着时间的推移内存会逐步碎片化，最终正常运行时间较长的繁忙系统可能只有很少的物理页面是连续的。由于 Linux 内核支持虚拟内存管理，物理内存碎片通常不是问题，因为在页表的帮助下，物理上分散的内存在虚拟地址空间仍然是连续的 （除非使用大页），但对于需要从内核线性映射区分配连续物理内存的需求来说就会变的非常困难，比如通过块分配器分配结构体对象 （在内核态很常见且频繁的操作），或对不支持 scatter/gather 模式的 DMA 缓冲器的操作等，会引起频繁的直接内存回收/规整，导致系统性能出现较大的波动，或分配失败 （在慢速内存分配路径会根据页面分配标志位执行不同的操作）。
AEP是Intel推出的一种新型的非易失Optane Memory设备，又被称作Apache Pass，所以一般习惯称作AEP。在这之前也有类似的设备称作NVDIMM或PMEM，目前Linux创建的AEP设备节点也是叫做pmem（如/dev/pmem0）， 所以本文中NVDIMM或PMEM都指AEP。 但是本文不是为了科普AEP，如果想了解AEP的一些基本知识，可以参考以下几篇文章： NVDIMM Enabling in SUSE Linux Enterprise Part 1 NVDIMM Enabling in SUSE Linux Enterprise Part 2 Persistent Memory Wiki
作者：Cheetah老师一直从业于半导体行业，他曾为U-boot社区和Linux内核社区提交过若干补丁。目前主要从事Linux相关系统软件开发工作，负责Soc芯片BringUp及系统软件开发，喜欢阅读内核源代码，在不断的学习和工作中深入理解内存管理，进程调度，文件系统，设备驱动等内核子系统。
页是信息的物理单位, 分页是为了实现非连续分配, 以便解决内存碎片问题, 或者说分页是由于系统管理的需要. 段是信息的逻辑单位,它含有一组意义相对完整的信息, 分段的目的是为了更好地实现共享, 满足用户的需要.
对于用户空间的应用程序，我们通常根本不关心page的物理存放位置，因为我们用的是虚拟地址。所以，只要虚拟地址不变，哪怕这个页在物理上从DDR的这里飞到DDR的那里，用户都基本不感知。那么，为什么要写一篇论述页迁移的文章呢？
对称多处理器结构 , 英文名称为 " Symmetrical Multi-Processing " , 简称 SMP ;
在虚拟化环境中的迁移，又分为动态迁移，静态迁移，也有人称之为冷迁移和热迁移，或者离线迁移在线迁移；静态迁移和动态迁移的 区别就是静态迁移明显有一段时间客户机的服务不可用，而动态迁移则没有明显的服务暂停时间，静态迁移有两种1，是关闭客户机将其硬板镜像复制到另一台宿主机系统，然后回复启动起来，这种迁移不保留工作负载，2是，两台客户机公用一个存储系统，关闭一台客户机，防止其内存到另一台宿主机，这样做的方式是，保存迁移前的负载
这篇文章讨论如何使用CRIU迁移使用了共享内存的程序，主要讨论其中的前两种共享内存方法，最终介绍一种支持热迁移的C程序共享内存使用方法。
指分配给用户的内存空间中未被使用的部分。例如进程需要使用3K bytes物理内存，于是向系统申请了大小等于3Kbytes的内存，但是由于Linux内核伙伴系统算法最小颗粒是4K bytes，所以分配的是4Kbytes内存，那么其中1K bytes未被使用的内存就是内存内碎片。
之前写了一篇文章分析了Datapump迁移数据的一些准备总结，反响还不错。Datapump数据迁移前的准备工作，最近碰到一个场景，根据评估还是使用Datapump比较好。主要的原因如下： 1.原来的环境在Solaris下，硬件资源老旧，需要迁移到Linux下，跨平台迁移使用逻辑迁移优先 2.原来的环境使用10gR2,现在需要顺带迁移到11gR2，充分解决备库“不中用”的情况 3.迁移的数据量不算大，在几百G以内，可以充分利用带宽和I/O吞吐量来达到预期的时间窗口。 而在这个方案之外，考虑到提高性能，我们采用
漏洞的可利用性是评估其严重程度的标准之一。如今，针对可利用性的主流评估方法仍然是人工编写ExP并测试。然而，人工编写的ExP通常面向特定程序版本，人们无法确保这样的exploit在其他理论上可能受影响的版本上有效执行。
Rocky Linux 8.4 现已正式发布。Rocky Linux 是一个社区版的企业操作系统，旨在与 Red Hat Enterprise Linux 8.4 实现 100% 的 bug-for-bug 兼容。官方表示，由于这是 Rocky Linux 的第一个版本，所以发布说明只反映了各版本之间上游功能的变化。且不支持从 Rocky Linux 8.3 RC1、Rocky Linux 8.4 RC1 或任何其他候选版本迁移到 Rocky Linux 8.4。
容器的前世今生 物理机 部署非常慢 购买服务器服务，放在IDC机房，各种走流程，很多流程不可控制流程慢。 成本非常高 物理的服务器，高额的配置成本贵。 资源浪费 资源太多了，针对app的服务可能利用率不够充分。 难于迁移和扩展 迁移app端的服务器，我们要提前准备好一个新的物理服务器，环境需要重新的迁移。资源消耗比较大的话，用户增加比较快需要扩展内存，cpu，硬盘麻烦，可能最后还是选择购买新的物理服务器。 可能会被限定硬件厂家 那些已经采用RISC架构或非x86平台的用户来说，要想体验到x86平台的高效、
其中，KVM 全称是 基于内核的虚拟机（Kernel-based Virtual Machine），它是一个 Linux 的一个内核模块，该内核模块使得 Linux 变成了一个 Hypervisor：
内核中对于每个子系统的的条目数是有限制的，限制的大小定义在kernel/cgroup.c#L139。
每个虚拟机就是一个操作系统，每个操作系统都要分配对应的操作系统资源，大家都用window系统，真正的生产环境一般都是用linux操作系统其中一部分原因就是因为linux系统消耗资源比较少。如果在一个物理服务器上放入10个虚拟机，每个虚拟机系统占用1g资源，等于浪费了10g的内存资源。所以当操作系统越来越多的时候消耗在系统上的资源也就越来越大。
近期公司一台服务器的磁盘告警“磁盘阵列错误”，经检查发现磁盘：“PD0/PD1/PD2 硬盘Medium Error DevId 并BadStripe PD0 PD1”，需要在服务器磁盘彻底崩溃之前进行raid修复，具体过程如下：
KVM虚拟化的学习，也可以分为七个阶段，经过七个阶段的学习，就在生产环境中完成虚拟化任务。
常见的内存分配函数有malloc，mmap等，但大家有没有想过，这些函数在内核中是怎么实现的？换句话说，Linux内核的内存管理是怎么实现的？
我们之前在生产环境上遇到过很多起由操作系统的某些特征引起的性能抖动案例，其中 THP 作案次数较多，因此本文将和大家分享 THP 引起性能抖动的原因、典型的现象，分析方法等，在文章的最后给出使用THP 时的配置建议及关闭方法。
在内核初始化完成之后, 内存管理的责任就由伙伴系统来承担. 伙伴系统基于一种相对简单然而令人吃惊的强大算法.
Java 16 在 2021 年 3 月 16 日正式发布，不是长久支持版本，这次更新没有带来很多语法上的改动，但是也带来了不少新的实用功能。
本文来自 CSDN 重磅策划的《2022 年技术年度盘点》栏目。2022 年，智能技术变革留下了深刻的脚印，各行各业数字化升级催生了更多新需求。过去一年，亦是机遇与挑战并存的一年。 在本篇文章中，长期奋斗在一线的 Linux 内核开发者宋宝华老师为大家解剖 2022 年 Linux 内核开发的十大革新技术功能，纪念这平凡而又不凡的 Linux 内核之旅。 作者 | 宋宝华 责编 | 梦依丹 出品 | CSDN（ID：CSDNnews） 滚滚长江东逝水，浪花淘尽英雄。在浩瀚的宇宙星河中，波卷
在上篇文章 《深入理解 Linux 物理内存分配全链路实现》 中，笔者为大家详细介绍了 Linux 内存分配在内核中的整个链路实现：
进程或者线程绑定到某个CPU Core，仍然可能会有线程或者进程切换的发生，如果想到达到进一步减少其他进程对于该进程或者线程影响，可以采取把CPU Core从Linux内核调度中剥离出来。Linux内核提供isolcpus,对于有4个CPU core的系统，在启动时候加入isolcpus=2,3，那么系统启动后将不会使用CPU3,CPU4.这里的不适用不是绝对的，但是可以通过taskset命令来设置
作为云计算最重要的底层基础之一，KVM 虚拟化软件在现代的数据中心中应用非常广泛。基于 KVM 的 hypervisor 包括了构成宿主机的软硬件，共同为虚拟机中的应用程序提供高性能的 CPU、内存和 IO 设备等资源。在大规模部署的生产环境中，作为云服务提供商（Cloud Service Provider），如何从技术上保证软硬件的可运维性，一直是大家重点关注的问题。
·为什么MongoDB会记录这么多“Connection Accepted”事件？
Red Hat Enterprise Linux 在众多Linux版本中历史悠久，因为其安全和稳定，获得不少企业的青睐，特别在外企中获得广泛的使用。腾讯云是业界主流的云平台之一，虽然支持多种Linux操作系统，包括腾讯自研的TencentOS，但是当前并没有Redhat Linux镜像，这就需要客户自行定制。本文将该操作过程进行记录和总结，从而方便后继客户使用。
目前我们所提到的容器技术、虚拟化技术（不论何种抽象层次下的虚拟化技术）都能做到资源层面上的隔离和限制。
Linux内核内存管理的一项重要工作就是如何在频繁申请释放内存的情况下，避免碎片的产生。Linux采用伙伴系统解决外部碎片的问题，采用slab解决内部碎片的问题，在这里我们先讨论外部碎片问题。避免外部碎片的方法有两种：一种是之前介绍过的利用非连续内存的分配；另外一种则是用一种有效的方法来监视内存，保证在内核只要申请一小块内存的情况下，不会从大块的连续空闲内存中截取一段过来，从而保证了大块内存的连续性和完整性。显然，前者不能成为解决问题的普遍方法，一来用来映射非连续内存线性地址空间有限，二来每次映射都要改写内核的页表，进而就要刷新TLB，这使得分配的速度大打折扣，这对于要频繁申请内存的内核显然是无法忍受的。因此Linux采用后者来解决外部碎片的问题，也就是著名的伙伴系统。
上图对比了几种主流虚拟化技术架构——ESXi、Xen与KVM，其主要差别在于各组件（CPU、内存、磁盘与网络IO）的虚拟化与调度管理实现组件有所不同：在ESXi中，所有虚拟化功能都在内核实现；Xen内核仅实现CPU与内存虚拟化， IO虚拟化与调度管理由Domain0（主机上启动的第一个管理VM）实现；KVM内核实现CPU与内存虚拟化，QEMU实现IO虚拟化，通过Linux进程调度器实现VM管理。
③ 引导内存分配器 : 页分配器 , 块分配器 , 不连续页分配器 , 连续内存分配器 , 每处理器内存分配器 ;
我们为您整理了幻兽帕鲁服务器常见问题及对应的参考指南和教程，详情参考：常见问题及指引
因为系统数据量持续性增大，腾讯云的MySQL已经达到瓶颈，无法进行升级操作，如果自己搭建一个分库分表系统，速度和可靠性上面都会很差，综合各方面考虑，最后决定采用阿里云的PolarDB-X分布式数据库。
在 KVM 虚拟化中，大家对 CPU mode 的关注相对较少，多采用默认值。其实，CPU mode 的选取对 VM 的影响却很大，如果考虑不周，可能会导致稳定性差，维护成本高，影响业务等一系列问题。本文从性能，热迁移，稳定性，应用移植四个角度对 CPU mode 进行分析。
由于Intel为代表的处理器厂商发现，处理器主频的提升受到硅材料物理特性的限制，难以突破4.0GHz的瓶颈，从而转向在处理器集成电路上集成多个处理核心，以提升处理器的计算力。为了让多个处理核心可以运行多个不同的应用程序和服务，出现了把一台物理机资源分割为多个虚拟机的虚拟化技术。
线上集群后端某台Web服务器例行检查时，我观察到+buffers/cache值（即Linux内存的实际使用情况）一直都是5365左右，就算停掉Nginx+FastCGI程序和其它程序也是一样，考虑到这台机器经常在使用rsync+inotify，肯定会存在着频繁存取文件的情况。而Linux系统有一个特性：在Linux下频繁存取文件时，就会占用物理内存。当程序结束时并不会自动释放被占用的内存，而是一直作为Cache存在。实际上内核结束一个程序后，它是会释放内存的，但是内核并没有立刻将这部分收集到free当中，而是存在在cached或者buffer当中，提高系统的io效率，cache和buffered的内存是由内核进行动态的配置管理，如果系统的free大小不够的时候，系统会自动释放cache buffer的内存给程序使用（因此如果是看到used很多，来手动释放内存其实是不需要的，我前面的文章及书籍其实也说明了我们应该如何观察Linux系统的实际内存使用情况，这里就不再多描述了）。
Linux的进程排查总体思路和windows的不会偏差太多，具体到细则上存在差异，今天就和师傅们来探讨下Linux下的进程分析及排查。
大家知道，如果要做虚拟机的在线迁移，需要至少2台宿主机，加至少一台共享存储，才能完成。
CentOS官方已全面停止维护CentOS Linux项目，公告指出 CentOS 7在2024年6月30日停止技术服务支持，(在此之前 2022年1月1日起CentOS官方已经不再对CentOS 8提供服务支持），详情见CentOS官方公告。
美国东部时间5月8日，全球知名非营利性组织CNCF (Cloud Native Computing Foundation)在全球开源盛会“2017 OpenStack峰会”上宣布，腾讯云作为金牌会员正式加入CNCF基金会。 按照规则，基于企业会员对代码的贡献、贡献的标准和规范、为开源组织提供的支持等综合标准，CNCF基金会授予腾讯云金牌会员身份，同时基于腾讯云在Linux领域的积极贡献，腾讯云获CNCF基金会邀请加入Linux基金会。 腾讯云是国内最大的基于Kubernetes提供容器服务的公有云服务商
这段时间服务器被大量攻击,有sql注入,有暴力破密码,有利用image漏洞的,最严重的导致访问我网站会被重定向,忍无可忍,彻底重做整个站点.本次完成将apache改为nginx,做了各种优化还有服务器迁移的事情,比较复杂.
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
