现在越来越多应用云原生化跑在k8s上面，k8s为应用提供了自动限制、自动重启、服务发现等各种能力。这些能力让开发减少了对运维相关属性的关注，但也让一些开发把一些错误当成了特性来使用，比如针对一些无状态的服务，利用 OOM 和自动重启来恢复。这看起来大多数时候似乎没有问题，借助自动恢复，OOM的应用会被重新来起来工作。但这种坏习惯会让系统在某些时候变得更不稳定，比如 OOM Killer 导致的死锁问题。
1. 概述 ---- 当我们执行rm命令删除一个文件的时候，在操作系统底层究竟会发生些什么事情呢，带着这个疑问，我们在Linux-3.10.104内核下对ext4文件系统下的rm操作进行分析。rm命令本身比较简单，但其在内核底层涉及到VFS操作、ext4块管理以及日志管理等诸多细节。 2. 源码分析 ---- rm命令是GNU coreutils里的一个命令，在对一个文件进行删除时，它实际上调用了Linux的unlink系统调用，unlink系统调用在内核中的定义如下： SYSCALL_DEFINE1
1. 问题背景 日前，某客户反映他们的实例有一段时间内慢查询突增，监控页面上也显示那段时间内监控数据也没有上报，经查看系统日志，以下内容引起了我们的注意： Mar 15 23:06:30 TENCENT64 kernel: BUG: soft lockup - CPU#2 stuck for 22s! [jbd2/md0-8:3661] ... Mar 15 23:06:30 TENCENT64 kernel: CPU: 2 PID: 3661 Comm: jbd2/md0-8 Not tainted 3
备忘 EXT3 http://zh.wikipedia.org/zh-cn/Ext3 ext3，第三扩展文件系统，是一个日志文件系统，常用于Linux操作系统。它是很多Linux发行版的默认文件系统。Stephen Tweedie在1999年2月的内核邮件列表[2]中，最早显示了他使用扩展的ext2，该文件系统从2.4.15版本的内核开始，合并到内核主线中[3]。 大小限制 ext3有一个相对较小的对于单个文件和整个文件系统的最大尺寸。这些限制依赖于文件系统的块大小；下面的表格总结了这些限制。 块尺寸 最大文件尺寸 最大文件系统尺寸
Linux文件系统Ext2和Ext3现在已经过时了。 现在是将旧文件系统转换为最新的文件系统EXT4。 Ext4文件系统比以前的版本更快，更可靠。
文件系统是在存储磁盘或分区上命名，存储，检索和更新文件的方式。文件在磁盘上的组织方式。
大多数现代Linux发行版默认为ext 4文件系统，就像以前的Linux发行版默认为ext3、ext2，以及-如果追溯到足够远的话-ext。 如果您是Linux新手或者是文件系统新手，您可能会想知道ext 4给表带来了什么，而ext3却没有。考虑到诸如btrfs、XFS和ZFS等备用文件系统的新闻报道，您可能还想知道ext4是否还在积极开发中。 我们不能在一篇文章中涵盖所有关于文件系统的内容，但是我们将尝试让您了解Linux的默认文件系统的历史、它所处的位置以及所期待的内容。 我大量地引用了各种ext文件系统文章以及我在编写本概览时的经验。
应为原文：http://www.ilsistemista.net/index.php/linux-a-unix/6-linux-filesystems-benchmarked-ext3-vs-ext4
如你所知，Linux 支持非常多的文件系统，例如 ext4、ext3、ext2、sysfs、securityfs、FAT16、FAT32、NTFS 等等，当前被使用最多的文件系统是 ext4。你曾经疑惑过你的 Linux 系统使用的是什么类型的文件系统吗？没有疑惑过？不用担心！我们将帮助你。本指南将解释怎么在类 Unix 的操作系统中查看已挂载的文件系统类型。
如你所知，Linux 支持非常多的文件系统，例如 ext4、ext3、ext2、sysfs、securityfs、FAT16、FAT32、NTFS 等等，当前被使用最多的文件系统是 ext4。你曾经疑惑过你的 Linux 系统使用的是什么类型的文件系统吗？没有疑惑过？不用担心！我们将帮助你。本指南将解释如何在类 Unix 的操作系统中查看已挂载的文件系统类型。
在上一篇云硬盘性能分析的教程中，为大家介绍了如何评测云硬盘的读写性能。但是，我们使用硬盘，从来不是直接读写裸设备，而是通过文件系统来管理和访问硬盘上地文件。不少朋友询问，文件系统该如何对比，又该如何选择呢？
另一个关于内核升级的文档：《NFS》目录里《centos5.5 x86-64升级内核到2.6.20,安装iotop及fscache》
需求说明：公司最近来了一批服务器，用于大数据业务部署。数据节点服务器由14块物理磁盘，其中有2块是900G的盘，12块是4T的盘。在服务器系统安装时，进入系统的BIOS界面：1）将2块900G的磁盘做成raid1用作系统盘（顺便说一下：raid0最少需要1块磁盘；raid1最少需要2块磁盘；raid10最少需要4块磁盘，raid5至少需要3块磁盘）；2）将其中的2块4T的磁盘做成raid1，分别挂载到/data1和/data2用作大数据日志存储；3）另外的10块4T的磁盘在系统安装时没做raid也没做分区，
windows和Linux系统格式 在分区后，磁盘需要格式化 Windows中，有NTFS、fat格式，其中fat格式基本已经不用(过时) Linux中，centos7支持xfs、ext4、ext3、ext2、nodev proc、nodev devpts、iso9660、vfat、hfs、hfsplus [root@localhost ~]# cat /etc/filesystems //查看centos7所支持的系统格式 xfs //系统默认的支持的格式 ext4 ext3 ex
sda ├─sda1 ext4 7cc94e03-8b1a-4845-97fb-49a2c39afd8c /boot ├─sda2 ext4 fe1d0eea-50ea-4d44-853b-1c39e5129021 / ├─sda3 ext4 df147f0a-efbd-4370-8e69-471b81a6ee7c /mnt/disk1 ├─sda4 ├─sda5 ext4 ea0d589d-a329-4bfc-a00b-11c00351765a /mnt/disk2 └─sda6 swap f306ece0-a790-41d7-b685-63585b8534e4 [SWAP]
Filesystem Type 1K-blocks Used Available Use% Mounted on /dev/sda1 ext4 20642428 3698868 15894984 19% / tmpfs tmpfs 32947160 0 32947160 0% /dev/shm
Linux下删除文件是一个既复制有好玩的，在这里简单的描述一下自己对文件删除过程的看法。 Linux删除一个文件或者目录是首先看当前用户对这个文件或目录的父目录有没有权限，因为目录名和文件名是存放在上级目录的block块里面的。删除文件和目录实际上就是操作父目录的block块的内容。
无论是安装Windows还是Linux操作系统，硬盘分区都是整个系统安装过程中最为棘手的环节，网上的一些Ubuntu Linux安装教程一般都是自动分区，给初学者带来很大的不便，下面我就根据多年来在装系统的经验谈谈安装Ubuntu Linux系统时硬盘分区最合理的方法。
Linux kernel 自 2.6.28 开始正式支持新的文件系统 Ext4。 Ext4 是 Ext3 的改进版，修改了 Ext3 中部分重要的数据结构，而不仅仅像 Ext3 对 Ext2 那样，只是增加了一个日志功能而已。Ext4 可以提供更佳的性能和可靠性，还有更为丰富的功能：
linux批量新增自动分区挂载大于2T磁盘脚本 #!/bin/bash #Used to fomat 11 datas PATH=/bin:/sbin:/usr/bin:/usr/sbin export PATH i=1 while [ $i -lt 11 ] do j=`echo $i|awk ‘{printf “%c”,97+$i}’` parted /dev/sd$j <<ESXU mklabel gpt mkpart primary 0 -1 ignore quit ESX
本文为joshua317原创文章,转载请注明：转载自joshua317博客 https://www.joshua317.com/article/165
我们应该尽可能避免在生产环境上做一些危险的操作。但是，难免有所疏忽，那么当事情发生后，我们还能如何拯救？
文件系统:它们不是世界上最激动人心的技术，但是仍然很重要。本文我们将细数那些流行的Linux文件系统-它们是什么，它们能够做什么，以及它们的目标用户。
Linux文件系统通常是Linux操作系统的一个内置层，用于处理存储的数据管理。它有助于在磁盘存储上安排文件。它管理文件名、文件大小、创建日期以及有关文件的更多信息。如果我们的文件系统中有不支持的文件格式，我们可以下载软件来处理它。
Linux kernel自2.6.28开始正式支持新的文件系统Ext4，Ext4是Ext3的改进版，修改了Ext3中部分重要的数据结构。Ext3对Ext2，只是增加了一个日志功能而已。Ext4可以提供更佳的性能和可靠性，还有更为丰富的功能，更大的文件系统和更大的文件。较之Ext3所支持的最大16TB文件系统和最大2TB文件，Ext4分别支持1EB（1,048,576TB，1EB=1024PB，1PB=1024TB）的文件系统，以及16TB的文件。
当我们拿到一块新的硬盘时，他所能够支持的最大空间只是代表硬件上的一个参数，我们要想让他能够正常的工作起来，必须要有相应的文件系统。文件系统决定了文件存储和管理时的方式和数据结构，也就是如何管理磁盘上的文件和文件夹。不同的文件系统拥有不同的特点，这也就是为什么我们在进行格式化操作必须要选定一种文件系统的原因。 当在一个操作系统（Windows、Linux、MacOS）中使用文件系统时，通常都会做一个统一的接口，来进行文件的读写，所以会存在某些文件系统只适用与某一种操作系统的情况。
当我们拿到一块新的硬盘时，他所能够支持的最大空间只是代表硬件上的一个参数，我们要想让他能够正常的工作起来，必须要有相应的文件系统。文件系统决定了文件存储和管理时的方式和数据结构，也就是如何管理磁盘上的文件和文件夹。不同的文件系统拥有不同的特点，这也就是为什么我们在进行格式化操作必须要选定一种文件系统的原因。当在一个操作系统（Windows、Linux、MacOS）中使用文件系统时，通常都会做一个统一的接口，来进行文件的读写，所以会存在某些文件系统只适用与某一种操作系统的情况。
6）配置开机自动挂载： 因为mount命令会在重启服务器后失效，所以要将分区信息写到/etc/fstab文件中让它永久挂载：
Raspberry Pi 内核Linux代码存储在 GitHub 中，可以在github.com/raspberrypi/linux上查看。
版权声明：本文为耕耘实录原创文章，各大自媒体平台同步更新。欢迎转载，转载请注明出处，谢谢
本文为joshua317原创文章,转载请注明：转载自joshua317博客 https://www.joshua317.com/article/167
接上文 从应用到内核查接口超时（中），查到是因为 journal 导致 write 系统调用被阻塞进而导致超时后，总感觉证据还不够充分，没有一个完美的交待。而且 leader 还想着让我把问题排查过程分享给同事们，这让我更加不安，担心搞错了方向。
标准GNU工具coreutils中有俩程序df / du，他们都可以查看磁盘的使用情况。通常情况下他们的统计结果并不会相同，这是因为统计信息来源的差异。所以问题来了：在ext4文件系统下，有哪些可能的因素会带来统计信息的差异？
创建 FAT32 文件系统 （Linux 把 FAT32 识别为 vfat )
在 Windows 操作系统中，不同的分区可以理解为对应不同的盘符，例如可以将硬盘分为C盘、D盘等，如果接入了新的硬盘，则可分为E盘、F盘。
一、实现磁盘分区的 只支持分配主分区和标准的linux文件系统(ext4/xfs)的分区 #! /bin/bash # Function:对硬盘进行分区,得到一个标准的linux文件系统(ext4/xfs)的主分区 cat /proc/partitions > old read -p "请输入你要分区的硬盘(写绝对路径，如：/dev/sda)：" A if [ -e $A ];then echo "true" else echo "该设备不存在！！" exit fi read -p "请输入你要
Linux根分区的磁盘空间耗尽时，Linux将无法再创建新的文件，从而导致服务程序崩溃，系统无法启动等故障现象，为了避免上述现象设置磁盘配置可以防止个别用户恶意或无意间占用大量磁盘空间，从而保证系统存储空间的稳定性和持续可用性，下面为大家分享一下Linux系统设置磁盘配额具体方法。
经历了网盘的各种关闭、数据迁移和限速，国内基本只有百度网盘一家独大了。然而百度网盘推出会员、进而超级会员一波骚操作后，实在让人累觉不爱。
问题现象 今天早上，收到运维监控系统的告警，说web02这台主机的根分区剩余空间不足20%，于是马上连上服务器查看。通过df命令获知，根分区使用率竟高达81%，而根分区总大小仅为26GB [root@prd-ds-tms-web02 logs]# df -hT Filesystem Type Size Used Avail Use% Mounted on /dev/mapper/VolGroup-lv_root ext4 26G 2
基本介绍 linux内核在读写数据时候，可能会发生短暂的停顿等待磁盘数据 ，本质原因是进程发起read/write系统调用时候，由用户态切换到内核态，进程会经历磁盘数据达到后而引起的中断和从中断点继续执行的两个步骤。进程进入中断后，内核把磁盘数据的读写请求是交给了磁盘，磁盘硬件完成读写操作后发起硬中断唤醒被IO 中断的进程，继续执行后续的操作。 read/write系统调用需要三个参数，第一个是文件描述符fd,第二个是内存缓冲区buf,第三个是读写的字节数。read/write系统调用由用户态进程发起，然后
查看分区格式 # df -hT // ext4 文件格式 Filesystem Type Size Used Available Use% Mounted on /dev/system ext4 2.0G 112.4M 1.8G 6% / devtmpfs devtmpfs 107.2M 0 107.2M 0% /dev tmpf
-t 表示指定格式化磁盘的文件系统类型为ext4，默认不指定为ext2（比较老的linux文件系统类型）centos7默认系统格式是xfs格式，格式化磁盘的时候也可以指定类型为xfs格式；
原文https://ecloud.10086.cn/op-help-center/show/F230B8AC46DA76B8
VFS采用了面向对象的设计思路，将一系列概念抽象出来作为对象而存在，它们包含数据的同时也包含了操作这些数据的方法。当然，这些对象都只能用数据结构来表示，而不可能超出C语言的范畴，不过即使在C++里面数据结构和类的区别也仅仅在于类的成员默认私有，数据结构的成员默认公有。VFS主要有如下4个对象类型。
文件存储在硬盘上，硬盘的最小存储单位叫做"扇区"（sector）。每个"扇区"的大小为512字节（byte）， ，操作系统读取硬盘的时候，不会一个个扇区的读取，这样效率太慢。他是一次性读取多个扇区，即一次性读取一个"Block块"。一个Block有8个连续的扇区（sector）组成。 数据都存在Block块里面，但是我们怎么知道一个数据存放在哪些Block块里面呢？这个时候就必须需要一个索引，引导我们去找到哪些存放在BLOCK块里面的额数据。这存放索引的地方我们称为索引节点（Inode），索引节点里面包括了：文件的类型，属主，属组，权限，和时间戳一些信息，但是不包括文件名， 1.1.2 inode包含的内容
4.5/4.6 磁盘格式化 windows和Linux系统格式 在分区后，磁盘需要格式化 Windows中，有NTFS、fat格式，其中fat格式基本已经不用(过时) Linux中，centos7支持xfs、ext4、ext3、ext2、nodev proc、nodev devpts、iso9660、vfat、hfs、hfsplus [root@localhost ~]# cat /etc/filesystems //查看centos7所支持的系统格式 xfs //系统默认的支持的格
注：本问题影响 3.10.0-862.el7.centos 及之后的 CentOS 7 版本内核，目前问题还未被修复。
转载随意，文章会持续修订，请注明来源地址：https://zhenbianshu.github.io 。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
