在日常开发中一些看似司空见惯的问题上，我觉得可能大多数人其实并没有真正理解，或者理解的不够透彻。不信我们来看以下一段简单的读取文件的代码：
当涉及到 Linux 系统的内存管理时，"Buffers" 和 "Cached" 是两个经常会引起混淆的术语。这两个概念都代表了系统内存的一部分，但它们的作用和工作方式有所不同。
我们知道文件一般存放在硬盘（机械硬盘或固态硬盘）中，CPU 并不能直接访问硬盘中的数据，而是需要先将硬盘中的数据读入到内存中，然后才能被 CPU 访问。
但是让我问你，由于 Buffer 只是将写入磁盘的数据的缓存。反过来，它还会缓存从磁盘读取的数据吗？或者 Cache 是从文件中读取数据的缓存，那么它是否也为写入文件缓存数据呢？
https://www.cnblogs.com/poloyy/category/1806772.html
先讲一个作者大约5-6年前我在某当时很火的一个应用分发创业公司的面试小插曲，该公司安排了一个刚工作1年多的一个同学来面我，聊到我们项目中的配置文件里写的一个开关，这位同学就跳出来说，你这个读文件啦，每个用户请求来了还得多一次的磁盘IO，性能肯定差。借由这个故事其实我发现了一个问题，虽然我们中的大部分人都是计算机科班出身，代码也写的很遛。但是在一些看似司空见惯的问题上，我们中的绝大多数人并没有真正理解，或者理解的不够透彻。
实时打印的主要有：logcat main，logcat radio，logcat events，tcpdump，还有高通平台的还会有QXDM日志
IO 其实就是 Input 和 Output，在操作系统中就对应数据流的输入与输出。这个数据流的两端，可以是文件，也可以是网络的一台主机。但无论是文件，还是网络主机，其传输都是类似的，我们今天就以源头为文件进行说明。
之前我写过有关 Linux 文件系统源码分析的文章，但从源码角度分析文件系统略显枯燥（对新手不友好），所以这次主要通过图文的方式来讲解 Linux 文件系统的原理，而不用陷入源代码的深渊之中。
零拷贝(英语: Zero-copy) 技术是指计算机执行操作时，CPU不需要先将数据从某处内存复制到另一个特定区域。这种技术通常用于通过网络传输文件时节省CPU周期和内存带宽。
这些问题，很可能是由于Page Cache管理不到位引起的，因为Page Cache管理不当除了会增加系统I/O吞吐外，还会引起业务性能抖动。
bugreport里面包含了各种log信息,大部分log也可以通过直接运行相关的程序来直接获得.
在开始介绍go sys call 库之前先介绍下Linux syscall的几个概念
每个打开的文件，内核都保持着文件位置 Linux 每个进程都有当前工作目录 stat 和 fstat 可以读取文件的元数据（metadata） readdir 以流形式读取目录内容 Linux 使用了 3 个数据结构表示打开的文件： descriptor table 描述符表。每个进程独立维护，通过打开的文件描述符索引 file table 文件表。所有进程共享，持有 vnode 指针，文件位置，引用计数，引用计数为 0 时删除表项 v-node table v-node 表。所有进程共享，包含 stat
在正式讲解两个概念前，你可以先想想，你有没有什么途径来进一步了解它们？除了中文翻译直接得到概念，别忘了，Buffer 和 Cache 还是我们用 free 获得的指标。
Linux 内核最初的源码不足一万行 , 当前的 Linux 内核源码已经有两千万行 ;
相信不少的网友，在很多的博客文章里面，已经见到过零拷贝这个词，会不禁的发出一些疑问，什么是零拷贝？
在 Linux 系统中，传统的访问方式是通过 write() 和 read() 两个系统调用实现的，通过 read() 函数读取文件到到缓存区中，然后通过 write() 方法把缓存中的数据输出到网络端口。
欲成其事先利其器。要想完成一项复杂的任务，工具的作用至关重要。要想在Linux系统上开发或研究木马病毒等特殊程序，我们需要使用一系列强大的开发和调试攻击。本节先介绍几种在Linux系统上极为强大的工具。
Linux是多任务操作系统，cpu划分固定时间片，分给每个进程，当前进程时间片执行完毕，将挂起，运行下一个进程。而进程运行时，需要到寄存器中获得要运行的指令和指令所在内存的位置。
Linux 提供了丰富的库函数，涵盖了各种领域，从文件操作到网络编程、图形界面、数学运算等。这些库函数大多数都是标准的 C 库函数，同时也包括一些特定于 Linux 系统的库。
我以下图为基础，说明Linux的架构(architecture)。(该图参考《Advanced Programming in Unix Environment》) 最内层是硬件，最外层是用户常用的
最内层是外层是用户常用的应用，比如说firefox浏览器，evolution查看邮件，一个计算流体模型等等。硬件是物质基础，而应用提供服务。但在两者之间，还要经过一番周折。
一直在忙,之前一直怀疑机器中马,kswapd0这个进程4核心CPU24小时跑满单核心,简单排查无果,看了
top命令是Linux下常用的性能分析工具，能够实时显示系统中各个进程的资源占用状况，类似于Windows的任务管理器。
Linux下有3个特殊的进程，idle进程(PID = 0), init进程(PID = 1)和kthreadd(PID = 2)
Linux系统内核是C语言编写的，所以，Linux系统开发可能会和很多系统API打交道，需要掌握C语言基础，C语言是Linux最基础的开发语言，当然也可以用C++。一般做与系统交互的模块时，用C语言多一些，做上层业务应用时，为了开发效率，会使用C++来开发，毕竟C++是面向对象的开发语言，适合大型项目的开发，方便模块化，代码复用率高。
本篇是高性能、高并发系列的第三篇，承接上文《读取文件时程序经历了什么》，在讲解了进程、线程以及I/O后，我们来到了高并发中又一关键技术，即I/O多路复用。
nginx的IO模型，大家应该都有所了解。简单而言，就是一个master进程和多个worker进程（进程数由配置决定）；master进程负责accept请求并队列化，最后转发给worker进程并由其进行请求处理和响应的整个过程。
使用Linux的rename机制保证文件写入要么成功，要么失败，绝对不能出现写了一半的情况。
操作系统是一个用来和硬件打交道并为用户程序提供一个有限服务集的低级支撑软件。一个计算机系统是一个硬件和软件的共生体，它们互相依赖，不可分割。计算机的硬件，含有外围设备、处理器、内存、硬盘和其他的电子设备组成计算机的发动机。但是没有软件来操作和控制它，自身是不能工作的。完成这个控制工作的软件就称为操作系统，在Linux的术语中被称为“内核”，也可以称为“核心”。Linux内核的主要模块（或组件）分以下几个部分：存储管理、CPU和进程管理、文件系统、设备管理和驱动、网络通信，以及系统的初始化（引导）、系统调用等。
我们看到，通过 DMA 芯片进行的硬盘读写过程需要进行四次特权级切换和四次拷贝操作。
本文以 32 位系统为例介绍内核空间(kernel space)和用户空间(user space)。
在Linux 操作系统中，当应用程序需要读取文件中的数据时，操作系统会先分配一些内存，将数据从磁盘读入到这些内存中，然后再将数据发给应用程序；当需要往文件中写数据时，操作系统先分配内存接收用户数据，然后再将数据从内存写到磁盘上。然而，如果有大量数据需要从磁盘读取到内存或者由内存写入磁盘时，系统的读写性能就变得低下。因为无论是从磁盘读数据，还是写数据到磁盘，都是一个很消耗时间和系统资源的过程。
结合这个图，想想Linux系统编程里用到的Buffered IO、mmap(2)、Direct IO，这些机制怎么和Linux IO栈联系起来呢？上面的图有点复杂，我画一幅简图，把这些机制所在的位置添加进去：
实际上，零拷贝是有广义和狭义之分，目前我们通常听到的零拷贝，包括上面这个定义减少不必要的拷贝次数都是广义上的零拷贝。其实了解到这点就足够了。
👋 你好，我是 Lorin 洛林，一位 Java 后端技术开发者！座右铭：Technology has the power to make the world a better place.
VFS使得用户可以直接使用open()等系统调用而无需考虑具体文件系统和实际物理介质。
Linux进程间通信的方式： 管道（Pipe）、信号（Signal）、消息队列（Message）、共享内存（Share Memory）、套接字（Socket、中断 Binder： Binder 通信机制是在OpenBinder的基础上实现的，采用CS通信方式。 OpenBinder是一种进程间通信机制，它最初是由Be公司开发的，后来由Palm公司接手开发和维护，最后Google公司对其进行改造，并应用在Android系统中。
usbsas是一款功能强大的开源（GPLv3）工具&框架，该工具可以帮助广大用户以安全的方式读取不受信任的USB大容量存储设备。
零拷贝技术 是编写高性能服务器的一个关键技术，在介绍 零拷贝技术 前先说明一下 用户空间 与 内核空间。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
