mmap也可以直接映射匿名内存块,无需提供文件fd,直接申请一块内存给当前进程使用,也可以选择继承给子进程。注意匿名映射不会真的创建文件,只是拿到了一块填充0的内存。...与共享内存这种传统IPC相比,mmap匿名内存更为灵活,Postgresql使用的共享内存全部是用mmap申请的,只用共享内存申请一个PGShmemHeader结构的大小。...MAP_HUGETLB 使用内存大页。...申请在堆和栈中间的位置: 4 匿名内存块映射(Postgresql中的mmap) CreateAnonymousSegment ptr = mmap(NULL, allocsize, PROT_READ...5 匿名内存块使用实例(Postgresql中的mmap方式实例) #include #include #include #include
一、前言 块设备驱动块是Linux下3大设备驱动框架之一,块设备主要是针对存储类型的设备设计的驱动,配合文件系统完成数据存储。...所以大致总结下:块设备驱动的目的是给Linux文件系统提供底层接口。 二、编写块设备驱动的思路 既然学到了驱动开发,了解到块设备开发。...那么为了方便介绍块设备的驱动开发,我这里会先用malloc在驱动申请一块内存来当做FLASH设备,这样就不需要接任何硬件,降低了难度,纯软件的方式理解驱动框架运作流程。...3.1 驱动代码 这份代码里存储数据的空间是申请了一段内存来模拟的。...看懂块设备框架,使用的模拟的内存。 2. 加入SD卡的驱动,配合块设备框架,完成完整的块设备驱动编写。
在Windows操作系统中,每个进程的虚拟地址空间都被划分为若干内存块,每个内存块都具有一些属性,如内存大小、保护模式、类型等。这些属性可以通过VirtualQueryEx函数查询得到。...图片接着我们进入本章的重点,实现枚举进程内存块,要实现该功能首先读者必须要了解一个结构体_SYSTEM_INFO该结构体是系统信息结构,可用于存储系统硬件和系统配置信息,而我们所需要的内存块数据同样可以使用该结构进行存储...当我们需要了解特定进程的内存使用情况时,可以使用VirtualQueryEx()函数枚举进程内存中的所有内存块,并按需查询其中的属性值。...= (LPVOID)Addres; DWORD BlockAddress = Addres; DWORD dwBlockSize = 0; // 遍历大内存块中的小内存块...0;}当上述代码运行后,我们就可以获取到当前内存中有多少个内存块,以及每一个内存块的属性信息,如下图所示;图片本文作者: 王瑞本文链接: https://www.lyshark.com/post/c09766a2
iostream> #include #include #include using namespace std; /*枚举指定进程所有内存块...= nullptr); 参数: hProcess: 要枚举的进程,需拥有PROCESS_QUERY_INFORMATION权限 memories: 返回枚举到的内存块数组 返回: 成功返回..., // 接收内存块信息的 MEMORY_BASIC_INFORMATION 对象 sizeof(MEMORY_BASIC_INFORMATION32) // 缓冲区大小 )...; // VirtualAlloc 函数分配的基地址指针 DWORD AllocationProtect; // 内存块初始内存保护属性 SIZE_T RegionSize;...// 内存块大小 DWORD State; // 内存块状态(COMMIT、FREE、RESERVE) DWORD Protect; // 内存块当前内存保护属性
在Windows操作系统中,每个进程的虚拟地址空间都被划分为若干内存块,每个内存块都具有一些属性,如内存大小、保护模式、类型等。这些属性可以通过VirtualQueryEx函数查询得到。...接着我们进入本章的重点,实现枚举进程内存块,要实现该功能首先读者必须要了解一个结构体_SYSTEM_INFO该结构体是系统信息结构,可用于存储系统硬件和系统配置信息,而我们所需要的内存块数据同样可以使用该结构进行存储...当我们需要了解特定进程的内存使用情况时,可以使用VirtualQueryEx()函数枚举进程内存中的所有内存块,并按需查询其中的属性值。...函数对这个大内存块内的子内存块进行更加细致的解析效果,这段代码如下所示; #include #include int main(int argc, char...; return 0; } 当上述代码运行后,我们就可以获取到当前内存中有多少个内存块,以及每一个内存块的属性信息,如下图所示; 本文作者: 王瑞 本文链接: https://www.lyshark.com
4、块 扇区是硬件传输数据的基本单位,硬件一次传输一个扇区的数据到内存中。但是和扇区不同的是,块是虚拟文件系统传输数据的基本单位。...在Linux中,块的大小必须是2的幂,但是不能超过一个页的大小(4k)。...Linux系统一次读取磁盘的大小是一个块,而不是一个扇区,块设备驱动由此得名。 二、块设备处理过程 1、linux 内核中,块设备将数据存储与固定的大小的块中,每个块都有自己的固定地址。...Linux内核中块设备和其他模块的关系如下。 ? 1、块设备的处理过程涉及Linux内核中的很多模块,下面简单描述之间的处理过过程。 ... ?
我们先来看一下cplusplus.com - The C++ Resources Network网站上memcpy()函数的基本信息: 函数功能 可以看到,memcpy()函数的功能是: 从源头指向的内存块拷贝固定字节数的数据到目标指向的内存块...,它的作用是为函数提供目的地的内存块起始地址,以便函数能够准确地将内容拷贝到我们需要的内存空间....,它的作用是为函数提供拷贝源头内存块起始地址,以便函数能够准确找到拷贝的源头进行拷贝....让我们再来看一下文章开头时C语言标准对memcpy()函数的定义: 也就是说,C标准是不要求memcpy()函数能够拷贝重叠内存块的,如果我们期望使用可以重叠的内存块拷贝函数,那么另一个C标准库函数...综上,在memcpy()函数部分,我将不再深入去探讨内存块重叠情况的内存拷贝的原理,图示以及模拟实现.而是将这部分的内容转移至对memmove()函数的详解博客中进行探讨.如果有感兴趣的朋友可以移步这篇博客
不管是用户态还是内核态,最终都是通过MMU映射到你的物理上的896M内存 mmap就可以映射物理内存到用户空间,你可以清楚的看到同一块物理内在用户态和内核态的不同逻辑地址 两个不同的逻辑地址(一个介于0...~3G,一个介于3-4G) 通过MMU映射到同一块物理内存 1.2 linux为什么把内核映射到3G-4G这个地址呢 假如linux把内核映射到0-1G的空间,其他进程共享1-4G的空间不可以吗?...1G) 2.3 Linux内核高端内存的理解 前 面我们解释了高端内存的由来。...内核专门为此留出一块线性空间,从PKMAP_BASE 到 FIXADDR_START, 用于映射高端内存 在2.6内核上, 这个地址范围是4G-8M到4G-4M之间....内核专门为此留出一块线性空间,从 PKMAP_BASE 到 FIXADDR_START ,用于映射高端内存。在 2.4 内核上,这个地址范围是 4G-8M 到 4G-4M 之间。
1、虚拟机添加硬盘 选择虚拟机--设置--添加--硬盘,然后点击下一步 下一步: 下一步: 这里我只设置2G,下一步。点击完成。 最后在命令行:(需要重启)...
文章目录 一、memblock_type 内存块类型 二、memblock_type 结构体成员分析 1、cnt 成员 2、max 成员 3、total_size 成员 4、regions 成员 5、...name 成员 一、memblock_type 内存块类型 ---- memblock 分配器 涉及到 内存块 类型 , 在 Linux 内核中 , 使用 struct memblock_type 结构体...描述 , struct memblock_type 结构体 定义在 Linux 内核源码的 linux-4.12\include\linux\memblock.h#40 位置 ; struct memblock_type...最大个数 ; unsigned long max; /* size of the allocated array */ 3、total_size 成员 total_size 成员 表示 当前 所有内存块..." ; struct memblock_region *regions; 5、name 成员 name 成员 表示 " 内存块类型 " 的名称 ; char *name;
物理内存就是系统硬件提供的内存大小,是真正的内存。 虚拟内存就是为了满足物理内存的不足而提出的策略,它是利用磁盘空间虚拟出的一块逻辑内存,用作虚拟内存的磁盘空间称为交换空间(Swap Space)。...作为物理内存的扩展,Linux会在物理内存不足时,使用交换分区的虚拟内存。更详细地说,就是内核会将暂时不用的内存块信息写到交换空间,这样,物理内存得到了释放,这块内存就可以用于其他目的。...为了保证物理内存能得到充分的利用,内核会在适当的时候将物理内存中不经常使用的数据块自动交换到虚拟内存中,而将经常使用的信息保留到物理内存中。...ibs=m表示一次读入m个字节(即一个块大小为m个字节)。 obs=m表示一次写m个字节(即一个块大小为m个字节)。 bs=m,同时设置读写块的大小,以字节为单位,此参数可代替 ibs 和 obs。...count=n仅复制n个块。 skip=n表示从输入文件开头跳过n个块后再开始复制。 seek=n表示从输出文件开头跳过n个块后再开始复制(通常只有当输出文件是磁盘或磁带时才有效)。
按照ldd的说法,linux的设备驱动包括了char,block,net三种设备。char设备是比较简单的,只要分配了major、minor号,就可以进行读写处理了。...闲话不多说,我们看看一个ramdisk代码驱动是怎么写的,代码来自《深入linux 设备驱动程序内核机制》, #include #include #include #include #include #include ...#include #include #include #define RAMHD_NAME...可以按照下面的步骤来做, a)make 一下,生成ramdisk.ko; b)编译好了之后,就可以安装驱动了,在linux下是这么做的,sudo insmod ramdisk.ko; c)安装好了
/*既然上面分析了,块设备的工作原理。 那如何写一个块设备呢?*/ /*怎么写一个块设备驱动程序? * 1. 分配一个gendisk结构,用alloc_disk函数 * 2....注册gendisk: 用add_disk函数 */ /***既然知道如何写一个块设备驱动程序,我们就动手用内存模拟一个块设备驱动***/ #define BLOCK_SIZE (1024...block_disk->disk_name, "myblock"); set_capacity(ramblock_disk, BLOCK_SIZE / 512); //设置容量 //既然我们用内存模拟块设备...,需要分配一块内存 block_disk = kzalloc(BLOCK_SIZE, GFP_KERNEL); //4....注册gendisk: 用add_disk函数 add_disk(block_disk); } //释放申请的内存 static void block_exit(void) { unregister_blkdev
本篇文章,我们就一起看下Linux中一个IO请求的生命周期。Linux发展到今天,其内部的IO子系统已经相当复杂。...我们知道IO设备可以分为字符设备和块设备,字符设备以字节流的方式访问数据,比如我们的键盘鼠标。而块设备则是以块为单位访问数据,并且支持随机访问,典型的块设备就是我们常见的机械硬盘和固态硬盘。...写入数据所在的内存地址 3....do_blockdev_direct_IO -> dio_bio_submit -> submit_bio 通用块层 核心结构 1.bio/request bio是Linux通用块层和底层驱动的...struct bio_vec *bi_io_vec; //内存page列表 ... ... }; request代表一个独立的IO请求,是通用块层和驱动层进行IO传递的结构,它容纳了一组连续的bio
CPU访问本地内存的速度比访问远程内存的速度要快 Linux适用于各种不同的体系结构, 而不同体系结构在内存管理方面的差别很大....因此linux内核需要用一种体系结构无关的方式来表示内存....因此linux内核把物理内存按照CPU节点划分为不同的node, 每个node作为某个cpu结点的本地内存, 而作为其他CPU节点的远程内存, 而UMA结构下, 则任务系统中只存在一个内存node, 这样对于...系统中的NUMA结点都是从0开始编号的 3.1 linux-2.4中的实现 pgdat_next指针域和pgdat_list内存结点链表 而对于NUMA结构的系统中, 在linux-2.4.x之前的内核中所有的节点...-3.x~4.x的实现 node_data内存节点数组 在新的linux3.x~linux4.x的内核中,内核移除了pg_data_t的pgdat_next之指针域, 同时也删除了pgdat_list链表
1 Linux如何描述物理内存 Linux把物理内存划分为三个层次来管理 层次 描述 存储节点(Node) CPU被划分为多个节点(node), 内存则被分簇, 每个CPU对应一个本地物理内存, 即一个...内存中的每个节点都是由pg_data_t描述,而pg_data_t由struct pglist_data定义而来, 该数据结构定义在include/linux/mmzone.h, line 615, 每个结点关联到系统中的一个处理器...简单来说, 页是一个数据块, 可以存放在任何页框(内存中)或者磁盘(被交换至交换分区)中 我们今天就来详细讲解一下linux下物理页帧的描述 2 页帧 内核把物理页作为内存管理的基本单位....3.2 内存页标识pageflags 其中最后一个flag用于标识page的状态, 这些状态由枚举常量enum pageflags定义, 定义在include/linux/page-flags.h?...如果涉及该page的I/O操作发生了错误, 则该位被设置 PG_referenced 表示page刚刚被访问过 PG_uptodate 表示page的数据已经与后备存储器是同步的, 即页的数据已经从块设备读取
2 (N)UMA模型中linux内存的机构 Linux适用于各种不同的体系结构, 而不同体系结构在内存管理方面的差别很大. 因此linux内核需要用一种体系结构无关的方式来表示内存....因此当前的多数系统会把内存系统分割成2块区域,一块是专门给CPU去访问,一块是给外围设备板卡的DMA去访问 在UMA系统中, 内存就相当于一个只使用一个NUMA节点来管理整个系统的内存....内核将每个簇所对应的node又被分成的称为管理区(zone)的块,它们各自描述在内存中的范围。...函数EXPORT_SYMBOL使得内核的变量或者函数可以被载入的模块(比如我们的驱动模块)所访问. 2.5 内存页page 大多数内核(kernel)的操作只使用ZONE_NORMAL区域,系统内存由很多固定大小的内存块组成的...,这样的内存块称作为“页”(PAGE), x86体系结构中,page的大小为4096个字节。
因此相对于任何一个CPU访问本地内存的速度比访问远程内存的速度要快, 而Linux为了兼容NUMAJ结构, 把物理内存相依照CPU的不同node分成簇, 一个CPU-node对应一个本地内存pgdata_t...Linux使用enum zone_type来标记内核所支持的所有内存区域 3.1 内存区域类型zone_type zone_type结构定义在include/linux/mmzone.h, 其基本信息如下所示...3.2 不同的内存区域的作用 在内存中,每个簇所对应的node又被分成的称为管理区(zone)的块,它们各自描述在内存中的范围。...位系统中, Linux内核虚拟地址空间只有1G, 而0~895M这个986MB被用于DMA和直接映射, 剩余的物理内存被成为高端内存....如果count的值超过了high, 则表明列表中的页太多了 batch 如果可能, CPU的高速缓存不是用单个页来填充的, 而是欧诺个多个页组成的块, batch作为每次添加/删除页时多个页组成的块大小的一个参考值
Linux运行一段时间之后,内存会越来越多,导致内存不够用,需要释放一下内存才行 echo "1" > /proc/sys/vm/drop_caches 说明,释放前最好sync一下,防止丢数据。...因为LINUX的内核机制,一般情况下不需要特意去释放已经使用的cache。这些cache起来的内容可以增加文件以及的读写速度。...再用free -m 命令查看一下,剩余的内存 如果没有什么效果,可以使用 echo "2" > /proc/sys/vm/drop_caches 或者 echo "3" > /proc/sys/vm/drop_caches
本篇介绍 本篇介绍下Linux的内存管理,用系统角度看内存的寻址和分配机制。 内容介绍 内存管理应该是系统中最难的模块之一了,而且历史也悠久,就先来简单回顾下。...计算机刚出现的时候,并没有这些,刚开始是直接使用的物理地址,也就是代码中操作的地址是可以直接和物理地址对应上的,可是后来随着多进程调度的需求,以及有限的物理内存,于是人们就开始做规定,比如对于一块内存,...,如果没指定fd,那就是匿名映射,可以简单理解成就是分配了一块内存,当malloc大于128kb时候就不用brk了,直接mmap映射分配内存了。...mmap流程如下: image.png 缺页异常 linux 是在不得不使用物理内存的时候才会分配物理内存。这句话该怎么理解呢?...就是我们用malloc或者mmap映射一块内存的时候,只是修改了对应的vma,可是具体的页表项和物理地址并不会立马分配映射,而是在需要写请求的时候才会分配,注意是写请求,那就意味着如果是读请求也不会分配物理内存
领取专属 10元无门槛券
手把手带您无忧上云