比如说当电脑要读取一个比物理内存还要大的文件时，就要用到虚拟内存，文件被内存读取之后就会先储存到虚拟内存，等待内存把文件全部储存到虚拟内存之后，就把虚拟内里储存的文件释放到原来的目录里了。...所以，虚拟内存是进程运行时所有内存空间的总和，并且可能有一部分不在物理内存中，而物理内存就是我们平时所了解的内存条。有的地方呢，也叫这个虚拟内存为内存交换区。...关键的是不要把虚拟内存跟真实的插在主板上的内存条相挂钩，虚拟内存它是“虚拟的”不存在，假的啦，它只是内存管理的一种抽象！ 什么是虚拟内存地址和物理内存地址呢。...这就是处理虚拟内存地址到物理内存的步骤。 什么是虚拟内存地址和物理内存地址? 虚拟内存地址由页号（与页表中的页号关联）和偏移量组成。页号就不必解释了，上面已经说了，页号对应的映射到一个页帧。...总结起来说，虚拟内存地址的大小是与地址总线位数相关，物理内存地址的大小跟物理内存条的容量相关。
前言 最近因为增加了一台物理机，所以需要对物理机进行虚拟化后划分虚拟机。下面主要来介绍物理机划分虚拟机的操作步骤。 物理机虚拟化 1....使用U盘在服务器上装ESXI，选择第一块磁盘作为安装盘，图形化界面安装，一路Next即可 4. 服务器开机后进入ESXI界面，配置IP、DNS、子网掩码 5. 按照提示重启服务器 虚拟机创建 1....新建虚拟机，选择安装的磁盘\CPU\内存等参数 ? 一定要提前做好规划，这些规划包括一台物理机分几个虚拟机，每个虚拟机要分多少内存和CPU，每个虚机挂载的是那块硬盘之类的。...注：硬件添加完后，要记得重启虚拟机，使其生效。 总结 我们主要做了三部分，首先对硬件做虚拟化，使用了EXSI。然后在EXSI的基础上创建虚拟机模板，最后根据模板快速创建大量的虚拟机。...这样我们的服务器虚拟化就已经做好了。
内存虚拟化 除了 CPU 虚拟化，另一个关键是内存虚拟化，通过内存虚拟化共享物理系统内存，动态分配给虚拟机。...虚拟机的内存虚拟化很象现在的操作系统支持的虚拟内存方式，应用程序看到邻近的内存地址空间，这个地址空间无需和下面的物理机器内存直接对应，操作系统保持着虚拟页到物理页的映射。 ?...可见，KVM 为了在一台机器上运行多个虚拟机，需要增加一个新的内存虚拟化层，也就是说，必须虚拟 MMU 来支持客户操作系统，来实现 VA -> PA -> MA 的翻译。...客户操作系统继续控制虚拟地址到客户内存物理地址的映射 （VA -> PA），但是客户操作系统不能直接访问实际机器内存，因此VMM 需要负责映射客户物理内存到实际机器内存 （PA -> MA）。...VMM 内存虚拟化的实现方式： 软件方式：通过软件实现内存地址的翻译，比如 Shadow page table （影子页表）技术 硬件实现：基于 CPU 的辅助虚拟化功能，比如 AMD 的 NPT 和
为了避免这些问题，就提出了虚拟内存的概念，其抽象了物理内存，相当于对物理内存进行了虚拟化，保证每个进程都被赋予一块连续的，超大的（根据系统结构来定，32 位系统寻址空间为 2^32，64 位系统为 2^...这种机制正是虚拟化软件做的事，也就是 MMU 内存管理单元。 ? 本文要说的不是这种虚拟内存，而是基于虚拟机的内存虚拟化，它们本质上是一样的，通过对虚拟内存的理解，再去理解内存虚拟化就比较容易了。...内存虚拟化也分为基于软件的内存虚拟化和硬件辅助的内存虚拟化，其中，常用的基于软件的内存虚拟化技术为「影子页表」技术，硬件辅助内存虚拟化技术为 Intel 的 EPT（Extend Page Table，...所以，内存软件虚拟化的目标就是要将虚拟机的虚拟地址（Guest Virtual Address, GVA）转化为 Host 的物理地址（Host Physical Address, HPA），中间要经过虚拟机的物理地址...总结 内存虚拟化经历从虚拟内存，到传统软件辅助虚拟化，影子页表，再到硬件辅助虚拟化，EPT 技术的进化，效率越来越高。
通过前两篇文章（系统调用mmap的内核实现分析，Linux下Page Fault的处理流程）我们可以知道，虚拟内存是在我们向操作系统申请内存（比如malloc或mmap）时分配的，而物理内存是在我们使用...不管是虚拟内存的分配还是物理内存的分配，都是以page为单位的，page的默认大小为4096。 之前的两篇文章理论和代码部分比较多，所以，现在我们用示例的形式，展示下虚拟内存和物理内存的分配。...该区域的虚拟内存大小是8k，因为我们在调用mmap时指定的内存大小是4097，page对齐后正好是8k。 该区域的物理内存大小是0，因为我们还没使用过该区域。...当程序输出4时，此时我们已经对虚拟内存的第二个page进行了写操作，对应看pmap命令的第四次输出，此时的[ anon ]区域（第103行）显示已使用的物理内存是8k。...通过上面的示例程序和pmap命令，我们可以清楚的看到，进程的虚拟内存和物理内存是何时分配的。 那如何确定物理内存的分配是page fault触发的呢？
一丶虚拟内存和物理内存 我们知道每个应用程序都有自己独立的4GB空间. ...而值是存储在物理内存的.如下图所示. ? 根据上图所示. 我们可以分清虚拟内存跟物理内存. 如果我们更改了物理内存的值.那么就会影响A进程或者B进程....所以说虚拟内存是假的.当用的时候才会存储在物理内存 二丶物理内存的管理. 物理内存是使用4K的方式来管理的.也就是4096个字节.也成为一页.所以以后我们使用API的时候....如果我们的物理页超过了.那么操作系统还支持使用硬盘来当物理内存. 具体设置 计算机属性 -> 高级系统设置 -> 高级 - > 性能设置 -> 高级 -> 虚拟内存更改. ? ...三丶操作系统可识别内存 我们可用的内存就是 我们算出的物理页的大小 + 虚拟内存的大小.但是操作系统可识别的不是这么大的.
对于初始化之后的 Win2k 我们观察 CR0 ，发现第31位为1。表明Win2k是使用分页的。...另外，事实上，在每个进程创建加载时，内核只是为进程“创建”了虚拟内存的布局，具体就是初始化进程控制表中内存相关的链表，实际上并不立即就把虚拟内存对应位置的程序数据和代码（比如.text .data段）拷贝到物理内存中...物理内存和虚拟内存关系：物理内存和虚拟内存对应。除OS外任何程序都不会直接访问物理内存而是访问虚拟内存。可把虚拟内存等同于物理内存。以后就只说内存，不再区分物理内存和虚拟内存。...页面文件和虚拟内存关系：可把虚拟内存等同于物理内存。改变页面文件大小可改变虚拟内存大小。详细来说：页面文件只是改变了物理内存的大小，当然也改变了虚拟内存的大小。...(猜测：物理内存和虚拟内存的映射在大小上是1:1的。)可禁用页面文件但不能禁用虚拟内存。 虚拟地址空间和物理地址空间对应：虚拟地址空间指的是进程的可用地址空间范围。
座右铭：低头赶路，敬事如仪 个人主页：网络豆的主页 前言 本章将会讲解云计算，内存虚拟化的知识 一.内存虚拟化 内存虚拟化抽象了物理内存，虚拟机每个进程都被赋予一块连续的，超大的虚拟内存空间...1.内存虚拟化类型 全虚拟化 半虚拟化 硬件辅助内存虚拟化 ---- 全虚拟化 为每个VM维护一个影子页表记录虚拟化内有与物理内存的映射关系。...---- 硬件辅助内存虚拟化 EPT/NPT是内存管理单元MMU的扩展，CPU硬件一个特性，通过硬件方式实现GuestOS物理内存地址到主机物理内存地址的转换，系统开销更低，性能更高。...---- 2.内存复用技术 内存复用是指在服务器物理内存一定的情况下，通过综合运用内存复用技术对内存进行分时复用。 内存复用技术有： 内存气泡：虚拟化层将较空闲VM内存，分配给内存使用较高的虚拟机。...开启了内存虚拟化（这里以物理内存150%）物理内存由6G变为逻辑上的9G（虚拟上的9G）则每台虚拟机内存为3G. ---- 二.I/O虚拟化 1.I/O虚拟化类型 ---- 全虚拟化 通过软件模拟的形式模拟
2.1 服务器虚拟化平台 ---- 一个完整的服务器虚拟化平台从下到上包括以下几个部分： 底层物理资源：包括网卡、CPU、内存、存储设备等硬件资源，一般将包含物理资源的物理机称为宿主机（Host）。...代表产品为 VMware Workstation 以及早期 VMware 的 ESXi 系列服务器虚拟化系统，目前的服务器上已经很少使用了。...随着服务器 CPU 两三年一换代的更新速度，当前的主流 X86 服务器已经都可以支持 VT-X/AMD-V 等技术因此 HVM 成为当前云计算 IAAS 服务器虚拟化的主流。...3.2.1 内存复用技术 ---- 在虚拟化内存管理 上，ESXi实现了主机内存超分配的目标：即多个虚拟机总的内存分配量大于物理机的实际内存容量。...在虚拟化环境中，VMM 会一次性在虚拟机启动后分配给虚拟机内存，由于虚拟机并没有意识到自己运行于虚拟化平台上，之后它会一直运行在分配好的内存空间，而不主动释放分配的物理内存给其他虚拟机。
内存虚拟化是一个很大的话题，最近安全部门发现了一个qemu内存虚拟化的安全漏洞，反馈给云平台让解决，感觉很棘手，引起了我对内存虚拟化的思考，想到什么问题就把思考记录下来。...用户态malloc一块内核，用虚拟地址访问发生pagefault，内核找一个page然后对应起来，那内核分配一个page的内存，内核先得到的是这个page的物理地址，然后把物理地址转换成内核虚拟地址，总之内核管理物理内存...，并且和物理内存一一对应，为什么要一一对应没想明白，感觉这样实现是简单，内核经常需要在虚拟和物理地址之间转来转去的，一一对应用virt_to_phys和phys_to_virt就能实现虚拟和物理地址互相转换...qemu内存虚拟化 host的内存物理内存是bios拼凑出来的，guest的物理内存是qemu用MemoryRegion拼凑出来的，guest物理内存也包含内存条内存和设备内存，只是guest内存条内存和设备内存都是由...guest和host是独立的系统，两者都有自己的虚拟地址和物理地址，唯一的关系就是把guest的物理地址映射到host的虚拟地址，也就是qemu进程的虚拟地址。
前言： 书接上回《内存映射技术分析》，继续来分析一下linux的物理内存管理。 分析： 1，物理内存 PC上的内存条，或者手机上的内存芯片，物理上实实在在的内存，就是物理内存。...原因在于：32bit的机器上，虚拟地址空间只有4G，linux默认把低3G给用户用，把高1G给kernel用。那么kernel要想访问内存，最多只能映射1G，这个明显不合理。...这里需要说明一下，对于Linux来说，一般都不需要连续的内存，因为系统跑起来之后，CPU在protected mode下访问的是虚拟地址，MMU把不连续的物理地址映射成连续的虚拟地址就可以了。...而且在服务器上也一般不会使用到。 9，slab 内核中分配内存的最小单位是page。但是，很多数据结构只有几十byte。第一是浪费空间，第二是分配/回收page的代价太高。于是就有了slab。...比如说互联网服务器上，它的skb肯定很多，小文件很多的机器上，它的inode占用肯定要多一些。 10，sparse mem 物理内存上，如果存在巨大的hole，可以考虑使用sparse mem。
一、什么是虚拟内存？虚拟内存有什么用处？...，虽然硬盘在读写的速度上远远不及内存条的速度，但是可以有效的避免内存消耗殆尽而引起的系统崩溃的问题而往往在运行大型或者一些或者吃内存的软件程序的时候就有可能会出现虚拟内存不足的情况二、怎么设置服务器虚拟内存...虚拟内存设置多少合适？ ...：2048 这个2048是按照系统内存来写的，比如内存2G也就是2048MB的内存 ，虚拟内存最好是和系统内存大小是一样的，最大值建议是初始大小的1.5倍到2倍的样子6、设置好后确定，设置好后重启服务器就会生效了注意...：为了保证网站正常运行，服务器虚拟内存不要使用默认配置，需要设置一下，一般设置为2G-10G以上就是关于虚拟内存设置分享感谢您的阅读，服务器大本营助您成为更专业的服务器管理员！
前言 虚拟化的目的是为了提升硬件的资源利用率，包括CPU，内存、IO等。在各种虚拟化中，都有内存压缩、内存去重等技术。...本文通过介绍PowerVM的内存去重技术，有助于读者了解其他虚拟化技术内存区中底层原理。vSphere中的透明页面共享与PowerVM的内存去重技术原理基本是一致的。...AMD 通过释放服务器的一个分区内或者分区之间重复内存页，来减少共享内存的过量使用，从而使主内存空间相同内存页面的数量最小化。为了优化内存利用率，AMD 避免在多个不同的物理内存空间之间做数据复制。...在服务器上，有三个区 :vioc1,vioc2,vioc3。三个分区上分别有一个逻辑内存页：a，b，c，指向同一个物理内存页 A，A 中的内容是：甲。逻辑内存页 a,b,c 中的内容也是“甲”。...配置准备 本次配置过程，以 P780 服务器为例，首先登陆到 HMC 上，确认这台 P780 服务器支持 AMD 的功能： hscroot@HMC50:~> lssyscfg -r sys -m SVRP7780
QQ截图20191025140118.jpg 所谓服务器虚拟化是指将一台物理的计算机软件环境分割为多个独立分区，每个分区均可以按照需求模拟出一台完整计算机的技术。...这些资源的新虚拟部分是不受现有资源的架设方式，地域或物理配置所限制。 为什么要服务器虚拟化，服务器虚拟化的优势是什么？...首先降低运营成本，服务器虚拟化降低了IT基础设施的运营成本，是IT运维人员摆脱了繁重的物理服务器、OS、中间件及兼容性的管理工作，减少人工干预频率，使管理更集中更便捷。...第四提高服务可用性，通过服务器虚拟化用户可以方便地备份虚拟机，在进行虚拟机动态迁移后，可以方便的恢复备份，或者在其他物理机上运行备份，大大提高了服务的可用性。...第五提升资源利用率，通过服务器虚拟化的整合，提高了CPU、内存、存储、网络等设备的利用率，绝大多数应用的传统部署利用率不超过10%，而通过虚拟化后利用率往往超过70%，同时保证原有服务的可用性，使其安全性及性能不受影响
——村上春树 物理网卡的分身术：Macvlan Macvlan（MAC Virtual LAN）是一种在 Linux 操作系统上实现的网络虚拟化技术。...它允许您创建基于物理网络接口的虚拟网络接口，并为每个虚拟接口分配独立的 MAC 地址。...Macvlan 接口可以看作是物理以太网接口的虚拟子接口。...因此，使用Macvlan技术带来的效果是一块物理网卡上可以绑定多个IP地址，每个IP地址都有自己的MAC地址 用 Macvlan 虚拟出来的虚拟网卡，在逻辑上和物理网卡是对等的，应用程序可以像使用物理网卡的...Macvlan 的主要用途是网络虚拟化（包括容器和虚拟机）。另外，有一些比较特殊的场景，例如，keepalived使用虚拟MAC地址。
前言 在CPU虚拟化中我们采用的是分时复用的机制——在不同的时刻运行不同的进程；而在内存虚拟化中需要用到另一种复用技术——空间复用，即把物理内存的不同部分划分给不同的进程。...因此操作系统引入了一层转换，隐式地把进程看到的地址（逻辑地址）转换成实际的物理内存地址（物理地址）。...对于16K的逻辑地址空间，每个进程只需要一个大小为4的页表就足够记录其逻辑地址和虚拟地址的对应关系，例如： ? 图4-页表 ?...图5-物理内存 上图可以看到，进程的逻辑页0、1、3分别映射到物理页3、7、2，而逻辑页2没有使用，因此处于没有分配的状态。...如果preset bit为1，说明对应的页在物理内存中，PTE的内容表示对应的物理页（PFN）；如果为0,说明这个页不在内存中，操作系统可以使用PTE来保存这个页在swap分区中的位置。
程序自身并不需要关心自己的数据及代码存在哪，并且对程序来说，内存看上去是连续且独占的。当然事实肯定不是如此，而这背后就是操作系统的功劳 —— 内存虚拟化。...分段机制使得操作系统能够将不同的段放入不同的物理内存区域，从而避免了虚拟地址空间中的未使用部分占用物理内存。...因此，我们可以通过用物理帧号替换虚拟页号来转换此虚拟地址，然后将载入发送给物理内存。偏移量保持不变，因为偏移量只是告诉我们页面中的哪个字节是我们想要的。...分页虽然看起来是内存虚拟化需求的一个很好的解决方案，但这两个关键问题必须先克服。 分页和分段结合 为了解决页表内存开销过多的问题，Multics 的创造者提出了分页和分段结合的想法。...因此，一些虚拟系统更倾向于踢出干净页，而不是脏页。 总结 本文就操作系统的内存虚拟化部分做了简单总结，包括分段、分页、TLB 以及交换空间。
为了避免这种情况，不少人已经开始用云服务器设置虚拟内存了，我们一起来了解是怎么回事吧。 什么是虚拟内存 要知道云服务路设置虚拟内存怎么操作，首先我们要知道什么是虚拟内存。...为了解决内存不足的问题，Windows操作系统便需要使用虚拟内存技术。也就是说把一部分的硬盘空间用来作为内存使用，虽然硬盘的速写速度不及内存条的速度，但是可以避免因为内存不够导致系统崩溃的问题。...怎么设置 云服务器设置虚拟内存要怎样操作呢？具体步骤如下：一、在“我的电脑”图边上点击右键，然后就能看到一个系统属性的窗口。二、调出系统属性之后，找到“高级”选项，然点击性能下面的“设置”按钮。...四、这时候再打开设置时，就会弹出一个虚拟内存的窗口。到这一步我们就可以根据自己的需求进行设置了，设置完之后重启即可。 通过以上介绍，对于云服务器设置虚拟内存怎么操作，想必大家已经有所了解了。...如果想了解更多关于云服务器的设置虚拟内存的信息，可以自己尝试着操作一下。
与假想的磁盘（实际上是内存）相对的是磁盘缓存，而与假想的内存（实际上是磁盘）相对的是虚拟内存。虚拟内存的主要作用是使应用程序认为它拥有连续可用的内存，即一个完整的地址空间。...然而实际上，这个地址空间通常被分割成多个物理碎片，并且其中的一部分存储在外部磁盘管理器上，需要时进行数据交换。虚拟内存的存在使得即使内存不足，仍然可以运行程序。...为了实现虚拟内存功能，Windows在磁盘上提供了虚拟内存使用的文件，即页文件。该文件由Windows生成和管理，其大小与虚拟内存大小相同，通常是内存大小的1-2倍。...总结本文介绍了磁盘的物理结构、磁盘缓存和虚拟内存三个方面。磁盘的物理结构由盘面、磁头和悬臂组成，盘面上划分了多个磁道和扇区，扇区是磁盘的最小读写单位。...虚拟内存的存在使得即使内存不足，仍然可以运行程序。通过深入了解磁盘的物理结构、磁盘缓存和虚拟内存，我们可以更好地理解计算机系统的工作原理，为系统优化和性能提升提供基础。
文章目录 一、mmap 创建内存映射原理 ( 分配虚拟内存页 | 物理地址与虚拟地址进行映射 | 产生缺页异常并分配物理内存页 ) 1、分配虚拟内存页 2、物理地址与虚拟地址进行映射 3、产生缺页异常并分配物理内存页...二、mmap 库函数与 mmap 内核系统调用函数 一、mmap 创建内存映射原理 ( 分配虚拟内存页 | 物理地址与虚拟地址进行映射 | 产生缺页异常并分配物理内存页 ) ---- 1、分配虚拟内存页...分配 虚拟内存页 : 应用进程 调用 mmap 函数后 , 在 Linux 系统中 创建 " 内存映射 “ 时 , 会在 ” 用户虚拟地址空间 “ 中 , 分配一块 ” 虚拟内存区域 " ; 此处调用的...物理地址与虚拟地址进行映射 : 调用 Linux 内核空间 的 系统调用 mmap 函数 , 实现了 " 物理内存地址 " 与 " 虚拟内存地址 " 的映射关系 ; Linux 内核中的 mmap 系统调用函数..." , 直接分配 " 物理内存页 “ , 并且在 " 页表 “ 中 , 将 ” 虚拟内存页 " 映射到 ” 物理内存页 " ; 二、mmap 库函数与 mmap 内核系统调用函数 ---- 注意区分下
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
