，然而并不知道它使用的部分虚拟内存其实在磁盘上，因为内存和磁盘的读写速度上的巨大差异，这部分虚拟内存的读写非常缓慢，我们在 为什么 CPU 访问硬盘很慢 曾经介绍过： 在 SSD 中随机访问 4KB 数据所需要的时间是访问主存的...其他的文件不能存储在该区域上，我们可以使用 swapon -s 命令查看当前系统上的交换分区； Swap 文件是文件系统中的特殊文件，它与文件系统中的其他文件也没有太多的区别； Swap 分区的大小是需要系统管理员手动设定的...我们到现在已经对 Linux 上的 Swapping 有了一定的了解，接下来回到这篇文章想要讨论的问题 — 『为什么 Linux 需要 Swapping』，我们将从以下两个方面介绍 Swapping 解决的问题...WMARK_MIN 时会触发上一节提到的内存直接回收，而水位高于 WMARK_HIGH 则意味着空闲内存充足，不需要进行回收。...Linux 中的 Swapping 机制主要是为内存不足和内存闲置两种常见的情况存在的 Swapping 可以直接将进程中使用相对较少的页面换出内存：当系统需要的内存超过了可用的物理内存时，内核会将内存中不常使用的内存页交换到磁盘上为当前进程让出内存
这台机器必须有一个达到可以存放64K 程序 的外部存储器（例如磁盘或Flash） 以保证程序片段在需要时可以被调用。...三、虚拟内存管理 现代操作系统普遍采用虚拟内存管理（Virtual Memory Management）机制，这需要处理器中的MMU（Memory Mangement Unit，内存管理单元）提供支持。...设置好之后，CPU 每次执行访问内存的指令都会自动引发MMU 做查表和地址转换操作，地址转换操作由硬件自动完成，不需要用指令控制MMU 去做。...那为什么要设计这么复杂的内存管理机制呢? 多了一层VA 到 PA 的转换到底换来什么好处？...用户空间和内核空间 通常操作系统把虚拟地址划分为用户空间和内核空间，例如 X86平台的Linux 系统虚拟地址空间是0x00000000 - 0xFFFFFFFF，前3GB（0x00000000 - 0xBFFFFFFF
（当页表内容有变化的时候，需要清除TLB，以防止地址映射出错。）...「那么CPU是如何通过MMU和Cache来访问内存的呢？」 ? 可以看出虚拟地址和物理地址的转换关键是过程Table Walk Unit。...#include #include #include #include ...这个过程也是mmu的过程。 小结 我相信你已经对cpu通过MMU访问内存的本质有所掌握(还是不理解的话不要说认识我)，而且通过linux的一个实验，对其软件模拟流程也有所感性的认识。...下一篇我们正式进入内存管理的大门——linux内存管理。
了解更多BPF技术内幕，推荐阅读《BPF之巅：洞悉Linux系统和应用性能》一书。 ▼ BPF是近年来Linux 系统技术领域一个巨大的创新。...作为 Linux 内核的一个关键发展节点，其重要程度不亚于虚拟化、容器、SDN 等技术。...接下来我们来讨论一下，为什么性能工具需要 BPF 技术。 ▊ 为什么性能工具需要 BPF 技术 性能工具使用扩展版 BPF 来实现可编程性。BPF 程序可以执行自定义的延迟计算和统计摘要等功能。...使用 BPF 之前和之后生成直方图过程的对比 这里的关键变化是，直方图可以在内核上下文中生成，这大大减少了需要复制到用户空间的数据量。...如前面的程序输出截图所示，唯一需要复制到用户空间的数据是“count”列，其是一个数字数组。
为什么这么设计（Why’s THE Design）是一系列关于计算机领域中程序设计决策的文章，我们在这个系列的每一篇文章中都会提出一个具体的问题并从不同的角度讨论这种设计的优缺点、对具体实现造成的影响。...图 1 - macOS 磁盘工具 我们在 前一篇文章 中曾经分析过为什么早期 Windows 操作系统每隔一段时间可能需要整理磁盘上的碎片[^1]，该问题背后有两个原因，其一是 Windows 使用的...Linux 和 macOS 系统不需要碎片整理的原因与 Windows 需要碎片整理的原因正好相反： Linux 和 macOS 使用的文件系统或者降低了碎片发生的概率或者实现自动整理碎片的特性； 固态硬盘与机械硬盘具有不同的特性...如果磁盘上确实出现了碎片，那么 Linux 和 macOS 的文件系统也会尝试移动出现碎片的文件，不需要额外的碎片整理工具，这种设计带来的用户体验会比手动触发耗时较长的碎片整理好很多。...这里简单总结一下 Linux 和 macOS 不需要碎片整理的两个原因： 文件系统基于区块分配的设计使得磁盘上出现碎片的概率很低，延迟分配和自动的整理策略解放了操作系统的使用者，在多数情况下不需要考虑磁盘的碎片化
图 1 - macOS 磁盘工具 我们在 前一篇文章 中曾经分析过为什么早期 Windows 操作系统每隔一段时间可能需要整理磁盘上的碎片[^1]，该问题背后有两个原因，其一是 Windows 使用的...Linux 和 macOS 系统不需要碎片整理的原因与 Windows 需要碎片整理的原因正好相反： Linux 和 macOS 使用的文件系统或者降低了碎片发生的概率或者实现自动整理碎片的特性； 固态硬盘与机械硬盘具有不同的特性...如果磁盘上确实出现了碎片，那么 Linux 和 macOS 的文件系统也会尝试移动出现碎片的文件，不需要额外的碎片整理工具，这种设计带来的用户体验会比手动触发耗时较长的碎片整理好很多。...这里简单总结一下 Linux 和 macOS 不需要碎片整理的两个原因： 文件系统基于区块分配的设计使得磁盘上出现碎片的概率很低，延迟分配和自动的整理策略解放了操作系统的使用者，在多数情况下不需要考虑磁盘的碎片化...参考资料 [^1]: 为什么早期的 Windows 需要整理碎片 https://draveness.me/whys-the-design-windows-defragmentation/ [^2]:
1开场白 环境： 处理器架构：arm64 内核源码：linux-5.10.50 ubuntu版本：20.04.1 代码阅读工具：vim+ctags+cscope 本文讲解Linux内核虚拟内存管理中的mmu_gather...（mmu 积聚）的作用就是保证这种顺序，并将需要释放的相关的物理页面聚集起来统一释放。...这里需要说明一点就是，mmu积聚操作会涉及到local批次和多批次操作，local批次操作的物理页面相关的struct page数组内嵌到mmu_gather结构的__pages中，且我们发现这个数组大小为...2.6 tlb_finish_mmu 通过上面的unmap_vmas和free_pgtables之后，我们积聚了大量的物理页以及存放各级页目录的物理页，现在需要将这些页面进行释放。..., end); //刷mm的tlb，释放所有积聚物理页，释放所有积聚结构相关物理页 4.总结 Linux内核mmu-gather用于积聚解除映射的相关物理页面，并保证了刷tlb和释放物理页面的顺序。
一、为什么需要Docker 官方介绍(中文版)： Docker 是世界领先的软件容器平台。 开发人员利用 Docker 可以消除协作编码时“在我的机器上可正常工作”的问题。...二、Docker是如何解决上述的问题的 2.1解决环境(切换/配置) 不知道大家有没有装过系统，比如说装Linux虚拟机，重装Windows系统，都是需要镜像的。 ?...2.2解决应用之间隔离 说到这里，就得提出一个大家可能不认识的概念：LXC(Linux Containers)--->Linux容器。...2.2.1Linux容器 在Linux内核中，提供了cgroups功能，来达成资源的区隔化。...，要是我写文章写得不好，我是需要向XX谢罪的。 估计大家都用过虚拟机，虚拟机也能实现对应用的隔离，安装特定的镜像也能跑出我们想要的环境。虚拟机已经发展了很久了，为什么我们还需要Docker呢？
这时候使用程序的人需要在控制台跳动的光标处输入内容，然后按回车确认完成输入。 3....为什么需要 input？ 有人要问了： 需要什么值，直接赋值给变量不就好了，干嘛还要用 input？...软件的输入 为什么从没在其他软件中看过这种控制台的输入？ 获取用户输入的途径有很多，比较常见的像输入框，按钮，甚至麦克风和摄像头，都是用户在向程序输入信息。...如果想当做数字来进行运算，需要进行类型转换，否则会报错。 这个问题在 Python 2 里有点不同，那时候有两个输入函数：input 和 raw_input。
提高模型效率：通过检索到的相关信息直接辅助生成，RAG可以减少模型需要生成的内容量，提高处理效率和响应速度。...适应性强：RAG通过检索机制，能够灵活适应各种行业和场景的需求，尤其是对于那些需要大量专业知识和实时信息的应用场景，如金融分析、法律咨询等。
人是会生老病死的，除了口耳相传，人类需要更可靠的数据存储方法与更长久的物理介质。在过去，人类将数据保存在石板、竹简上，后来人类将数据保存在纸上，配合印刷术，使得信息可以大范围长久传播保存。...一些大型游戏，例如荒野大镖客2，,下载时需要确保有156G的储存空间。一些数据库管理程序所生成的数据库文件，经常达到几TB至上百上千TB的大小。...(2) 普通 PC 服务器性价比高，故障率也高，需要在软件层面实现自动容错，保证数据的一致性。 (3) 随着服务器的不断加入，需要能够在软件层面实现自动负载均衡，使得系统的处理能力得到线性扩展。
为什么需要 Elasticsearch？ 用数据库，也可以实现搜索的功能，为什么还需要搜索引擎呢？...比如我要搜一门讲过「莎士比亚」的课程，我需要在课程的文稿里进行「相关性匹配」，找到对应的文稿， 你可能觉得一条 sql 语句就可以解决这个问题： select * from course where
其实学任何一项技术，首先都要弄明白，为什么需要这项技术。 为什么需要 Zookeeper 正经点来回答，就是我们需要一个用起来像单机但是又比单机更可靠的东西。 下面开始不正经的回答。...而以往的很多ZK教程，上来就是“Zookeeper是开源的分布式应用协调系统”blabla，很多像我这样的小年轻看到就会很费解，到底什么是分布式协调，为什么分布式就需要协调 … 上面只是回答了我自己提出的问题...，为什么需要Zookeeper，或者说，为什么需要分布式协调系统，如果想进一步学习 ZK，你还需要了解下 Zookeeper 的内部实现原理。...再到 ZK 是如何实现高性能的强一致的，即ZAB协议的原理，很多教程上来就开始介绍ZAB协议，很容易让人一头雾水，不知道为什么需要这样一个分布式一致性协议，有了上述介绍的背景，就好懂许多。...这点是我的锅，在写这篇文章时，我还是把 Zookeeper 等价成了分布式协调服务，把为什么需要 Zookeeper 这个问题，等价成了 「为什么需要分布式协调服务」，其实这样是有问题的，因为想做分布式协调服务
因为安装和管理云端Linux服务器的经验有可能会给你的IT从业经历大大加分。 有许多办法可以从云端Linux入手，几乎不需要什么投入，许多不同的云服务提供商为你指明了道路，并且为新用户提供特惠服务。...云端Linux服务器通常被认为是PaaS(平台即服务)或IaaS(基础设施即服务)解决方案，这取决于你需要对它们的配置施加多大的控制力(你想获得越大的控制力，它们就越有可能是IaaS)。...安装时间 安装云端Linux服务器通常需要选择你所需要的操作系统和系统大小，并启动它。此外，还要在配置如何连接方面花点时间。不过整个过程很快，最多也就几分钟。...为什么是云大受欢迎的云端Linux服务器包括Ubuntu、CentOS、Suse Linux Enterprise Server和openSuse。...Linux云解决方案不仅仅适合想在云端安装个人系统的我们这些人，它还为许多中小公司提供了它们需要的所有计算能力。如今有好几家专业的、大获成功的公司使用云端服务器来处理所有工作。
如果没有没有亲自做过一些项目，直接上手就学spring那样的框架，你可能会觉得莫名其妙，有java就够了呀，为什么要学习这么一个陌生的东西。...CrawlControl2，来实例化TaobaoCrawler 呢，或者我们可以用Service Locator模式，通过中间代理类来实现松耦合，但对象还是要自己去获取管理这些依赖对象，有没有一种方式，使得对象仅仅需要通过构造参数或者属性定义依赖关系...比如你在配置中指定ref='taobaoCrawler',容器帮你做的工作相当于： CrawlControl control = new CrawlControl（new TaobaoCrawler ()）; 而你需要做的仅仅是获取装配创建好的对象...写这篇文章主要是告诉大家使用框架之前要明白为什么去用，主要是为了解决什么问题，而不是人云亦云，随大流，你掌握了原理，掌握了基础，自己也可以开发一套框架出来，框架是伴着实际问题，为了解决实际问题而出现的。
为什么 Grafana 需要 OpenTelemetry 翻译自 Why Grafana Needs OpenTelemetry 。...可观测性需要高质量、可移植和准确的遥测数据。OpenTelemetry 的使命是将这种遥测作为云原生软件的内置功能。在 2022 年，该项目继续获得动力，并成为 CNCF 中速度第二快的开源项目。...方程式的 Grafana 部分 Grafana 需要适应 OpenTelemetry 用户的需求是多方面的。...“对于不需要任何中间件的情况，您可以将 OpenTelemetry 数据直接发送到 Grafana 云的 OTLP 端点，” Stäber 说。...第二个方面是在用户和客户需要到达的地方——引领可观测性空间并构建工具和技术，这些将变得相关，“Hartmann说。
随着互联网的高速发展，用户规模与业务并发量开始急剧增加，海量的请求需要接收和存储，业务需要中间件来实现削峰填谷；业务也在不断发展，企业内部的系统数量也在不断地增长，不同语言开发出来的系统需要统一的事件驱动...；大数据、AI已经成为很多业务中不可或缺的技术，它们都需要统一的数据源。...有的人可能会问，现在消息队列已经非常成熟了，我们可以使用Kafka、RabbitMQ等满足日常的业务需求，为什么还会出现Pulsar这个消息队列，并且迅速发展呢？...因此，传统消息队列的运维成本相对较高，在适配云原生环境的问题上，需要研发人员投入一定的时间。 而Pulsar是计算与存储分离的架构，天然适配云原生环境。...7 流批一体 随着业务的不断发展，流计算和批处理越来越常见，通常我们需要分别维护一套流计算平台和批处理平台以满足不断发展的业务需求。
这就是为什么采用Kaizen原则是一个明智的想法。Kaizen 在日语中意为“变得更好”，被称为随着时间的推移不断进行小改进的方法。某种程度上来说Kaizen 不是一种实际的工具，而是一种心态。...Kaizen 涉及组织中的每个人；因为每个人都是他们部门的专家，所以每个人都可以确定差距在哪里以及需要改进的地方。
达芬奇有很多超前的理论设计，可是限于当时的技术条件，并不能做出来 也有人可能说一些人没有学过理论照样凭着自己的经验做设计，依然做的很好，自己的经验从实践中获得的，中间一定是走了很多弯路才有这样的经验，这样的经验需要花费大量的时间去领悟习得...当然并不是这样做不好，世界上知识那么多，我们也不是专业去做学术研究的，不必去深究理论背后形成的原因，直接拿来使用就即可，当然深层次的理解对我们更有利，这时就需要选择性的去学习了。...为什么我们需要理论？ 1. 解释功能 理论提供一个解释，对相关事情进行定义、理清条理和解释。将事情剥开揉碎给人看。理论明事理。 2....你可能需要描述前因后果，背景介绍，可能需要一层层地剥开你要描述的事情。...作为工具 这回事是不是那回事，如何检测和验证这件事，就需要一个‘把手’来衡量。 特别对学术研究来说，每个理论一般都跟着一个模型和测量工具，可用于检测程度和维度缺失。
也有人可能说一些人没有学过理论照样凭着自己的经验做设计，依然做的很好，自己的经验从实践中获得的，中间一定是走了很多弯路才有这样的经验，这样的经验需要花费大量的时间去领悟习得。 ...当然并不是这样做不好，世界上知识那么多，我们也不是专业去做学术研究的，不必去深究理论背后形成的原因，直接拿来使用就即可，当然深层次的理解对我们更有利，这时就需要选择性的去学习了。...为什么我们需要理论？ 1. 解释功能 理论提供一个解释，对相关事情进行定义、理清条理和解释。将事情剥开揉碎给人看。理论明事理。 2....你可能需要描述前因后果，背景介绍，可能需要一层层地剥开你要描述的事情。...作为工具 这回事是不是那回事，如何检测和验证这件事，就需要一个‘把手’来衡量。 特别对学术研究来说，每个理论一般都跟着一个模型和测量工具，可用于检测程度和维度缺失。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
