在Linux系统下，我们一般不需要去释放内存，因为系统已经将内存管理的很好。但是凡事也有例外，有的时候内存会被缓存占用掉，导致系统使用SWAP空间影响性能，例如当你在Linux下频繁存取文件后,物理内存会很快被用光,当程序结束后,内存不会被正常释放,而是一直作为caching。，此时就需要执行释放内存(清理缓存)的操作了。
设计的目的就是当上面提到的+buffers/cache表示的可用内存都已使用完，新的读写请求过来后，会把内存中的部分数据写入磁盘，从而把磁盘的部分空间当做虚拟内存来使用。
当在Linux下频繁存取文件后，物理内存会很快被用光，当程序结束后，内存不会被正常释放，而是一直作为caching。
在本教程中，我们将参考Linux dd命令的一个实际示例，系统管理员可以使用该命令将以MBR或GPT布局样式分区的较大HDD的Windows操作系统或Linux操作系统迁移到较小的SSD。 在本节摘录中，我们将使用安装在具有多个分区的硬盘上的Windows系统作为示例。 在HDD以MBR方案分区并且包含具有多个逻辑分区的扩展分区或分区无序的情况下，该方法可能变得相当复杂。 如果是这样，我建议你不要使用这种方法。 在这种情况下，使用ddrescure更安全，它可以克隆整个磁盘布局（分区表和每个分区内的已使用块），而不会实际传输空的空间。 可以通过从Ubuntu主存储库安装gddrescue包获得DDrescure。
df 命令用于显示磁盘的相关信息。df（Disk Free）的首字母组合，用来显示文件系统磁盘空间的使用情况。
Linux释放内存的命令： sync echo 1 > /proc/sys/vm/drop_caches
1.清理前内存使用情况 free -m 2.开始清理 echo 1 > /proc/sys/vm/drop_caches 3.清理后内存使用情况 free -m 4.完成! 查看内存条数命令： dmidecode | grep -A16 "Memory Device$" ++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++ # sync # echo 1 > /proc/sys/vm/drop_caches echo
LVM是逻辑盘卷管理（LogicalVolumeManager）的简称，它是Linux环境下对磁盘分区进行管理的一种机制，LVM是建立在硬盘和 分区之上的一个逻辑层，来提高磁盘分区管理的灵活性。通过LVM系统管理员可以轻松管理磁盘分区，如：将若干个磁盘分区连接为一个整块的卷组 （volumegroup），形成一个存储池。管理员可以在卷组上随意创建逻辑卷组（logicalvolumes），并进一步在逻辑卷组上创建文件系 统。管理员通过LVM可以方便的调整存储卷组的大小，并且可以对磁盘存储按照组的方式进行命名、管理和分配，例如按照使用用途进行定义：“development”和“sales”，而不是使用物理磁盘名“sda”和“sdb”。而且当系统添加了新的磁盘，通过LVM管理员就不必将磁盘的 文件移动到新的磁盘上以充分利用新的存储空间，而是直接扩展文件系统跨越磁盘即可。
上一篇《不可不知的Linux中三种缓冲模式》中说到了三种缓冲类型，这一篇主要讲与缓冲相关的函数，这些函数可以修改默认的缓冲类型，及在实际中可能遇到的问题。
df命令的英文全称即“Disk Free”，顾名思义功能是用于显示系统上可使用的磁盘空间。默认显示单位为KB，建议使用“df -h”的参数组合，根据磁盘容量自动变换合适的单位，更利于阅读。
二、Software，hardware RAID： . 为何磁盘阵列又分为硬件与软件呢？ 所谓的硬件磁盘阵列（hardware RAID）是通过磁盘阵列卡来达成阵列的目的。磁盘阵列卡上面有一块专门的芯片在处理 RAID 的任务，因此在性能方面会比较好。在很多任务（例如 RAID 5 的同位检查码计算）磁盘阵列并不会重复消耗原本系统的 I/O 总线，理论上性能会较佳。此外目前一般的中高阶磁盘阵列卡都支持热拔插，亦即在不关机的情况下抽换损坏的磁盘，对于系统的复原与数据的可靠性方面非常的好用。
原创作品转载请注明出处https://github.com/mengning/linuxkernel/
Rclone 是一款的命令行工具，支持在不同对象存储、网盘间同步、上传、下载数据。
一个好的软件总是让用户的使用体验越来越好，这次 MySQL-8.0.x 的升级有两点改进，都让它更加易用；其一是添加了不可见主键，其二就是 redo 日志大小可以在线调整。
本文介绍了Linux内核中关于数据一致性的问题，以及为解决这些问题而采用的各种技术和方法。首先介绍了数据一致性问题在Linux内核中的重要性，然后介绍了Linux内核中现有的数据一致性技术和方法，包括O_DIRECT、O_SYNC、FUA、PDflush、barrier等。最后，总结了如何通过这些技术来提高文件系统的可靠性和性能。
今天我们来了解一下几个Linux小命令，因为比较短的，而且不常用，所以会有三个（我就是这么任性） 1. paste paste命令用于合并文件的列 paste指令会把每个文件以列对列的方式，一列列地加以合并 paste命令使用介绍： 命令格式：paste [-s][-d <间隔字符>][--help][--version][文件名] 命令功能：合并文件的列 命令的常用参数选项说明： -d<间隔字符> 用指定的间隔字符取代跳格字符 -s 串列进行而非平行处理 --hel
在看本文之前，建议先看一下之前的一篇文章，至少要知道标准IO里面各个类之间的关系：
drop_caches的值可以是0-3之间的数字，代表不同的含义： 0：不释放（系统默认值） 1：释放页缓存 2：释放dentries和inodes 3：释放所有缓存
在多云策略与数据迁移趋势下，企业往往需要将数据在不同云服务提供商之间进行迁移。本文介绍如何使用rclone工具同步腾讯云COS（Cloud Object Storage）桶中的数据到华为云OBS（Object Storage Service）。先决条件是您已经使用华为云在线迁移工具完成了初始数据迁移，现在我们需要保持后续的数据一致性。
购买了一台拥有本地磁盘的云服务器。比如 ecs.i2.16xlarge. 为了保证数据安全性，以及读写速度，我们通常会对磁盘做RAID。 但是云主机又不同于本地物理主机，没有办法添加RAID卡，这就需要通过软件来实现RAID。
线上集群后端某台Web服务器例行检查时，我观察到+buffers/cache值（即Linux内存的实际使用情况）一直都是5365左右，就算停掉Nginx+FastCGI程序和其它程序也是一样，考虑到这台机器经常在使用rsync+inotify，肯定会存在着频繁存取文件的情况。而Linux系统有一个特性：在Linux下频繁存取文件时，就会占用物理内存。当程序结束时并不会自动释放被占用的内存，而是一直作为Cache存在。实际上内核结束一个程序后，它是会释放内存的，但是内核并没有立刻将这部分收集到free当中，而是存在在cached或者buffer当中，提高系统的io效率，cache和buffered的内存是由内核进行动态的配置管理，如果系统的free大小不够的时候，系统会自动释放cache buffer的内存给程序使用（因此如果是看到used很多，来手动释放内存其实是不需要的，我前面的文章及书籍其实也说明了我们应该如何观察Linux系统的实际内存使用情况，这里就不再多描述了）。
Linux服务器运行一段时间后，由于其内存管理机制，会将暂时不用的内存转为buff/cache，这样在程序使用到这一部分数据时，能够很快的取出，从而提高系统的运行效率，所以这也正是Linux内存管理中非常出色的一点，所以乍一看内存剩余的非常少，但是在程序真正需要内存空间时，Linux会将缓存让出给程序使用，这样达到对内存的最充分利用，所以真正剩余的内存是free+buff/cache
它处理文本的速度是快得惊人的，现在很多基于shell 日志分析工具都可以用它完成。特点是设计简单，速度表现很好，本文将介绍awk内置变量。
在官网用户手册的系统工具（System Tools）一栏，有一个同步工具（Sync Tool），有很多人问这个东西怎么用，延迟是多少，今天就介绍一下这个工具的使用场景、基本原理和测试技巧。
经常提到 6 核 12 线程，4 核 8 线程是什么意思？一核会定义处理一个线程，但是为提高效率，经常会将物理虚拟成逻辑处理单元，让一个物理核为2个虚拟核，每个核两个线程。
Redis有三种集群模式，分别是主从、“哨兵”、Cluster集群模式，今天先来聊一下主从模式
sed 简介 sed是一种流编辑器，以行为单位进行文本处理，可以将数据行进行替换、删除、新增、选取等操作。 sed [options] 'command' file(s) 基本命令 匹配内容 $ sed 'p' /etc/passwd # 每一行输出两次 $ sed -n 'p' /etc/passwd # 每行只出现一次 $ sed -n '/root/p' /etc/passwd root:x:0:0:root:/root:/bin/zsh # 等同于 $ grep 'root' /etc/pas
awk -F ‘:’ ‘BEGIN{语句} {if(条件){语句1;语句2;语句3} } END{语句}’ filename
在工作中接触到了redis,Redis是一个非常高效的key-value的数据库，在项目中广泛使用，但是redis很明显的缺点是对于内存的处理，在项目上线之初，必须对内存规划合理，否则很容易出现内存爆了的现象，一般较合理的内存大小为电脑物理内存的3/5。
在日常开发中一些看似司空见惯的问题上，我觉得可能大多数人其实并没有真正理解，或者理解的不够透彻。不信我们来看以下一段简单的读取文件的代码：
以前我对这块认识很模糊，而且还有错误的认识；今天由我同事提醒，所以我决定来好好的缕缕这块的关系。
有时我们在使用数据库时，像mongodb，redis和一些关系行数据，为了使数据更加安全，作为备份使用我们经常习惯使用主从复制架构，当主机上的数据出现问题时，我们就可以连接到slave机器 也就是另外一台机器会从主机上进行同步数据，如果我们使用linux命令 netstat -apn，会发现slave机器上的ssdb会和主机上的ssdb服务建立连接，如果我们这时往主机的ssdb导入数据 会发现slave机器上也会有相应的数据更新。 具体配置如下所示(我这里假设master机器的IP为：10.100.300.1端口：8888)
前面介绍的是find命令，我们发现一个find命令居然有那么多的命令，我看到都要晕了，不管没有关系，加油。相信自己！ 一、grep命令 1.1、作用 Linux系统中grep命令是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹 配的行打印出来。 grep全称是Global Regular Expression Print，表示全局正则表达式版本，它的使用权限是所有用户。 1.2、命令格式 grep [options] 1.3、主要参数 1.3.1、主要
2022 年，我们很可能会看到 Linux 内核中的实验性 Rust 编程语言支持成为主流。2021.12.6 早上发出了更新的补丁，介绍了在内核中处理 Rust 的初始支持和基础设施。
这是《结合例子学习eBPF和bcc》系列的第二篇文章。本文将介绍如何获取追踪目标函数的参数信息以及如何更好的进行结果输出。
你无法优化代码；优化是针对特定的条件来实现的。当条件改变时，你的优化反而可能会变为瓶颈。这时仔细审查你对这些条件的假设，其中也许就蕴藏着解决方案的关键。
上一回介绍了局域网下不需要安装软件就可以直接传输文件和文字的 snapdrop 服务，但是我们总有一些不在局域网下传输文件的需求，抑或是局域网下多人同步文件的需求，这种情况单靠追求简洁方便的服务自然就不够用了。
Linux 基础的文件目录操作命令，融合多部Linux经典著作，去除多余部分，保留实用部分。
先讲一个作者大约5-6年前我在某当时很火的一个应用分发创业公司的面试小插曲，该公司安排了一个刚工作1年多的一个同学来面我，聊到我们项目中的配置文件里写的一个开关，这位同学就跳出来说，你这个读文件啦，每个用户请求来了还得多一次的磁盘IO，性能肯定差。借由这个故事其实我发现了一个问题，虽然我们中的大部分人都是计算机科班出身，代码也写的很遛。但是在一些看似司空见惯的问题上，我们中的绝大多数人并没有真正理解，或者理解的不够透彻。
这里的consistent实际上是coherent的概念，不能保证consistent，也就是说需要memory barrier来保证memory order。
1、由于Source Insight（以下简称SI）是Windows应用，所以不能直接安装在Linux上，于是我们要借助wine，所以第一步会介绍wine的安装过程和坑； 2、介绍SI在Linux（以Ubuntu 16.04为例）上的安装，并介绍如何导入免费证书（个人建议大家有条件还是付费支持一下SI这个软件，真的是个好东西，比IDEA看源码实在快太多了，我已经买了最新版4.0，还是挺良心的，一次性付费，239美刀）； 3、用SI导入AOSP源码并Sync文件建立索引，开头那张截图就是正在Sync，建立完成后就可以快速导航各个方法类引用等等了； 4、默认主题太刺眼，怎么办？还是习惯IDEA的风格，没事，我配置都写好了，只用你一键导入并改改字体大小即可！
文件的写入是否是原子的？多个线程写入同一个文件是否会写错乱?多个进程写入同一个文件是否会写错乱？想必这些问题多多少少会对我们产生一定的困扰，即使知道结果，很多时候也很难将这其中的原理清晰的表达给提问者
原文链接:https://rumenz.com/rumenbiji/linux-df.html
本文告诉大家如何在 windows 和 Linux 安装使用 Btsync ，而且分享一些小东西给大家
因为公司有用到S3，所以整理了一个S3的简单入门教程。当然，入门之后有其他更高级的用法需求，就靠自己去查文档了。入门的教程能让你快速上手，不至于翻阅一堆文档，容易被劝退。这里主要是介绍如何用cli去操作S3。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
云直播
