添加磁盘在我的计算机找到对应需要添加磁盘空间的虚拟机，然后右键点击设置，在菜单的磁盘属性中添加。（虚拟机需要关机状态才能添加）
目前互联网上主要有Windows、Uniux、Linux、Mac等不同功能特性的系统... ...废话不多说，教程马上开始。
前言： Memory Balloon作为虚拟化平台上的一个重要内存QoS方案，作者在前文《[linux][memory]balloon技术分析 》中做过原理性的简要分析。 本篇介绍Memory Balloon的两种性能优化方案，进一步提升内存QoS性能。 第一种方案：在guest的balloon中填充page，再通知qemu使用madvise让host主动释放page。 第二种方案：在guest的balloon中填充page的同时，把page置零。提升host的ksm/uksm的合并效率。 分析： 1，
VMWare虚拟机的磁盘快满了，Podman占用的空间太大，准备清理下Podman的空间，然后给磁盘扩下容。
老蒋最近有空就在整理常规VPS、服务器数据盘与系统盘的挂载事宜。而且针对不同的服务商确实还是稍有不同，主要是公司最近有一个客户项目数据比较大，而且便于迁移和存储建议使用挂载数据盘中，以便以后的扩展增容。以前公司的所有项目默认50GB就足够使用，且这么大的硬盘对于大部分用户来说也是够用的，但是有些确实是鉴于系统的安全和数据盘和系统盘的分离需要隔离。
首先有一个client（客户端），然后由客户端发送一个请求，这里的请求就是我要计算某个数据，把请求发送给ResourceManager。这里ResourceManager下面有两个东西，一个叫做Applications Manager（应用），一个叫Resource Scheduler（资源）。接着由Applications Manager寻找一个节点，并开启这个节点上面的Application Master，开启后，这个App Mstr要计算这个任务需要多少资源，并且把这些需求汇报给ResourceManager中的Applications Manager，接着ResourceManager中的Resource Scheduler就开始在机架中寻找有资源的机器。
「 总感觉当下的生活不是想要的，总感觉一路走下去会是一个讨厌的未来，每天睁眼的一瞬间就是懊悔，昨天又浪费掉了...人生没有意义，但是要努力寻找活着的意义--------山河已无恙」
如果愿意的话，可以把合并表看成一种较老的、有更多限制的分区表，但是它们也有自己的用处，并且能提供一些分区表不能提供的功能。
1、使用git add filename ；可分多次使用，添加多个文件到暂存区
本文链接：https://lisz.me/tech/linux/linux-lvm.html
出品 | OSC开源社区（ID：oschina2013) 近日微软为了扩展内核支持，为 Linux 内核提供了一系列的补丁，其中一个值得注意的地方是微软为 Linux 带来了运行嵌套监控程序（Hyper-V）或嵌套虚拟化的功能。 这组补丁是由微软的 Linux 高级工程师 Jinank Jain 在本周三发出的，补丁说明如下： 该系列补丁计划增加对运行嵌套式微软 Hypervisor（虚拟机监控程序） 的支持。在嵌套微软 Hypervisor 的情况下，有一些特权的 hypercalls 需要走 L0 H
2 月份，受恶劣天气影响，美国多个地区出现大规模断电。Linux 之父 Linus Torvalds 所在的俄勒冈州波特兰地区也没有幸免。但比较励志的是，即使经历了六天的断电生活，Linus Torvalds 还是赶出了新一版的 Linux 内核（候选版本）—Linux 5.12 rc1。
MapReduce概述 MapReduce是Hadoop的另一个重要组成部分，是一种分布式的计算模型。由Google提出，主要用于搜索领域，解决海量数据的计算问题。 MapReduce执行主要分为两个阶段： map阶段：将任务分解。 reduce阶段：将任务汇总，输出最终结果。 MapReduce执行过程 总体执行过程 MapReduce运行的时候，通过Mapper运行的任务读取HDFS中的数据文件，然后调用自己的map方法，处理数据，最后输出。Reducer任务会接收Mapper任务输出的数据，
今天讲一下文件系统，遇见过单个最大文件的问题，所以将此问题记录下来，希望对大家有用。
设备树 (DT, Device Tree) 是用于描述 non-discoverable(google这样写的，意思应该就是硬件信息看不到) 硬件的命名节点和属性构成的一种数据结构。操作系统（例如在 Android 中使用的 Linux 内核）会使用 DT 来支持 Android 设备使用的各种硬件配置。硬件供应商会提供自己的 DT 源文件，接下来 Linux 会将这些文件编译成引导加载程序使用的DTB（Device Tree BLOB）文件。
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
我就是没事喜欢给自己挖坑，前几天写了一个“CentOS系统将 /home目录合并到 /根目录”的图文教程嘛，然后运行一直正常，没有什么问题，然后就在今天，打算清理文件的时候需要关机，于是乎我就关闭了，当然采用关机命令“shutdown -r now”，这也没有问题，问题在于重启之后无法进入系统了，直接提示“or press Control -D to continue”，如图（网摘本机显示器太次，显示不清晰）：
在这个互联网高度发达的时代，我们的个人隐私和信息安全也极易受到泄露和威胁，因此，保护好我们的数据安全便成为了重中之重。然而，传统的使用工具加密单个文件或者文件夹的方式（例如VeraCrypt/eCryptfs等）过于麻烦，且极其复杂，很难被大家接受。于是全盘加密应运而生，Windows平台上的BitLocker，Linux下的LUKS，macOS平台的FileVault，都是全盘加密的最好应用。现在，新安装的Windows在支持的情况下会默认启用BitLocker，macOS也会在初始化时提醒你是否启用FileVault，而iOS则是强制启用了全盘加密，他人即使接触到了你的设备，读取了你的硬盘，在密码没有泄露的情况下，你的数据也是十分安全的。由此看来，这种无感加密的方式也即将成为主流的数据安全保护措施。
4、设置 join 或aggregate洗牌（shuffle）数据时使用的分区数
在第四篇博文《初识MapReduce》中，我们认识了MapReduce的八大步骤，其中在Reduce阶段总共三个步骤，如下图所示：
最近手头一台运行在 Hyper-V 下面抓数据的服务器 (Ubuntu 16.04) 磁盘空间不够了，之前也没有把数据单独放到一个分区，所以只能想办法把根目录给搞大一点。之前没有处理过这样的问题，网上搜了很多资料，现在把拓展方法记录，分享出来。
首先就是通过top命令查看，因为top命令最直接，且信息量够大，覆盖面够全，可以看到CPU的wa有点高
LVM是逻辑盘卷管理（Logical Volume Manager）的简称，它是Linux环境下对磁盘分区进行管理的一种机制，LVM是建立在硬盘和分区之上的一个逻辑层，来提高磁盘分区管理的灵活性。通过LVM系统管理员可以轻松管理磁盘分区，如：将若干个磁盘分区连接为一个整块的卷组（volume group），形成一个存储池。
1.在屏幕右下角的托盘出现感叹号标志表示目前系统正在下载补丁或可以安装补丁，如果点击这个标志就可以实现安装。系统补丁可以安装也可以卸载。
在Spark中有三种shuffle写，分别是BypassMergeSortShuffleWriter、UnsafeShuffleWriter、SortShuffleWriter。分别对应三种不同的shuffleHandle。
当物理内存不够时，linux 触发oom，将进程杀掉；可以使用vmstat可以展现给定时间间隔的服务器的状态值,包括Linux的CPU使用率，内存使用，虚拟内存交换情况，IO读写情况，用于分析磁盘的压力在哪里，在swap，还是在load文件等
早一个星期不知道为什么就很热血的折腾起黑苹果。之前觉得自己对于操作系统还算了解，包括linux，但是唯独没有试过Mac OS。之前自己一直比较偏向软件，然后偏向web方向研发，也去关注前端关注体验，也很想知道苹果系到底是以如何的体验得以吸引这么多用户。没有钱钱买白的苹果，就黑下吧……
数据库表： • 表输出 • 更新，删除，插入/更新 • 批量加载（mysql，oracle） • 数据同步 文件： • SQL 文件输出 • 文本文件输出 • XML 输出 • Excel Output/Excel Writer 其他（报表、应用）
MapReduce框架(Map/Reduce) MapTask/ReduceTask 数据分发机制 MapTask接口实现类 : 对一行数据进行处理,map方法 ReduceTask接口实现类：对一组数据进行处理，reduce方法 MapReduce工作机制 划分输入切片： 数据切片 job.split文件 分布式数据处理 K相同的KV数据分配给同个ReduceTask 组合拳：CompareTo + Partation + Group 分区控制/分组控制 MapReduce编程模型 map task的实现 读数据：TextInputFormat SequenceFileInputFormat DBInputFormat portation 分区 调用Partitaioner 的getPartition 决定数据分区 reduce task的实现 读数据：下载"区"数据，并且合并多个"同区"并且排序 写数据：TextInputFormat SequenceFileOutputFormat DBOutputFormat GroupingComparator：分组 确定那些数据属于同一组 对倾斜数据的处理 1. 通过Combiner组件进行maptask端局部聚合数据减轻倾斜影响 2. 通过打算倾斜数据来消除倾斜的影响，通过在Key值后面添加随机值，这样就可以均衡的分布在ReduceTaks端。 MapReduce编程模型具体实现及处理流程： MRAppMaster YarnChild（maptask/reducetask） main() 1. MapTask: ->TextInputFormat ->LineRecordFromat ->Mapper ->map() ->context ---> MapOutputCollector 环形缓存,存在大小限制 ->spilter (80%) 分区(partation)，排序(compare) ->write 溢出文件(可能包含多个文件，有序文件) 写本地磁盘 ->merge 分区有序，分区索引文件 多个maptask会生成多个merge文件 2. Shuffle: Store && Rest map task 生成的数据传输给reduce task 的过程 多个maptask会生成多个merge文件,这些文件会保存在NodeManager中，NodeManager具有Web服务，ReduceTask会通过Web服务下载merge文件，进行处理 3. ReduceTask -> http下载：从多个DataManager中下载merge文件下载单个分区的KV数据，多个文件合并为一个文件
根据公司MySQL数据库中存储的业务数据，针对用户相关一些维度，提取用户相关的属性字段，其中包括属性字段直接提取，金额字段的计算提起，日期字段的格式转换等，最终将一个用户的各个属性在页面进行展示。
您可以使用设备树编译器 (DTC) 编译设备树源文件。不过，在将叠加层 DT 应用于目标主 DT 之前，您还应该通过模拟 DTO 的行为来验证结果。
taskctl是一款国内开源的ETL工具，纯C编写，可以在Window、Linux、Unix上运行。
硬件设备在Linux中的命名 Linux中每一个设备都被当成文件，所有的设备文件都在/dev这个目录下。 设备 文件名 IDE硬盘 /dev/hd[a-d] SATA/USB/SCSI硬盘 /dev/sd[a-p] U盘 /dev/sd[a-p] 软驱 /dev/fd[0－1] 打印机 25针：/dev/lp[0－2] usb：/dev/usb/lp[0-15] 鼠标 usb:/dev/usb/mouse[0－15] ps2:/dev/psaux 当前CD/DVD RO
来源：机器学习算法与Python学习 本文为大家带来Linux系统中156个常用的命令。 linux命令是对Linux系统进行管理的命令。对于Linux系统来说，无论是中央处理器、内存、磁盘驱动器、键盘、鼠标，还是用户等都是文件，Linux系统管理的命令是它正常运行的核心，与之前的DOS命令类似。linux命令在系统中有两种类型：内置Shell命令和Linux命令。 命令功能说明线上查询及帮助命令 (2 个)man查看命令帮助，命令的词典，更复杂的还有 info，但不常用。help查看 Linux 内置命令
linux 命令是对 Linux 系统进行管理的命令。对于 Linux 系统来说，无论是中央处理器、内存、磁盘驱动器、键盘、鼠标，还是用户等都是文件， Linux 系统管理的命令是它正常运行的核心，与之前的 DOS 命令类似。linux 命令在系统中有两种类型：内置 Shell 命令和 Linux 命令。
linux 命令是对 Linux 系统进行管理的命令。对于 Linux 系统来说，无论是中央处理器、内存、磁盘驱动器、键盘、鼠标，还是用户等都是文件， Linux 系统管理的命令是它正常运行的核心，与之前的 DOS 命令类似。
链接：https://www.cnblogs.com/bananaaa/p/7774467.html
为了确保工具、驱动等的通用性，我们通常需要在多种环境上进行验证，但由于资源有限，并不能保证每个环境都有对应的主机供我们使用，所以我们通常使用虚拟机来完成验证。一般我们在安装虚拟机时都会选择默认的20G磁盘空间，但是一旦需要搭建一两个交叉编译环境后，20G的空间就无法满足了，如果需要在虚拟机上搭建比较复杂的环境的话，一般给虚拟机50G的内存空间较合适。但是如果仍然无法满足需求，可以通过磁盘扩容的方式来应对。
一个 overlay 文件系统包含两个文件系统，一个 upper 文件系统和一个 lower 文件系统，是一种新型的联合文件系统。overlay是“覆盖…上面”的意思，overlay文件系统则表示一个文件系统覆盖在另一个文件系统上面。
众所周知，我们大多数服务都是跑在 Linux上的，因为Linux命令行形式的特性，也导致了很多开发者只喜欢把Linux当做跑服务的机器，并不作为日常的使用。这样导致了我们只能记得常用的部署命令，但遇到一些复杂的Linux运维就不知如何下手了。这不，我这两天就遇到了服务器磁盘不足的问题，一开始只想Google一下快速搞定，结果还是得补补Linux中LVM的这块知识点才可以。为了方便后人快速扩容，特此记录。
Linux命令是对Linux系统进行管理的命令。对于Linux系统来说，无论是中央处理器、内存、磁盘驱动器、键盘、鼠标，还是用户等都是文件，Linux系统管理的命令是它正常运行的核心。
Linux 内核包含4个IO调度器，分别是 Noop IO scheduler、Anticipatory IO scheduler、Deadline IO scheduler 与 CFQ IO scheduler。
linux命令是对Linux系统进行管理的命令。对于Linux系统来说，无论是中央处理器、内存、磁盘驱动器、键盘、鼠标，还是用户等都是文件，Linux系统管理的命令是它正常运行的核心。
摘要：监控系统在linux系统上获取物理磁盘IO以及使用情况的原理，让我们一起来探索一下
我记得在最新安装麒麟Linux服务器的时候需要先格式化硬盘，然后挂载到根目录，但是由于麒麟linux服务器没有部分的镜像源，所以我将其更换了Centos7系统，隐隐约约记得也做了格式化和分区，最近发现磁盘空间显示快满了，仔细一看系统目录仅有50GB，好吧可能真的是我忘记了，无论什么原因，这点空间肯定是不够的，毕竟重新迁移宝塔的模板和目录较为费事而且还可能出现一些未知的错误，所以需要移动/home目录转移到根目录下，按照百度教程操作没有问题，重新记录一下移动过程。
相比机械磁盘固态磁盘有更好的随机读写性能，相比机械磁盘固态磁盘有更好的并发支持，相比机械磁盘固态磁盘更容易损坏
以上是目录结构 以下是文件存储结构 在linux正统的文件系统（eg：ext2、ext3）中，一个文件由以下三个部分组成： 1. 目录项：包括文件名和inode节点号。 2. Inode：：又称文件索引节点，记录文件的属性，一个文件占用一个inode，同时记录此文件的数据所在的block号码。 3. data block：实际记录文件的内容，若文件太大时，会占用多个block。
linux命令是对Linux系统进行管理的命令。对于Linux系统来说，无论是中央处理器、内存、磁盘驱动器、键盘、鼠标，还是用户等都是文件，Linux系统管理的命令是它正常运行的核心，与之前的DOS命令类似。linux命令在系统中有两种类型：内置Shell命令和Linux命令。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
