对于文件的存储、传输、磁盘IO读取等操作在使用Hadoop生态圈的存储系统时是非常常见的，而文件的大小等直接影响了这些操作的速度以及对磁盘空间的消耗。
• 相同内核 • 相同标准 • Linux Standard Base标准 • File system Hierarchy Standard目录架构标准 • 不同管理工具 • 不同套件管理模式
最近正在学习Linux系统的常用操作命令，于是心血来潮，想自己安装一个Linux系统实践一下，在网上找了半天资料，终于在自己的电脑上成功安装了，实现了Windows+Linux双系统，将自己的安装过程记录了下来。这里安装的是Ubuntu-1604.3操作系统，下载地址
接下来一段时间打算学一下linux 学习来源书本《Linux命令行与shell脚本编程大全 第三版》
选择适当的文件系统可以使磁盘空间的利用率更高并提高性能。Linux下常用的文件系统有Ext2、Ext3、Ext4、Btrfs等，其中Btrfs相对比较新，支持快照、检查和修复能力。使用Btrfs文件系统可以通过压缩减小磁盘空间的使用，但是需要注意的是，压缩会增加CPU的开销和IO延迟。
图 13总结：通过测试，在本次实验中我们得出的以下几点结论：1. 小文件(最好是大于 0.5M，如果文件太小，在进行 tar 打包并压缩或者 zip 压缩时，其占用的磁盘空间会比源文件大很多)在进行 tar 打包并压缩或者 zip 压缩时，其占用磁盘的大小不变；中等文件(100M 左右的 pdf 格式文件) ，在进行 tar 打包并压缩或者zip 压缩时时，大约节省 20%-30%的空间；对于大文件(500M 左右的视频文件)基本上没有节省多少磁盘空间。2. 在 Radhat5.5 中对于 tar 打包并压缩测试和 zip 压缩测试中，tar 和 zip 对文件的压缩是一样的，对磁盘的节省程度是一样的。3. 本次测试中由于选择文件的特殊性，不能够完全模仿在真实情况下的操作，所以得出的结论会有一定程度的误差。由于 cuizong007 的水平有限，难免有错误的地方，还请多多包涵。欢迎各位技术好友进行技术方面的交流。cuizong007 的邮箱是：cuizong007sina.com图 5图 67.对文件 2 进行查看(如图 7 和图 8)：图 7图 88. 对文件 3 进行 tar 和 zip 压缩(如图 9 和图 10)：图 9图 109. 对文件 2 进行查看(如图 11 和图 12)：图 11图 1210.在将所有的文件进行 tar 和 zip 压缩完后，查看压缩完后的情况(如图 13)：在 linux 下人们不免会遇到要压缩一些文件，但是究竟要那种方式压缩，所得到的结果最能够节省磁盘的空间，而且有不容易出现错误呢？本次实验结果只做技术讨论，相互的学习。实验环境：在 xp 系统下安装在虚拟机上的 redhat5.5 的系统。本次实验结果将主要测试最常用的、最简单的(即没有添加太复杂的命令选项)tar 和 zip命令。1. 我们选择了三个不同大小的文件(文件名分别为：1、2 和 3；文件 1 和文件 2 都是 pdf文档；文件 3 为视频文件)如图 1 所示：图 12. 我们首先使用命令 tar 将第一个小文件(即 1)进行压缩。 (使用命令： tar zcvf 1.tar.gz 1)如图 2 所示：图 23.再使用命令 zip 压缩第一个小文件(即 1)进行压缩。 (使用命令： zip 1.zip 1)如图 3所示：图 34.使用命令查看 tar 和 zip 压缩同一文件 1 的大小(使用命令：
与windows下的winrar工具类似，Linux中也有文件打包压缩的命令，我们先来看一下windows的打包命令：tar。
家人们好，今天我们将深入探讨Linux系统中两个常用的压缩与解压命令——Tar和Zip。在Linux世界中，文件压缩是一项非常重要的技能，它不仅可以节省磁盘空间，还能方便文件传输和备份。让我们一起来了解这两个强大的工具如何发挥作用吧！
每种数据库本身都有自身的特性,同时面临的业务不同,也会导致每种数据库需要进行调节,来满足某种业务的需求.
Linux作为一个强大的开源操作系统，广泛应用于服务器、桌面、嵌入式设备等领域。然而，随着应用复杂性的增加和硬件资源的有限，Linux系统性能优化变得越来越重要。本文将从多个方面详细探讨Linux性能优化的方法和技巧，帮助读者更好地发挥系统的潜力。
https://blog.csdn.net/Srlua/article/details/136079391#comments_31253141
用虚拟机软件虚拟出来的硬盘文件会随着使用而变大，因为磁盘碎片的产生，这个文件里也有很多的没用的空闲空间，为了节省空间，可以对虚拟硬盘文件进行压缩。
Kafka集群到底需要多大的存储空间？这是一个非常经典的规划问题。Kafka需要将消息保存在底层的磁盘上，这些消息默认会被保存一段时间然后自动被删除。虽然这段时间是可以配置的，但你应该如何结合自身业务场景和存储需求来规划Kafka集群的存储容量呢？
在Linux系统中，文件和目录的压缩与解压缩是日常操作中不可或缺的一部分。通过有效地压缩文件，我们可以节省磁盘空间，并方便文件的传输和备份。相反，解压缩则是获取原始数据的关键步骤。本文将深入探讨Linux中常用的压缩和解压缩命令，为读者提供全面的指南。
然后下一步，选择自定义安装，打钩核心组件,vix,默认配置，https端口443，取消启动时检查产品更新
zram是基于内存压缩的块设备，怎么理解，假设我们申请一个1G的zram块设备，这个块设备并没有实际的物理存储区域，是用内存模拟的，当一个128MB的文件被写入到zram的块设备，这个文件会被经过"牛逼"的压缩算法，然后保存在zram临时申请的物理内存中。
很多小伙伴对swap分区（内存数据换入换出）这个名词可能不陌生，有了这个技术，系统才能实现承载计算机内存总量的多进程运行。操作系统会把暂时不用的内存数据写到磁盘等其他存储中，以此来释放更多的内存空间执行当前需要更多内存的进程。但是换入换出过度频繁时虽然可能不发生进程申请不到内存而导致失败的问题，但却在一定程度上降低了进程执行的效率，毕竟内存与磁盘读写速度相差几个数量级，那么是否有其他技术能解决内存数据换入换出速度过慢的问题。这也是为什么安装k8s的机器上推荐关闭swap的原因，如果内存不足就直接暴漏出来，而不是遮遮掩掩。
一个 ISO 文件通常是一个压缩文件，里面包含了一张 CD 或者一张 DVD 完整镜像。例如，大部分操作系统 像 Windows, Linux, 和 macOS 都是以 ISO 镜像的方式发布的。
在 Linux 系统选有相当多的压缩命令可以使用,这些压缩指令可以让我们更方便的从网上下载大型文件,本章第一节内容我们就来谈谈这个 Linux 系统下常用的几种压缩格式吧.
生产环境需考量各种因素，结合自身业务需求而制定。看一些考虑因素（以下顺序，可是分了顺序的哦）
Linux系统在我们正式转到算法这个行业的时候，就成为了我们必须要会用的一种系统了。
Hive 建设离线数据仓库通常符合：一次写入，多次读取。所以需要我们在建表的时候选择恰当的存储格式和数据的压缩模式。
Linux下文件的隐藏属性 linux除了9个权限外，还有些隐藏属性， 使用chattr命令来设置 chattr 设置文件的隐藏属性 #chattr [+-=] [ASacdistu] 文件或目录 参数： + ：增加某一个特殊参数，其他原本存在参数则不动 - ：删除某一个特殊参数，其他原本存在参数则不动 = ：仅有后面的参数 A ：设置了A这个属性时，此文件（或目录）的访问时间atime将不会被修改。可避免I/O较慢的机器过度访问磁盘。 S ：一般文件是异步格式写入磁盘的，如果加上S这个属性时，对文
我们使用的Linux服务器，虽然有很多不同的发行版，但他们的文件目录都有一些相似性。Linux目录配置的依据是FHS（https://www.pathname.com/fhs/）标准。FHS建议根目录最好单独分区，尤其与安装的应用程序分开，这样根目录所在的文件系统不容易发生问题。
最近因为毕设重新回归Ubuntu，手头有一台装了Win10的ThinkPad X240s，最终成功完成了Windows 10 教育版和Ubuntu Kylin 15.10 的双系统配置，下文(多图慎入)是我完成整个过程的手记。 安装方式 Ubuntu是很多Linux初学者最理想的选择，如果你恰好对Windows系列审美疲劳或者累觉不爱，那就要听好，有三种方法助你走进Ubuntu新世界。 虚拟机安装 原料：Ubuntu Kylin的ISO、VMware或VirtualBox 优点：一条龙服务，安全简单 缺
上一篇文章已经写到more指令，随后因为字数太多的原因没有再往下写，这篇文章将继续对Linux中的指令进行讲解。
1.df命令 # df -ha 显示所有文件和分区的使用 # df -h /dev/sda1 显示sda1磁盘使用率 # df -T 显示文件系统名称属于每个分区。区的格式类型（比方ext3） 注：h參数表示转换为M。G等人们经常使用的磁盘空间单位显示 2.du命令 # du -h src 显示src文件夹中各个文件（或者文件）所占用的磁盘空间 # du -hs /usr 显示usr文件夹中全部文件的总大小 # du -h test.c 显示test.c文件所占用的磁盘空间 3.dd命令 dd 是 Linux/UNIX 下的一个很实用的命令，作用是用指定大小的块拷贝一个文件，并在拷贝的同一时候进行指定的转换。 # dd if=/dev/hdb | gzip > /root/image.gz 备份/dev/hdb全盘数据。并利用gzip工具进行压缩。保存到指定路径 注：“|”表示管道命令，是指“|”的左边执行结果是其右边的输入条件或者范围。如：history | grep date指从history这条命令执行的结果中显示包括有“date”的命令 # gzip -dc /root/image.gz | dd of=/dev/hdb 将压缩的备份文件恢复到指定盘 # dd if=/dev/fd0 of=disk.img bs=4M 备份软盘。读和写的块大小为4M 4.# uname -a 查看Ubuntu的版本号 5.cat命令 # cat -n test.c 显示整个test.c的内容，并对内容按行编号 6.lsmod命令 # lsmod 显示全部内核载入的模块 # lsmod | grep mptspi 显示内核载入的全部包括mtpspi的模块 7.# lsusb 查看USB设备 8.# cat /proc/cpuinfo 查看cpu的状态 9.# lshw 查看硬件信息 10.# fdisk -l 查看磁盘的信息 # fdisk /dev/sda 对磁盘sda（注意不是sda1，sda1是sda的一个分区）进行操作，包含新建分区。删除分区等，后面的操作按提示选项进行。 11.# free -m 查看当前内存使用情况 12.# ps -A 查看当前系统有哪些进程 13.# kill 进程号 中止一个进程 14.# kill -9 进程号 强制中止一个进程。kill 进程号不成功时能够使用 15.# top 查看当前进程的实时状况 # top -p 786 显示进程号为786的进程的实时执行状况 16.ifconfig命令 # ifconfig 显示网卡相关的信息 # ifconfig eth0 up 打开eth0网卡 # ifconfig eth0 down 关闭eth0网卡 # infonfig eth0 192.168.1.1 设置eth0的IP地址为192.168.1.1 17.启动停止服务命令 # /etc/init.d/服务名 restart/stop/start 重新启动/停止/启动一个服务 18.# whereis 文件名称 高速查找一个文件 19.# find 文件夹 -name 文件名称 在文件夹中查找某个文件名称的文件 find -name ‘*fb*’ 在当前文件夹下查找文件名称中包括”fb”字样的文件 find /usr -name ‘*fb*’ 在/usr文件夹下查找文件名称中包括”fb”字样的文件 20.# tail -n 6 文件名称 假设值的前面有 +（加号）。从文件开头指定的单元数開始将文件写到标准输出。假设值的前面有 -（减号）。则从文件末尾指定的单元数開始将文件写到标准输出。假设值前面没有 +（加号）或 -（减号）。那么从文件末尾指定的单元号開始读取文件。 # tail -n 6 文件名称 == # tail -n -6 文件名称 21.grep命令 # grep ‘test’ d* 显示全部以d开头的文件里包括test的行。
仅掌握之前提到的最常用命令是不够的，比如就编译WRF模式来说，其中可能涉及到解压缩，权限修改，文件链接，环境变量。当然，如果编译之前不确定空间是否足够，就需要查看磁盘空间。而在编译的时候又会有一些需求，比如想后台编译，为了便于查错需要将编译输出信息保存，而不是输出到屏幕等等。
详见：[Linux 打印文本部分行内容（前几行，指定行，中间几行，跨行，奇偶行，后几行，最后一行，匹配行）]()
为了便于理解，本文从常用操作和概念开始讲起。虽然已经尽量做到简化，但是涉及到的内容还是有点多。在面试中，Linux 知识点相对于网络和操作系统等知识点而言不是那么重要，只需要重点掌握一些原理和命令即可。为了方便大家准备面试，在此先将一些比较重要的知识点列出来：
Linux每日一令：pwd查看路径 Linux每日一令：in -s L/P目录文件软链接 Linux每日一令：cd进出路径 Linux每日一令：ls命令 点击查看 Linux每日一令：mkdir 点击查看 Linux每日一令：rmdir 点击查看 Linux每日一令：上传下载文件命令rz、sz
在选择压缩算法的时候，首先要考虑的就是压缩比和压缩速率。压缩比主要是为了节省网络带宽和磁盘存储空间，而压缩速率主要影响吞吐量。
本系列为小白入门整个AI项目教程，主要涉及双系统的搭建，linux的使用，安装caffe-gpu版本，利用caffe实现目标检测，并移植模型到android移动端，也就是手机端进行目标检测，本篇为安装双系统的教程，本人保证为原创并使目前全网基本上最最详细的手把手教程
想要开始机器学习，首先要了解一下Linux系统，在众多发行版Linux系统中Ubuntu是一枝独秀，独有的打包安装方式，让我们安装双系统的流程非常简化。
Kafka 是比较常用的消息队列，我们都知道 Kafka 的吞吐量很大，即使是普通的服务器，Kafka也可以轻松支持每秒百万级的写入请求，超过了大部分的消息中间件，这种特性也使得Kafka在日志处理等海量数据场景广泛应用。
运维告警里比较常见的就是磁盘空间超过告警阀值的情况，遇到这种情况是最常见的，只要不影响业务以及不是快速占满磁盘的情况下，就可以慢慢着手解决问题。以下是比较常用的步骤。
6.关机操作（三个）： init 0 shutdown -h poweroff
linux 命令是对 Linux 系统进行管理的命令。对于 Linux 系统来说，无论是中央处理器、内存、磁盘驱动器、键盘、鼠标，还是用户等都是文件， Linux 系统管理的命令是它正常运行的核心，与之前的 DOS 命令类似。linux 命令在系统中有两种类型：内置 Shell 命令和 Linux 命令。
本系列为小白入门整个AI项目教程，主要涉及双系统的搭建，linux的使用，安装caffe-gpu版本，利用caffe实现目标检测，并移植模型到android移动端，也就是手机端进行目标检测，本篇为安装双系统的教程。
来源：机器学习算法与Python学习 本文为大家带来Linux系统中156个常用的命令。 linux命令是对Linux系统进行管理的命令。对于Linux系统来说，无论是中央处理器、内存、磁盘驱动器、键盘、鼠标，还是用户等都是文件，Linux系统管理的命令是它正常运行的核心，与之前的DOS命令类似。linux命令在系统中有两种类型：内置Shell命令和Linux命令。 命令功能说明线上查询及帮助命令 (2 个)man查看命令帮助，命令的词典，更复杂的还有 info，但不常用。help查看 Linux 内置命令
2) man(有问题找男人) man 是 Linux 提供的一个手册，包含了绝大部分的命令、函数使用说明。
linux 命令是对 Linux 系统进行管理的命令。对于 Linux 系统来说，无论是中央处理器、内存、磁盘驱动器、键盘、鼠标，还是用户等都是文件， Linux 系统管理的命令是它正常运行的核心，与之前的 DOS 命令类似。
链接：https://www.cnblogs.com/bananaaa/p/7774467.html
操作系统对应着老板，它既要对下管理好软件资源（手段），又要对上提供良好（稳定、安全、高效）的运行环境（目的）。
语法： find [路径] [选项] [文件名] 功能： 用于在文件树种查找文件，并作出相应的处理（可能访问磁盘） 常用选项：
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
