在linux下，一个目录下放了很多文件，还有其他的子目录，但是目录的大小却总是只有4096字节。这是怎么回事呢？来听听北理工林思佳同学的分享。
“too many open files”这个错误大家经常会遇到，因为这个是Linux系统中常见的错误，也是云服务器中经常会出现的，而网上的大部分文章都是简单修改一下打开文件数的限制，根本就没有彻底的解决问题。
https://www.cnblogs.com/huxiao-tee/p/4657851.html
文件储存在硬盘上，硬盘的最小存储单位叫做”扇区”（Sector）。每个扇区储存512字节（相当于0.5KB）。
以下测试都是在没有优化或修改内核的前提下测试的结果 1. 测试目的：ext3文件系统下filename最大字符长度 测试平台：RHEL5U3_x64 测试过程： LENTH=`for i in {1..255};do for x in a;do echo -n $x;done;done` touch $LENTH 当增加到256时，touch报错，File name too long linux系统下ext3文件系统内给文件/目录命名，最长只能支持127个中文字符，英文则可以支持255个字符 2. 测试目的：ext3文件系统下一级子目录的个数限制 测试平台：RHEL5U3_x64 测试过程： [root@fileserver maxdir]# for i in {1..32000};do mkdir $i;done mkdir: cannot create directory `31999': Too many links mkdir: cannot create directory `32000': Too many links ext3文件系统一级子目录的个数为31998(个)。 Linux为了cpu的搜索效率而规定的,要想改变数目大概要重新编译内核. 3. 测试目的：ext3文件系统下单个目录里的最大文件数 测试平台: RHEL5U3_x64 测试过程： 单个目录下的最大文件数似乎没什么特别限制，也是受限于所在文件系统的inode数限制： df -i或者使用tune2fs -l /dev/sdaX或者dumpe2fs -h /dev/sdaX查看可用inode数，后两个命令 输出结果是一样的，但是跟df所得出的可用inode数会有些误差，至今不明白什么原因。 网上常用两种解决办法： 1） 重新mkfs，ext3默认block大小4096 Bytes，block设置小一些inode数设置大一些 2） 使用loopback文件系统临时解决： 在/usr中（也可以在别处）创建一个大文件，然后做成loopback文件系统，将原来的文件移到这个 文件系统中，并将它mount到/usr下合适的位置。这样可以大大减少你/usr中的文件数目。但是系统 性能会有点损失。 4. 测试目的： 打开文件数限制（文件句柄、文件描述符） 测试平台： RHEL5U3_x64 ulimit -n 65535设置，或者/etc/security/limit.conf里设置用户打开文件数、进程数、CPU等
无论对Spark集群，还是Hadoop集群等大数据相关的集群进行调优，对linux系统层面的调优都是必不可少的，这里主要介绍3种常用的调优：
CentOS 7 之前，使用 service 命令来管理服务，7 之后使用 systemctl 命令来管理服务。 软件包安装的服务单元存储在 /usr/lib/systemd/system/
你好，我是 somenzz，可以叫我征哥，今天看到了一个很好的面试问题，分享给你。
为了不影响整个服务器的性能，每个Linux VPS的Inodes数目通常都有限制，Linux VPS如何查看Inodes数目？
文件是储存在硬盘上的，硬盘最小的存储单位叫做扇区sector，每个扇区存储512个字节。操作系统读取硬盘的时候，不会一个个扇区地读取，而是一次性地读取多个扇区，这个逻辑单位叫做块block。由多个扇区构成的快，才是文件存取的最小单位。块的大小，最常见的是4KB，即连续八个sector组成一个block。
课堂上芒果给大家介绍过Linux系统是一种典型的多用户系统，不同的用户处于不同的地位，拥有不同的权限。
索引节点（inode）是持久化存储到磁盘中的，而目录项（dentry）是由内核维护（目录项缓存）的。
inode是一个重要概念，是理解Unix/Linux文件系统和硬盘储存的基础。 我觉得，理解inode，不仅有助于提高系统操作水平，还有助于体会Unix设计哲学，即如何把底层的复杂性抽象成一个简单概念
最近团队一台机器老化了，准备做全量迁移，一不小心，就把100多个G的/data目录放到了新机器的/data/data目录下，上愁了，怎么削减一层data目录呢？难倒像Windows一样剪切过来吗？可是有100多个G啊？！抱着试试的心态，运行mv命令，没想到系统瞬间就完成了。为什么Linux可以这么快速剪切呢？这一切都要从Linux对文件的管理机制说起的。
inode是什么 理解inode，要从文件储存说起。 文件储存在硬盘上，硬盘的最小存储单位叫做”扇区”（Sector）。每个扇区储存512字节（相当于0.5KB）。 操作系统读取硬盘的时候，不会一个个扇区地读取，这样效率太低，而是一次性连续读取多个扇区，即一次性读取一个”块”（block）。这种由多个扇区组成的”块”，是文件存取的最小单位。”块”的大小，最常见的是4KB，即连续八个 sector组成一个 block。 文件数据都储存在”块”中，那么很显然，我们还必须找到一个地方储存文件的元信息，比如
原文:http://www.ruanyifeng.com/blog/2011/12/inode.html
命令：find 语法：find [搜索范围路径] -name 【文件名称】（根据文件名查找） find [搜索范围路径] -size [（+-）文件大小] （根据文件大小查找，大于+ 小于-） find [搜索范围路径] -user（文件的所有者） find [时间查找] [以天为单位] [以天为单位] 1 ctime、atime、mtime [以分钟为单位] 2 cmin、amin、mmin 。。。。。 描述：查
ls -l |grep "^-"|wc -l //验证了redhat好用 或 find ./company -type f | wc -l
XX系统，通过FTP给客户实时传送文件，正常逻辑是客户收到文件后，自动删除FTP服务器上的本地文件，但经常出现文件已经推送了，客户没删除文件的情况。每个文件其实是很小的，可能几K，但是量很大，1天几万个，以至于时间久了，本地积的文件就会很多。我们不说让客户怎么排查问题，单就这个现象，如果积了几百万的小文件，我们能做些什么？你可能会说，删了啊，确实应该删了，但是小文件多了，会产生什么影响？如果直接rm，你认为行么？
Linux系统下文件数据储存在"块"中，文件的元信息，例如文件的创建者、文件的创建日期、文件的大小等。这种储存文件元信息的区域就叫做inode，中文译名为"索引节点"。inode也占用硬盘空间，硬盘格式化的时候，操作系统自动将硬盘分成两个区域。一个是数据区，存放文件数据；另一个是inode区（inode table），存放inode所包含的信息。
Linux系统下文件数据储存在"块"中，文件的元信息，例如文件的创建者、文件的创建日期、文件的大小等。这种储存文件元信息的区域就叫做inode，中文译名为"索引节点"。
最近在做运维指标的梳理工作，其中一个就是Linux系统中的inode，这就想到了之前维护的某套系统，逻辑是将主机的报文，存储到本地文件，客户通过FTP下载这些文件，实现报文转发。这些文件很小，单个几K，但是量很大，一天数十万个，当时跟客户约定，他们提取文件后，负责自动删除下载成功的文件。但是经常碰到客户程序执行异常的场景，导致原始文件未删除，日积月累，虽然服务器的磁盘空间未满，但是文件系统inode满了导致磁盘不可用。
通过ulimit -n命令可以查看Linux系统里打开文件描述符的最大值，一般缺省值是1024，对一台繁忙的服务器来说，这个值偏小，所以有必要重新设置linux系统里打开文件描述符的最大值。那么应该在哪里设置呢？
我在知乎和公众号上都提到过，我 2012 在腾讯工作的时候写过一篇《Linux文件系统十问》。总有人问我这篇文章在哪里能看到，如今外网唯一的正版链接-腾讯学堂也挂了，网上能搜到的全是盗版。所以今天我干脆就正式给大家发一遍。
参考资料 https://www.bilibili.com/video/av15976434/#page=5 Linux工具快速教程 https://www.cnblogs.com/zengjs/p/3169473.html 文件压缩与解压 linux 查看目录下文件个数 基本指令 ls 统计某文件夹下文件的个数 ls -l |grep "^-"|wc -l 统计某文件夹下目录的个数 ls -l |grep "^ｄ"|wc -l 统计文件夹下文件的个数，包括子文件夹里的 ls -lR|grep "
长列表输出该目录下文件信息(注意这里的文件，不同于一般的文件，可能是目录、链接、设备文件等)
2、在Linux中，元数据中的inode号（inode是文件元数据的一部分但其并不包含文件名，inode号即索引节点号）才是文件的唯一标识而不是文件名。（例如对一个文件重命名(mv)但inode号仍相同）。
林纳斯·本纳第克特·托瓦兹（Linus Benedict Torvalds，1969年12月28日- ）也就是Linux之父：
lsof命令用于查看你进程开打的文件，打开文件的进程，进程打开的端口(TCP、UDP)。找回/恢复删除的文件。是十分方便的系统监视工具，因为lsof命令需要访问核心内存和各种文件，所以需要root用户执行。
补充说明： ulimit为shell内建指令，可用来控制shell执行程序的资源。
深度学习炼丹，当然少不了 GPU 和 Linux 系统了，部分朋友没有 GPU 的话只能租用远程服务器来训练，这样就少不了 Xshell 这样一款利器了，以下，我们就来介绍 Xshell 这款工具在深度学习的时候一些常用的功能和 Linux 命令。
这个一个 . 表示有隐藏文件，mkdir 在创建目录时，目录名前面加个点就表示创建隐藏文件 当然除了这个还有其他作用： . ：表示当前路径 .. ：表示上一级路径
1. linux的文件组织目录结构 linux的目录与window的区别 win以存储介质为主，主要以盘符及分区实现文件 管理，再下面才是目录。 linux以树形目录结构的形式来构造整个系统，每一个
数据库是基于操作系统的，目前大多数MySQL都是安装在linux系统之上，所以对于操作系统的一些参数配置也会影响到MySQL的性能，下面就列出一些常用的系统配置。
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 Fayson的github： https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 1.文档编写目的 ---- 在开发应用使用Hadoop提供的hadoop-client API来访问HDFS并进行本地调试，本篇文章Fayson主要介绍如何使用Java API访问Kerberos环境下的HDFS并为目录设置配额。 内容概述 1.环境准备 2.Kerberos环境为HDFS目录设置配额 3.
Linux，全称 GNU/Linux，是一套免费使用和自由传播的类 Unix 操作系统，是一个基于 POSIX 的多用户、多任务、支持多线程和多 CPU 的操作系统。伴随着互联网的发展，Linux 得到了来自全世界软件爱好者、组织、公司的支持。它除了在服务器方面保持着强劲的发展势头以外，在个人电脑、嵌入式系统上都有着长足的进步。使用者不仅可以直观地获取该操作系统的实现机制，而且可以根据自身的需要来修改完善Linux，使其最大化地适应用户的需要。 Linux 的基本思想有两点：一切都是文件；每个文件都有确定的用途。其中第一条详细来讲就是系统中的所有都归结为一个文件，包括命令、硬件和软件设备、操作系统、进程等等对于操作系统内核而言，都被视为拥有各自特性或类型的文件。至于说 Linux 是基于 Unix 的，很大程度上也是因为这两者的基本思想十分相近。
一、 文件数限制修改 1、用户级别 查看Linux系统用户最大打开文件限制： # ulimit -n 1024 (1) vi /etc/security/limits.conf mysql soft nofile 10240 mysql hard nofile 10240 其中mysql指定了要修改哪个用户的打开文件数限制。 可用'*'号表示修改所有用户的限制；soft或hard指定要修改软限制还是硬限制；10240则指定了想要修改的新的限制值，即最大打开文件数(请注意软限制值要小于或等于硬限制)。 (
在Linux系统内默认对所有进程打开的文件数量有限制（也可以称为文件句柄，包含打开的文件，套接字，网络连接等都算是一个文件句柄）
与传统的cp、tar备份方式相比，rsync具有安全性高、备份迅速、支持增量备份等优点，通过rsync可以解决对实时性要求不高的数据备份需求，例如定期的备份文件服务器数据到远端服务器，对本地磁盘定期做数据镜像等。
假如有一个用户在linux系统中编辑了一个文件，编辑完内容后，关闭编辑器时会问用户改如何命名这个文件，设置完名称之后会选择一个目录将该文件保存到指定目录下，在这个例子中包含了linux系统中与文件相关的三个组成部分
在理解inode之前，先了解下磁盘扇区，磁盘的最小单位，我们都知道，磁盘一个扇区是512个字节。磁盘读写是都是按照块来操作的，一个块一般是4K，也就是连续的8个扇区，以块为单位读写是为了提高性能。
2号linux de>ftp 10.10.10.1 根据提示输入用户名密码 get 单个文件 mget 多个文件 ls 查看远端主机目录 !ls 查看本地所在目录，ftp文件下载文件后会下载到本地de> 1号linux 搭好vsftp配置可参考本站文章 VSFTP给单用户绑定多个目录内有如何搭建vsftp的配置。
在Linux系统中一切皆可以看成是文件，文件又可分为：普通文件、目录文件、链接文件和设备文件。
文件系统，本身是对存储设备上的文件，进行组织管理的机制。组织方式不同，就会形成不同的文件系统。
文件系统 QQ截图20210711132523.png Linux主要使用的硬盘为SCSI硬盘 驱动器标识是sd“x” x为盘号 ，a是基本盘 b为基本从属盘 c为辅助主盘 d为辅助从属盘 一查看所有设备挂载情况 lsblk QQ截图20210711132843.png lsblk -f QQ截图20210711134027.png 二磁盘情况查询 df -h QQ截图20210711134315.png 查看指定目录的磁盘占用情况 du -h /目录 -a含文件 QQ截图20
学到linux上的软连接和硬链接，不得不了解inode，要想知道inode，不得不了解一些文件系统，至少是Linux文件系统
理解inode，要从文件储存说起。 文件储存在硬盘上，硬盘的最小存储单位叫做"扇区"（即：Sector）。每个扇区储存512字节（相当于0.5KB）。 操作系统读取硬盘的时候，不会一个个扇区地读取，这样效率太低，而是一次性连续读取多个扇区，即一次性读取一个"块"（block）。这种由多个扇区组成的"块"，是文件存取的最小单位。"块"的大小，最常见的是4KB，即连续八个 sector组成一个 block。 文件数据都储存在"块"中，那么很显然，我们还必须找到一个地方储存文件的元信息，比如文件的创建者、文件的创建日期、文件的大小等等。这种储存文件元信息的区域就叫做inode，中文译名为"索引节点"。 block中存储的就是文件的实际数据，比如说，照片，视频，音频等等，但是有一点需要注意！就是inode当中不包含文件名！一个文件的文件名，存储在上级目录的block中！ 其实inode和block之间的关系就像是一本书一样，inode是一本书的目录，一本书会有很多内容，一个知识点或者一个故事会占很多页，一个block就相当于书中的一页内容。
文件权限 ls命令结果介绍 -l中显示的内容如下： -rwxrw-r‐-1 root root 1213 Feb 2 09:39 abc - 第一个字符代表文件（-）、目录（d），链接（l）- 10个字符确定不同用户能对文件干什么 - 其余字符每3个一组（rwx），读（r）、写（w）、执行（x） - 第一组rwx：文件所有者的权限是读、写和执行 - 第二组rw-：与文件所有者同一组的用户的权限是读、写但不能执行 - 第三组r--：不与文件所有者同组的其他用户的权限是读不能写和执行 也可用数字表示为：r=4
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
