伙伴们，开始本文之前给大家说个事情：由于最近坚持更新公众号文章，向大家推送学习内容，居然收到了微信客服的致电和来信，给开通了留言功能。有点小小的意外和开森！以后发布的文章大家就可以随时留言，希望大家多多留言提出宝贵意见哦！！！
今天讲一下文件系统，遇见过单个最大文件的问题，所以将此问题记录下来，希望对大家有用。
Linux：存在几十个文件系统类型：ext2，ext3，ext4，xfs，brtfs，zfs（man 5 fs可以取得全部文件系统的介绍）
问题现象：我们的软件执行在Windows server 2003系统上，软件是一个接受文件软件，将接受的文件存于一个目录下，当执行到一定的时候，大概目录下有10w个文件的时候，就弹出“无法创建目录或文件”对话框，这是是我们catch到的异常。
尤金·科岗和塔尔·利伯曼在Blackhat EU 2017上展示了一种称为"Process Doppelganging"的入侵检测规避技术，在这种方法中NTFS事务被用来创建一个包含我们的有效负载的虚拟文件，它用我们的有效负载创建一个新的NTFS内存段，然后回滚虚拟文件，使恶意软件只存在于内存中(我们新创建的部分)，然后这个部分可以被加载到一个新的进程中，并在伪装下执行，我们将在实际代码中看到这一点
当我们在桌面创建一个新的空文件的时候，往往都是一个0字节的空文件，那么这个空文件在不在文件系统中呢？如果在，又是否起到了占位作用呢？
记得十几年前还在用早期 Windows 系统的时候，每用一段时间系统都会变得很卡顿，这时候需要打开系统提供的下面的磁盘碎片整理程序，当碎片整理完成后会感觉到系统变得稍微流畅了一些。
安全地删除没有任何特殊属性的文件相对而言简单而直接：安全删除程序使用安全删除模式简单地覆盖文件。较为复杂的是安全地删除 Windows NT/2K 压缩、加密和稀疏文件，以及安全地清理磁盘可用空间。 压缩、加密和稀疏文件由 NTFS 以 16 群集块方式管理。如果某个程序向此类文件的现有部分写入数据，则 NTFS 会分配磁盘上的新空间来存储新数据，并在写入新数据后取消分配该文件先前占用的群集。NTFS 采取此保守方法的原因与数据完整性有关，而且对于压缩和稀疏文件，这样可以在出现新分配大于现有分配（新的压缩数
说明： 0. NAND Flash这块经常有人咨询，这里发布一个完整的解决方案，支持擦写均衡，坏块管理，ECC和掉电保护。 早期的时候我们是用的自己做的NAND算法，支持滑块管理，擦写均衡，实际测试效果不够好，容易出问题，所以放弃了。 1. 此例子仅支持MDK4.74版本，因为RTX，RL-FlashFS，RL-USB都是来自MDK4.74的安装目录，使用MDK4.74才是最佳组合。 2. RL-FlashFS本身支持擦写均衡，坏块管理，ECC和掉电保护。其中使用掉电保护的话，请开启配置文件中的FAT Journal。 3. 在前几年的时候，有客户反应使用RL-FlashFS写入文件多后会写入越来越慢，原因是没有正确配置，加大文件名缓冲个数即可。 4. 当前使用的短文件名的库，使用长文件名的话请更换为长文件名的库，也在MDK的安装目录里面。 5. RL-FlashFS是FAT兼容的文件系统，也就是说可以在window系统上面模拟U盘，提供的程序代码已经做了支持。 6. RL-FlashFS的文件名仅支持ASCII，不支持中文，这点要特别注意。 7. 首次格式化后使用，读速度2.3MB/S左右，写速度3.2MB/S左右，配置不同的文件系统缓冲大小，速度有区别。 8. RL-FlashFS的函数是标准的C库函数，跟电脑端的文件系统使用方法一样。 9. RL-FlashFS与FatFS的区别，FatFS仅是一个FAT类的文件件系统，擦写均衡，坏块管理，ECC和掉电保护都不支持。 这些都需要用户自己去实现。 10. UFFS，YAFFS这两款文件系统是不兼容FAT的，也就是无法在Windows端模拟U盘。 当前NAND的配置如下：
2016.09.06晚参加了CVTEC++岗的在线笔试。笔试题型分为不定向选择题和编程题，总共27题。其中不定项选择题为25道，编程题2道。其特点是不定项选择题不告诉你是单选还是多选，编程题不能复制黏贴，不用线上编译验证代码的正确性，提交代码即可！
今天在复制MAC系统文件时，系统弹出窗口提示“对于目标文件系统，文件XXX过大”。出现这种情况的原因是FAT32的文件系统不支持复制大于4g的单个文件，而NTFS则是支持大文件，所以我们可通过转换文件格式来解决问题，下面是Win10系统提示对于目标文件系统文件过大的具体解决步骤。
通常在制作云上使用的虚拟机时，如果不进行任何干预，安装出来的虚拟机默认是带有swap分区的，同时采用lvm来管理磁盘，通过这种方式制作出来的虚拟机镜像，直接在云上使用会有很多问题，其中一个就是根分区无法实现自动扩容，只能通过手工操作完成。而且在openstack中，swap分区通常是由一个单独的swap磁盘来提供，而不应该是做镜像的时候提供。
在Android手机的早期，几乎所有设备都依赖于使用microSD卡进行存储。这是由于当时的手机出厂时内部存储容量很小。但是，至少与内部闪存可以读取/写入数据的速度相比，用于存储应用程序的SD卡通常无法提供出色的用户体验。因此，越来越多地将SD卡用于外部数据存储，
硬件：本文SD卡为Kingston 4GB，FAT32格式，簇大小4KB，每扇区512字节。
最好能提供更多的细节，比如ubuntu版本号，u盘品牌及具体型号和容量，u盘格式化成了什么文件系统，大文件大致是多大，你过了多久忍不住拔掉的，usb口是2.0的还是3.0的，等等等等
点击下一步，选择其他，因为我们安装的既不是 win 也不是 Linux，是双系统：
cat /etc/filesystems 查看Centos 7可支持的文件格式。
由于各种不同的问题，我们经常会遇到需要将一个大文件分割存储的问题。比如github里单个文件大小一般不能超过100M、比如FAT32文件系统里单个文件大小不能超过4G，比如我们想把某一个数据文件分割存储和查看，比如对日志文件进行分割保存等等。
我们已经对连续分配的方式有了一定的了解，并且也清楚了它存在的问题和局限性。为了解决这些问题，非连续存放的方式应运而生。非连续空间存储大致可以分为两种形式：链表形式和索引形式。
有将近一周没有写文章了，经历了一场所有IT从业者的梦魇——数据丢失。一块1T的移动硬盘中，约500G的分区数据无故消失，想必挺多人都遇上过这种事，无奈，尽快尝试恢复，能恢复多少是多少了。
将文件属性从外存拷到内存中打开文件表的一表目中 将其编号返回给用户。 系统可利用该编号到打开文件表中去查找。
单个文件容量. 意思就是一个文件可以是多大的. NTFS 是可以4G以上的大文件. FAT32则不可以.
在LINUX系统中有一个重要的概念：一切都是文件。 其实这是UNIX哲学的一个体现，而Linux是重写UNIX而来，所以这个概念也就传承了下来。在UNIX系统中，把一切资源都看作是文件，包括硬件设备。UNIX系统把每个硬件都看成是一个文件，通常称为设备文件，这样用户就可以用读写文件的方式实现对硬件的访问。
文件系统是操作系统中负责管理持久数据的子系统，说简单点，就是负责把用户的文件存到磁盘硬件中，因为即使计算机断电了，磁盘里的数据并不会丢失，所以可以持久化的保存文件。
1、什么是NTFS－新(N)技术(T)文件(F)系统(S)？ 想要了解NTFS，我们首先应该认识一下FAT。FAT(File Allocation Table)是"文件分配表"的意思。对我们来说，它的意义在于对硬盘分区的管理。FAT16、FAT32、NTFS是目前最常见的三种文件系统。 FAT16：我们以前用的DOS、Windows 95都使用FAT16文件系统，现在常用的Windows 98/2000/XP等系统均支持FAT16文件系统。它最大可以管理大到2GB的分区，但每个分区最多只能有65525个簇(
内核、shell、文件系统和应用程序。内核、shell和文件系统一起形成了基本的操作系统结构，它们使得用户可以运行程序、管理文件并使用系统。部分层次结构如图1-1所示。
想要了解NTFS，我们首先应该认识一下FAT。FAT(File Allocation Table)是“文件分配表”的意思。对我们来说，它的意义在于对硬盘分区的管理。FAT16、FAT32、NTFS是目前最常
Linux系统一般有4个主要部分： 内核、shell、文件系统和应用程序。内核、shell和文件系统一起形成了基本的操作系统结构，它们使得用户可以运行程序、管理文件并使用系统。部分层次结构如图1-1所
内核、shell和文件系统一起形成了基本的操作系统结构，它们使得用户可以运行程序、管理文件并使用系统。部分层次结构如图所示。
Fat文件系统是sd卡常用的一种文件系统类型，在电脑上，我们可以把sd卡格式化成exfat类型或者ntfs类型。在linux系统里，我们可以用mkfs.vfat /dev/mmcblk0把sd卡格式化成fat文件系统类型，容量大于512M的默认会格式化成fat32，就是32位，除了fat32，还有fat12，fat16。 Fat文件系统是以簇为基本单元管理的，什么是簇？ 簇其实就是一连串的扇区，我们知道sd卡在格式化完后，通常一个sector为512字节，所以我们以常见情况假设一个sector为512字节，用winhex读sd卡的信息，可以看到，格式化完的fat32默认一个簇是8K，一个sector是512字节，也就是一个簇是16个sector，所以簇的本质其实就是一串扇区。Fat文件系统限制了最大簇为32K。
Linux系统一般有4个主要部分：内核、shell、文件系统和应用程序。内核、shell和文件系统一起形成了基本的操作系统结构，它们使得用户可以运行程序、管理文件并使用系统。
Hadoop分布式文件系统(HDFS)是指被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统（Distributed File System）。它和现有的分布式文件系统有很多共同点。但同时，它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。HDFS放宽了一部分POSIX约束，来实现流式读取文件系统数据的目的。HDFS在最开始是作为Apache Nutch搜索引擎项目的基础架构而开发的。HDFS是Apache Hadoop Core项目的一部分。----------来源于百度百科。
使用df或者ls命令查看Linux系统的磁盘设备，下图的sdb1就是我接入Ubuntu的一个SD卡，sda是系统硬盘（虚拟机的虚拟磁盘）。
SD卡是非常流行的存储设备，多用于手机、数码相机、摄像机等电子产品中。SD卡可以提供32G、128GB、256GB等不同的存储空间，用户可以根据自身需要选择使用。SD卡可以通过读卡器等与电脑USB连接传输数据。用于手机的SD卡，一般外观是1-2英寸大小，称作Micro SD卡，这种卡虽然外观小巧，但是仍可以为用户提供足够的存储空间，手机存储空间不足的情况，用户可以自己添加SD卡，存储照片、视频、音乐、应用程序等数据。
注：本分类下文章大多整理自《深入分析linux内核源代码》一书，另有参考其他一些资料如《linux内核完全剖析》、《linux c 编程一站式学习》等，只是为了更好地理清系统编程和网络编程中的一些概
http://blog.csdn.net/jnu_simba/article/details/11759809
操作系统维护了所有进程所打开的文件列表，文件表里的每一项都代表了一个文件描述符，每当我们打开文件时，都会往该表中添加一项。
文件系统是操作系统用于明确存储设备（常见的是磁盘，也有基于NAND Flash的固态硬盘）或分区上的文件的方法和数据结构；即在存储设备上组织文件的方法。操作系统中负责管理和存储文件信息的软件机构称为文件管理系统，简称文件系统。文件系统由三部分组成：文件系统的接口，对对象操纵和管理的软件集合，对象及属性。从系统角度来看，文件系统是对文件存储设备的空间进行组织和分配，负责文件存储并对存入的文件进行保护和检索的系统。具体地说，它负责为用户建立文件，存入、读出、修改、转储文件，控制文件的存取，当用户不再使用时撤销文件等。
操作系统中，用来管理和存储文件信息的软件机构称为文件管理系统，简称文件系统。具体来说，这部分系统就是负责为用户建立、读取、修改和转储文件，控制文件的存取，当用户不再使用时撤销文件等。
经过一系列的文章，我们终于完成了从实地址模式跳转到保护模式，并且实现了分段、分页以及保护模式下的中断与异常机制。 保护模式究竟“保护”了什么
龙芯的系统可以存放在 Nand Flash，SD 卡，U 盘，固态或者是网络加载，迅为的龙芯开发板核心板默认没有焊接 Nand Flash，是将文件系统存储在底板的固态硬盘上，这一章节我们将系统烧写到 U 盘，也可以称之为 U 盘启动。
当我们拿到一块新的硬盘时，他所能够支持的最大空间只是代表硬件上的一个参数，我们要想让他能够正常的工作起来，必须要有相应的文件系统。文件系统决定了文件存储和管理时的方式和数据结构，也就是如何管理磁盘上的文件和文件夹。不同的文件系统拥有不同的特点，这也就是为什么我们在进行格式化操作必须要选定一种文件系统的原因。当在一个操作系统（Windows、Linux、MacOS）中使用文件系统时，通常都会做一个统一的接口，来进行文件的读写，所以会存在某些文件系统只适用与某一种操作系统的情况。
服务器如果插入磁盘，如何对磁盘进行配置，分区，使用 在Linux系统中，如何有效地对存储空间加以使用和管理，是一项非常重要的技术
在操作系统启动的过程中，第一步启动的是Booter，由于我们需要找到Loader.bin这个引导文件，我们需要在软盘上实现一个FAT12文件系统，从而方便我们的文件管理。
当我们拿到一块新的硬盘时，他所能够支持的最大空间只是代表硬件上的一个参数，我们要想让他能够正常的工作起来，必须要有相应的文件系统。文件系统决定了文件存储和管理时的方式和数据结构，也就是如何管理磁盘上的文件和文件夹。不同的文件系统拥有不同的特点，这也就是为什么我们在进行格式化操作必须要选定一种文件系统的原因。 当在一个操作系统（Windows、Linux、MacOS）中使用文件系统时，通常都会做一个统一的接口，来进行文件的读写，所以会存在某些文件系统只适用与某一种操作系统的情况。
在早期的嵌入式系统中，需要存储的数据比较少，数据类型也比较单一，往往使用直接在存储设备中的指定地址写入数据的方法来存储数据。然而随着嵌入式设备功能的发展，需要存储的数据越来越多，也越来越复杂，这时仍使用旧方法来存储并管理数据就变得非常繁琐困难。因此我们需要新的数据管理方式来简化存储数据的组织形式，这就是文件系统的由来。
一 、mount命令（用来挂载硬盘或镜像等） 用法：mount [-t vfstype] [-o options] device dir 1、-t vfstype 指定文件系统的类型，通常不必指定。mount 会自动选择正确的类型。常用类型有： DOS fat16文件系统：msdos Windows 9x fat32文件系统：vfat Windows NT ntfs文件系统：ntfs Windows网络文件共享：smbfs （默认的windows系统都支持的） windows网络共享文件：cifs （cif
目前，计算机市场提供了大量以数字形式存储信息的机会，现有的存储设备包括内部和外部硬盘驱动器、照片/摄像机的存储卡、USB 闪存驱动器、RAID 集以及其他复杂存储。数据片段以文件的形式保存在它们上，如文档、图片、数据库、电子邮件等，这些数据必须在磁盘上有效地组织并在需要时轻松检索。
在我和实际使用中，字符集用utf8效果很好，没有出现乱码的问题，在终端挂载的代码如下： mount -t vfat /dev/hda2 /mnt/d -o codepage=936,iocharset=utf8 我的fstab # /etc/fstab: static file system information. # # <file system> <mount point> <type> <options> <dump> <pass> proc /proc proc defaults 0 0 /dev/hdc8 / ext3 defaults,errors=remount-ro 0 1 /dev/hdc9 none swap sw 0 0 /dev/hdb /media/cdrom0 udf,iso9660 user,noauto 0 0 /dev/hdc1 /mnt/winc vfat defaults,codepage=936,iocharset=utf8 0 0 /dev/hdc5 /mnt/wind ntfs defaults,iocharset=utf8,umask=0222 0 0 /dev/hdc6 /mnt/wine ntfs defaults,iocharset=utf8,umask=0222 0 0 /dev/hdc7 /mnt/winf vfat defaults,codepage=936,iocharset=utf8 0 0 (以下转自网络) 1、挂载点必须是一个目录。 2、一个分区挂载在一个已存在的目录上，这个目录可以不为空，但挂载后这个目录下以前的内 容将不可用。 对于其他操作系统建立的文件系统的挂载也是这样。但是需要理解的是：光盘、软盘、其他操作 系统使用的文件系统的格式与linux使用的文件系统格式是不一样的。光盘是ISO9660；软盘是 fat16或ext2；windows NT是fat16、NTFS；windows98是fat16、fat32；windows2000和 windowsXP是fat16、fat32、NTFS。挂载前要了解linux是否支持所要挂载的文件系统格式。 挂载时使用mount命令： 格式：mount [-参数] [设备名称] [挂载点] 其中常用的参数有 -t<文件系统类型> 指定设备的文件系统类型，常见的有： minix linux最早使用的文件系统 ext2 linux目前常用的文件系统 msdos MS-DOS的fat，就是fat16 vfat windows98常用的fat32 nfs 网络文件系统 iso9660 CD-ROM光盘标准文件系统 ntfs windows NT 2000的文件系统 hpfs OS/2文件系统 auto 自动检测文件系统 -o<选项> 指定挂载文件系统时的选项。有些也可用在/etc/fstab中。常用的有 codepage=XXX 代码页 iocharset=XXX 字符集 ro 以只读方式挂载 rw 以读写方式挂载 nouser 使一般用户无法挂载 user 可以让一般用户挂载设备 提醒一下，mount命令没有建立挂载点的功能，因此你应该确保执行mount命令时，挂载点已经存 在。（不懂？说白了点就是你要把文件系统挂载到哪，首先要先建上个目录。这样OK？） 例子：windows98装在hda1分区，同时计算机上还有软盘和光盘需要挂载。 # mk /mnt/winc # mk /mnt/floppy # mk /mnt/cdrom # mount -t vfat /dev/hda1 /mnt/winc # mount -t msdos /dev/fd0 /mnt/floppy # mount -t iso9660 /dev/cdrom /mnt/cdrom 现在就可以进入/mnt/winc等目录读写这些文件系统了。 要保证最后两行的命令不出错，要确保软驱和光驱里有盘。（要是硬盘的磁盘片也可以经常随时 更换的话，我想就不会犯这样的错误了 :-> ） 如果你的windows98目录里有中文文件名，使用上面的命令挂载后，显示的是一堆乱码。这就要 用到 -o 参数里的codepage iocharset选项。codepage指定文件系统的代码页，简体中文中文代 码是936；io
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
