一、引言 本文的目标是帮助大家深入理解Android系统资源异常之文件描述符异常，对于文件描述符异常的通用检测机制，当前包括fdtrack和fdsan两种机制展开剖析。...通过阅读本篇文章，期望读者可以了解到： 1）什么是文件描述符 2）linux kernel中如何使用文件描述符，来管理进程打开文件资源 3）android fdsan机制设计思路与实现 4）android...什么是文件描述符 文件描述符，即file descriptor，缩写为fd。 对于linux内核，所有打开的文件都是通过文件描述符引用，文件描述符实现为一个非负整数。...中的一张图片来直观说明这种关系： 三、fdsan机制介绍 1. fdsan简介 (1) fdsan是什么 file descriptor sanitizer的缩写，是Android在Q版本中引入的一种文件描述符异常检测机制...属主信息一致），符合就继续走正常文件关闭流程；如果不符合就是检测到异常，根据设置，调用对应的异常处理。
最近由于机缘巧合，结合最近工作中遇到的一些问题，深入了解了文件描述符(File Descriptor，简称FD，以下使用 FD 称谓)。预计会有两到三篇关于 FD 的文章陆续出来。...概念定义 文件描述符 是 用来访问资源(文件，输入输出设备等)的一种抽象指示符。...文件描述符 是POSIX(Portable Operating System Interface)规范的组成部分 文件描述符 通常是非负整数，C 语言中使用int类型。...FD 具体可以指向什么 文件/目录 files/directories 输入输出源 input/output 管道 pipes 套接字 sockets 其他 Unix 文件类型 other Unix files...同一路径 与 FD 关系 同一文件，多次打开，FD值不同 同一文件，读写模式不同打开，FD值也不同 打开文件过多会怎样 open返回值会出现-1 通常会导致进程无法进行，甚至是崩溃 示例验证代码 如下代码可以验证上述问题中的结论
1.概述 在实际工作中会经常遇到一些bug，有些就需要用到文件句柄，文件描述符等概念，比如报错： too many open files, 如果你对相关知识一无所知，那么debug起来将会异常痛苦。...而文件描述符的个数为90： ? 7. 文件描述符（file descriptor） 对于linux而言，所有对设备和文件的操作都使用文件描述符来进行的。...系统为每一个进程维护了一个文件描述符表，该表的值都是从0开始的，所以在不同的进程中你会看到相同的文件描述符，这种情况下相同文件描述符有可能指向同一个文件，也有可能指向不同的文件。...进程级的文件描述符表 2. 系统级的打开文件描述符表 3....FILE结构包括一个缓冲区和一个文件描述符。而文件描述符是文件描述符表的一个索引，因此从某种意义上说文件指针就是句柄的句柄（在Windows系统上，文件描述符被称作文件句柄）。
文件描述符限制 文件描述符 Linux的核心思想之一就是”一切皆文件”。...文件描述符（文件句柄）是Linux内核为了高效管理已被打开的文件所创建的索引，它是一个非负整数，用于指代被打开的文件。文件打开后，所有对该文件的操作都通过文件描述符进行操作。...文件描述符是系统的重要资源，当打开过多文件时会出现把系统内存耗尽的情况，所以Linux提供了多种维度对文件描述符的使用上限进行限制，以避免该问题。...文件描述符限制 file-max file_max用于限制整个系统能够分配的文件描述符，即当前系统下所有用户下的所有进程，其分配的所有文件描述符之和不能超过该值。...,它记录了当前系统中文件描述符的使用情况，第一个（6144）是系统已经分配的文件描述符数；第二个（0）是系统已经分配但未使用的文件描述符数；第三个是内核最大能分配的文件描述符数，与file-max一致。
不同位置的变量在内存中的排布”，其中在内核地址空间中，维护着一个 PCB 进程控制块，其中包含很多进程相关的信息，比如进程ID、用户ID、组ID等等，但本文我们最关注的，是 PCB 进程控制块中维护的一份“文件描述符表...图片 图中右侧表示的，就是我们今天讨论的主题“文件描述符表”，其内部有0~1023个id可以提供用户申请分配，每当用户使用一个 open 操作打开一个文件时，都会返回一个文件描述符，比如如下代码：...int nRet = open("/dev/zero", O_RDONLY); 这句代码会在当前进程内核区文件描述符表中申请一个新的文件描述符赋值给nRet值，系统默认情况下会帮我们打开三个文件描述符，...每一个系统对于文件描述符的数量限制是不同的，我们可以通过 ulimit -a 命令查看默认的系统限制是多少： 图片 当然我们也可以修改这个值，使用命令 ulimit -n 2048，就可以将 open...file 的值设定为2048了，这样我们每个程序就可以打开0~2047个文件描述符了（这种情况很少见）。
, 比如文件、资源、菜单、光标、位图等 那么,现在你应该可以理解文件描述符的含义了 文件描述符 之于文件系统(操作系统中的一切都是文件描述符 可以使用文件描述符描述任何一个资源对象 就如同...文件描述符的主要实际用途是创建一个包含该结构的 FileInputStream 或 FileOutputStream。 应用程序不应创建自己的文件描述符。...其实说白了,就是文件描述符的实例,就是用来表示文件的一个指针/索引....显然不行,必须是运营商提供给你的 我们的文件描述符,也是如此,应用程序不应该创建自己的文件描述符 他的构造方法,只能创建一个无效的文件描述符 不应该创建自己的文件描述符,可以直接理解为:...注释中也说的很清楚,文件描述符一般不直接使用通过使用System.in System.out System.err 文件描述符在System类中的应用 在System 中 in out err
在Linux编程世界中，不可能没听过文件描述符这个概念，我们操纵任何设备的时候，几乎都要通过它来达成的，它究竟是何方神圣呢？随我描述符科学家来一探究竟。...首先，我们在Linux下打开文件用的都是如下代码： int fd = open(... ...); 当然有同学可能会说，有时也可以用fopen()，但是fopen()只是标准IO对系统IO的封装，归根结底还是使用...open()来打开一个文件。...很多人就想当然地以为打开嘛，就跟在windows下双击一个文件，或者双击一个文件夹一样，就是一个动作而已，其实不然，常说的打开一个文件实际上最重要的是获取这个文件的描述符，描述符是用来表征这个文件的代表物...内核空间中有一堆数据结构表达一个文件的属性信息，但是用户空间看不见，只看见一个代表了这些信息的整数i，通常我们称之为文件描述符，对文件的读写和ioctl操作都是通过这个东东来达到的呢！
用文件描述符来标识每个文件对象。...那么我们可以把上面表格中的文件描述符0理解为我和计算机交互时的输入，而这个输入默认是指向键盘的; 文件描述符1理解为我和计算机交互时的输出，而这个输出默认是指向显示器的；文件描述符2理解为我和计算机交互时...因此文件描述符3也指向了显示器。然后，我们修改了文件描述符1指向的文件到test文件。...接着两个echo命令的输出会自然去找文件描述符1，然后它看到文件描述符1指向的是test文件，所以它会把输出写到test文件中。...最后，我们用&来找到文件描述符3指向的目标文件，也就是显示器，然后我们修改了文件描述符1指向的文件到显示器。因此，最后一个echo命令会自然的找文件描述符1然后输出到显示器上。
在Linux操作系统中，一切皆是文件—— "Everything is a file"。 如果要在Linux系统中编写操作文件的代码，需要借助文件描述符。...文件的索引——文件描述符（file descriptor）： 文件描述符是一个非负整数，当程序打开一个现有文件或者创建一个新文件时，内核向进程返回一个文件描述符。...文件描述符就是内核为了高效管理已被打开的文件所创建的索引值。 文件描述符指向内核为每一个进程维护的打开文件记录表。当要处理文件时，将文件对应的文件描述符作为参数传给函数。...文件描述符在用户进程和内核之间的映射关系： Linux中查看文件描述符的指令：lsof（list open files） lsof可以打开的文件： 普通文件 目录 网络文件系统的文件 字符或设备文件...- O_TRUNC 如果文件已存在，并且以只写或可读可写方式打开，则将其长度截断为0字节 [mode_t mode] : 文件权限，只有在创建文件时需要使用 return: 文件描述符
一.简介 每个进程开启一个soeket连接，都会占用一个文件描述符。 文件描述符的唯一性是进程+文件描述符ID确定的。...文件描述符（file descriptor）是内核为了高效管理已被打开的文件所创建的索引，其是一个非负整数（通常是小整数），用于指代被打开的文件，所有执行I/O操作(包括网络socket操作)的系统调用都通过文件描述符...如果此时去打开一个新的文件，它的文件描述符会是3。POSIX标准要求每次打开文件时（含socket）必须使用当前进程中最小可用的文件描述符号码，因此，在网络通信过程中稍不注意就有可能造成串话。...这主要是因为文件描述符是系统的一个重要资源，虽然说系统内存有多少就可以打开多少的文件描述符。...在Web服务器中，通过更改系统默认值文件描述符的最大值来优化服务器是最常见的方式之一。
三.内核维护的3个数据结构 1.进程级的文件描述符表 2.系统级的打开文件描述符表 3.文件系统的i-node表 进程级的描述符表的每一条目记录了单个文件描述符的相关信息。...控制文件描述符操作的一组标志。...进程A的文件描述符2和进程B的文件描述符2都指向了同一个打开的文件句柄（标号73）。...四.总结 由于进程级文件描述符表的存在，不同的进程中会出现相同的文件描述符，它们可能指向同一个文件，也可能指向不同的文件 两个不同的文件描述符，若指向同一个打开文件句柄，将共享同一文件偏移量。...文件描述符标志（即，close-on-exec）为进程和文件描述符所私有。对这一标志的修改将不会影响同一进程或不同进程中的其他文件描述符
前言 在前文中学习了open函数，我们知道open函数的返回值就是文件描述符，本章将对文件描述符进行详细讲解。 文件描述符 文件描述符是什么？...内存中一定是存在多个被打开的文件的，那么如何知道哪些文件是哪个进程打开的呢？这里就谈到了文件描述符。如下： 简单来说：文件描述符就是一个进程与该进程所打开文件建立索引关系的数组（文件描述符表）下标。...通过文件描述符，也就是该进程对应的的文件描述符表所对应的下标。就可以找到该进程所打开的各个文件。 我们再来看如下现象： 为什么文件描述符是从3开始的呢？...文件描述符分配规则 文件描述符的分配规则为从0开始，扫描文件描述符表中，没有被使用的数值最小的下标，作为新打开文件的文件描述符。...文件描述符是必不可少的存在，本质上来说，访问文件都是通过文件描述符来进行访问。
fd.pdf 众所周知，子进程会继承父进程已经打开的文件描述符fd，但是fork之后的是不会被继承的，这个时候是否无能无力了？答应是NO。...Linux提供了一个系统调用sendmsg，借助它，可以实现进程间传递文件描述符fd，而且不仅限于父进程到子进程。
介绍在Linux系统中，fd命令是一条用于显示文件描述符（File Descriptor）的命令。文件描述符是操作系统用于跟踪和管理打开文件的整数值，它是对打开文件的引用。...示例4.1 显示文件描述符编号和路径使用fd -f命令可以显示当前进程的文件描述符编号和对应的文件路径。...0、1和2是字符设备（character device）类型的文件描述符，文件描述符3和4是普通文件（regular file）类型的文件描述符。...4.4 显示所有文件描述符的详细信息使用fd -e命令可以显示当前进程的所有文件描述符的详细信息，包括文件描述符编号、打开模式、文件路径等。...总结Linux fd命令是用于显示文件描述符的实用命令。通过fd命令，我们可以查看当前进程所打开的文件描述符及其相关信息，包括文件描述符的编号、打开模式、文件路径等。
又写入了两行，它们被添加到文件programming.txt末尾。 三，异常 Python使用被称为异常的特殊对象来管理程序执行期间发生的错误。...每当发生让Python不知所措的错误时，它都会创建一个异常对象。如果编写了处理该异常的代码，程序将继续运行。如果未对异常进行处理，程序将停止，并显示一个traceback，其中包含有关异常的报告。...异常是使用try-except代码块处理的。try-except代码块让Python执行指定的操作，同时告诉Python发生异常时怎么办。...使用了try-except代码块时，即便出现异常，程序也将继续运行：显示你编写的友好的错误消息，而不是令用户迷惑的traceback。 1.处理ZeroDivisionError异常 ?...3.使用异常避免崩溃 发生错误时，如果程序还有工作没有完成，妥善处理错误就很重要。
中的普通变量var，可以通过$var的形式获得该变量所代表的值，而对于一个文件描述符fd，则可以通过&fd的形式获得文件描述符指向的文件的句柄，而这个句柄可以简单地理解成该文件的路径。...在 Shell 编程里经常会用到重定向操作, 它本质上是对文件描述符进行操作, 本文会对 Shell 脚本里的文件描述符做一个详细的介绍....默认标准文件描述符 每个进程启动时默认都会有三个标准的文件描述符: stdin 0 号描述符, 代表输入设备, 进程从它读入数据; stdout 1 号描述符, 进程往其中写入数据; stderr 2...默认的文件描述符也是可以被替换的, 例如我们可以替换掉 stdout 到一个文件, 这样命令的输出就不是打印到终端, 而是被输出到文件中: ?...文件描述符的操作 Shell 中对文件描述符的操作由三部分组成: (Left, Operation, Right): Left 可以是 0-9 的数字, 代表第 n 号文件描述符; Left 还可以为
maxsyslogins/priority/locks/sigpending/msgqueue/nice/rtprio/ value: -1/unlimited/infinity/ 具体值 要修改最大文件描述符重点在于...item和value 2.修改 ---- 2.1 先查看当前用户最大文件描述符数量： 1 ulimit -Hn 2 ulimit -Sn 2.2 修改当前用户进程的最大文件描述符数量： 1 vim
3、中断描述符表 在实地址模式中，CPU 把内存中从0 开始的1K 字节作为一个中断向量表。...其中类型占3 位，表示门描述符的类型，这些描述符如下。...最后，在保护模式下，中断描述符表在内存的位置不再限于从地址0 开始的地方，而是可以放在内存的任何地方。为此，CPU 中增设了一个中断描述符表寄存器IDTR，用来存放中断描述符表在内存的起始地址。...中断描述符表寄存器IDTR 是一个48 位的寄存器，其低16位保存中断描述符表的大小，高32 位保存IDT 的基址，如图3.3 所示。 ?...CS : EIP 的值就是IDT 表中第i 项门描述符的段选择符和偏移量的值，此时，CPU 就跳转到了中断或异常处理程序。
今天介绍下什么是文件描述符(File Description) 每天多知道一点点 由于是纯理论知识，所以分点来总结： 1、概念：文件描述符是操作系统内核用于管理已经打开的文件而创建的索引。...它是一个非负整数 2、描述符 0 表示标准输入、1 是标准输出、2 是标准错误，所以新打开一个文件是从 3 开始索引 3、每个描述符一定会对应一个打开的文件，而不同的描述符(即索引值)也可能指向同一个打开的文件...原因是同一个文件可以在多进程中打开，而系统为每个进程都维护了一个文件描述符表，这个表都是从 0 开始索引的 4、重点：如何查看当前进程下文件描述符 #pid为进程号 /proc/$pid/fd #lsof...命令 COMMAND：进程的名称 PID：进程标识符 USER：进程所有者 FD：文件描述符，应用程序通过文件描述符识别该文件。...如cwd、txt等 TYPE：文件类型，如DIR、REG等 DEVICE：指定磁盘的名称 SIZE：文件的大小 NODE：索引节点（文件在磁盘上的标识） NAME：打开文件的确切名称 5、文件描述限制
在实际开发中，常常需要对程序中的数据进行持久化操作，而实现数据持久化最直接简单的方式就是将数据保存到文件中。...说到“文件”这个词，可能需要先科普一下关于文件系统的知识，对于这个概念，维基百科上给出了很好的诠释，这里不再浪费笔墨。...在Python中实现文件的读写操作其实非常简单，通过Python内置的open函数，我们可以指定文件名、操作模式、编码信息等来获得操作文件的对象，接下来就可以对文件进行读写操作了。...这里所说的操作模式是指要打开什么样的文件（字符文件还是二进制文件）以及做什么样的操作（读、写还是追加），具体的如下表所示。...操作模式 具体含义 'r' 读取 （默认） 'w' 写入（会先截断之前的内容） 'x' 写入，如果文件已经存在会产生异常 'a' 追加，将内容写入到已有文件的末尾 'b' 二进制模式 't' 文本模式（
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
