linux平台下的写文件刷新

c语言libc库自带的fflush和linux的sync、fsync、fdatasync,字面上都是刷新缓冲区数据到磁盘(当然,fflush还可以刷新缓冲区数据到标准输入、输出以及错误输出)。下面就分析一下上面提到的四个函数的区别。

一、c语言fflush和linux的sync、fsync、fdatasync的区别

1.接口基本不同

  • fflush是libc库中提供的函数,平台无关,只有在你使用到c语言的标准文件(FILE)操作时,才涉及fflush。
  • sync、fsync、fdatasync是系统提供的系统调,平台相关。

2.原形

  • fflush接受一个参数FILE *. fflush(FILE *);
  • sync、fsync、fdatasync的函数原型如下(fd表示文件描述符)。 sync(); fsync(int fd); fdatasync(int fd);

3.功能

  • fflush: 是把C语言FILE的缓冲区中要写入文件的内容刷到操作系统的写入缓冲区中(其实是写到内核的缓冲区,即 页高速缓存)。注意:FILE的缓冲区实际就是libc库在用户空间的栈上申请的一块内存。
  • sync、fsync、fdatasync:是把内核的缓冲区(即 页高速缓存)中要写到磁盘中的数据刷到磁盘上。 下面引用一个比较形象的流程示例: FILE缓冲-----fflush---------〉内核缓冲--------fsync-----〉磁盘

二、sync、fsync、fdatasync之间的区别

传统的UNIX系统在内核中设有页高速缓存,磁盘I/O的数据一般都通过这个缓存区。(所有增加缓存的目的显然都是协调两个速度不匹配的操作或者设备,这样就会很大程度缓解慢设备对快设备的拖累。)当我们向文件写入数据时,内核通常会先将数据复制到页告诉缓存中,然后将这些缓存页的地址排入队列,晚些时候再写入磁盘。这种方式被称为延迟写

1、sync和fsync、fdatasync的区别

  • sync只是将页高速缓存中所有修改过的块的地址排入写入队列,然后返回,他并不等待实际写磁盘操作结束。
  • fsync、fdatasync只对参数fd指定的一个文件起作用,并且等到写磁盘结束才返回。 这两个系统调用一般用于数据库这样的应用程序,这种应用需要确保修改过的块立即写到磁盘上。

2、fsync和fdatasync的区别

  • fsync不仅会讲数据写入磁盘上文件的数据(data)部分,还会将要更改的文件属性也刷到磁盘上的文件元数据(inode)部分。
  • fdatasync只影响文件的数据部分。

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏腾讯云数据库团队的专栏

Elasticsearch源码分析-写入解析

Elasticsearch(ES)是一个基于Lucene的近实时分布式存储及搜索分析系统,其应用场景广泛,可应用于日志分析、全文检索、结构化数据分...

1253
来自专栏云成本管理

云成本管理方法论(三)——云优化管理之判定规则

云优化管理四个管理维度中管理时点在通用管理模型基础上不需要额外补充,所以主要说明其他三个维度(管理对象、判定规则和管理措施)。另外,为了贴近我们熟悉的优化概念,...

47820
来自专栏Elasticsearch实验室

Elasticsearch 底层系列之写入解析

Elasticsearch(ES)是一个基于Lucene的近实时分布式存储及搜索分析系统,其应用场景广泛,可应用于日志分析、全文检索、结构化数据分析等多...

850
来自专栏星汉技术

原 Spark Shuffle

3985
来自专栏好好学java的技术栈

java基础提升篇:深入浅出Java多线程

1002
来自专栏庄涵的专栏

图文解析spark2.0核心技术

spark2.0于2016-07-27正式发布,伴随着更简单、更快速、更智慧的新特性,spark 已经逐步替代 hadoop 在大数据中的地位,成为大数据处理的...

2K1
来自专栏架构师之路

一分钟了解mongoDB(HR都懂了)

一分钟了解mongodb(2014-11-09) 一、mongo的由来 截取自英文俚语humongous,意为”巨大的”,是否表明mongodb在设计之初就是为...

2805
来自专栏铭毅天下

干货 | Elasticsearch索引生命周期管理探索

Elasticsearch上海Meetup中ebay工程师提了索引生命周期管理的概念。的确,在Demo级别的验证阶段我们数据量比较小,不太需要关注索引的生命周期...

752
来自专栏偏前端工程师的驿站

深入线程

前言                                         在校时认识的线程就是获取CPU执行时间的最小单位,多个线程共享所在进程的资...

18110
来自专栏程序之美

第十一节 netty前传-NIO 和IO对比

两者有两点最明显也是最主要的区别 IO:面向流、阻塞模式 NIO:面向缓冲、非阻塞模式

704

扫码关注云+社区