腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
2
回答
随着
写入
操作数量的增加,文件
写入
速度急剧减慢。
java
、
performance
、
file-io
将其增加到1 000 000 000,许多写操作要花费几十到数百毫秒,这大大降低了吞吐
量
。 这可能有很多不同的原因,就像我使用旋转
磁盘
驱动器或
磁盘
碎片一样。我能做些什么来避免加班吞吐
量
的突然下降吗?
浏览 4
提问于2014-05-21
得票数 1
回答已采纳
2
回答
Linux
上的
磁盘
IO模拟器
c
、
linux
、
database
、
performance
、
io
我想测试数据库性能,并了解数据库吞吐
量
(以每秒事务数表示)如何依赖于
磁盘
属性,如IO延迟和变化、
写入
队列长度等。理想情况下,我需要一个模拟器,它可以作为
磁盘
卷挂载,并将RAM
磁盘
封装到控制器中,允许在延迟、吞吐
量
、稳定性等方面设置所需的IO配置文件。我想知道
Linux
是否有这样的模拟器,或者用C语言编写它的最佳方式是什么?
浏览 1
提问于2014-06-20
得票数 1
1
回答
如何找出进程在
linux
中编写的额外元数据大小?
file-metadata
我目前正在对
linux
中的fsync与fdat异步进行比较,以
查看
在fsync中有多少数据被
写入
磁盘
。我尝试使用iotop并检查/proc//io文件,以检查它是否指示任何
写入
量大于所发出的
写入
量
的数据。 我编写了8KB块并使用fsync进行了刷新,并重复了1000次。但是,使用上述两种方法(iotop和/proc/pid/io),我得到的数据输出正好是8192000,这并不说明文件
写入
了多少
浏览 0
提问于2022-07-27
得票数 0
3
回答
为O_DIRECT编写优化
c++
、
c
、
linux
、
io
我正在尝试编写一个应用程序,它需要非常快地
写入
磁盘
。我已经达到了
写入
磁盘
的性能目标,这是很棒的。然而,我注意到这么快地
写入
磁盘
占用了大量的CPU时间:一个内核被耗尽,另一个内核达到80%,另一个核心的CPU时间是10-20%。因此,我听说O_DIRECT可以通过避免所有这些副本进入内核空间,然后复制到
磁盘
,从而减少CPU的消耗。 我运行了一个小测试程序,证实了这一点- CPU使用率下降到50%的一个核心-更好。然而,我的吞吐
量
从来没有像我在做正常的写,
浏览 5
提问于2011-07-25
得票数 4
3
回答
优化
Linux
磁盘
缓存行为以获得最大吞吐
量
linux
、
ftp
、
storage
、
cache
这是一个两个
磁盘
S-ATA2 2安装在一个大规模集成电路MegaRAID控制器.服务器也有24G内存。 我们需要用最大的吞吐
量
来镜像我们上一次上传的备份。用于“热”备份的RAID0为我们提供了大约260 MB/秒的
写入
和275 MB/秒的读取。一个大小为20 1GB的经过测试的tmpfs给我们大约1GB/秒的速度。这种吞吐
量
是我们所需要的。现在,我如何调优
Linux
的虚拟内存子系统,以便尽可能长时间地在内存中缓存上传的文件,而不将它们
写入
磁盘</em
浏览 0
提问于2012-02-15
得票数 12
回答已采纳
1
回答
单个RAID与多个文件系统的性能比较
raid
、
performance
、
filesystems
我试图为我的
Linux
服务器上的应用程序获得最大的顺序
磁盘
吞吐
量
。它有7个SATA
磁盘
,我可以使用硬件RAID控制器(HP RAID0 )将其放入一个RAID0或RAID5中。/mnt/g ( RAID/SATA控制器可以将每个
磁盘
分配给自己的一个
磁盘
卷)。 我有一个较大的数据应用程序,其中多个(最多10个)进程可能同时执行文件/对象的顺序
写入
和读取。我以前的印象是,RAID5的顺序吞吐
量
与
磁盘
浏览 0
提问于2016-06-16
得票数 0
1
回答
删除
磁盘
以确认它们未使用
linux
、
vmware-esxi
、
vmware-vsphere
背景:是否有办法断开vmdk文件以证明
磁盘
未被使用?这个想法是,如果我错了,
浏览 0
提问于2019-02-12
得票数 0
回答已采纳
2
回答
获取
磁盘
吞吐
量
的
Linux
命令
linux
我想知道我的
linux
机器的
磁盘
i/o等待,
磁盘
吞吐
量
指标。有没有什么
Linux
命令可以获取
磁盘
吞吐
量
?请帮帮我。
浏览 9
提问于2018-01-10
得票数 0
7
回答
在编写高带宽数据流时,如何最好地管理
Linux
的缓冲行为?
c++
、
c
、
linux
、
caching
、
streaming
我的问题是:我有一个在
Linux
下运行的C/C++应用程序,这个应用程序接收一个恒定速率的高带宽(~27MB/秒)数据流,它需要将其流式传输到一个或多个文件中。它运行的计算机是一台运行
Linux
的四核2 2GHz。文件系统是ext4,而
磁盘
是一个固态E-SATA驱动器,对于这个目的来说应该是足够快的。 问题在于
Linux
过于巧妙的缓冲行为。具体地说,
Linux
不是立即将数据
写入
磁盘
,也不是在我调用write()之后不久,而是将“
写入
浏览 0
提问于2009-11-18
得票数 8
回答已采纳
3
回答
如果将()
写入
同一页两次,
Linux
脏页写回行为
linux
、
linux-kernel
我理解默认的写()行为(如果没有使用O_DIRECT或O_SYNC打开文件,等等)在
Linux
上是缓存的,写-写操作在页面缓存中被推迟.考虑以下情况:( a)在发生辅助写()之前,会刷新前一个脏页。 ( b)前面的脏页被覆盖,pd刷新只在次要写()到
浏览 11
提问于2014-09-15
得票数 2
回答已采纳
5
回答
哪个NoSQL数据库用于极高的数据
量
mongodb
、
cassandra
、
redis
、
database
、
nosql
我正在
查看
NoSQL获取极高数据
量
的数据。目前,我们正在用MySQL存储网页文本的缓存版本,但数据库似乎很快就会变得巨大。 哪一个最适合我的要求?
浏览 13
提问于2011-05-29
得票数 4
回答已采纳
1
回答
GCP块存储文档中的“写分配”是什么?
google-cloud-platform
在块存储性能上阅读Google平台文档时,我遇到了一个术语“写分配”(用MB/s表示,因此这显然是一种吞吐量限制),在这里没有解释。在上下文中可以这样说:谷歌搜索这个词也没有产生任何有用的结果。 在块存储带宽限制中,“写分配”意味着什么?
浏览 0
提问于2020-05-27
得票数 1
1
回答
SQLIO及其标志
sql-server
I-(
磁盘
读取/秒和
磁盘
写入
/秒)-> IOPS,ii- (平均
磁盘
秒/读和平均
磁盘
秒/
写入
) -->延迟,iii-(平均
磁盘
字节/读取和平均
磁盘
字节/
写入
)->块大小,iv- (Avg./当前
磁盘
队列长度)->突出或等待IOPS,v- (
磁盘
读取字节/秒和
磁盘
写入</e
浏览 0
提问于2014-09-02
得票数 2
1
回答
运行sysctl.conf时,是否需要在
linux
下对MongoDB进行调优?
linux
、
mongodb
我们在MongoDB日志中看到了对
磁盘
的大量
写入
,有效地锁定了MongoDB很长一段时间。许多人在网上报道类似的问题,但我至今还没有找到好的答案。Tue Mar 11 09:42:49.818 [DataFileSync] flushing mmaps took 75264ms for 46 files 有很多模块要用到IO,这比我们在基准测试
浏览 2
提问于2014-03-12
得票数 2
回答已采纳
1
回答
ls -lh和du -h在使用截断时给出了不同的文件大小
files
、
ls
、
disk-usage
因此,对于一个文件,我尝试了这个:因此,数据被不断地
写入
yeslog。
浏览 0
提问于2020-11-13
得票数 0
回答已采纳
1
回答
为什么从node.js应用程序调用iostat会给我提供旧的信息?
javascript
、
linux
、
node.js
'iostat -md', function(err, stdout, stderr) { });从终端启动iostat会给出一个不同的数字,并对应于我正在
写入
磁盘
的数据
量
。
浏览 0
提问于2015-09-11
得票数 0
回答已采纳
1
回答
我能预测
磁盘
/RAID数组每分钟的最大
写入
量
吗?
sql-server
、
performance
、
raid
、
hard-drive
、
limitations
当我们接近高峰时,我看到每分钟的书写
量
在上升。随着时间的推移,随着我们向系统增加更多的用户,峰值逐渐增加。对于其他资源(如CPU、内存或
磁盘
空间),很容易看出最大值是多少,并确保在耗尽之前准备好额外的资源。是否有可能对每分钟的最大
写入
量
进行粗略的预测?或者,我是否只需要将
磁盘
写入
的数量加起来,看看什么时候开始失败,我假设
磁盘
队列将是我超过驱动器/数组能力的最好指示。==EDIT== 作为一些额外的细节,我正在运行Server 2005,而我对写操作如此感兴趣的
浏览 0
提问于2009-08-27
得票数 2
回答已采纳
1
回答
有没有办法在bulk_write上运行"explain“
mongodb
、
pymongo
我想分析一下我的bulk_write,因为它(目前)是我代码中最慢的部分。我知道在"find“上有"explain”操作,有没有办法在bulk_write上做呢?
浏览 3
提问于2021-03-01
得票数 0
1
回答
磁盘
持久化和复制?
java
、
apache-kafka
发送给Kafka的消息被
写入
磁盘
并复制以实现容错。 据说卡夫卡的吞吐
量
也很高,难道不写
磁盘
会影响性能吗?是否可以配置仅在内存中而不是在
磁盘
中有消息?
浏览 0
提问于2017-06-21
得票数 1
回答已采纳
3
回答
读取与
写入
时间
file-io
、
io
对于相同的数据
量
和相同的内存位置,哪个操作更耗时-从
磁盘
读取还是向
磁盘
写入
?
浏览 1
提问于2009-05-14
得票数 9
回答已采纳
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
对象存储
云点播
即时通信 IM
活动推荐
运营活动
广告
关闭
领券