腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
will tcp_cork和tcp_nodelay有助于提高scoket编程在
c
#中的性能
c
、
sockets
我的文件
系统
中有小文件和
大文件
(8k到100 gb)的组合,我需要使用
c
中的套接字编程在具有4个套接字的1 gb网络上传输它们,以使用大部分网络。我设置了选项tcp_cork和tcp_nodelay以提
高性能
(MB/s).But,无论我是否设置这些选项,我都看不到显着差异。在这种情况下,这两个选项将是有用的.Is,我们真正转移的块。
浏览 1
提问于2015-04-29
得票数 0
1
回答
跳过59 by文件的前半部分以处理后半部分:逐行
读取
,还是fgetpos?
c++
、
genome
、
fgetpos
、
large-data
fastq文件是基因组学从测序仪
读取
的文件。每4行是一个新的
读取
,但是这些行的大小是可变的。“--跳过105M --qupto 105M” 这本质上意味着“跳过前105M次
读取
,只处理下一次105M次
读取
”。它只是像往常一样
读取
前1.05亿次
读取
,但不会处理它们。然后,一旦达到给出的
读取
值,它就开始比
浏览 1
提问于2012-09-28
得票数 0
回答已采纳
1
回答
使用FileChannel
读取
区块/流传输文件
java
、
nio
因此,我需要从
系统
的硬盘中
读取
文件。当然,我必须处理小文件和
大文件
,我希望以最快和最
高性能
的方式做到这一点。现在我有了下面的代码,我想问问那些对高效
读取
(大)文件有很多知识的“大个子”们,看看我这样做的方式是否正确: RandomAccessFile fis = new RandomAccessFile(filename
浏览 10
提问于2018-09-08
得票数 0
1
回答
在StorageFile上找不到OpenSequentialWriteAsync()方法
win-universal-app
、
c++-winrt
这是用
C
++/winRT编写的,它最终将取代
C
++/CX。下面3行代码位于应该是对OpenSequentialWriteAsync()的请求之前。
浏览 1
提问于2017-03-23
得票数 0
2
回答
如何提高大量较小的文件读写速度或性能
c#
、
.net
、
performance
、
io
、
filesystems
在我的性能测试显示(写入和
读取
测试、1000个文件和总大小为220米)中,FILE_FLAG_NO_BUFFERING无法帮助我提
高性能
,并且比.net默认磁盘缓存低,因为我尝试将FILE_FLAG_NO_BUFFERING在此之前,我尝试使用mongodb的gridfs功能来代替windows文件
系统
,这并不好(而且我不需要使用分布式特性,只需要品味)。在我的产品中,服务器可以通过tcp/ip在每秒获得大量较小的文件(60-100k),然后将其保存到磁盘上,然后第三次服务
读取
这些文件一次(只
读取</em
浏览 3
提问于2012-01-02
得票数 3
回答已采纳
1
回答
C
/
C
++中文件描述符的有效使用
c++
、
file-descriptor
我正在使用
C
++从我的客户端
系统
中备份文件。每时每刻,我的客户端机器上的文件都在泛滥,我必须为要写入服务器的每个文件获取文件描述符。我有一个
C
++套接字侦听器,每个客户机都连接到服务器并开始上传文件。可以用有限的文件描述符写多个文件吗?我试着把所有的文件都写到一个
大文件
中,但是我记录了
大文件
中每个文件的结束字节和开始字节,我写到it.That中的每一个文件都是一项艰巨的工作。 我希望能够写出
高性能
的文件,同时保证磁盘的安全。
浏览 4
提问于2012-10-16
得票数 1
回答已采纳
1
回答
告诉Linux在将文件写入磁盘时不要将其保存在缓存中。
linux
、
caching
我正在从用户模式应用程序将一个
大文件
写入磁盘。与此并行,我正在编写一个或多个较小的文件。
大文件
不会在短期内被
读取
,但是小文件可能会被
读取
。我有足够的RAM用于应用程序+较小的文件,但对
大文件
不够。我能否告诉操作
系统
,在将部分
大文件
写入磁盘后,不要将它们保存在缓存中,这样就可以为较小的文件提供更多的缓存?我仍然希望写入
大文件
的速度足够快。
浏览 5
提问于2020-09-21
得票数 0
回答已采纳
3
回答
寻找一种将多个虚拟“文件”写入一个
系统
文件的好方法
file
、
file-io
、
filesystems
它们共享一组随时间增长的文件的
读取
和写入。我不想在用户的环境中暴露数千个文件,这样他们就更容易意外地修改或删除其中的一个文件。是否有API允许对虚拟文件
系统
进行合理的
高性能
写入和
读取
,而虚拟文件
系统
最终是硬盘上的单个文件?我需要它在
C
#或
C
++中。
浏览 0
提问于2010-03-06
得票数 1
回答已采纳
1
回答
多次刷新页面时
读取
文件以减缓速度
php
、
wordpress
、
delay
、
readfile
$myfile = fopen("lastupdate.txt", "r") or die("Unable to open file!"); echo fread($myfile,filesize("lastupdate.txt")); fclose($myfile);你能告诉我为什么这么慢吗? 我想使用文本文件来存储一个字符串(2000字符)。在我的测试中,只有一个“你好世界”在里面
浏览 0
提问于2017-02-23
得票数 2
回答已采纳
1
回答
在内存映射
大文件
时,我应该注意哪些陷阱?
performance
、
memory
、
operating-system
、
mapping
我有一堆
大文件
,每个文件可以超过100 be,总数据量可以是1TB,它们都是只读文件(只是随机
读取
)。 我的程序在一台内存约为8 8GB的计算机上
读取
这些文件。为了提
高性能
(无seek()和无缓冲区复制),我考虑使用内存映射,基本上对整个1TB的数据进行内存映射。从磁盘
读取
的响应于我的read ()的所有页面都将被认为是来自操作
系统
的“干净”页面,因为这些页面永远不会被覆盖。这意味着所有这些页面都可以直接转到操作
系统
可以使用的页面列表,而无需写回磁盘或交换(清洗它们)。
浏览 0
提问于2011-05-24
得票数 4
回答已采纳
1
回答
在服务器上托管的R shiny工具上载
大文件
r
、
shiny
、
shinydashboard
、
shiny-server
、
shinyapps
当在本地运行时,我可以通过
读取
路径立即上传
大文件
,但在我试图从客户端
系统
获取文件的服务器上,我没有
读取
路径的选项,因此我必须使用fileinput函数。但问题是,上传
大文件
需要很长时间。
浏览 5
提问于2020-01-21
得票数 0
1
回答
读取
大文件
时出现页面错误
c
、
page-fault
我在一个4 4GB内存的
系统
上工作。我创建了一个4 4GB的
大文件
,并将其初始化为0。我发现,无论文件有多大,页面错误(主要)的数量都是零。我同时使用文件指针和文件描述符
读取
文件。在这两种情况下,我都没有发现任何页面错误(主要)。如果是,你能推荐一个会导致页面错误的
C
程序吗?
浏览 3
提问于2014-07-25
得票数 2
1
回答
在本文的上下文中,“数据的本地缓存”意味着什么?
hadoop
、
hdfs
从下面的文本- ()段落中,它提到顺序可读的
大文件
不适合本地缓存。但我不明白这里的地方意味着什么..。但是,虽然HDFS具有很强的可伸缩性,但它的
高性能
设计也限制了它只适用于特定类别的应用程序;它没有NFS那样通用。有许多额外的决定和权衡是与HDFS作出的。特别是: 使用HDFS的应用程序被假定执行长时间的连续流
读取
文件。HDFS被优化以提供流
读取
性能;这是以牺牲对文件中任意位置的随机查找时间为代价的。由于文件大小大以及
读取
的顺序性,
系统
没有提供一种本地缓存的数据机制。缓存的开销足够大,
浏览 3
提问于2012-04-11
得票数 3
回答已采纳
1
回答
一个非常大的JBoss server.log文件会影响性能吗?
jboss
、
jboss7.x
我不确定JBoss server.log文件是如何附加的,但如果JBoss附加到已经很大的server.log文件上,会影响性能吗?例如,1 1GB的文件,而不是10MB的文件?
浏览 0
提问于2015-07-03
得票数 0
2
回答
如何配置或扩展BITS (后台智能传输服务)以从Sql Server数据库
读取
文件
c#
、
sql-server
、
load-balancing
、
microsoft-bits
我需要能够提供下载的
大文件
。但是,由于负载平衡的原因,文件存储在SQL数据库中,而不是文件
系统
中。BITS似乎是最好的方法。我完全控制了客户。但是,我不知道如何配置BITS来从数据库中
读取
文件。我知道如何为此编写
C
#代码,但我不知道如何将位挂接到该代码中,而不是从文件
系统
中
读取
文件。 有什么想法吗?
浏览 1
提问于2010-05-29
得票数 1
回答已采纳
2
回答
读取
系统
手册和
大文件
linux
如何将cat命令的描述从手册复制到名为cat的文件中?我尝试了cat命令的概要,但始终存在一个错误,即没有文件名、cat或目的。
浏览 0
提问于2013-11-09
得票数 1
1
回答
有没有支持并行读的磁盘?
java
、
multithreading
、
operating-system
、
disk
在多核
系统
上使用多线程
读取
文件是否会提
高性能
?是否有磁盘支持并行访问?(非并发访问)
浏览 24
提问于2019-02-17
得票数 2
1
回答
spring batch:处理
大文件
jms
、
datasource
、
spring-batch
我在生产中有10个
大文件
,我们需要从文件中
读取
每一行,并将逗号分隔值转换为一些值对象,然后将其发送到JMS队列,并将其插入到数据库中的3个不同的表中
浏览 4
提问于2016-03-14
得票数 0
6
回答
将文件保留在操作
系统
块缓冲区中
optimization
、
memory-management
、
caching
、
filesystems
、
performance
我需要尽可能多地在操作
系统
块缓存中保留
大文件
,即使它超出了我在ram中的容量,而且我还在不断地
读取
另一个非常非常大的文件。当我流
读取
另一个文件时,我会从
系统
缓存中删除大块的重要文件。
浏览 8
提问于2008-09-25
得票数 2
回答已采纳
1
回答
读取
大文件
并保存这些记录以进行处理
java
、
performance
、
file
、
collections
我需要阅读一个包含客户记录名称,年龄,收入的
大文件
。我需要在我的应用程序中快速处理这些数据,并创建一个仪表板,类似于类似年龄的雇员、收入组(范围之间).现在的挑战是
读取
大文件
(明确地将我的程序堆设置为512 MB)并使用InputStream、Scanner因此,我能够
读取
7590912条记录(250 MB文件)的文件。但是,在我的arrayList <Employee>中设置这些记录时,会显示连续的峰值和垃圾收集活动(这是预期的)。除了增加内存外,任何提
高性能
的建议(记住,我会对集合执行更多
浏览 1
提问于2015-12-12
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
入门:三分钟轻松了解MySQL
数据风暴,统一存储迎来无限可能
读取超级大的单个文件,用这个方法一招搞定,你一定用的着
Java-彻底弄懂netty-程序员深入理解NIO怎么操作buffer-知识铺
file_get_contents读取大文件
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券