.NET二进制文件读取性能

文章/答案/技术大牛

发布

2回答

c#、.net、performance、file、binary

我有一个非常大的二进制文件集，其中数千个原始视频帧被顺序读取和处理，我现在正在寻求优化它，因为它似乎更受CPU限制而不是I/O限制。目前正在以这种方式读取帧，我怀疑这是最大的罪魁祸首：BinaryReader binRead = new BinaryReader(FS); frameBuf = binRead.ReadBytes(VARIABLE_BUFFER_SIZE); 重新组织I/O以避免在每个

浏览 0提问于2010-08-19得票数 6

回答已采纳

1回答

.NET核心与IIS

performance、iis、asp.net-core-2.0

我们目前有一个针对.NET 4框架的web，它使用一个使用.NET 4 CLR的应用程序池托管在IIS中。我们正在研究将web从.NET 4迁移到.NET Core2.1(为了提高性能)。web还有使用.NET 4框架构建的其他DLL引用。我有一个使用.NET Core2.1的概念启动和运行的简单证明，使用.NET 4框架构建的引用似乎导入得很好，因为我可以引用它们和项目构建。如果我有新的.NET Core2.1WebAPI引用使用

浏览 0提问于2018-10-23得票数 0

回答已采纳

1回答

什么是快速执行和低CPU -读取表中的db (存储为二进制)的非正规化数据还是从二进制文件读取相同的数据？

database、performance、serialization、io、cpu-usage

当涉及到电子商务站点的性能时，您从以下两个选项中有什么建议：读取以二进制形式存储在数据库中的单独表中的序列化的非规范化数据？或者将序列化的非规范化数据存储在二进制文件中？？。每个页面请求至少要读取三个表/二进制文件？

浏览 2提问于2012-02-11得票数 2

回答已采纳

3回答

是否有任何C#框架或代码来解析*blg性能计数器日志文件？

c#、.net、performancecounter、binary-data

任务不是在我的.NET应用程序中收集性能计数器数据，而是打开已经准备好的二进制日志文件(*.blg)？我知道MS SQL Profiler (.NET应用程序)可以解析二进制日志。

浏览 0提问于2010-12-09得票数 6

回答已采纳

3回答

读取C#或C++格式的二进制文件

c#、c++、binaryfiles

我必须将二进制文件数据读取到C# winform应用程序中。我可以创建一个C++动态链接库来读取二进制文件并在C#应用程序中使用它。或主要的问题是性能。如果我使用C++，并且每次C#应用程序通过接口调用它时，总体速度将是相同的。

浏览 0提问于2010-07-30得票数 2

回答已采纳

1回答

AWS存储慢同步读取

amazon-web-services、aws-ec2

我们发现在同时读取时，使用来自GP2或GP3的AWS文件存储(EFS或EBS )非常缓慢。下面是一个例子：这样做一次大约需要16毫秒。但是，如果我在同一个EC2实例上生成8个并行进程，每个进程读取不同集的30个二进制文件，则每个进程平均占用105 ms (比单个进程慢556%)。注意:当时这些文件没有发生任何写入操作。如果我在我的笔记本电脑上重复相同的测试，使用本地文件存储，相

浏览 0提问于2023-01-20得票数 0

回答已采纳

2回答

SQL Server Varbinary(max)：从varbinary字段中选择字节的子集

.net、sql-server、sql-server-2008、varbinary

在SQL Server2008中，从变量二进制(MAX)字段(不使用FileStreams)读取部分二进制数据的最有效方法是什么？在将数据写入列时，T-SQL中提供了VarBinary.Write()函数，允许以增量方式将字节写入字段，但似乎没有类似的函数可用于读取数据。我知道.Net中的DataReader.GetBytes()方法将只选择您请求的字节，但是这会带来性能开销吗？也就是说，sqlserver中的select是否读取数据库中的所有字节，然后将所有这些字节提

浏览 0提问于2009-08-17得票数 15

回答已采纳

1回答

升级dll后运行Vertica查询时超出范围的异常

c#、dll、ado.net、vertica

背景我有一个通过ADO.NET64 dll连接到Vertica集群的应用程序。直到最近对进行了升级，它才能正常工作。Vertica.Data.Internal.DotNetDSI.DataEngine.DataConverter.ConvertToDefaultType(Object srcData，TypeMetadata srcMetadata) at Vertica.Data.Internal.ADO.Net.SDataReader.ConvertDataForOutput(Object data，( Vertica.Data.Internal.AD

浏览 2提问于2016-02-16得票数 1

1回答

对于文件读取，何时使用filebuf

c++、file-io、iostream、filebuf

我将从一个只读的二进制文件中进行随机访问读取。ifstream的接口似乎比filebuf更简单；但是有没有什么用例可以让filebuf提供更好的性能呢？更多细节:我有一个固定长度(48字节)的记录文件，将按顺序进行随机访问读取--读取1条记录，处理，读取1条记录(从其他地方)，处理，...(遍历树。)该文件永远不会更改。由于记录是固定长度的，我稍后可能会使用48字节记录的“字符类型”，但我认为这不会对性能产生任何影响

浏览 3提问于2012-05-10得票数 0

1回答

针对一个二进制文件中的多个.NET框架？

c#、.net、multitargeting

背景：.NET 4.0提供了方法，它缓解了这个问题。问题：是否可以

浏览 0提问于2013-01-29得票数 14

回答已采纳

1回答

Azure可以存储.NET SDK读写二进制文件吗？

azure-data-lake、azure-sdk-.net

ADLS .NET SDK有一些读取和创建文本文件的好示例。它使用StreamReader，不应该与二进制文件一起使用。我试过使用BinaryReader，但没有成功。= null) Console.WriteLine(line);} .NET SDK可以创建/读取二进制文件吗？如果有，是否有这样做的例子？

浏览 2提问于2018-06-15得票数 0

回答已采纳

2回答

如何使用opencv python库从内存缓冲区(StringIO)或url中读取图像

image、opencv、numpy、urllib2、stringio

只需共享一种从内存缓冲区或url创建opencv图像对象的方法，以提高性能。有时我们从url中获取图像二进制文件，为了避免额外的文件IO，我们希望从内存缓冲区或url中读取该图像，但是imread只支持从文件系统读取带有路径的图像。

浏览 20提问于2012-11-11得票数 28

回答已采纳

3回答

.NET 4.0内存映射文件性能

c#、performance、.net-4.0、binaryfiles、memory-mapped-files

我想知道是否有人尝试过新的.NET 4.0内存映射文件功能？我知道它们和操作系统一样古老，但在.NET中原生处理是新的。谢谢!

浏览 0提问于2010-02-25得票数 17

2回答

在.Net中读取包含文本和二进制信息的文件

c#、.net、io

我需要读取二进制PGM图像文件。其格式：# commentsmax-value我知道如何在C或C++中使用文件处理程序先读取几行并读取二进制块。但是不知道在.Net中怎么做。

浏览 0提问于2010-03-31得票数 3

回答已采纳

6回答

保存一个Dictionary<String，Int32>中的C# -序列化？

c#、performance、serialization、binary

我正在编写一个C#应用程序，它需要在启动时读取大约13万对(String，Int32)到字典。这些对存储在.txt文件中，因此任何人都很容易修改，这在上下文中是很危险的。我想问一下，是否有办法保存这个字典，这样信息就可以被合理地安全地存储，而不会在启动时失去性能。我尝试过使用BinaryFormatter，但问题是，虽然最初的程序在启动时需要125 2s到250 2s来读取txt中的信息并构建字典，但反序列化生成的二进制文件占用最多2s，这本身并不太大，但是与原始性能相

浏览 0提问于2010-10-26得票数 17

回答已采纳

1回答

用trtexec进行TensorRT推理

tensorrt

我目前正在Windows上使用TensorRT来评估以ONNX格式提供的模型的可能性能(包括计算性能和模型性能)。因此，我也一直在使用--fp16选项。现在，我想知道量化模型是否仍然表现良好，或者量化对模型性能的负面影响更大。要做到这一点，我想对一堆测试图像进行推断。我已经能够将它们转换为可以用trtexec.exe加载的二进制blob。但是，我没有找到以二进制形式保存结果的选项。这很烦人，因为这是一种Image2Image方法，我不想为此生成一个..json结果文件。

浏览 14提问于2021-11-12得票数 0

2回答

如何使虚拟应用程序在不更改代码的情况下读取gzip文件(动态)

gzip、read

我正在寻找一个通用的工具/库，它覆盖OS函数，可以在不修改应用程序的情况下无缝地读取gz文件。详细信息:我有一个读取大型二进制文件的遗留应用程序。这些二进制文件压缩得和gz一样好。我正在考虑压缩这些二进制文件，并保留原始文件扩展名(根据遗留应用程序的要求)，并使用一个库或一个应用程序来拦截和重写系统调用，以支持读取压缩文件，而无需对应用程序代码进行任何更改，也不需要进行

浏览 0提问于2017-07-23得票数 3

1回答