HttpWebRequest的并发限制
是指在使用HttpWebRequest发送HTTP请求时，同时发送的请求数量的限制。这个限制是为了防止过多的并发请求对服务器造成过大的负载，同时也可以控制客户端的资源使用。
HttpWebRequest的并发限制可以通过以下几种方式进行设置和控制：
- ServicePointManager.DefaultConnectionLimit属性：该属性用于设置整个应用程序域中所有HttpWebRequest对象的并发限制。默认值为2，可以通过设置该属性来增加并发请求数量的限制。
- HttpWebRequest.ServicePoint.ConnectionLimit属性：该属性用于设置单个HttpWebRequest对象的并发限制。可以在每个请求中设置不同的并发限制。
- ThreadPool.SetMaxThreads方法：该方法用于设置线程池的最大线程数，从而间接地影响并发请求数量的限制。可以通过调整线程池的最大线程数来增加并发请求数量的限制。
HttpWebRequest的并发限制在以下场景中非常有用：
- 高并发请求：当应用程序需要发送大量的HTTP请求时，通过限制并发请求数量可以控制服务器的负载，避免服务器过载导致性能下降或服务不可用。
- 资源受限环境：在资源受限的环境中，如移动设备或嵌入式系统，通过限制并发请求数量可以有效管理资源的使用，避免资源耗尽导致系统崩溃或运行缓慢。
推荐的腾讯云相关产品和产品介绍链接地址：
腾讯云提供了丰富的云计算产品和服务，其中与HttpWebRequest的并发限制相关的产品包括：
- 负载均衡（CLB）：腾讯云负载均衡（CLB）可以将请求分发到多个后端服务器上，实现请求的负载均衡。通过调整负载均衡的配置，可以控制并发请求数量的限制。详细信息请参考：负载均衡产品介绍
- 云服务器（CVM）：腾讯云云服务器（CVM）提供了高性能、可扩展的虚拟服务器，可以满足不同规模和需求的应用场景。通过调整云服务器的配置，可以控制并发请求数量的限制。详细信息请参考：云服务器产品介绍
请注意，以上推荐的腾讯云产品仅作为示例，其他云计算品牌商也提供类似的产品和服务，具体选择应根据实际需求和情况进行评估。
相关·内容
1回答
我对类有一些逻辑问题。
我使用System.Net命名空间中的HttpWebRequest类，当我这样做的时候：
while(true)
{
HttpWebRequest request = WebRequest.Create("http://somesite.com/") as HttpWebRequest;
HttpWebResponse responce = request.GetResponse() as HttpWebResponse;
}
我收到了一个接一个的响应，间隔超过一秒，但我认为我的互联网连接可以更快地工作，因为收到的数据非常小。然后我尝试这
浏览 1提问于2013-02-07得票数 0
我正在尝试创建一个执行多个线程的应用程序，在这个线程中将有一个到网站的连接。我一直在看这个网站(因为它一直在发送信息)。
问题是，似乎只有一个线程能够继续从网站读取，其他线程看起来无法读取stream.When我设置了一个断点，工作线程击中了它，但其他线程没有。所以我在线程概述窗口中看到了另一个线程，它的位置是“在睡眠中，等待或加入”。它也不在try catch块中。
我不知道如何解决这个问题，提前感谢您的帮助。
HttpWebRequest request = (HttpWebRequest) HttpWebRequest.Create(domain);
request.Cr
浏览 0提问于2011-07-08得票数 1
在.NET 4.5中，使用WebClient、HttpWebRequest和HttpClient类可以发送的并发/并行请求数是否有限制？或者，如果没有对web API或服务器的限制，您可以发送无限制的并行请求？很抱歉，如果问题太宽泛，请纠正我，以便我可以缩小范围。
浏览 10提问于2016-09-16得票数 14
回答已采纳
我希望使用.net HttpWebRequest运行大约10,000个并发请求，而不是所有请求都发往同一台主机，其中一些请求会通过一个代理池。
我目前使用的是线程，它在1000个并发的情况下工作得很好，但是我的CPU负载却是100%。如何修复它？
public string HttpGet(string url)
{
try {
HttpWebRequest request = (HttpWebRequest)HttpWebRequest.Create(url);
request.Timeout = 20000;
request.Cook
浏览 0提问于2019-10-05得票数 0
1回答
我需要在门户网站上解析断开的链接(例如404)。它在门户网站上大约有10.000页，还有很多外部链接。我使用c#中的HttpWebRequest下载页面html，然后找到html中的所有链接，并在checked groop中添加已经检查的链接，以及未检查的链接队列进行检查。我使用多线程，但它带来的好处很少。1个线程-每分钟50个链接，5个线程- 70。我想，我的问题在于获取html代码的方式。我使用简单的HttpWebRequest来获取html：
`
string html;
HttpWebResponse response;
StreamReader respStream;
try
{
浏览 0提问于2019-02-20得票数 1
我有一个很棒的应用程序来捕获shoutcast流:-)。到目前为止，它在几十台机器上都很有效，而且从来没有表现出我现在发现的行为，这最终是非常奇怪的。
我使用HttpWebRequest连接到不同的直播服务器，当我连接两个流时，一切正常。当我去找第三个的时候，
response = (HttpWebResponse)request.GetResponse();
引发连接超时异常。
见鬼？我必须指出，我必须为应用程序创建.config，以便允许从应用程序发送我的标头，否则它根本不会工作。这就是它：
<?xml version="1.0" encoding="u
浏览 0提问于2010-04-08得票数 0
回答已采纳
在.NET中，我已经成功尝试了下面的配置：
<system.net>
<connectionManagement>
<add address="*" maxconnection="100"/>
</connectionManagement>
</system.net>
使用100个并发HttpWebRequest，他们几乎同时回答(不到一秒)。
我想知道为什么有些人在一些论坛上写道，Windows XP和Windows Server 2008将这个数字限制在15或20
浏览 1提问于2009-01-05得票数 9
回答已采纳
因此，我以用户身份运行Windows服务。管理员权限。此服务通过Process.Start启动EXE。在EXE中，WebBrowser控件用于导航到网站、登录、处理所有安全握手以及获取一些数据。它会返回，将数据写入文件。
诚然，这不是最有效的过程，但我的工作环境让我不得不这样做。
无论如何，当直接测试WebBrowser EXE时，它运行得真的很快，但当它从服务运行时，它的运行速度要慢得多。为什么会这样呢？服务上是否存在一些网络瓶颈？在运行进程WebBrowser exe之前，我曾尝试在它的Process.StartInfo中提高它的启动线程优先级，虽然有一点效果，但仍然非常慢。
在WebBr
浏览 2提问于2010-08-10得票数 1
回答已采纳
2回答
我正在使用VSTS2008+ C# + .Net 3.5开发一个控制台应用程序，并将请求发送到另一台服务器( Windows Server2008上的IIS7.0)。我发现当请求线程数很大时，IIS 7.0会响应http 503错误。有什么想法是错误的，以及如何调整以使IIS 7.0服务于更多的请求？
这是我的代码，
class Program
{
private static int ClientCount = 100;
private static string TargetURL = "http://labtest/abc.wmv";
privat
浏览 2提问于2009-10-20得票数 1
回答已采纳
我正在尝试弄清楚对"GetRequestStream“的调用是否有限制。
为了测试这一点，我创建了一个负载测试，其中包含10个代理和1个控制器，它们都试图执行post调用(对象大小为10kb)，用户数为10。(下面的代码)。我没有调用"GetResponse()“来查看是否可以对GetRequestStream进行大量调用。
但实际发生的情况是，即使有了所有这些代理，负载测试也没有超过每秒85 ~ 90个请求，而争用点是代码中的这一行"using (Stream requestStream = request.GetRequestStream())“。
我把代理减少到2
浏览 0提问于2013-04-06得票数 0
回答已采纳
我在一个ASP.Net类中有一些代码，我已经在我的基于web的应用程序上使用了两年多。我希望在命令行工具中执行一些类似的业务功能。我在这两个应用程序中使用了相同的代码，但是命令行应用程序在调用代码底部附近的"GetRequestStream“时超时。
如果我关闭req和req2，我就可以让对GetRequestStream调用正常工作。但是，为了让req3进行身份验证，它需要req2和req2保持打开状态。因此，如果我让req和req2处于打开状态，GetRequestStream就会超时。如果我关闭req3和req2，则对GetRequestStream调用可以工作，但req3无法进
浏览 0提问于2012-05-18得票数 1
2回答
我正在尝试制作我自己的简单的网络爬虫。我想从URL下载具有特定扩展名的文件。我编写了以下代码：
private void button1_Click(object sender, RoutedEventArgs e)
{
if (bw.IsBusy) return;
bw.DoWork += new DoWorkEventHandler(bw_DoWork);
bw.RunWorkerAsync(new string[] { URL.Text, SavePath.Text, Filter.Text });
}
//
浏览 2提问于2012-06-13得票数 7
回答已采纳
我正在做下载管理器项目，我正在使用：
public Stream GetStream(string url)
{
HttpWebRequest request = (HttpWebRequest)WebRequest.Create(url);
HttpWebResponse response = (HttpWebResponse)request.GetResponse();
return response.GetResponseStream();
}
然后在while语句中使用返回的流作为输入流，使用FileStream作为输出流：
Stream InputStream
浏览 4提问于2012-11-27得票数 2
1回答
我正在使用以下代码尝试测试如果我增加并发连接数(即ClientCount应用程序配置值)，网络消耗(从任务管理器的网络选项卡监视)是否会增加。但我发现，即使我将客户端数量从100增加到500，网络消耗仍然是相同的(从客户端和服务器端来看，大约3%-4% )。你知道出什么问题了吗？我想证明，如果客户端的并发数量增加，客户端和服务器端的网络消耗都会增加。
下面是我的应用程序配置和客户端代码。该URL是驻留在本地LAN中另一台计算机上的IIS 7.0比特率限制控件中的wmv文件。我正在使用VSTS2008+ C# + .Net 3.5开发一个控制台应用程序作为客户端。
<?xml versio
浏览 0提问于2009-10-13得票数 0
我正在构建一个web抓取应用程序。它应该通过从单个主机到单个目标web服务器的并发HttpWebRequests抓取复杂的web站点。
该应用程序应在Windows server 2008上运行。
单个数据HttpWebRequest可能需要1分钟到4分钟才能完成(因为长时间运行的数据库操作)
我应该至少有100个对目标web服务器的并行请求，但我注意到当我使用超过2-3个长时间运行的请求时，我会有很大的性能问题(请求超时/挂起)。
在这种情况下，从一台主机到一台目标web服务器可以有多少个并发请求？我可以在应用程序中使用线程池对服务器运行并行HttpWebRequests吗？默认的出站HTT
浏览 0提问于2010-05-01得票数 0
我的主程序使用Task.Factory.StartNew运行8个任务
每个任务将请求来自webservice的XML格式结果，然后解析为集合，可以使用TVP写入MSSQL。
该程序工作，但效率提高使用TPL不是我所期望的。在不同的地方使用秒表后，在我看来，这些任务似乎是互相干扰的，也许是一个阻塞另一个。所有的数字指向使用HttpWebRequest的下载部分。
在对c#中的异步编程进行搜索和阅读后，我尝试修改代码以异步运行下载部分，但结果仍然显示出类似的阻塞级别，而不使用异步编码。
我发现了3种类型的编码以及一些指向它们的参考链接：
-When我使用此方法使用下载部分方法中使用自定义对象传递
浏览 4提问于2012-06-15得票数 0
回答已采纳
1回答
我有下面的工作代码来从一个url获取一个流：
private Stream GetDownloadStream(string url)
{
Stream stream = null;
AutoResetEvent downloadCompleted = new AutoResetEvent(false);
httpRequest = (HttpWebRequest)WebRequest.Create(url);
httpRequest.AllowReadStreamBuffering = false;
httpRequest.BeginGetResp
浏览 0提问于2012-03-13得票数 0
回答已采纳
因此，我有多个线程试图从资源获取响应，但出于某种原因--即使它们运行在单独的线程中，每个响应也只能在其他所有线程仍在等待或关闭时返回。我尝试使用WebResponse response = await request.GetResponseAsync();，但首先，这对我来说似乎是多余的，因为我已经在运行独立的线程，并且visual studio告诉我
“等待”操作符只能在异步方法中使用。考虑使用“异步”修饰符标记此方法，并将其返回类型更改为“Task”。
这里发生了什么事？
编辑(守则)：
方法(从单个线程调用)
public void Start()
{
if (!Star
浏览 3提问于2014-03-17得票数 0
1回答
限制异步请求而不阻塞
、、、
在使用多个web服务时，我正在寻求一些关于限制http请求的建议/策略。我觉得如果请求是同步发生的，我可以做到这一点，但它们是异步的，我认为我应该尝试以一种不会阻塞的方式来执行限制逻辑。
由于web应用程序使用多个web服务，因此对不同的请求会有不同的限制。我在想类似这样的事情，但不确定如何以无阻塞的方式进行：
请求方法：
public static Task<string> AsyncRequest(string url, enum webService)
{
using(LimitingClass limiter = new LimitingClass(webServi
浏览 0提问于2012-05-18得票数 1
回答已采纳
我想多次调用一个web资源，但是当我请求web响应时却被禁止。
protected void Page_Load(object sender, EventArgs e)
{
Thread[] tt = new Thread[10];
for (int i = 0; i < 10; i++)
{
Thread t = new Thread(doJob);
tt[i] = t;
t.Start();
}
浏览 2提问于2011-03-17得票数 0
回答已采纳
我已经建立了一个与远程服务器通信的程序。当我按顺序处理所有消息(在JSON对象中)时，它的行为是正确的。但是，当我在线程中构建它时，它会与一起返回，远程服务器返回一个错误：(500)内部服务器错误.
在远程服务器的配置中会出现问题吗？从日志中，我可以看到请求将在0.5s内到达远程服务器。
下面是我如何与远程服务器通信的代码。
void Execute(){
var httpWebRequest = (HttpWebRequest)WebRequest.Create(REMOTE_URL);
httpWebRequest.ContentType = "applicati
浏览 1提问于2015-10-16得票数 0
2回答
我在C#异步方面没有多少经验。
任务-从互联网加载位图。在此之前，我只是把它们一一对应地加载在一起。将它们加载到异步中会使结果更快。下面，我做了两个例子，如何获得单个图像-- GetImage和GetImageAsync。对于图片列表，我将使用LoadImages和LoadImages2。
LoadImages将在异步中运行同步函数(全部同时(?))，LoadImages2将在异步中运行异步函数并产生相同的结果(?)。我不完全理解的事情--在GetImageAsync await request.GetResponseAsync()中。我真的需要它吗？这是一种“更好”的方式做同样的事情吗？Lo
浏览 6提问于2016-03-10得票数 1
回答已采纳
我正在编写一个程序，它获取一个带有视频的网页的源代码。然后使用正则表达式隔离该视频的下载链接。然后使用httpwebrequest和httpwebresponse下载视频。当某些站点有一个页面，您必须单击“继续”才能到达视频页面时，我的问题就出现了。
例如，有一个名为"The.Matrix.Reloaded.2003.mp4“的视频在上播放，所以我告诉我的程序获取url "”的源代码，但是它找不到视频的下载链接，因为它正在“继续”页面的源代码中搜索文件。如果您转到上面的网站并查看源代码，您将看不到链接。然后，单击“继续”，并在视频出现时执行相同的操作，您将注意到该文件仅在第二个
浏览 5提问于2011-04-28得票数 5
回答已采纳
1回答
Azure函数未并行运行
、、、
我已经在python中创建了一个azure函数。我正在通过C#呼叫它，预计我将同时发送大约1000个请求。对于这个函数，我需要的是并行处理这些请求，而不是一个接一个，但我不能让它发生。
下面是我的测试代码，它并行发送10个请求。
static void Main(string[] args)
{
List<string> symbols = new List<string> { "MSFT", "AAPL", "NFLX", "JNJ", "INTC", "G
浏览 0提问于2021-10-06得票数 1
我有一个在functionA中在外部服务中对functionX进行HttpWebRequest调用的WCF服务。最初，此minutes请求的超时设置为5分钟。
最近，外部服务花了超过5分钟才做出回应(我对此很满意)。所以我把httpWebRequest.timeout撞到了10分钟。
同时，wcf服务应该能够处理其他传入请求(对functionB、functionC等)。我现在所经历的是，如果functionX响应时间超过5分钟(因此functionA需要超过5分钟才能完成)，那么在wcf服务中对functionB的后续请求将排队/直到functionA完成。
最后，一切都正常完成，但我不明白
浏览 3提问于2017-05-05得票数 0
回答已采纳
我相信经过长时间的研究和搜索，我发现我想要做的事情可能更好地服务于建立一个异步连接并在所需的超时之后终止它.但无论如何我还是会问的！
快速代码片段：
HttpWebRequest webReq = (HttpWebRequest)HttpWebRequest.Create(url);
webReq.Timeout = 5000;
HttpWebResponse response = (HttpWebResponse)webReq.GetResponse();
// this takes ~20+ sec on servers that aren't on the proper por
浏览 4提问于2009-09-30得票数 56
回答已采纳
问题摘要:我需要调用HTTP，同时使用从以前的HTTP请求到上相同主机上的资源B的名称解析。
对同一资源的连续调用在第一次调用后会产生更快的结果。 Profiler告诉我，第一次和第二次调用之间的区别是DNS名称解析(GetHostAddresses)。
var request = (HttpWebRequest)WebRequest.Create("https://www.somehost.com/resources/b.txt");
using (var response = (HttpWebResponse)request.GetResponse()) {}
va
浏览 3提问于2021-01-25得票数 1
回答已采纳
总之，我试图使用与下面的代码类似的方法取消两个并发HttpWebRequests (如伪C#所示)。
Main方法创建两个创建HttpWebRequests的线程。如果用户愿意，他们可以通过单击一个按钮来中止请求，然后该按钮调用abort方法。
private Thread first;
private Thread second;
private string uri = "http://somewhere";
public void Main()
{
first = new Thread(GetFirst);
first.Start();
second =
浏览 4提问于2010-09-21得票数 6
回答已采纳
在执行HTTP请求时，我以下列方式在代码中指定OAuth2令牌：
WebClient webClient = ...;
webClient.Headers.Add("Authorization", $"Bearer {accessToken}");
但是，当uri被重定向时，随后的请求失败，因为重定向时会抑制Authorization报头：
HttpWebRequest request = (HttpWebRequest)webClient.GetWebRequest(uri); // public method in derived class
可以禁用All
浏览 2提问于2022-09-21得票数 0
2回答
线程没有响应
、、、
我试图从2-3个小时内解决这个问题，但无法解决。我正在尝试下载一个文件，分为三个部分，三个线程。问题是，当一个部分完成时，其他线程就停止下载。
Example: let's say i want to download 300kb
part1->t1->100kb
part2->t2->100kb //if this thread get completed then other two become unresponsive.
part3->t3->100kb
我正在使用的代码(修改和缩短代码，但解决了我的问题)
//inside a
浏览 6提问于2013-11-05得票数 0
回答已采纳
2回答
在C# Wpf应用程序中，我创建了名为System.Timers.Timer的计时器。我把计时器间隔设为1秒。在Timer方法中，我通过HTTP将数据发布到称为"www.posttestserver.com"的web服务器。我使用过的Http邮政编码是：
try
{
HttpWebRequest request = (HttpWebRequest)WebRequest.Create(http://posttestserver.com/post.php?dir=xxx);
string data="This is to test Http post ser
浏览 4提问于2014-07-10得票数 0
回答已采纳
我在WebRequest中创建了一个C#：
var httpWebRequest = (HttpWebRequest)WebRequest.Create("http://myURL");
URL是一个请求，可能会变大。实际上，取决于用户所做的事情，我无法控制大小。
为了防止请求太长的情况，我想解析它。
是string的最大长度，我可以用来创建一个有效的WebRequest。
浏览 7提问于2017-02-23得票数 0
回答已采纳
我试图将PCL的值设置为PCL的值，这时我意识到它丢失了。这就是我的HttpWebRequest类的样子：
#region Assembly System.Net.Requests, Version=4.0.0.0, Culture=neutral, PublicKeyToken=b03f5f7f11d50a3a
// C:\Program Files (x86)\Reference Assemblies\Microsoft\Framework\.NETPortable\v4.5\Profile\Profile111\System.Net.Requests.dll
#endregion
us
浏览 6提问于2016-07-26得票数 10
回答已采纳
我正在尝试使用HttpWebRequest发送POST请求，fiddler向我展示了我正在发送GET？任何帮助都将不胜感激，因为我能够看到我做错了什么。
代码：
HttpWebRequest request = (HttpWebRequest)WebRequest.Create(LOGIN_API_BASE_URL);
string postString = string.Format("api_email={0}&api_password={1}", EMAIL, PASSWORD);
ASCIIEncoding encoding =
浏览 0提问于2013-10-29得票数 0
2回答
手动发送分块请求
、、、、
我希望将分块的数据从WP8发送到网络资源。查看msdn，我发现HttpWebRequest类有一个属性。
Windows Phone上有类似的功能吗？我已经研究过HttpWebRequest和HttpClient，现在只能假设我需要手动发送分块的数据。
浏览 12提问于2013-10-05得票数 2
1回答
我正在做一个多线程代理检查器，我有自己的多线程算法，它基本上启动了一堆线程(50+)，每个线程连接到一个网页，只是简单地下载和检查响应。如果响应包含某个字符串，我认为代理正在工作。现在，当50个线程中的每个线程都试图同时下载网页时，问题就出现了。网页本身的大小是400kb，所以使用代理下载可能需要一些时间。当我在没有代理的情况下这样做时，我几乎没有时间就得到了50个结果。但是对于代理，我得到的结果是2到3个“批次”，速度太慢了。我使用了一个简单的WebClient对象，超时时间很小。我有一个100Mbit的连接，它只使用了其中的10%。我试着在网上找到一些解决方案，但没有成功。代码的多线程部分
浏览 0提问于2014-05-30得票数 1
我看到了这段代码：
var request = (HttpWebRequest) WebRequest.Create("http://www.google.com");
为什么需要强制转换(HttpWebRequest)？为什么不直接使用HttpWebRequest.Create呢？为什么HttpWebRequest.Create做的是WebRequest而不是HttpWebRequest
浏览 1提问于2009-05-22得票数 114
回答已采纳
1回答
我只想读取HttpWebResponse的一部分。让我们假设第一个100k。如何才能只读取响应的前100k，但仍然以未损坏的子字符串结束？如果我只是将前100k投入到byte[]中，我相信我最终可能会得到损坏的数据。
HttpWebRequest request = HttpWebRequest.Create("http://www.yahoo.com") as HttpWebRequest;
HttpWebResponse response = request.GetResponse() as HttpWebResponse;
浏览 4提问于2013-03-12得票数 0
回答已采纳
我正在将旧的.NET代码转换为.NET 4.5框架。
我正在更新的一个特定方法是将更改为调用。对外部Web的现有代码调用。
这是相当直截了当的，只不过现有的HttpWebRequest代码中有为请求的ServicePoint.MaxIdleTime赋值的代码。对于一个HttpClient来说，这相当于什么。
编辑
下面是如何设置HttpWebRequest。
var webReq = WebRequest.Create(API_ENDPOINT) as HttpWebRequest;
webReq.Method = "POST";
webReq.ContentType = &
浏览 1提问于2016-09-26得票数 0
我需要使用多个任务，这些任务将到达一个webservice终结点。每个任务都将是流数据，并将打开一个httpWebRequest连接。
我需要将属性ServicePointManager.DefaultConnectionLimit设置为大于2的值，但是我使用的是可移植框架，并且ServicePointManager类不可用(应该在System.Net中)。
如何在可移植框架中允许更多开放的the请求？
致以问候。
浏览 0提问于2014-08-16得票数 3
回答已采纳
我正在尝试迭代20,000+客户记录的列表。我正在使用Parallel.ForEach()循环来尝试加快处理速度。在委托函数中，我正在向外部web服务发送HTTP，以验证客户信息。在这样做时，循环仅限于2个线程或逻辑核心。如果我试图提高并行性的程度，则进程会抛出一个错误：“基础连接已关闭:服务器关闭了预期保持活动的连接”。
这是在使用外部进程时循环的默认行为还是接收web服务器的限制？
我的代码非常直接：
Parallel.ForEach ( customerlist, new ParallelOptions {MaxDegreeOfParallelism = 3 },( currentCus
浏览 6提问于2016-04-08得票数 1
回答已采纳
2回答
我对C#非常陌生，并且正在编写一个基本的程序。目标是获取一个图像并将其保存到给定URL的磁盘中。
这就是我的代码基本上超时的地方：
HttpWebRequest req = (HttpWebRequest)WebRequest.Create(m.Value.Trim()); // url string passed in from Regex function
HttpWebResponse resp = (HttpWebResponse) req.GetResponse(); // times out here
代码位于一个包含一个函数的类中，该函数是这样运行的：
String url;
浏览 5提问于2014-05-08得票数 4
回答已采纳
1回答
嗨，我已经在我的web应用程序中建立了一个简单的基于线程池的网络爬虫。它的工作是爬行自己的应用程序空间，并为每个有效的网页及其元内容建立一个Lucene索引。问题就在这里。当我从Visual Studio Express的调试服务器实例运行爬虫程序，并提供作为IIS url的启动实例时，它工作得很好。但是，当我没有提供IIS实例并且它需要自己的url来启动爬网进程时(即，爬行自己的域空间)，我被Webresponse语句上的操作超时异常击中。有没有人可以指导我该做什么，不该做什么？下面是我获取页面的代码。它在多线程环境中执行。
private static string GetWebText(
浏览 1提问于2010-05-18得票数 1
2回答
我必须创建多个web请求到相同的URL使用webclient。我使用线程池QueueUserWorkItem生成线程。下面的代码显示了我是如何使用WebClient生成线程和发布的。我必须派生web客户端类来设置Expect100Continue和Timeout属性。
当我在没有Thread.Sleep的情况下运行这段代码(在派生线程代码中注释行)，我的响应时间将超过1500毫秒。请检查PostToURL方法中计算响应时间的逻辑。但是，如果我在生成另一个线程之前放置1秒的睡眠，那么我的响应时间将小于300毫秒。我找不到为什么这么不一样的原因。实际上，我需要把这个响应时间缩短到300毫秒。这是我
浏览 4提问于2011-11-02得票数 0
回答已采纳
UPDATE：我回顾了我所写的内容，并且有太多的通信层。我将继续在Windows表单中处理所有身份验证，在那里生成一个令牌，并使用它在本地打开web应用程序。我只需要弄清楚如何在windows窗体中打开一个可以接受模型的网站。现在我可以这样做，但我只能传递一个对象：
string endpointURL = "https://localhost:44318/api/login?token=" + tokenstring;
我宁愿发布一个模型，然后通过点击web应用程序中的控制器端点来触发这个模型来打开网页。
[HttpPost]
public ActionRe
浏览 4提问于2020-04-24得票数 0
我正在尝试使用HttpWebRequest自动读取HTTPS页面中的一些信息。我请求的链接通常会重定向到一个包含登录/密码字段的页面，这些字段是php文件的POSTed。
我的代码不起作用，因为我只是返回包含带有用户名/密码字段的表单的页面信息。
我不确定我应该如何处理这种情况。
任何帮助，一如既往地非常感谢。
提前谢谢。
NetworkCredential nc = new NetworkCredential(username, password);
HttpWebRequest request = (HttpWebRequest)WebRequest.Create("https
浏览 0提问于2011-05-20得票数 0
我的代码库中有一个(遗留的)方法，它作为对象生成并返回准备发送的HTTP消息：
public HttpWebRequest GetHttpWebRequest(string body, string url, string contentType)
{
HttpWebRequest request = HttpWebRequest.CreateHttp(url);
request.Method = "POST";
// (More setup stuff here...)
using (var writer = new StreamWriter
浏览 4提问于2017-09-01得票数 4
回答已采纳
后台--我试图使用C#中的HttpWebRequest/HttpWebResponse将现有的网页流到单独的web应用程序中。我注意到的一个问题是，我试图使用文件下载的内容长度来设置文件上传请求内容长度，但问题似乎是当源网页位于HttpWebResponse不提供内容长度的when服务器上时。
HttpWebRequest downloadRequest = WebRequest.Create(new Uri("downloaduri")) as HttpWebRequest;
using (HttpWebResponse downloadResponse = downloa
浏览 0提问于2009-12-08得票数 5
回答已采纳
3回答
我实例化了HttpWebRequest对象：
HttpWebRequest httpWebRequest =
WebRequest.Create("http://game.stop.com/webservice/services/gameup")
as HttpWebRequest;
当我将数据"post“到此服务时，该服务如何知道将数据提交到哪个web方法？
我没有这个web服务的代码，我只知道它是用Java编写的。
浏览 2提问于2010-03-13得票数 14
回答已采纳
2回答
当我使用HttpWebRequest发送get时，似乎将其转换为uri，通过编码器运行它并发送编码的字符串。在创建请求后，当我查看请求中的地址时，我有一个正确的OriginalString和一个编码和不正确的AbsoluteUri。下面是我的代码和示例urls。
HttpWebRequest webRequest = System.Net.WebRequest.Create(url) as HttpWebRequest;
String responseData = WebResponseGet(webRequest);
OriginalString:"“
AbsoluteUri:
浏览 2提问于2014-12-09得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储活动推荐
腾讯云开发者
