如何在python中尽可能快地发送5000个JSON请求？

文章/答案/技术大牛

发布

3回答

python、json、linux

我是python的初学者，想尽可能快地发送以下请求5000次(一秒或更短的时间是最好的)。对我来说，唯一重要的是这5000个请求同时到达我的服务器，我可以找出服务器的能力。我在bash中的请求是 curl 'https://myserver.com/api/order' -H 'Accept: application/json, text

浏览 20提问于2020-04-08得票数 0

19回答

在Python中发送100,000个HTTP请求的最快方法是什么？

python、http、concurrency

我需要向每个URL发送HTTP请求并打印状态代码。我使用的是Python2.6，到目前为止，我看到了Python实现线程/并发的许多令人困惑的方式。我甚至看过python 库，但不知道如何正确地编写这个程序。有没有人遇到过类似的问题？我猜通常我需要知道如何在Python中尽可能快地执行数千个任务--我想这意味着“并发”。

浏览 10提问于2010-04-14得票数 338

回答已采纳

1回答

Php curl保持活动连接

php、curl、throttling、vonage

根据：我已经阅读了几个信息，试图保持一个连接使用curl，但我不能发送5条短信，重用http套接字。我无法找到一个好的方式来保持我的连接，以便发送短信，因为nexmo要求。谁知道怎么继续呢？

浏览 8提问于2015-05-31得票数 0

回答已采纳

2回答

如何将大量json数据发送到spring控制器。比方说，我有大约100k或1000k记录的大型json数据，我需要在spring或springboot中发送到我的rest控制器，那么解决这个问题的最佳/最有效的方法是什么？我知道可以使用request body发送数据，但我认为在REST api的请求body中发送如此大量的数据效率不高。我可能错了，如果我错了，请纠正我并且数据需要尽可能快地存储在数据库中

浏览 1提问于2019-07-13得票数 1

2回答

与Python同时下载文件的最佳方法？

python、multithreading、networking、download、python-requests

我正在尝试将get请求与Python模块同时发送。任务是尽可能快地下载<400个文件，所有文件都来自同一台服务器。理想情况下，它应该输出终端下载的状态，例如，在每个请求中打印错误或成功消息。

浏览 5提问于2021-05-27得票数 1

回答已采纳

1回答

使用应用程序引擎或云功能的google上的http

python-3.x、google-app-engine、google-cloud-functions

我想使用python构建一个api，并在google云上托管它。api将基本上读取桶中的一些数据，然后对其进行一些处理并返回数据。我希望我能够读取内存中的数据，当请求出现时，只需处理它并发送响应，以便以较低的延迟提供服务。假设我将从一些数据库/存储中读取几千条记录，当请求出现时，处理并根据请求参数发送10条。当请求出现时，我不想进行连接/读取存储，因为这需要时间，我希望尽可能<e

浏览 1提问于2022-04-02得票数 -1

回答已采纳

4回答

在同一台计算机上使用不同编程语言的不同程序之间发送数据的最佳方式是什么？

c#、c、fpga、tcp-ip、labview

我正在考虑开发一个可以与多种语言(Python、C、C#、LabVIEW)交互的解决方案，在这个解决方案中我可以向解决方案发送数据，也可以从解决方案中发送数据。它与FlexRIO系统接口，在该系统中，使用FPGA将尽可能快地处理大量数据。解决方案本身可能是用C或LabVIEW编写的(我的限制是我有软件智能地与FlexRIO驱动程序接口的选项)。此软件将接受预定义的命令(例如，RESET:ALL)，但数据的大小可能非常大(如1000万个字符的数组)。例

浏览 13提问于2014-10-12得票数 1

3回答

如何使用Python快速抓取多个HTML文档？

python、html、parsing、web-scraping、scrapy

我有一个大约100个HTML网页的列表(所有网页都有不同的结构，如div、锚、类等)。我尝试抓取每个页面的标题(其中标题位于某个div和class下)。显然，Python (3.7)一个接一个地执行代码，由于每个get请求大约需要5-6秒，所以大约需要500-600秒来完成大约100个请求。我一直在寻找让这些请求更快工作的方法，并遇到了许多不同的解决方案。然而，一个共同的主题似乎是，使我的请求异步(以便所有请求同时启动)将解决问题(通过使其更快)。我不需要任何花哨的东西

浏览 7提问于2019-07-08得票数 1

回答已采纳

2回答

在两个C#程序之间发送大量数据

c#、ipc

我目前正在开发一个C# (我也可以使用python )插件，用于两个需要通信的独立程序。在第一个程序中，我将3D几何解构为边、点、法线等，然后将所有这些数据发送到我的第二个程序中的插件进行重建。理想情况下，这将尽可能快地发生，以保持事情的“实时”。目前，我正在使用JSON转换数据，并将JSON写入磁盘。然后，我的第二个程序监视文件更改，然后读取文件并使用JSON数据。

浏览 0提问于2013-06-13得票数 5

回答已采纳

1回答

为什么我们更喜欢授权头将承载令牌发送到服务器而不是URL编码等其他技术

rest、oauth、authorization、access-token、bearer-token

为什么授权头主要用于向服务器发送承载令牌？我们为什么不将授权令牌作为URL参数发送，或者将其作为json有效负载与请求体一起发布呢？

浏览 5提问于2016-12-01得票数 8

回答已采纳

3回答

将Python3项目迁移到亚马逊网络服务

python、python-3.x、amazon-web-services、aws-lambda

我一直在研究如何将我的python3项目迁移到亚马逊网络服务中，但我找不到解决方案。我的python3项目非常简单： daemon.py ->这是一个无限的while True循环。它确实会将请求发送到API。每秒发出尽可能多的请求是很重要的。然后将其存储到mysql数据库中。请求总是相同的，GET /api/check_stock。while True: r = requests.post(url,<e

浏览 66提问于2021-11-23得票数 0

回答已采纳

1回答

如何读取请求JSON主体，以便在响应请求后处理它？

json、http、ssl、go

它是一个push API，Cisco会定期使用POST请求和JSON主体调用端点。API必须能够在不到500 in内响应此POST请求。否则，Cisco将停止向您发送数据，并且无法恢复该信息。因此，我一直在寻找尽快处理这些请求的方法。大多

浏览 0提问于2019-07-11得票数 0

回答已采纳

2回答

未随Web manifest.json请求一起发送Cookie

javascript、cookies、progressive-web-apps、web-app-manifest

问题是当请求Web应用程序清单时，请求中没有发送Cookies，因此请求没有经过身份验证。<link rel="manifest" href="/content/site-x/manifest.json">清单的请求是否传递了cookie？我甚至将我的登录cookie设置为尽可能宽松，但没有。c

浏览 1提问于2018-08-10得票数 22

回答已采纳

1回答

如何将csv文件从邮递员- post请求-发送到CherryPy

postman、form-data、python-3.8

我对我的python代码有post请求。在json主体中，我需要发送1个参数。然后我需要上传csv文件。我有两个问题: 1。如何从邮递员端上传csv。2.如何在我的python代码中获取它。附上我的post请求和我的python代码。post request screen shot 我用python编写的代码。@cherrypy.tools.json_in() @cherr

浏览 5提问于2020-11-29得票数 1

1回答

如何在Python中尽可能快地从不一致消息中检索特定关键字

python、optimization、discord

我想在Python中尽可能快地从不一致的消息中提取特定的关键字，我目前正在使用一个请求，但问题是它需要太多的时间来实现和捕获新的消息(需要200-500ms来接收消息)，我相信有更好的方法来做到这一点requests.get('https://discord.com/api/v9/channels/xxxxxxxxxxxxxxx/messages',headers=headers) jsonn = <

浏览 17提问于2021-07-31得票数 1

1回答

如何将JSON数据发布到FastAPI并检索端点内的JSON数据？

python、rest、fastapi、streamlit

我想将一个JSON对象传递给FastAPI后端。labels': labels, 'sequences': sequences}下面是后端API在FastAPI中的样子app.post("/api/zero-shot/") data = await request.<em

浏览 18提问于2022-02-03得票数 6

回答已采纳

1回答

Django拒绝Python请求

python、django、python-requests

我有一个Django视图，当用户执行某个任务时，外部Python微服务将检索并向Django视图发送一些数据，而Django视图应该在模板上将其显示给用户。要发送我使用Python请求的数据，问题是Json响应被Django拒绝，原因有两个: 1)没有设置CSRF令牌，2)视图是@login_required@login_requiredjson-test"})在实际的代码中</em

浏览 1提问于2019-12-24得票数 3

回答已采纳

2回答

如何显示大量报表数据客户端(mongoDB，JS)

javascript、mongodb、reporting、node.js、datatables

由于我们在应用程序中收集的数据的性质，必须让用户能够搜索1,000,000+行数据，并尽可能快地接收结果客户端。我们使用了各种技术，目前正在试验文档存储引擎MongoDB。我们使用了一些报表表插件，如datatables.net，但是当客户机请求可能与100,000+记录匹配的数据时，将该数据传递到客户端的延迟可能会超过一分钟从服务器导出到客户端。我一次只向客户端发送1000个结果来过滤结果集，但是如果用户决定对列进行排序呢？必须再次执行整个请求，并将第一个1000个

浏览 3提问于2011-02-05得票数 2

回答已采纳

2回答

在msp430fr5969上处理多优先级中断

microcontroller、i2c、spi、msp430、firmware

我有多个中断，如SPI，I2C，Timer，所要求的是SPI协议是最高优先级。但是，根据数据表，I2C(eUSCI_B0)的优先级高于SPI(eUSCI_A1)，不能改变中断优先级。如何在I2C进程中尽可能快地进入SPI中断？我被卡在I2C的读数和它有一个数据从另一个单片机发送。在这种情况下，MCU会通知超时。它很少，但我想修复它。

浏览 0提问于2018-10-06得票数 2

1回答

Tensorflow、Flask和TFLearn内存泄漏

memory、flask、tensorflow

我试图从内存中清除所有东西，但我不确定还剩下什么。

浏览 2提问于2016-08-01得票数 3

点击加载更多