如何更快地解析来自Grequest的响应？

文章/答案/技术大牛

发布

1回答

multithreading、asynchronous、beautifulsoup、multiprocessing、grequests

我想网络抓取多个URL并尽可能快地解析，但是for循环对我来说不是太快，有什么方法可以通过异步、多线程或多线程来实现呢？

浏览 21提问于2021-09-11得票数 1

回答已采纳

2回答

<class 'requests.models.Response'>给Json

python、json、grequests

我从来没有做过任何面向对象的编程，只做过基本的脚本编写。rs = (grequests.get('https://api.github.com/repositories?in pages)print type(blah[0])<class 'requests.models.Response'> 通常，我会将响应转换为文本，然后将其加载到json中，这样我就可以对

浏览 1提问于2014-07-29得票数 21

回答已采纳

1回答

我有时会通过Python的grequest.map函数发送大量请求。目前我的代码如下所示 # passes these two into the function.，我很想知道有多少请求已经完成，有多少请求仍在等待中，但我不确定是否有可能从grequest.get或Session中轮询或生成一个能够执行此操作的钩子。我确实尝试过使用grequests.get(URL, hooks={'response': test}, session=s)，但这似乎实际上将响应本身提

浏览 20提问于2019-11-21得票数 2

回答已采纳

1回答

使用grequest从异步请求中提取文本

html、python-3.x、request、grequests

我试图从我通过grequest库发出的请求中提取文本部分，但我不知道如何才能做到这一点。如果我们使用请求库，我会这样做 r = requests.get('www.google.com')result = grequests.map(rs) 我尝试过的result = gre

浏览 10提问于2020-08-16得票数 2

回答已采纳

1回答

使用greqeusts动态创建异步请求

python、asynchronous、grequests

但是，当一些发送的请求还没有返回响应时，如何动态创建一些请求呢？我不想使用多进程或多线程，有没有办法使用grequest来实现呢？

浏览 0提问于2015-11-19得票数 0

1回答

使用grequest发送一组请求，如何获得每个请求的响应时间？

python-requests、grequests

我使用grequest python库将GET请求异步发送到我们的服务器。responses=grequests.map(unsentrequests) # send the requests asynchronouslygrequests.get(u,headers={'start':time.t

浏览 0提问于2012-12-11得票数 7

回答已采纳

2回答

grequests响应的顺序与请求的顺序相同吗？

python、python-requests、grequests

我正在使用grequest从一个网站异步下载数据，该网站使用相同的url但不同的参数。unsent_requests.append(grequests.get(url = url, params = param)) 我如何才能知道响应中的哪个响应属于unsent_requests的哪个请求？或者响应的顺序与未发送的请求相同？ PS

浏览 1提问于2016-05-29得票数 2

2回答

如何在android中解析来自Django服务器的响应？

android、django、parsing

在我正在构建的Android应用程序中，我希望能够与使用Django开发的本地服务器进行通信。(基本上是一个登录页面和一个填充了来自用户的帖子和图片的主页)，那么我是否需要使用XML解析器来解析来自Django服务器的响应，或者服务器是否可以使用可以直接使用的字符串进行响应？还有图像呢？在Android中使用JSON或XML解析器更简单、

浏览 1提问于2010-05-08得票数 1

回答已采纳

3回答

如何解析来自google结帐的XML响应？

php、mysql、xml

我已经看到当订单被处理为时，来自google checkout的XML响应。<?// set to GBP if in the UK $Gresponse = new GoogleResponse($mer

浏览 2提问于2009-10-18得票数 0

回答已采纳

1回答

Spacy:保存解析模型

python、serialization、nlp、pickle、spacy

我正在使用Spacy ( Python自然语言处理库)将原始文本解析为这种更复杂的面向对象格式，更具体地说，是一个依赖树。上面的操作需要一段时间来执行:我需要加载一个非常昂贵的模型，然后解析大量的文本。我更希望在随后的执行过程中节省一些时间，因为在完成这个初始解析之后，可以更快地迭代处理数据。如何在第一次运行后“保存”这些结果，然后在后续运行中更快地重新加载这些预处理版本？

浏览 4提问于2016-09-15得票数 4

2回答

如何在.NET中解析UDP数据包？

c#、.net、dns、udpclient、pcap.net

如何在.NET中解析UDP数据包？我如何获得结果，Udp包，并解析这一点？特别是解压缩位于UDP数据包中的DNS请求和响应。(a)输入:作为DNS响应的UDP数据包的有效负载 (b)处理:解析UDP数据包的</

浏览 3提问于2010-08-19得票数 3

回答已采纳

1回答

Haskell -如何将XML响应解析为Haskell数据类型？

xml、parsing、haskell

我是一个初学者，试图通过做一些简单的解析问题来学习Haskell。我有这个XML文件。这是Goodreads的API响应。Network.HTTP.Conduit (simpleHttp)import Text.XML.Light

浏览 11提问于2018-12-19得票数 0

回答已采纳

1回答

在引导3.1中使网格折叠/堆栈更快

css、twitter-bootstrap-3

我能够更快地使用来自的CSS代码实现导航条折叠，如何更快地将网格折叠或堆栈成1列呢？我必须使用引导CDN，所以我唯一的选择是使用CSS覆盖缺省值。谢谢。

浏览 0提问于2014-08-25得票数 1

回答已采纳

2回答

如何告诉android解析iam重定向到的页面的XML响应？

java、android、httpclient

我正在尝试解析Android应用程序中的XML响应。解析技术本身并不是问题所在，但是接收XML的过程使得它很难用普通的方法来完成。更详细地说:我请求一个带有apache httpclient的xhtml网站(在Android中)。该网站位于Java EE应用服务器(AS)上。我在请求中提供了两个GET参数(用户名、密码)。该网站位于AS上的安全区域，因此AS首先将我转到登录页面。登录页面获取用户名和密码(来自GET参

浏览 1提问于2011-09-15得票数 0

回答已采纳

1回答

是否可以从类似于Firebase的DataSnapshot getChildren()和getValue()函数的json中获取数据？

java、android、json、firebase、fetch

我的目标是而不是使用Firebase，而是在本地使用json文件，并像使用Firebase的DataSnapshot函数: getChildren()和getValue()那样从其中获取数据。我一直在关注youtube上关于如何在Android上创建一个测试应用程序的教程，下面是我在Firebase上使用的json： "Chapters" : {

浏览 1提问于2021-01-16得票数 0

回答已采纳

4回答

如何在shell脚本中解析json响应？

json、linux、bash、shell、wget

我需要使用shell脚本执行URL，然后解析来自它的json数据。这是我的URL - http://localhost:8080/test_beat，我点击网址后可以得到的响应将来自这两个-{"success":DATA=$(wget -O - -q -t 1 http://localhost:8080&#

浏览 4提问于2014-07-09得票数 4

回答已采纳

3回答

后端和Objective-C/Cocoa之间的通信格式

iphone、objective-c、cocoa、format、backend

我正在开发一个连接到后端服务器的iPhone应用程序。它需要通过几个请求与它进行多次通信。我正在发送HTTP消息，但我希望收到更复杂的响应，以便以某种方式进行解析。假设我可以为来自服务器的响应提供任何类型的格式，所以我的问题是:使用/解析Objective-C/Cocoa和在某种类型的字典中转换哪种格式更容易(可能更快)？我知道这有点主观，但我

浏览 0提问于2010-01-23得票数 3

回答已采纳

1回答

在RestKit中将JSON结果解析为NSString或类似的“原始”数据类型

objective-c、ios、cocoa-touch、restkit

我是RestKit的初学者，我发现很难掌握它的诀窍，这比使用标准的可可做webservice响应解析要好，但仍然比.net或java落后几光年……RKObjectMapping *mapping = [RKObjectMapping mappingForClass:[myClassRKObje

浏览 0提问于2011-10-07得票数 0

回答已采纳

3回答

解析有结束分隔符(例如';')的语言比没有结束分隔符的语言更有效吗？

parsing、language-design

我想知道关于性能(如果它是一种脚本语言)和易于解析语言的结尾分隔符的效果。如果是，并且该语言是脚本语言，它是否会使该语言更快地运行命令？

浏览 0提问于2011-01-13得票数 2

回答已采纳

1回答

有关JSON错误处理和google translate api的帮助

java、json、parsing、java-me

我目前正在解析来自Google Translate API的JSON响应。我可以毫不费力地做到这一点。考虑到我没有太多的XML经验(我更喜欢XML )，我在解决如何在JSON解析中实现一些错误处理方面遇到了麻烦。我使用的是JSON j2me库。以下是一个成功的响应： {"responseData": {"translatedText":"Teks t

浏览 1提问于2011-04-13得票数 2

回答已采纳

点击加载更多