在scrapy中启动请求中的http://url调用
提问于 2018-06-11 07:40:16
我正在使用scrapy从网站上抓取数据
def start_requests(self):
request = scrapy.Request(url="http://www.xxxxx.com",callback=self.parse ,dont_filter = True,)
yield request从start_requests请求url时，我遇到错误
raise SchemeNotSupported("Unsupported scheme: %r" % (uri.scheme,))
twisted.web.error.SchemeNotSupported: Unsupported scheme: b''
2018-06-11 13:02:26 [scrapy.core.engine] INFO: Closing spider (finished)
2018-06-11 13:02:26 [scrapy.statscollectors] INFO: Dumping Scrapy stats:但是，当使用安全线路(即“https://www.xxxxx.com”)调用相同的请求时，它是有效的。有人能帮忙吗？
回答 1
Stack Overflow用户
发布于 2019-09-12 12:29:25
我也有同样的问题，对我来说，问题是协议。
我使用http请求，而它应该是https
当我改变它的时候，它开始工作了。
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/50792623
复制
腾讯云开发者
