首页
学习
活动
专区
工具
TVP
发布
社区首页 >问答首页 >scrapy shell 调试返回200,但是在scrapy crawl启动爬虫返回443?

scrapy shell 调试返回200,但是在scrapy crawl启动爬虫返回443?

提问于 2023-04-25 15:34:04
回答 0关注 0查看 70
在scrapy组件中执行爬虫命令,无法访问https地址,返回443无法返回数据;
在scrapy组件中执行爬虫命令,无法访问https地址,返回443无法返回数据;
scrapy shell 网址  返回200
scrapy shell 网址 返回200

查了很多方法,添加r=requests.get(url,verify=False) 添加verify=False,依然无效。scrapy 自带可以访问https的验证,关闭SSL验证也是不起作用。为什么scrapy shell调试此网站没问题,用scrapy组件写爬虫执行就报错呢

回答

和开发者交流更多问题细节吧,去 写回答
相关文章

相似问题

相关问答用户
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档