腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
在
python
中
抓取
网页时
,
request.get
()
返回
编码
后
的
数据
、
、
、
、
我试图刮网页naukri.com,因为我想刮网页上
的
特定配置文件
的
所有职位职位。 当我尝试使用requests和bs4来做这件事
的
时候,我得到
的
只是
编码
的
文本。下面是我得到
的
响应和我试图
抓取
的
URL
的
屏幕截图。 下面是代码。 url = "https://www.naukri.com/financial-analyst-jobs-in-mumbai?
浏览 67
提问于2020-11-02
得票数 0
回答已采纳
1
回答
模拟登录以
在
登录墙
后
抓取
数据
的
最简单方法
、
、
、
我正在尝试从雅虎财经获取
数据
。我需要
的
数据
只能通过我购买
的
高级订阅来访问。然而,每当我运行我
的
脚本来
抓取
网页时
,它都是
在
我
的
登录之外完成
的
。因此,我
的
脚本
返回
- {"finance":{"result":nullerror:{"code":"unauthorized"description:"
浏览 18
提问于2021-01-07
得票数 0
2
回答
保存在使用casperjs
抓取
网页时
获得
的
表
数据
、
、
、
、
使用casperjs
抓取
网页时
,保存表
数据
的
最佳方法是哪一种? 使用ajax请求来php,然后将其存储
在
mysql db
中
。
浏览 0
提问于2013-09-22
得票数 3
回答已采纳
1
回答
UnicodeEncodeError:'charmap‘编解码器无法对位置57
中
的
字符'\u011b’进行
编码
:字符映射到<undefined> (但无法使用UTF-8)
、
、
、
、
据我所知,我现在处理
的
情况似乎不能用UTF-8黑客解决?基本上,我
的
程序从网站上
抓取
数据
,但这些
数据
包含特殊
的
欧洲字符,如“č,š,ř”等。
在
添加encoding="UTF-8“之后,错误消失了,但是生成
的
CSV文件包含了完全损坏
的
字符,而这些字符应该位于特殊字符所在
的
位置。这会破坏整个文件并使其不可用。我自己
在
互联网上找不到任何解决方案,我也不确定如何处理它。我需要将这些特殊字符写入文件
浏览 15
提问于2021-02-23
得票数 0
1
回答
显然SDK是
编码
文本,该如何避免?
我正在使用SDK将文章发布到FB墙,如果我发布这样
的
文本,会发生什么:你好\“世界”! 为什么会发生?我该怎么做才能避免这种情况?下面是我使用
的
代码示例,当然,
Request.Get
返回
的
查询字符串参数可能包含任何内容,如果有带有“或回车
返回
”
的
字符串,等等.
在
执行代码
后
,我可以
在
FB墙上看到带有
编码
字符
的
po
浏览 4
提问于2011-04-25
得票数 0
回答已采纳
1
回答
如何将图像原始
数据
转换为图像
、
我想显示用户
的
文档文件,它是
在
nodejs
中
通过spring引导api
返回
的
,但是文件没有显示。这是我
的
spring引导api代码 //SET
浏览 1
提问于2018-12-08
得票数 0
回答已采纳
1
回答
非英文文本
python
不可读
、
、
、
我编写了一个爬虫程序,并获取了一个非英文websites.When
的
标题,我
在
控制台上打印标题,得到
的
结果如下:我没有任何想法,如何从上述字符串
中
获得适当
的
文本
浏览 0
提问于2013-03-08
得票数 1
2
回答
只有
在
呈现时才获得
数据
url时,才访问
数据
图像url。
、
、
、
我希望
在
页面呈现
后
,使用相应
的
自动将图像保存为浏览器
的
数据
。 注意,该
数据
URL
在
页源上不可用。
在
我想要<e
浏览 3
提问于2020-10-02
得票数 1
1
回答
如何使用Cheerio获取img属性
中
的
实际URL而不是Base64
编码
的
图像?
、
、
我正在使用一个表单来发布一个URL,并对其进行处理,以便从一个网站获取
数据
,用于
抓取
。除了图像
的
src
返回
一个base64图像文件而不是实际
的
URL之外,一切都很好。我试图通过一个
数据
-旧-雇用属性获得相同
的
数据
,但并不是所有的网页都有这样
的
网站。所以我不能依赖这个。try { const $ = await cheerio.lo
浏览 1
提问于2019-10-02
得票数 0
2
回答
Requests.get结果
中
的
时区支持
、
我正在使用
Python
抓取
一个简单
的
网页。当我使用Chrome查看
网页时
,我得到:在其中一个日期字符串上(以字符串形式
返回
)thepage = requests.get('http://fakepage.com') 当我把所有东西都解码
后
,我得到
的
浏览 1
提问于2014-08-14
得票数 1
1
回答
使用内部滚动条滚动
、
我有一个网站,我正在
抓取
,需要滚动水平(到最右边)和垂直(到最底部)
的
一个网页上
的
表格。我使用
的
是
Python
3、Selenium和Chrome Driver。我可以
抓取
表格
数据
,但它只能
抓取
我网页上可见
的
内容。当我检查
网页时
,我找不到任何滚动信息。div[2]') 这将从表
中
抓取
没有问题
的
行(但
浏览 0
提问于2019-10-26
得票数 1
3
回答
如何在Django
中
处理同一参数具有多个变量
的
request.GET
、
、
在
Django视图中,您可以访问
request.GET
['variablename'],因此
在
您
的
视图中,您可以执行以下操作:实际
的
request.GET
myvar=123&myvar=567for var in
request.GET
浏览 35
提问于2010-10-12
得票数 86
回答已采纳
2
回答
模拟单击以刮除所有页面
、
、
、
、
在
试图
抓取
包含42页
数据
的
时,我遇到了一个有趣
的
问题。我能够成功地
抓取
第一页
的
信息,但当我试图
抓取
所有的
网页时
,我发现URL保持不变,并且更改页面时使用了网站底部
的
一个按钮。检查器
中
的
html代码如下: <div onclick="filter_page('1')" class="filter_nav_button r
浏览 2
提问于2021-07-11
得票数 0
回答已采纳
1
回答
请求get对象时
的
django MultiValueDictKeyError
、
、
single_news.html" self.pk = pk pub_to =
request.GET
['pub_date_to'] return super(SingleNewsView,self).get(request,pk, **kwargs) 我
浏览 0
提问于2014-06-20
得票数 9
回答已采纳
3
回答
当链接到事件点击时,如何从网站上
抓取
数据
?
、
、
、
我正试图从Tripadvisor.com网页
中
抓取
/提取公司/酒店
的
网站。当我检查
网页时
,我没有看到网站网址。知道如何使用
python
提取网站url吗?提前道歉,因为我最近才开始“
在
Python
.请看到图像
中
的
两个红色箭头。当我选择网站链接时,它会将我带到'‘--这就是我想使用
Python
提取
的
内容。
浏览 4
提问于2018-02-01
得票数 7
回答已采纳
1
回答
如何在Scrapy项目中使用PyMongo MongoDB插入新记录时删除重复项
、
、
、
、
在
我
的
Scrapy项目中,我使用PyMongo将
抓取
的
数据
存储
在
MongoDB
中
。
在
以逐页
的
方式
抓取
网页时
有重复
的
记录,我只想删除那些
在
插入到
数据
库
中
时具有相同名称
的
重复记录。请给我推荐最好
的
解决方案。下面是我用"pipelines.py"编写
的
代码。请指
浏览 13
提问于2018-08-21
得票数 1
2
回答
从ajax向
python
函数发送post请求,但收到GET请求?
、
、
、
我是Django.I
的
新手,我正在向一个
python
函数发送一个ajax POST请求,该函数反过来将
数据
存储
在
来自ajax
的
变量
中
,并
返回
我
在
python
中
检查
的
HttpResponse .So,它将作为它将
数据
发送到此函数。def create_post(request): Fi
浏览 0
提问于2015-05-14
得票数 0
1
回答
如何过滤django模板
中
的
对象列表?
、
、
"submit" value="Apply filters">用上面的例子,如果我选择18岁到20岁,勾选“非素食食品”复选框并单击“应用过滤器”,它应该在同页上显示那些喜欢年龄限制
在
18至20岁
的
非蔬菜的人。
浏览 1
提问于2017-04-16
得票数 0
2
回答
Node.js - createWriteStream正在编写与writeFile不同
的
文件。
、
request.get
('http://url.tld/video.mp4').pipe(fs.createWriteStream('video.mp4'))
浏览 0
提问于2017-01-22
得票数 0
1
回答
初始化会话和输入搜索项
的
requests.session
、
、
、
、
我正在尝试创建一个函数,它进入并在字段
中
输入邮政
编码
,然后执行逐项搜索,比如搜索框
中
的
“小鸡”。我从这个开始。home", login_data)在此之后,我想以某种方式保留上面的输入信息,然后运行如下所示
的
搜索chicken =
request.get
("https://shop.je
浏览 0
提问于2018-03-01
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
超简单超详细python小文件、大文件、批量下载教程
python测试开发django-24.表单提交之get请求
python爬虫零基础入门——反爬的简单说明
Django 框架-请求与响应
春节在家无聊,我用Python设计了一个对联软件
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
活动推荐
运营活动
广告
关闭
领券