腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
使用
Python
解析
Web
页面
、
、
、
、
我对
Python
完全陌生,真的需要一些帮助。browser.get(url) 旁注:我的目标是根据搜索条件导航网页,并
解析
每个
页面
的电子邮件地址,我已经知道如何导航网页和发送关键字,这只是
解析
,我被困住了。
浏览 19
提问于2020-05-16
得票数 0
4
回答
从网页中提取数据的脚本
我能够从
页面
中提取整个数据,并
使用
下面的代码将其保存在一个文本文件(RAW)中。只是想知道是否还有其他的选择和优势。
浏览 0
提问于2012-05-30
得票数 9
回答已采纳
2
回答
使用
python
解析
html内容并修改它。
、
、
我是
python
的新手,我不知道很多东西。我想
解析
一个html
页面
,修改它并在我自己的
页面
中显示它。我尝试
使用
this.Can来
解析
html,但产生了一些错误。我在
web
上搜索,但我不知道任何具体的方法来做
python
有人帮助我吗?
浏览 0
提问于2011-04-15
得票数 1
2
回答
如何最好地开发网络爬虫
我习惯于创建一些爬虫来编译信息,当我来到一个网站,我需要的信息我开始一个新的爬虫专门为该网站,
使用
外壳脚本大部分时间,有时PHP。我这样做的方式是用一个简单的for来迭代
页面
列表,一个wget下载它,sed,tr,awk或其他实用程序来清理
页面
,并获取我需要的特定信息。所有的过程都需要一些时间,根据网站的不同,下载所有
页面
的时间更长。
浏览 3
提问于2009-02-07
得票数 3
回答已采纳
2
回答
获取网站的标题
、
、
但在我的例子中,我想通过给定的URL获取一个HTML文件,并只
解析
网站标题,而不是整个文件。致以敬意,
浏览 1
提问于2010-07-04
得票数 2
回答已采纳
3
回答
Perl vs PHP to
web
抓取
、
、
、
、
假设我们有一个需要
web
抓取的项目。(
解析
字符串(< 40)和抓取网页(获取元数据等等)我知道perl有非常好的适合这项工作的cpan模块,所以我可以采用这种方式,不用太麻烦自己。(可能是
Python
??)在速度方面,哪一个更适合这项工作?请解释一下。 提前谢谢。
浏览 0
提问于2011-04-04
得票数 4
回答已采纳
2
回答
如何
使用
python
脚本从URL
页面
查看生成的源代码,而不是只看到源代码?
、
、
、
、
我有一些url需要
解析
,他们
使用
了一些javascript来动态创建它。所以如果我想用
python
解析
结果生成的
页面
...我该怎么做呢? Firefox在
web
开发人员中做得很好。
浏览 1
提问于2010-11-24
得票数 2
回答已采纳
1
回答
BeautifulSoup (bs4):如何忽略格式错误的HTML中的结束标记
、
、
、
我正在
使用
优美汤(bs4)来废弃HTML
页面
。它有list <ul>,它有<li>,它包含一些有趣的链接(href)。<ul></ul> 问题:当我
使用
find_all()提取所有的<ul>时,我不会得到它,因为格式错误的结束</p>没有打开<p>。浏览器会忽略这一点,并呈现ok,但是BS4会破坏
解析
。是否有人试
浏览 3
提问于2016-04-11
得票数 3
2
回答
如何
解析
一个特定的wiki
页面
并使其自动化?
、
、
我正在尝试制作一个
web
应用程序,它需要
解析
一个特定的维基百科
页面
,并提取一些信息,这些信息以表格的形式存储在
页面
上。然后需要将提取的数据存储到数据库中。 我以前真的没有做过这样的事情。我应该
使用
什么脚本语言来做这件事?我读了一点,看起来
Python
(
使用
urllib2和BeautifulSoup)应该可以完成这项工作,但这是解决问题的最好方法吗?我知道我也可以
使用
python
,但是对于一般的
解析
问题,
使用
浏览 0
提问于2011-04-13
得票数 2
回答已采纳
2
回答
浏览器和
python
web
opener的Twitter HTML结构不同
、
、
我发现网页浏览器中的超文本标记语言结构与
python
“机器人”中的不同,因为当我通过
python
urllib2和BeautifulSoup打开
页面
时,我得到了不同的标签ID和类。有没有办法获得与
web
浏览器中相同的内容? 我需要它来
解析
短urls,因为在
web
浏览器中,
解析
的urls存储在链接标题属性中。
浏览 0
提问于2012-01-08
得票数 0
回答已采纳
2
回答
尝试将数据从网站加载到json文件中。
、
、
我试图将数据从一个网站加载到一个json文件中。import requestsprint(r.text)但是,当我尝试将所有代码加载到json文件中时,它将显示一些错误消息。import json url="https://leoclub-ssmc.blogspot.com/?m=1
浏览 2
提问于2020-05-10
得票数 0
1
回答
XUL运行器日志HTTP请求
Python
、
、
、
寻找一些帮助,以记录给定
页面
的HTTP请求。用户输入URL >应用接受请求> XULRunner“做一些事情”>
Python
App返回为给定URL设置的cookie。
浏览 1
提问于2011-11-15
得票数 0
回答已采纳
3
回答
需要帮助
解析
python
3中的html,对于xml.etree.ElementTree来说格式不够好
、
、
、
有没有更好的东西可以让我
使用
,或者这是我用标准库
解析
html的最佳选择?
浏览 0
提问于2011-02-13
得票数 3
2
回答
在
python
中
解析
XML文件并在HTML
页面
中显示它
、
、
、
、
我正在做一个
使用
Raspberry-Pi的数字标牌项目。R将连接到HDMI显示器和互联网.R中将有一个XML文件和一个自行设计的HTML网页,XML文件将经常从远程终端更新。我的想法是
使用
Python
(lxml)
解析
XML文件,并将分析过的数据传递给我的本地HTML网页,以便它能够在R的
web
浏览器中显示这些数据。 我能够
使用
Python
(lxml)
解析
XML文件。但是,我应该
使用
哪些工具在本地HTML网页中显示这个
解析<
浏览 0
提问于2015-02-04
得票数 2
回答已采纳
1
回答
Javascript中的网络
解析
器与
Python
中的BeautifulSoup类似
、
、
我来自
Python
,
使用
beautiful soup,您可以
解析
整个html tree,而无需在外部
web
页面
中创建get请求。我希望在js中有一个库,它允许我
解析
整个html tree而不获取CORS策略错误,也就是说,无需发出请求,只需
解析
它。 我该怎么做?
浏览 1
提问于2021-09-22
得票数 3
回答已采纳
1
回答
在
python
中浏览/
解析
html
页面
、
、
、
、
为了与html
页面
进行交互,我试图把一些我需要的插件集合在一起。我需要的范围从简单的浏览和与按钮或网页链接(如“在这个文本框中写一些文本并按这个按钮”)进行交互,到
解析
html
页面
和向服务器发送自定义get/post消息。我正在
使用
Python
3,到目前为止,我有Request用于简单的网页加载、自定义get和post消息,BeautifulSoup用于
解析
HTML树,我正在考虑尝试机械化来进行简单的网页交互。还有其他类似于我目前
使用
的3库的库吗?是否有某种集
浏览 3
提问于2014-04-17
得票数 1
回答已采纳
2
回答
美丽的汤和表格抓取- lxml与html
解析
器
、
、
、
、
我正在尝试
使用
BeautifulSoup从网页中提取表格的超文本标记语言代码。from urllib import urlopen webpage = urlopen('http://
浏览 3
提问于2014-09-08
得票数 14
回答已采纳
3
回答
用
python
刮网站
、
、
、
、
如果有一种方法可以在不
使用
任何第三方库(如beautifulsoup和scrapy )的情况下抓取一个网站,那么就可以
使用
beautifulsoup。
浏览 1
提问于2020-06-09
得票数 1
回答已采纳
1
回答
如何尽快找到元素,不要等待selenium分页
、
、
、
我想在DOMcontentLoad时
使用
selenium尽快找到元素 findElement如何才能执行不等待直到
页面
加载?
浏览 1
提问于2019-04-28
得票数 0
回答已采纳
6
回答
在shell脚本中获取第一个Google搜索结果的URL
使用
脚本语言
解析
AJAX API的输出相对容易:import json base = 'http://ajax.googleapis.com/ajax/services/search/
web
?如果只是卷曲了API
页面
,那么应该如何编码URL参数或
解析
JSON呢?
浏览 0
提问于2011-04-01
得票数 10
回答已采纳
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
对象存储
云点播
实时音视频
活动推荐
运营活动
广告
关闭
领券