我现在刚接触到漂亮的汤和硒3的geckodriver，我正在做一个必须从网页中抓取URL的项目。
我发现它们都是用于网络抓取，但无法得到两者之间的区别。BeautifulSoup和Geckodriver有什么区别？谢谢你的帮助。
浏览 0提问于2018-08-23得票数 2
回答已采纳
我用请求-期货抓取网页的asynchronously.And我的机器有多核，所以我也想同时抓取许多网站，然后我尝试使用concurrent.futures，似乎concurrent.futures也提供异步方法，那么concurrent.futures‘异步和请求-期货的异步有什么区别?
浏览 2提问于2014-07-26得票数 1
回答已采纳
1回答
我想刮一个网站的一部分，让我们说: www.mywebsite.com/x1/x2您需要先打开x1，然后单击按钮，x2将作为弹出窗口打开。如果关闭x1，则无法访问x2。该网站支持JavaScript。
浏览 3提问于2015-07-20得票数 0
1回答
考虑这个链接：https://www.reddit.com/r/todayilearned/comments/6x6iz8/til_princess_diana_on_live_tv_shook_the_hand_of/?ref=share&ref_source=linkhttp://www.bbc.com/news/av/magazine-39490507/how-princess-diana-changed-attitudes-to-aids
浏览 0提问于2017-09-01得票数 1
2回答
我想从网站上获取数据。我想要易趣上不同商品的价格。我想把这些产品和它们的价格放在我的数据库里。纳奇在这里会有帮助吗？如果不是的话，我更喜欢哪种刮刀/爬行？
浏览 5提问于2014-06-17得票数 0
回答已采纳
2回答
他们是否有办法在没有任何浏览器的情况下，在抓取html之后执行网页javascript的加载事件。即我需要抓取网页内容通过javascript呈现例如bbc新闻网页的视频在页面加载后通过javacscript呈现，我对抓取视频链接和镜头描述感兴趣。
浏览 0提问于2012-06-27得票数 1
最近谷歌搜索控制台报告了放大器错误。在我的网站上根本没有应用放大器。那件事怎么可能？请查看下面的截图：
📷
浏览 0提问于2018-12-24得票数 2
我正在使用Python和Selenium浏览一个网站。state.select_by_visible_text("Select a State")
print "Select a state selected
浏览 3提问于2016-12-15得票数 0
回答已采纳
我有一个网页网址列表需要抓取。是否有可能只抓取网页列表，而不是深入抓取它。如果我添加的url作为种子，它抓取完整的网站与完整的深度。
浏览 4提问于2012-08-10得票数 1
回答已采纳
换句话说，如果我在媒体上读到了一些东西，我想把它对外存档，以供研究和将来参考，我该如何做呢？
我在中介的帮助下，但找不到什么东西来帮助解决这个问题。Medium可能没有提供直接这样做的功能，但是我必须相信有一些方法可以获得数据并保存它。
浏览 0提问于2016-10-24得票数 5
1回答
我正在尝试制作一个应用程序，从每个社交媒体上抓取“为你”的页面，然后将其放在一个地方。我在想也许是某种OAuth，它可以给我一些临时的帐户密码，然后我就可以抓取了。
浏览 16提问于2020-12-30得票数 0
我熟悉从网页抓取数据的BeautifulSoup和urllib2。但是，如果在返回我想要抓取的结果之前需要在页面中输入一个参数，该怎么办？我正在尝试使用这个网站获取两个地址之间的地理距离：
我希望能够转到页面，输入两个地址，单击“显示”，然后提取“按乌鸦飞的距离”和“按陆路运输的距离”值，并将它们保存到字典中。有没有办法用Python把数据输入到网页中？
浏览 2提问于2011-08-13得票数 8
回答已采纳
1回答
你们能帮我用网页请求登录Twitter ()吗？我已经做了我能想到的所有事情，private void Form1_Load(object sender, EventArgs
浏览 1提问于2015-09-07得票数 0
3回答
此数据不是以任何标准格式(XML、RSS等)提供的并且必须从HTML中抓取。我需要抓取这些数据，并将其存储在数据库中以备将来参考。理想情况下，抓取例程将在循环的基础上运行，并且只将新记录存储在数据库中。对于我来说，应该有一种方法可以在这些网站上轻松地检测到旧记录中的新记录。有什么建议吗？
浏览 0提问于2012-09-04得票数 0
我可以使用php获得一个普通页面的html内容。但我打算获得一个页面的内容，当你向下滚动时，它会动态增长(就像在facebook中一样)。我应该如何获得这样一个页面的内容呢？
浏览 1提问于2012-06-04得票数 0
1回答
我搜索更多，但没有得到适当的代码实现在我的项目，我想卷曲每页的PDF文件，就像普通的书，但无法做到，在我的代码时，我点击按钮PDF文件加载从sdCard。if (file.exists()) {Intent intent = new Intent(Intent.ACTION_VIEW);intent.setFla
浏览 2提问于2015-03-04得票数 1
回答已采纳
6回答
爬行和网络抓取有区别吗？
如果有不同之处，为了收集一些网络数据来提供一个数据库，以便在定制的搜索引擎中使用，最好的方法是什么？
浏览 2提问于2010-12-02得票数 96
回答已采纳
1回答
抓取网页
、、
我写了一个代码来抓取一个网站的，我有一个代码是访问列，但不是数据。有人能告诉我我哪里做错了吗？
我这样做的美丽汤和查看的HTML结构的页面。
浏览 0提问于2020-07-11得票数 0
1回答
抓取网页
、、、
我有一些页面是动态生成分页的，当我使用来自Chrome或Firefox的检查工具时，URL是可见的，但是当我可视化源代码或通过刮刮使用xpath时，href="#“是可见的。对这个问题有什么暗示吗？
网页：链接:页脚处的"suivant“，class="link_pagination next”
浏览 3提问于2015-07-19得票数 2
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
