我正在尝试使用bs4 Python从特定网站提取用户信息和日期，但我的代码没有从网站中找到所有的类。
浏览 12提问于2020-03-19得票数 2
回答已采纳
(scrapy_course) andylu@andylu-Lubuntu-PC:~/Desktop/Misc_python_scripts/Scrapy_Webscraping_Course/books_crawler下一首,我尝试连接到mysql：( andylu@andylu-Lubuntu-PC:~/Desktop/Misc_python_scripts/Scrapy_Webscraping_Course/books_crawler@a
浏览 0提问于2020-12-06得票数 0
我最近已经让这段代码正常工作了，但现在得到了以下错误： Traceback (most recent call last): 文件"/home/l/gDrive/AudioBookReviews/WebScraping/GoodreadsScraper.py"，第3行，在重新加载(Sys)NameError中:未定义名称'reload‘ 代码如下：https://pastebin.com/Y5NQiVEp
浏览 47提问于2019-09-01得票数 2
回答已采纳
2回答
将大字符串输出转换为字典
、、、
因此，只要看一下它，我就能看到布局是用来把它变成字典的，但我不知道如何用尽可能有效的方式来实现它。我需要删除不想要的文本底部，并删除所有的换行符和缩进。单独做并不是很有效率。我希望能够将任何url传递给函数，并有一个可以使用的字典。任何帮助都会很感激的。\n新行和使用remove函数\r，然后用替换函数替换所有缩进。但是，我根本不知道如何删除底部的大部分文本。但是，python文档告诉您只打印w，当这样做时，它返回以下内容：
浏览 2提问于2017-05-10得票数 0
回答已采纳
1回答
我有下面的代码： from instaloader import Instaloader, Profile
profile = Profile.from_username(L.context, PROFILE)
print(profile.followers) 我想通过csv传递多个用户，脚本将为每个用户运行。 谢谢。
浏览 18提问于2021-01-16得票数 0
我正在开发一个python脚本，用于从特定站点( )中刮取数据这次我使用soup.select方法，类名为W(100%) M(0)，我的代码如下所示：import pandas as pd File "/Users/ryanngan/PycharmProjects/<
浏览 4提问于2022-09-13得票数 0
我在使用Python2.7中的WebkitBrower从网页获取输入文本的值时遇到了问题。下面是示例代码：
user_agent='Mozilla/5.0 (compatible; MSIE 9.0; TOB 6.11; Windows NT 6.1
浏览 2提问于2015-01-01得票数 1
回答已采纳
从一开始我就感谢所有寻求帮助的人。Traceback (most recent call last):
File "C:\Users\FELIPE\Desktop\<e
浏览 4提问于2022-05-27得票数 0
1回答
我有一个网络刮刀，从CNN，福克斯，和英国广播公司在BeautifulSoup的文章。然后，在进行了一些预处理之后，我将原始文章返回给API。但是，我不知道如何完全删除包含Python中令人讨厌的类的HTML标记。我尝试了lxml清理器，但是我可以删除标记，但不仅仅是包含某个类的标记。如果在本例中我试图删除“帮助”，我想要一个脚本，该脚本将转换如下所示的HTML：
<p class="help&quo
浏览 1提问于2022-03-08得票数 0
回答已采纳
我已经结合了一些关于网络抓取的教程，并制作了一个简单的网页爬虫，这是刮新张贴的问题在这里所以。我想将它们加载到我的postgresql数据库中，但是我的爬虫给我看的解码错误有问题。(self.methods[methodname], obj, *args)
File "/home/petarp/.virtualenvs/webscraping/local/lib/
浏览 3提问于2015-06-09得票数 1
回答已采纳
我需要将一个文件写入包含R中一个特殊字符的特定路径，路径类似于：C:/Users/Technology ＆ Innovation/Webscraping files/US_data/data我发现“&”和“&”有细微的<
浏览 2提问于2020-11-12得票数 2
PYTHON -用于Webscraping -是否有一种通过CLASS_NAME使用Selenium查找元素的方法--但是只返回类名'xxxx‘下的元素，而不是类名'xxxxyy’下的元素。此代码返回所有元素(包括)和CLASS_NAME为‘xxxx’.，并包含'xxxxyy‘的CLASS_NAME。driver.find_elements(By.CLASS_NAME, 'xxxx')
浏览 5提问于2022-08-03得票数 1
回答已采纳
1回答
下面是从指定的URL中获取所有城市的简单代码：url = 'https://www.netmagicsolutions.com/cloud-infrastructure-services尝试了很多解决方案，但都找不到合适的解决方案。有没有人对此有任何想法？，还是有任何python可以从'URL‘?中提取城市/国家？下面是终端快照：
runfile('D:/KJ/Na
浏览 0提问于2018-08-16得票数 1
1回答
webscraping的新手，我正在使用scrapy和python从特定网站抓取所有类别。其中包含web源代码(picture of web source)，我尝试过的代码如下所示。我正在尝试分离类别，对于类"dropdown-submenu“中的每一项，它们都落在href="/categories#”之后。我们非常感谢您的帮助，谢谢！
浏览 13提问于2020-09-26得票数 0
回答已采纳
我想从google.com中抓取网页结果。我遵循了这个问题的第一个答案，。不幸的是，我得到了连接错误。我碰巧也查过其他网站，它没有连接。是因为公司的代理设置吗？文件"c:\users\appdata\local\programs\python\python37\webscraping\lib\site-packages\requests\api.py"，第75行，在get返回请求(‘get’，url，params=params，**kwargs)
文
浏览 1提问于2018-10-29得票数 0
1回答
我对python和tweepy很陌生，收到了一条我无法真正理解的错误消息：from tweepy import Cursor
from twitter_client importFile "/home/projects/webscraping/testEnv/lib/python3.5/site-packages/tweepy/cursor.py", line 108,
浏览 1提问于2017-06-28得票数 0
回答已采纳
2回答
我正在学习网络抓取，我正在example.webscraping.com上练习。我可以从一个页面中提取我想要的信息，但我想知道如何以最简单的方式遍历多个页面。然而，即使创建一个整数并尝试将其作为字符串输入到URL中，该url上有一个计数器，以便在每个完整的循环周期后更改url，我也没有任何运气。任何建议都会被欣然接受，如果之前已经讨论过这个问题，我很抱歉，但我发现的所有帖子对我来说都有点太复杂了，作为一个初学者，我无法理解。此外，webloop是一个函
浏览 2提问于2019-11-06得票数 0
:line 22 at WebScraping.Program.Main(String[] args) in C:\Users\Serega\Desktop\dz4all\Homework\WebScraping\Program.cs:line 41 at WebScraping.Program.<Main>(String[] args)`
我可以假设Visual Studio已经发布了仅适用于Windows系统的项目。我的Ubuntu只是个终端。我已经在启动PuppeteerS
浏览 44提问于2019-11-05得票数 0
1回答
我对堆叠溢出进行了彻底的搜索，但没有找到合适的解决方案。我正在刮一个遗留的网站，我想提取所有的标签和输入名称。旧网页的html格式如下所示<INPUT class="input-l" name="firstname">
<div<input name="useraccount&
浏览 2提问于2016-11-22得票数 1
1回答
试着效仿这个例子：
我的另一个选择是从Safari会话导出cookie，这样我就可以运行我的webscraping脚本来获取我需要的数据。有人知道如何将cookie从Safari会话导出到Python以访问网站数据吗？
浏览 0提问于2015-07-30得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
