首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >websrcraping,find()函数不工作

websrcraping,find()函数不工作
EN

Stack Overflow用户
提问于 2021-10-14 10:02:03
回答 1查看 25关注 0票数 0

我有一个包装项目,我在代码中遇到了一个问题。

代码语言:javascript
运行
复制
import requests
from selenium import webdriver
from bs4 import BeautifulSoup
import pandas as pd
driver = requests.get('https://bama.ir/car')
products= []
prices = []
kilometrs = []

soup = BeautifulSoup(driver.text,'html.parser')
for a in soup.find_all('li',herf=True,attrs={'class':'car-list-item-li list-data-main'}):
    name=a.find('div', attrs={'class':'title'})
    price=a.find('p', attrs={'class':'cost single-price'})
    kilometr=a.find('div', attrs={'class':'car-func-details'})
    products.append(name.text)
    prices.append(price.text)
    kilometrs.append(kilometr.text)
    print(kilometr.text)
df = pd.DataFrame({'Product Name':products,'Price':prices,'kilometr':kilometrs}) 
df.to_csv('products.csv', index=False, encoding='utf-8')

a.find()不工作,我不知道为什么!!你能帮我吗?

EN

Stack Overflow用户

发布于 2021-10-14 13:19:24

实际上,您的请求返回403禁止状态码。

这个网站是受cloudflare保护的,看看像https://github.com/VeNoMouS/cloudscraper这样的包。

票数 0
EN
查看全部 1 条回答
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/69568738

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档