python:使用beautifulSoup抓网页
先安装
pip install beautifulsoup4使用requests抓取
list_page = requests.get(list_url, timeout=30)
list_content = list_page.content
list_content = list_content.decode("utf-8")
soup1 = BeautifulSoup(list_content, 'html.parser')
div_items = soup1.findAll('div', attrs={'class': 'panel clearfix'})收工，一定要指定parser，否则未定义行为会非常的坑。
本文参与 腾讯云自媒体分享计划，分享自作者个人站点/博客。
原始发表：2017-10-11 ，如有侵权请联系 cloudcommunity@tencent.com 删除
评论
登录后参与评论
推荐阅读