PYTHON实现爬虫技术

C4rpeDime

发布于 2018-08-28 10:30:14

3050

发布于 2018-08-28 10:30:14

Beautiful Soup,这个库的作用是从 HTML 或 XML 文件中抓出有效数据,用来集成在PYTHON中使用,不过需首先要去官网下载,本文将不讲述如何下载安装,直接开撸代码实现爬虫 :# coding=utf-8

import urllib
 
from bs4 import BeautifulSoup
 
url ='http://www.baidu.com/s'
 
values ={'wd':'美女'}
 
encoded_param = urllib.urlencode(values)
 
full_url = url +'?'+ encoded_param
 
response = urllib.urlopen(full_url)
 
soup =BeautifulSoup(response)
 
alinks = soup.find_all('a')

本文参与腾讯云自媒体分享计划，分享自作者个人站点/博客。

原始发表：2018-07-184，如有侵权请联系 cloudcommunity@tencent.com 删除

python