前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >爬虫教程入门(第一章)

爬虫教程入门(第一章)

作者头像
天钧
发布2019-07-28 15:01:10
3540
发布2019-07-28 15:01:10
举报
文章被收录于专栏:渗透云笔记

运行平台:Windows Python版本:Python3.x

IDLE (Python 3.4 GUI - 32 bit)

网络爬虫,也叫网络蜘蛛(Web Spider),如果把互联网比喻成一个蜘蛛网,Spider就是一只在网上爬来爬去的蜘蛛。网络爬虫就是根据网页的地址来寻找网页的,也就是URL。

URL的构成如下

代码语言:javascript
复制
 protocol :// hostname[:port] / path / [;parameters][?query]#fragment

简单的爬虫实例

首先要安装一下,request库连接如下

代码语言:javascript
复制
https://github.com/requests/requests

安装教程

打开cmd进入pip目录,输个命令就直接下载了

输入命令直接下载

代码语言:javascript
复制
pip install requests

写个例子

代码语言:javascript
复制
# -*- coding:UTF-8 -*-import requestsif __name__ == "__main__":    target = "http://www.baidu.com"    reqs = requests.get(url = target)    print(reqs.text)

运行后

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2019-06-19,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 渗透云笔记 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档