开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

社区首页 >专栏 >足球竞猜网页的信息进行爬取并且对信息分析

足球竞猜网页的信息进行爬取并且对信息分析

作者头像

小小咸鱼YwY

发布于 2019-07-22 17:46:30

7590

发布于 2019-07-22 17:46:30

举报

文章被收录于专栏：python-爬虫

说明

一.项目介绍

对于足球竞猜网页的信息进行爬取并且对信息分析

二.部分代码展示

import requests
from lxml.html import etree

headers = {'Referer': 'http://www.okooo.com/jingcai/',
           'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/75.0.3770.100 Safari/537.36'}

url = 'XXXXXXXXXXX'
response = requests.get(url, headers=headers)
response.encoding = response.apparent_encoding
response_html = etree.HTML(response.text)

id_xpath = '//*[@class="touzhu_1"]/@data-mid'
hname_xpath = '//*[@class="touzhu_1"]/@data-hname'
aname_xpath = '//*[@class="touzhu_1"]/@data-aname'

id_list = response_html.xpath(id_xpath)
hname_list = response_html.xpath(hname_xpath)
aname_list = response_html.xpath(aname_xpath)

三.完整代码至于压缩文件夹中

项目链接:https://github.com/a568972484/Crawl_for_football_infor

核心动态代码也至于压缩文件夹中

需要请联系作者

作者名称:a568972484

作者博客:小小咸鱼ywy

博客链接https://www.cnblogs.com/pythonywy

本文参与腾讯云自媒体同步曝光计划，分享自作者个人站点/博客。

原始发表：2019-07-18 ，如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自作者个人站点/博客前往查看

如有侵权，请联系 cloudcommunity@tencent.com 删除。

本文参与腾讯云自媒体同步曝光计划，欢迎热爱写作的你一起参与！

评论

登录后参与评论

0 条评论

热度

最新

LV.

目录

说明
- 一.项目介绍
- 二.部分代码展示
- 三.完整代码至于压缩文件夹中

相关产品与服务

文件存储

文件存储（Cloud File Storage，CFS）为您提供安全可靠、可扩展的共享文件存储服务。文件存储可与腾讯云服务器、容器服务、批量计算等服务搭配使用，为多个计算节点提供容量和性能可弹性扩展的高性能共享存储。腾讯云文件存储的管理界面简单、易使用，可实现对现有应用的无缝集成；按实际用量付费，为您节约成本，简化 IT 运维工作。

产品介绍产品文档

精选特惠用云无忧