BeautifulSoup find_all()不返回数据
BeautifulSoup find_all()不返回数据
提问于 2017-11-06 16:03:31
我对Python非常陌生。我最近的项目是从一个博彩网站上搜集数据。我想刮的是网页上的赔率信息。
这是我的密码
from urllib.request import urlopen as uReq
from bs4 import BeautifulSoup as soup
my_url = 'http://bet.hkjc.com/default.aspx?url=football/odds/odds_allodds.aspx&lang=CH&tmatchid=120653'
uClient = uReq(my_url)
page_html = uClient.read()
uClient.close()
page_soup = soup(page_html, "html.parser")
page_soup.findAll("div",{"class":"oddsAll"})但是结果返回[]，这是零。
我应该怎么做才能使我的代码工作？
回答 1
Stack Overflow用户
回答已采纳
发布于 2017-11-17 22:34:54
使用JavaScript更新从该页面加载的URL，该页面包含数据，并将tmatchid更新为当前的120998。更新的div是tabe和正确的类。
from urllib.request import urlopen as uReq
from bs4 import BeautifulSoup as soup
my_url = 'http://bet.hkjc.com/football/odds/odds_allodds.aspx?lang=CH&tmatchid=120998'
uClient = uReq(my_url)
page_html = uClient.read()
uClient.close()
page_soup = soup(page_html, "html.parser")
tables = page_soup.findAll("table",{"class":"tOdds"})
for table in tables:
print (table.text)产出：
燕豪芬青年隊(主隊勝) 和 烏德勒支青年隊(客隊勝) 1.53 4.00 4.60
燕豪芬青年隊(主隊勝) 和 烏德勒支青年隊(客隊勝) 1.97 2.45 4.70
燕豪芬青年隊[-1](主隊勝) 和 烏德勒支青年隊[+1](客隊勝) 2.45 3.60 2.26
球數 大 細 [3/3.5]2.021.70
球數 大 細 [1.5]2.191.60
1.44 18.00 2.65
0 1 2 3 4 5 6 7+ 18.00 6.60 4.10 3.65 4.50 6.70 11.00 14.00
單 雙 1.90 1.80
主 主 主 和 和 和 客 客 客 主 和 客 主 和 客 主 和 客 2.30 14.00 34.00 4.70 6.50 10.50 19.00 14.00 7.50 针对评论，更新了：
在这种情况下，您需要显示数据的框架的URL。你可以这样做：
import requests
from bs4 import BeautifulSoup
url = requests.get('http://football.hkjc.com/football/iframe/statistics/head-to-head/summary-iframe.aspx?ci=en-US')
soup = BeautifulSoup(url.content, 'lxml')
divs = soup.findAll('div', {'class':['win', 'draw', 'lose']})
for div in divs:
print (div.get_text())产出：
18/03/2018 Italian Division 1 : Benevento 1-2 Cagliari
18/02/2018 Italian Division 1 : Benevento 3-2 Crotone
05/02/2018 Italian Division 1 : Benevento 0-2 Napoli
06/01/2018 Italian Division 1 : Benevento 3-2 Sampdoria
30/12/2017 Italian Division 1 : Benevento 1-0 Chievo
18/12/2017 Italian Division 1 : Benevento 1-2 SPAL
03/12/2017 Italian Division 1 : Benevento 2-2 AC Milan
19/11/2017 Italian Division 1 : Benevento 1-2 Sassuolo
29/10/2017 Italian Division 1 : Benevento 1-5 Lazio
22/10/2017 Italian Division 1 : Benevento 0-3 Fiorentina
31/03/2018 Italian Division 1 : Inter Milan 3-0 Verona
20/02/2018 Italian Division 1 : Lazio 2-0 Verona
11/02/2018 Italian Division 1 : Sampdoria 2-0 Verona
28/01/2018 Italian Division 1 : Fiorentina 1-4 Verona
06/01/2018 Italian Division 1 : Napoli 2-0 Verona
23/12/2017 Italian Division 1 : Udinese 4-0 Verona
14/12/2017 Italian Cup : AC Milan 3-0 Verona
10/12/2017 Italian Division 1 : SPAL 2-2 Verona
30/11/2017 Italian Cup : Chievo 1-1 Verona
26/11/2017 Italian Division 1 : Sassuolo 0-2 Verona页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/47141049
复制相关文章
相似问题
腾讯云开发者
