Selenium无法找到网页中的所有标签。它只找到一个,但有两个,我需要这两个来使我的脚本工作。这是link。我尝试使用WebDriverWait,但它仍然只返回其中一个标记。我试着搜索不同的div,但我一直只返回一个。我认为这与第二个div中的一些类有关,而第一个不是,但我真的被卡住了。
full_image_link = driver.find_element_by_class_name('sc-1qpw8k9-3')
full_image_link.click()
full_image_link_ = WebDriverWait(driver, 10).until(
EC.presence_of_all_elements_located(
(By.CLASS_NAME, 'sc-1qpw8k9-3')
)
)
发布于 2021-10-10 11:37:11
您可以使用api检索图片链接,无需抓取:
import requests
r = requests.get('https://www.pixiv.net/ajax/illust/93333481/pages?lang=en').json()
image_links = [i['urls']['original'] for i in r['body']]
结果:
['https://i.pximg.net/img-original/img/2021/10/10/23/35/09/93333481_p0.jpg',
'https://i.pximg.net/img-original/img/2021/10/10/23/35/09/93333481_p1.jpg']
https://stackoverflow.com/questions/69517853
复制