在scrapy中使用css选择器提取href和链接

from scrapy import Selector

html = response.body

selector = Selector(text=html)

# 提取所有a标签的href属性值
hrefs = selector.css('a::attr(href)').getall()

# 提取所有a标签的链接文本
links = selector.css('a::text').getall()

# 打印提取的href属性值
for href in hrefs:
    print(href)

# 打印提取的链接文本
for link in links:
    print(link)