首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >Aliexpress.com抓取器localStorage.x5referer

Aliexpress.com抓取器localStorage.x5referer
EN

Stack Overflow用户
提问于 2020-01-06 00:07:30
回答 1查看 385关注 0票数 0

我需要抓取与我的搜索关键字输入相关的aliexpress搜索结果数据。

下面是我的Scrapy代码示例。我在日志文件中找到了localStorage.x5referer脚本。也许我需要处理一些饼干的事情。

代码语言:javascript
运行
复制
# -*- coding: utf-8 -*-
import scrapy

class AliexpresSpider(scrapy.Spider):
    name = 'aliexpres'
    allowed_domains = ['aliexpress.com']
    start_urls = ['https://tr.aliexpress.com/af/sehpa.html?SearchText=sehpa']



    def parse(self,response):
        print(response.text)
        # srplists = response.css('ul.list-items')
        # for item in srplists.css('li.list-item'):
        #      title = item.css('div.item-title-wrap::text').get()
        #      price = item.css('div.item-price-wrap > span.price-big-sale::text').get()
        #      url = item.css('a ::attr(href)').get()
        #      yield {'title':title,'price':price,'url':url}
EN

回答 1

Stack Overflow用户

发布于 2020-01-31 18:29:23

关于这个话题有什么发现吗?我在那里也遇到了同样的问题。

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/59601700

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档