简介你好,我用Scrapy来获取雅虎答案中的数据。我的成就是把所有的问题和答案都集中在一个精确的部分。--我尝试使用scrapy和selenium --首先,我尝试在一节中记录一个问题列表,这个列表是在蜘蛛类中记忆的。之后,我使用For循环来解析每个页面。for url in self.start_urls_mod: i= i + 1
parse_pag
为了进一步阐述这个问题的标题:我正在从电影网站上抓取信息。我现在有一个MySQL数据库,其中填充了movie titles、movie urls等。Can scrapy figure that out or how would I go about specifying?在读取管道时,这一点可能更清楚,即: 'initiate the database基于此,我认为有一个大的ite