目标:爬取豆瓣电影TOP250的所有电影名称,网址为:https://movie.douban.com/top250
1)确定目标网站的请求头:
----
打开目标网站,在网页空白处点击鼠标右键,选择“...start='+str(i*25) #定义每页的网址
r=requests.get(link,headers=headers,timeout=10) #构建每页中的抓取请求request...肖申克的救赎', '霸王别姬', '这个杀手不太冷', '阿甘正传', '美丽人生', '千与千寻', '泰坦尼克号', '辛德勒的名单', '盗梦空间', '机器人总动员', '海上钢琴师', '三傻大闹宝莱坞...十二怒汉', '搏击俱乐部', '少年派的奇幻漂流', '鬼子来了', '蝙蝠侠:黑暗骑士', '指环王3:王者无敌', '活着', '天空之城', '疯狂动物城', '罗马假日', '大话西游之月光宝盒...'末路狂花', '绿里奇迹', '终结者2:审判日', '源代码', '模仿游戏', '勇闯夺命岛', '新龙门客栈', '黑客帝国3:矩阵革命', '这个男人来自地球', '卡萨布兰卡', '一个叫欧维的男人决定去死