在这里我们先简单设置一下:重试次数为3次,抓取间隔为一秒。...(“dotcomt_user”,“code4craft”)
setDomain(String) 设置域名,需设置域名后,addCookie才可生效 site.setDomain(“github.com”...对于有n个元素的集合S={S1,S2…Sn},通过k个映射函数{f1,f2,…fk},将集合S中的每个元素Sj(1为K个值{g1,g2…gk},然后再将位数组array中相对应的array....setRetrySleepTime(1000*3);//设置每次重试间隔
//页码数,起始为1
private Integer pageNum=1;...//爬取页面的url
private final String pageUrl="https://search.51job.com/list/000000,000000,0000,01%252C32,9,99