将工作者抽象出来, 然后创建多个协程, 比如, 5个, 10个, 20个
在单机版的爬虫里面. 会将数据延绵不断的放入队列中...., 从in输入管道中取出request进行处理, 处理后放入到ParseResult的管道中
for i := 0; i<c.WorkerCount; i++ {
// 创建WorkerCount..., 从in输入管道中取出request进行处理, 处理后放入到ParseResult的管道中
for i := 0; i<c.WorkerCount; i++ {
// 创建WorkerCount...外部有一个请求过来了, 那么调动submit将请求发送到request chan
2...., 从in输入管道中取出request进行处理, 处理后放入到ParseResult的管道中
for i := 0; i<c.WorkerCount; i++ {
// 创建WorkerCount