在这个例子中,我们将看到如何使用 Go 协程和通道实现一个工作池 。 对应的源代码如下:
package main
import (
"fmt"
"time"
)
/*
这是我们将要在多个并发实例中支持的任务了。
这些执行者将从 jobs 通道接收任务,并且通过 results 发送对应的结果。
我们将让每个任务间隔 1s 来模仿一个耗时的任务。
*/
func worker(id int, jobs <-chan int, results chan<- int) {
for j := range jobs {
fmt.Println("worker", id, "processing job", j)
time.Sleep(time.Second)
results <- j * 2
}
}
func main() {
// 为了使用 worker 工作池并且收集他们的结果,我们需要2 个通道。
jobs := make(chan int, 100)
results := make(chan int, 100)
start := time.Now()
for w := 1; w <= 3; w++ {
go worker(w, jobs, results)
}
// 这里我们发送 9 个 jobs,然后 close 这些通道来表示这些就是所有的任务了。
for j := 1; j <= 9; j++ {
jobs <- j
}
close(jobs)
// 最后,我们收集这些任务的返回值,此处会阻塞
// 如果将下面3行语句注释掉,则主程序不会等待上述的3个协程执行完毕就会退出。
for a := 1; a <= 9; a++ {
<-results
}
end := time.Now()
diffTime := end.Sub(start).Seconds()
fmt.Println("一共执行的时间:", diffTime, "秒")
}
执行这个程序,显示 9 个任务被多个 worker 执行。整个程序处理所有的任务仅执行了 3s 而不是 9s,是因为 3 个 worker是并行的。
$ time go run worker-pools.go
worker 1 processing job 1
worker 2 processing job 2
worker 3 processing job 3
worker 1 processing job 4
worker 2 processing job 5
worker 3 processing job 6
worker 1 processing job 7
worker 2 processing job 8
worker 3 processing job 9
real 0m3.149s
执行结果如下图所示: