前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Go:goroutine线程池 ants 简介与实践

Go:goroutine线程池 ants 简介与实践

作者头像
Freedom123
发布2024-03-29 14:13:35
1470
发布2024-03-29 14:13:35
举报
文章被收录于专栏:DevOpsDevOps

简介

github地址: https://github.com/panjf2000/ants

ants是一个高性能的 goroutine 池,实现了对大规模 goroutine 的调度管理、goroutine复用,允许使用者在开发并发程序的时候限制goroutine数量,复用资源,达到更高效执行任务的效果。

一、功能介绍

  • 自动调度海量的 goroutines,复用 goroutines
  • 定期清理过期的 goroutines,进一步节省资源
  • 提供了大量有用的接口:任务提交、获取运行中的 goroutine 数量、动态调整 Pool 大小、释放 Pool、重启 Pool
  • 优雅处理 panic,防止程序崩溃
  • 资源复用,极大节省内存使用量;在大规模批量并发任务场景下比原生 goroutine 并发具有更高的性能
  • 非阻塞机制

二、处理流程

三、示例

代码语言:javascript
复制
package main

import (
	"fmt"
	"sync"
	"sync/atomic"
	"time"

	"github.com/panjf2000/ants/v2"
)

var sum int32

func myFunc(i interface{}) int32 {
	n := i.(int32)
	atomic.AddInt32(&sum, n)
	return n
}

func demoFunc() {
	time.Sleep(10 * time.Millisecond)
	fmt.Println("Hello World!")
}

func main() {
  // ants库中定义了一个默认的池,默认容量为MaxInt32, 使用的使用可以不用再New, 但是默认池也需要Release()
	defer ants.Release()

	runTimes := 1000

	// Use the common pool.
	var wg sync.WaitGroup
	syncCalculateSum := func() {
		demoFunc()
		wg.Done()
	}
	for i := 0; i < runTimes; i++ {
		wg.Add(1)
		_ = ants.Submit(syncCalculateSum)
	}
	wg.Wait()
	fmt.Printf("running goroutines: %d\n", ants.Running())
	fmt.Printf("finish all tasks.\n")

	// 控制goroutine池的容量
	p, _ := ants.NewPoolWithFunc(10, func(i interface{}) {
		// 获取返回结果
		ret := myFunc(i)
		fmt.Printf("result= %d\n", ret)
		wg.Done()
	})
	defer p.Release()
	// 提交任务
	for i := 0; i < runTimes; i++ {
		wg.Add(1)
		_ = p.Invoke(int32(i))
	}
	wg.Wait()
	fmt.Printf("running goroutines: %d\n", p.Running())
	fmt.Printf("finish all tasks, result is %d\n", sum)
}

输出:

代码语言:javascript
复制
running goroutines: 1000
finish all tasks.
....
running goroutines: 10
finish all tasks, result is 499500
Exiting.

下面看一下官方提供的goroutine池的配置项:

小结

go ants池秉承了go简单,高效的设计理念, 看上去完成的功能不少, 但核心代码却不超过1000行, go ants执行速度比没有池的 goroutine 快 2~6 倍,内存消耗减少 10 到 20 倍, 非常值得大家好好去阅读一番.

参考: https://cloud.tencent.com/developer/article/2045822

本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2022-11-23,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 简介
  • 一、功能介绍
  • 二、处理流程
  • 三、示例
  • 小结
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档