返回顶部
首页 > 资讯 > 后端开发 > GO >grpool goroutine池协程管理
  • 611
分享到

grpool goroutine池协程管理

2024-04-02 19:04:59 611人浏览 薄情痞子
摘要

目录前言名词概念使用示例踩坑之旅常犯的错误分析原因使用grpool错误代码正确代码总结前言 Goroutine协程非常轻量级,这也是为什么go支持高并发,但是goroutine频繁创

前言

Goroutine协程非常轻量级,这也是为什么go支持高并发,但是goroutine频繁创建销毁对GC的压力比较大。

grpool的作用就是复用goroutine,减少频繁创建销毁的性能消耗。

名词概念

Pool: goroutine池,用于管理若干可复用的goroutine协程资源

Worker: 池对象中参与任务执行的goroutine,一个worker可以执行若干个job,直到队列中再无等待的job

Job:添加到池对象的任务队列中等待执行的任务,是一个func()方法,一个job同时只能被一个worker获取并执行。

使用示例

使用默认的协程池,限制100个协程执行1000个任务

pool.Size() 获得当前工作的协程数量

pool.Jobs() 获得当前池中待处理的任务数量

package main
import (
   "fmt"
   "GitHub.com/gogf/gf/os/grpool"
   "github.com/gogf/gf/os/gtimer"
   "sync"
   "time"
)
func main() {
   pool := grpool.New(100)
   //添加1千个任务
   for i := 0; i < 1000; i++ {
      _ = pool.Add(job)
   }
   fmt.Println("worker:", pool.Size()) //当前工作的协程数量
   fmt.Println("jobs:", pool.Jobs())   //当前池中待处理的任务数量

   gtimer.SetInterval(time.Second, func() {
      fmt.Println("worker:", pool.Size()) //当前工作的协程数
      fmt.Println("jobs:", pool.Jobs())   //当前池中待处理的任务数
   })
   //阻止进程结束
   select {}
}
//任务方法
func job() {
   time.Sleep(time.Second)
}

打印结果:

是不是灰常简单~

踩坑之旅

一个简单的场景,请使用协程打印0~9。

常犯的错误

大家看下面的代码有没有问题,请预测一下打印结果。

wg := sync.WaitGroup{}
for i := 0; i < 9; i++ {
   wg.Add(1)
   go func() {
      fmt.Println(i)
      wg.Done()
   }()
}
wg.Wait()

不用着急看答案

猜一下打印结果是什么

打印结果:

分析原因

对于异步线程/协程来讲,函数进行异步执行注册时,该函数并未真正开始执行(注册时只在goroutine的栈中保存了变量i的内存地址),而一旦开始执行时函数才会去读取变量i的值,而这个时候变量i的值已经自增到了9

正确写法:

wg := sync.WaitGroup{}
for i := 0; i < 9; i++ {
   wg.Add(1)
   go func(v int) {
      fmt.Println(v)
      wg.Done()
   }(i)
}
wg.Wait()

打印结果:

使用grpool

使用grpool和使用go一样,都需要把当前变量i的值赋值给一个不会改变的临时变量,在函数中使用该临时变量而不是直接使用变量i

错误代码

wg := sync.WaitGroup{}
for i := 0; i < 9; i++ {
   wg.Add(1)
   _ = grpool.Add(func() {
      fmt.Println(i) //打印结果都是9
      wg.Done()
   })
}
wg.Wait()

打印结果:

正确代码

wg := sync.WaitGroup{}
for i := 0; i < 9; i++ {
   wg.Add(1)
   v := i //grpoll.add() 的参数只能是不带参数的匿名函数 因此只能以设置临时变量的方式赋值
   _ = grpool.Add(func() {
      fmt.Println(v)
      wg.Done()
   })
}
wg.Wait()

打印结果:

总结

通过这篇文章我们了解到:grpool的作用就是复用goroutine,减少频繁创建销毁的性能消耗。也了解到使用协程容易犯的错误,以及用临时变量的方式来解决问题。

说句题外话:grpool的基础概念:Pool、Worke、Job 和我之前设计的派单系统简直一模一样。

到此这篇关于grpool goroutine池协程管理的文章就介绍到这了,更多相关grpool goroutine池 内容请搜索编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程网!

您可能感兴趣的文档:

--结束END--

本文标题: grpool goroutine池协程管理

本文链接: https://lsjlt.com/news/150863.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • grpool goroutine池协程管理
    目录前言名词概念使用示例踩坑之旅常犯的错误分析原因使用grpool错误代码正确代码总结前言 goroutine协程非常轻量级,这也是为什么go支持高并发,但是goroutine频繁创...
    99+
    2024-04-02
  • Golang协程池的管理与优化
    协程池是一种用于高效处理任务的机制,通过池中协程(称为 "工作者")来并发执行任务。通过调整协程数量、使用缓冲通道、关闭协程池并监控其指标,可以优化协程池。协程池在实践中可用于处理图像处...
    99+
    2024-04-15
    golang 协程池
  • GO实现协程池管理的方法
    使用channel实现协程池 通过 Channel 实现 Goroutine Pool,缺点是会造成协程的频繁开辟和注销,但好在简单灵活通用。 package main imp...
    99+
    2024-04-02
  • GO语言怎么实现协程池管理
    本篇内容介绍了“GO语言怎么实现协程池管理”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!使用channel实现协程池通过 Channel 实...
    99+
    2023-06-20
  • Go函数性能优化:协程与goroutine管理策略
    在 go 语言中,优化 goroutine 性能的关键策略包括:管理 goroutine 数量,限制过多 goroutine 造成的资源竞争。限制并发度,避免同时执行大量任务。使用协程池...
    99+
    2024-05-01
    go 协程 golang
  • Golang协程与 goroutine 的关系
    协程是并发执行任务的抽象概念,而goroutine是go语言中的轻量级线程功能,实现了协程的概念。两者联系密切,但goroutine资源消耗更低且由go调度器管理。goroutine广泛...
    99+
    2024-04-15
    golang 协程 go语言
  • Go关闭goroutine协程的方法
    这篇文章主要介绍了Go关闭goroutine协程的方法,具有一定借鉴价值,需要的朋友可以参考下。下面就和我一起来看看吧。1.简介本文将介绍首先为什么需要主动关闭goroutine,并介绍如何在Go语言中关闭goroutine的常见套路,包括...
    99+
    2023-07-06
  • 进程池、线程池、回调函数、协程
    摘要: 进程池与线程池 同步调用和异步调用 回调函数 协程 一、进程池与线程池: 1、池的概念:   不管是线程还是进程,都不能无限制的开下去,总会消耗和占用资源。   也就是说,硬件的承载能力是有限度的,在保证高效率工作的同时应该还...
    99+
    2023-01-31
    线程 回调 函数
  • golang要协程池吗
    golang不需要协程池。具体原因:1、Golang的协程是非常轻量级的,其创建和销毁的成本非常低;2、Golang的通道机制提供了安全、高效的任务传递方式,可以限制并发任务的数量,使得不需要额外的协程池来管理并发;3、Golang运行时包...
    99+
    2023-07-18
  • 如何在 Go 中实现 Goroutine 协程?
    go 中实现 goroutine:语法:go func() { ... }。实战案例:创建 goroutine 计算斐波那契序列,通过无缓冲通道发送结果。 如何在 Go 中实现 Gor...
    99+
    2024-05-15
    go 协程 golang
  • golang线程池和协程池有什么区别
    Golang中没有线程池的概念,而是通过协程(goroutine)来实现并发。协程是一种轻量级的线程,由Go语言的运行时环境(run...
    99+
    2023-10-26
    golang
  • Go如何优雅的关闭goroutine协程
    目录1.简介2.为什么需要关闭goroutine2.1 协程的生命周期2.2 协程的终止条件2.3 为什么需要主动关闭goroutine3.如何优雅得关闭goroutine3.1 传...
    99+
    2023-05-20
    Go关闭goroutine协程 Go关闭goroutine Go关闭协程
  • Go并发编程中goroutine的管理与调度
    go 语言中的 goroutine 可通过以下方式管理:1. 创建 goroutine:使用 "go" 关键字。2. 等待 goroutine 退出:使用 waitgroup。3. 取消...
    99+
    2024-05-12
    调度
  • python 协程池和pool.map用法
    现在有一段代码,需要扫描一个网段内的ip地址,是否可以ping通。执行起来效率太慢,需要使用协程。#!/usr/bin/env python # -*- coding: utf-8 -*- ...
    99+
    2023-01-31
    协程池 python map
  • Golang中怎么创建和管理goroutine
    在Golang中,可以使用关键字go来创建一个goroutine。一个goroutine是一个轻量级的线程,它可以并发执行代码。 下...
    99+
    2024-03-13
    Golang goroutine
  • golang函数和goroutine的内存管理
    go 中函数的内存按值传递,不会影响原始变量。goroutine 共享内存,其分配的内存不会被 gc 回收,直到 goroutine 完成执行。内存泄漏可能发生在持有已完成的 gorou...
    99+
    2024-04-25
    golang 内存管理 垃圾回收器
  • Linux有什么远程管理协议
    这篇文章主要介绍了Linux有什么远程管理协议的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇Linux有什么远程管理协议文章都会有所收获,下面我们一起来看看吧。 ...
    99+
    2023-02-13
    linux
  • 大规模任务处理:使用Golang WaitGroup和协程池
    在使用Golang进行大规模任务处理时,我们可以结合使用WaitGroup和协程池来提高并发执行的效率。首先,我们需要导入相应的包:...
    99+
    2023-10-08
    Golang
  • Golang协程池gopool设计与实现
    目录Goroutine协程池gopool核心实现PoolTaskWorker整体来看三个角色的定位使用 sync.Pool 进行性能优化Goroutine Goroutine 是 G...
    99+
    2024-04-02
  • Golang协程池的实现与应用
    目录1. 为什么需要协程池2. 使用协程池的优点3. 设计思路4. 实现一个简单的协程池4.1 Task 任务对象4.2 Pool协程池4.3 Main函数1. 为什么需要协程池 使...
    99+
    2023-05-19
    Golang协程池 Go协程池使用
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作