返回顶部
首页 > 资讯 > 后端开发 > GO >GosyncWaitGroup使用深入理解
  • 151
分享到

GosyncWaitGroup使用深入理解

2024-04-02 19:04:59 151人浏览 独家记忆
摘要

目录基本介绍使用源码分析AddDoneWait注意事项基本介绍 WaitGroup是Go用来做任务编排的一个并发原语,它要解决的就是并发 - 等待的问题: 当有一个 goroutin

基本介绍

WaitGroup是Go用来做任务编排的一个并发原语,它要解决的就是并发 - 等待的问题:

当有一个 goroutine A 在检查点(checkpoint)等待一组 goroutine 全部完成,如果这些 goroutine 还没全部完成,goroutine A 就会阻塞在检查点,直到所有 goroutine 都完成后才能继续执行

试想如果没有WaitGroup,想要在协程A等到其他协程执行完成后能立马执行,只能不断轮询其他协程是否执行完毕,这样的问题是:

  • 及时性差:轮询间隔越高,及时性越差
  • 无谓的空轮训,浪费系统资源

而用WaitGroup时,协程A只用阻塞,直到其他协程执行完毕后,再通知协程A

其他语言也提供了类似的工具,例如Java的CountDownLatch

使用

Waitgroup提供了3个方法:

func (wg *WaitGroup) Add(delta int)
func (wg *WaitGroup) Done()
func (wg *WaitGroup) Wait()

Add:增加计数值

Done:减少计数值

Wait:调用这个方法的 goroutine 会一直阻塞,直到 WaitGroup 的计数值变为 0

源码分析

type WaitGroup struct {
   // 避免复制
   noCopy noCopy
   // 64位环境下,高32位是计数值,低32位记录waiter的数量
   state1 uint64
   // 用于信号量
   state2 uint32
}

Add

func (wg *WaitGroup) Add(delta int) {
   // 获取状态值,信号量
   statep, semap := wg.state()
   // 将参数delta左32位,加到statep中,即给计数值加上delta
   state := atomic.AddUint64(statep, uint64(delta)<<32)
   // 加后的计数值
   v := int32(state >> 32)
   // waiter的数量
   w := uint32(state)
   // 加后不能是负值
   if v < 0 {
      panic( "sync: negative WaitGroup counter" )
   }
   // 有waiter的情况下,当前协程又加了计数值,panic
   // 即有waiter的情况下,不能再给waitgroup增加计数值了
   if w != 0 && delta > 0 && v == int32(delta) {
      panic( "sync: WaitGroup misuse: Add called concurrently with Wait" )
   }
   // 如果加完后v大于0,或者加完后v等于0,但没有等待者,直接返回
   if v > 0 || w == 0 {
      return
   }
   // 接下来就是v等于0,且w大于0的情况
   // 再次检查是否有Add和Wait并发调用的情况
   if *statep != state {
      panic( "sync: WaitGroup misuse: Add called concurrently with Wait" )
   }
   // 将计数值和waiter数量清0
   *statep = 0
   // 唤醒所有的waiter
   for ; w != 0; w-- {
      runtime_Semrelease(semap, false, 0)
   }
}
  • 因为state高32位保存计数值,因此需要将参数delta左移32位后加到state上才正确

如果加完后v大于0,或者加完后v等于0,但没有等待者,直接返回

  • v大于0:表示自己不是最后一个调用Done的协程,不用自己来释放waiter,直接返回
  • v等于0,但没有等待者:因为没有等待者,也就不用释放等待者,也直接返回

否则就是v等于0,且w大于0的情况:

自己是最后一个调用Done的,且还有等待者,那就唤醒所有等待者

Done

Done内部调用Add,只是参数传-1,表示减少计数值

func (wg *WaitGroup) Done() {
   wg.Add(-1)
}

Wait

func (wg *WaitGroup) Wait() {
   statep, semap := wg.state()
   for {
      state := atomic.LoadUint64(statep)
      // v:计数值
      v := int32(state >> 32)
      w := uint32(state)
      // 如果计数值为0,自己不需要等到,直接返回
      if v == 0 {
         return
   }
      // 增加waiter计数值
 if atomic.CompareAndSwapUint64(statep, state, state+1) {
         // 自己在信号量上阻塞
         runtime_SeMacquire(semap)
         // 检查Waitgroup是否在wait返回前被重用
         if *statep != 0 {
            panic( "sync: WaitGroup is reused before previous Wait has returned" )
         }
         return
      }
   }
}

如果计数值为0,当前不需要阻塞,直接返回

否则将waiter数量加1,如果添加成功,就把自己阻塞到信号量上

被唤醒时,如果statep不为0,表示该waitgroup是否在wait返回前被重用了,panic

注意事项

通过源码分析可以看出,Waitgroup有以下使用注意事项:

计数器的值必须大于等于0

一开始调用Add时,不能传负数

调用Done的次数不能过多,导致超过了 WaitGroup 的计数值

因此使用 WaitGroup 的正确姿势是,预先确定好 WaitGroup 的计数值,然后调用相同次数的 Done 完成相应的任务

保证在期望的Add调用完成后,再调用Wait,否则Wait发现计数值为0时不会阻塞

最好在一个协程中,按顺序先调Add,再调Wait

需要重用时,需要在前一组调用Wait结束后,再开始新一轮的使用

WaitGroup 是可以重用的。只要 WaitGroup 的计值恢复到零值的状态,那么它就可以被看作是新创建的 WaitGroup,被重复使用,而不能在前一组没使用完的情况下又使用

以上就是Go sync WaitGroup使用深入理解的详细内容,更多关于Go sync WaitGroup使用的资料请关注编程网其它相关文章!

您可能感兴趣的文档:

--结束END--

本文标题: GosyncWaitGroup使用深入理解

本文链接: https://lsjlt.com/news/121318.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • GosyncWaitGroup使用深入理解
    目录基本介绍使用源码分析AddDoneWait注意事项基本介绍 WaitGroup是go用来做任务编排的一个并发原语,它要解决的就是并发 - 等待的问题: 当有一个 goroutin...
    99+
    2024-04-02
  • 深入理解vue的使用
    目录理解vue的核心理念探讨vue的双向绑定原理及实现vue双向绑定原理实现过程理解vue的核心理念 使用vue会让人感到身心愉悦,它同时具备angular和react的优点,轻量级...
    99+
    2024-04-02
  • 深入理解golangchan的使用
    目录前言见真身结构体发送数据接收数据上手定义发送与接收前言 之前在看golang多线程通信的时候, 看到了go 的管道. 当时就觉得这玩意很神奇, 因为之前接触过的不管是php, j...
    99+
    2024-04-02
  • 深入理解JDK8中Stream使用
    概述 Stream 是 Java8 中处理集合的关键抽象概念,它可以指定你希望对集合进行的操作,可以执行非常复杂的查找、过滤和映射数据等操作。使用Stream API 对集合数据进行...
    99+
    2024-04-02
  • NIO深入理解FileChannel使用方法原理
    目录前言FileChannelFileChannel的创建RandomAccessFile中的模式FileChannel操作文件读文件操作写文件操作对文件的更新强制输出到底层存储设备...
    99+
    2023-05-19
    NIO FileChannel NIO FileChannel使用
  • 深入理解Android Matrix理论与使用的详解
    以前在线性代数中学习了矩阵,对矩阵的基本运算有一些了解,前段时间在使用GDI+的时候再次学习如何使用矩阵来变化图像,看了之后在这里总结说明。首先大家看看下面这个3 x 3的矩阵...
    99+
    2022-06-06
    matrix Android
  • 深入理解r2dbc在mysql中的使用
    简介 mysql应该是我们在日常工作中使用到的一个非常普遍的数据库,虽然mysql现在是oracle公司的,但是它是开源的,市场占有率还是非常高的。 今天我们将会介绍r2dbc在mysql中的使用。 r2dbc-m...
    99+
    2022-05-31
    mysql r2dbc
  • 深入理解PyTorch中的nn.Embedding的使用
    目录一、前置知识1.1 语料库(Corpus)1.2 词元(Token)1.3 词表(Vocabulary)二、nn.Embedding 基础2.1 为什么要 embedding?2...
    99+
    2024-04-02
  • Vue深入理解插槽slot的使用
    目录一、插槽(slot)是什么二、使用场景三、slot的分类默认插槽具名插槽作用域插槽四、介绍对slot的理解一、插槽(slot)是什么 slot是组件内的一个占位符,该占位符可以在...
    99+
    2022-11-13
    Vue slot Vue slot用法 Vue slot原理
  • 深入理解C#委托delegate的使用
    目录1.什么是委托2:委托的实现 命名法委托静态方法的实例化委托 实例化方法的委托多播委托 匿名委托什么时候适用委托1.什么是委托 委托就是委托某个方法...
    99+
    2022-11-13
    C#委托delegate C#委托
  • Netty序列化深入理解与使用
    目录序列化与反序列化序列化模式其他对象序列化方式使用json协议实现对象的传输MessagePack编码器在Netty框架中使用序列化与反序列化 序列化:把对象转换成字节的过程,称为...
    99+
    2022-11-13
    Netty 序列化 Netty 序列化协议
  • 深入理解MessageQueue
    MessageQueue是一种用于线程间通信的机制,可以将消息从一个线程传递到另一个线程。它主要由两部分组成:消息队列和消息循环。消...
    99+
    2023-09-28
    MessageQueue
  • 深入理解quilljs
    Quill.js是一个用于构建富文本编辑器的JavaScript库。它提供了许多强大的功能,使开发人员能够轻松地创建具有格式化文本、...
    99+
    2023-09-22
    quilljs
  • 深入理解JavaScriptCore
    动态化作为移动客户端技术的一个重要分支,一直是业界积极探索的方向。目前业界流行的动态化方案,如Facebook的React Native,阿里巴巴的Weex都采用了前端系的DSL方案,而它们在iOS系统上能够顺利的运行,都离不开一个背后的功...
    99+
    2023-06-03
  • 深入浅出理解Java泛型的使用
    目录一、泛型的意义二、泛型的使用三、自定义泛型类1.关于自定义泛型类、泛型接口:2.泛型在继承方面的体现3.通配符的使用一、泛型的意义 二、泛型的使用 1.jdk 5.0新增特性 ...
    99+
    2024-04-02
  • 深入理解go缓存库freecache的使用
    目录1初始化2读写流程3总结go开发缓存场景一般使用map或者缓存框架,为了线程安全会使用sync.Map或线程安全的缓存框架。 缓存场景中如果数据量大于百万级别,需要特别考虑数据类...
    99+
    2024-04-02
  • 深入理解numpy中argmax的具体使用
    目录一、基本介绍二、代码实验1、一维数组情况1.1、axis=01.2、axis=12、二维数组情况2.1、axis=02.2、axis=13、三维数组情况3.1、axis=03.2...
    99+
    2024-04-02
  • 深入理解Vuex的作用
    目录概述组件之间共享数据的方式Vuex原理简介Vuex是实现组件全局状态(数据)管理的一种机制什么样的数据适合存储到Vuex中Vuex的基本使用1.安装Vuex依赖包2.导入Vuex...
    99+
    2024-04-02
  • 深入理解Golangchannel的应用
    目录前言整体结构创建发送接收关闭前言 channel是用于 goroutine 之间的同步、通信的数据结构 channel 的底层是通过 mutex 来控制并发的,但它为程序员提供了...
    99+
    2024-04-02
  • HDFS原理深入理解
    1.HDFS概述   1)数据量越来越多,在一个操作系统管辖的范围存不下了,那么就分配到更多的操作系统管理的磁盘中,但是不方便管理和维护,因此迫切需要一种系统来管理多台机器上的文件,这就       是分布式文件管理系统。 2)是一种允许...
    99+
    2017-01-26
    HDFS原理深入理解
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作