【Go语言学习系列28】并发编程(一):goroutine基础

Goroutine 和 Channel:高效并发编程的基石 通过本文的介绍和实例,你能更好地理解 Goroutine 和 Channel 的用法,并能够开始使用它们编写并发程序。通过掌握这些并发工具,Go 可以帮助你构建出更加高性能的应用程序。 阅读详情

📚 原创系列: “Go语言学习系列”

🔄 转载说明: 本文最初发布于"Gopher部落"微信公众号,经原作者授权转载。

🔗 关注原创: 欢迎扫描文末二维码,关注"Gopher部落"微信公众号获取第一手Go技术文章。

📑 Go语言学习系列导航

本文是【Go语言学习系列】的第28篇,当前位于第三阶段(进阶篇)

🚀 第三阶段:进阶篇
  1. 并发编程(一):goroutine基础👈 当前位置
  2. 并发编程(二):channel基础
  3. 并发编程(三):select语句
  4. 并发编程(四):sync包
  5. 并发编程(五):并发模式
  6. 并发编程(六):原子操作与内存模型
  7. 数据库编程(一):SQL接口
  8. 数据库编程(二):ORM技术
  9. Web开发(一):路由与中间件
  10. Web开发(二):模板与静态资源
  11. Web开发(三):API开发
  12. Web开发(四):认证与授权
  13. Web开发(五):WebSocket
  14. 微服务(一):基础概念
  15. 微服务(二):gRPC入门
  16. 日志与监控
  17. 第三阶段项目实战:微服务聊天应用

📚 查看完整Go语言学习系列导航

📖 文章导读

在本文中,您将了解:

  • goroutine的概念及其与传统线程的核心区别
  • Go运行时如何管理和调度goroutine
  • 如何正确创建和使用goroutine
  • CSP并发模型的基本思想与应用
  • 避免goroutine泄漏和竞态条件的最佳实践
  • 在实际项目中应用goroutine的常见模式

无论您是并发编程新手还是有经验的开发者,本文都将帮助您掌握Go语言最具特色的并发特性,为编写高效可靠的并发程序奠定基础。

Go并发编程模型


并发编程(一):goroutine基础

并发编程是Go语言最具特色的功能之一,它使得我们能够轻松地编写高效的并发程序。Go语言通过goroutine和channel两大核心机制,为开发者提供了简单而强大的并发编程模型。本文将深入探讨goroutine的基础知识,帮助你掌握Go语言并发编程的基本技能。

一、goroutine概念与特性

goroutine是Go语言并发设计的核心,它是一种轻量级的用户态线程,由Go运行时(runtime)管理。

1.1 goroutine与线程的区别

goroutine与传统线程相比有诸多优势:

  1. 极低的创建和切换成本

    • goroutine的初始栈大小仅有2KB(Go 1.18后为2KB,此前是8KB)
    • 而线程的栈通常是MB级别
  2. 动态栈大小

    • goroutine的栈大小可以根据需要动态增长和收缩
    • 最大可达1GB(64位系统)
  3. 高效的调度模型

    • Go运行时实现了M:N的调度模型
    • 多个goroutine(N)可以在少量系统线程(M)上运行
    • 避免了上下文切换的高成本
  4. 与线程的数量对比

    • 系统可以轻松支持数十万甚至数百万的goroutine同时运行
    • 创建同等数量的线程会耗尽系统资源

1.2 goroutine的工作原理

Go运行时负责goroutine的创建、调度和销毁:

┌─────────────────────┐
│     Go 应用程序       │
│  ┌───────┬───────┐  │
│  │ goroutine    │  │
│  │ goroutine    │  │
│  │ ...          │  │
│  └───────┴───────┘  │
└──────────┬──────────┘
           │
┌──────────▼──────────┐
│     Go 运行时        │
│  ┌───────┬───────┐  │
│  │ 调度器 │ GC    │  │
│  └───────┴───────┘  │
└──────────┬──────────┘
           │
┌──────────▼──────────┐
│      操作系统        │
│  ┌───────┬───────┐  │
│  │ 线程   │ 内存   │  │
│  └───────┴───────┘  │
└─────────────────────┘
  • GMP模型:Go调度器基于GMP模型工作
    • G: goroutine,用户级线程
    • M: machine,操作系统线程
    • P: processor,调度上下文,负责连接M和G

二、启动与调度

在Go中启动goroutine非常简单,只需使用go关键字即可。

2.1 创建goroutine

package main

import (
    "fmt"
    "time"
)

func sayHello() {
    fmt.Println("Hello from goroutine!")
}

func main() {
    // 启动一个goroutine
    go sayHello()
    
    // 防止主goroutine退出太快
    time.Sleep(100 * time.Millisecond)
    fmt.Println("Main function finished")
}

在这个例子中:

  1. go sayHello() 启动了一个新的goroutine执行sayHello函数
  2. 主函数不会等待goroutine完成,需要通过time.Sleep让主goroutine等待

2.2 传递参数

启动goroutine时可以传递参数:

func printValue(val int) {
    fmt.Printf("Value: %d\n", val)
}

func main() {
    for i := 0; i < 5; i++ {
        // 通过函数参数传值
        go printValue(i)
    }
    time.Sleep(100 * time.Millisecond)
}

闭包中的变量陷阱

func main() {
    for i := 0; i < 5; i++ {
        // 错误方式:所有goroutine可能会打印相同的值
        go func() {
            fmt.Printf("Value: %d\n", i)
        }()
        
        // 正确方式:将变量作为参数传入
        go func(val int) {
            fmt.Printf("Value: %d\n", val)
        }(i)
    }
    time.Sleep(100 * time.Millisecond)
}

2.3 调度时机

Go运行时会在以下情况触发goroutine调度:

  1. 系统调用:当goroutine执行系统调用时(如I/O操作)
  2. 通道操作:在channel上的发送和接收操作可能导致阻塞
  3. 垃圾回收:GC工作时可能触发调度
  4. 显式调用:通过runtime.Gosched()主动让出CPU
  5. 等待锁:当争用sync包中的互斥锁时
  6. 函数调用:当函数调用太深且栈需要扩容时

示例 - 主动让出CPU:

package main

import (
    "fmt"
    "runtime"
)

func main() {
    go func() {
        for i := 0; i < 3; i++ {
            fmt.Println("Goroutine:", i)
        }
    }()
    
    for i := 0; i < 3; i++ {
        // 让出CPU,给其他goroutine执行的机会
        runtime.Gosched()
        fmt.Println("Main:", i)
    }
}

三、并发模型

Go的并发哲学基于CSP(Communicating Sequential Processes,通信顺序进程)模型。

3.1 CSP原则

CSP模型的核心思想是:

“不要通过共享内存来通信,而要通过通信来共享内存”

这一原则鼓励通过显式的消息传递(channel)而非共享状态来协调并发执行,从而减少锁和同步原语的使用。

3.2 并发模式对比

模式特点典型语言/库
多线程共享内存使用锁保护共享状态Java, C++
Actor模型独立actors通过消息通信Erlang, Akka
CSP模型通过通道协调并发进程Go

3.3 基本并发模式示例

工作者池模式

package main

import (
    "fmt"
    "sync"
    "time"
)

func worker(id int, jobs <-chan int, results chan<- int, wg *sync.WaitGroup) {
    defer wg.Done()
    
    for job := range jobs {
        fmt.Printf("Worker %d started job %d\n", id, job)
        time.Sleep(time.Second) // 模拟工作时间
        fmt.Printf("Worker %d finished job %d\n", id, job)
        results <- job * 2 // 发送结果
    }
}

func main() {
    const numJobs = 5
    const numWorkers = 3
    
    jobs := make(chan int, numJobs)
    results := make(chan int, numJobs)
    
    // 启动工作者
    var wg sync.WaitGroup
    for w := 1; w <= numWorkers; w++ {
        wg.Add(1)
        go worker(w, jobs, results, &wg)
    }
    
    // 发送工作
    for j := 1; j <= numJobs; j++ {
        jobs <- j
    }
    close(jobs) // 关闭通道表示没有更多工作
    
    // 等待所有工作完成
    wg.Wait()
    close(results)
    
    // 收集结果
    for result := range results {
        fmt.Println("Result:", result)
    }
}

四、常见陷阱与最佳实践

4.1 goroutine泄漏

goroutine泄漏是指创建的goroutine没有正确终止,导致资源无法释放。

常见原因

  1. 通道操作阻塞:在无缓冲通道上发送或接收,但没有对应的接收或发送操作
  2. 永不退出的循环:包含无限循环的goroutine
  3. 缺少取消机制:没有实现超时或取消功能

泄漏示例

func leakyFunction() {
    ch := make(chan int) // 无缓冲通道
    
    go func() {
        val := 42
        ch <- val // 将永远阻塞,因为没有接收方
    }()
    
    // 没有从ch接收的代码
    // goroutine将永远卡在通道发送操作上
}

解决方法

  1. 使用context进行取消
func nonLeakyFunction(ctx context.Context) {
    ch := make(chan int)
    
    go func() {
        val := 42
        select {
        case ch <- val:
            // 发送成功
        case <-ctx.Done():
            // 上下文被取消,goroutine可以退出
            return
        }
    }()
    
    // 使用时带超时
    select {
    case result := <-ch:
        fmt.Println("Got:", result)
    case <-ctx.Done():
        fmt.Println("Operation canceled")
    case <-time.After(1 * time.Second):
        fmt.Println("Timeout")
    }
}

4.2 竞态条件

竞态条件是指多个goroutine同时访问共享数据且至少有一个进行写操作时产生的情况。

检测方法

使用Go内置的竞态检测器:

go test -race ./...
go run -race main.go

解决方法

  1. 使用互斥锁
var (
    counter int
    mutex   sync.Mutex
)

func safeIncrement() {
    mutex.Lock()
    defer mutex.Unlock()
    counter++
}
  1. 使用通道代替共享内存
func counterService(ch chan int) {
    counter := 0
    for {
        counter += <-ch
    }
}

func main() {
    ch := make(chan int)
    go counterService(ch)
    
    // 安全地增加计数器
    ch <- 1
    ch <- 1
}

4.3 正确使用WaitGroup

使用sync.WaitGroup等待一组goroutine完成:

func process(id int, wg *sync.WaitGroup) {
    defer wg.Done() // 确保在函数退出时调用Done
    
    // 处理逻辑
    fmt.Printf("Process %d done\n", id)
}

func main() {
    var wg sync.WaitGroup
    
    for i := 1; i <= 5; i++ {
        wg.Add(1) // 在启动goroutine前增加计数
        go process(i, &wg)
    }
    
    wg.Wait() // 等待所有goroutine完成
    fmt.Println("All processes done")
}

常见错误

  • 忘记调用Done()
  • 在goroutine内部而不是外部调用Add()
  • Add()Done()的调用次数不匹配

五、实际应用场景

5.1 并行处理多个请求

func processRequest(req Request) Result {
    // 处理单个请求的逻辑
    return Result{/*...*/}
}

func handleRequests(requests []Request) []Result {
    results := make([]Result, len(requests))
    var wg sync.WaitGroup
    
    for i, req := range requests {
        wg.Add(1)
        go func(i int, req Request) {
            defer wg.Done()
            results[i] = processRequest(req)
        }(i, req)
    }
    
    wg.Wait()
    return results
}

5.2 数据处理管道

func generator(nums []int) <-chan int {
    out := make(chan int)
    go func() {
        defer close(out)
        for _, n := range nums {
            out <- n
        }
    }()
    return out
}

func square(in <-chan int) <-chan int {
    out := make(chan int)
    go func() {
        defer close(out)
        for n := range in {
            out <- n * n
        }
    }()
    return out
}

func main() {
    // 创建数据处理管道
    nums := []int{2, 3, 4, 5}
    dataStream := generator(nums)
    squaredStream := square(dataStream)
    
    // 消费处理结果
    for result := range squaredStream {
        fmt.Println(result)
    }
}

👨‍💻 关于作者与Gopher部落

"Gopher部落"专注于Go语言技术分享,提供从入门到精通的完整学习路线。

🌟 为什么关注我们?

  1. 系统化学习路径:本系列44篇文章循序渐进,带你完整掌握Go开发
  2. 实战驱动教学:理论结合实践,每篇文章都有可操作的代码示例
  3. 持续更新内容:定期分享最新Go生态技术动态与大厂实践经验
  4. 专业技术社区:加入我们的技术交流群,与众多Go开发者共同成长

📱 关注方式

  1. 微信公众号:搜索 “Gopher部落”“GopherTribe”
  2. CSDN专栏:点击页面右上角"关注"按钮

💡 读者福利

关注公众号回复 “Go并发” 即可获取:

  • 完整Go并发编程示例代码
  • Go并发模式实战指南PDF
  • 高性能Go应用优化技巧

期待与您在Go语言的学习旅程中共同成长!

76、Go并发编程实战:从基础到实战案例解析 本文通过实战案例,深入浅出地介绍了Go语言的并发编程特性。从基础goroutine和channel,到生产者消费者模型,再到Web服务器和并发爬虫,以及并发排序,全方位展示了Go并发编程方面的优势和应用。同时,文中还提到了些实用技巧和最佳实践,帮助读者更好地理解和应用Go并发编程 阅读详情

相关推荐

Go语言学习笔记—golang并发编程goroutine

视频来源于B站Go语言基础进阶视频av56860636 文章为自己整理的学习笔记,侵权即删,谢谢支持!

qq_39280718的博客 648

GolangGo语言中如何通过Goroutine快速实现高并发

并发编程是指在个程序中同时运行多个任务,这些任务可以独立地执行,也可以相互协作。并发编程可以提高程序的执行效率,特别是在处理大量I/O操作或计算密集型任务时。 在Go语言中,并发编程主要通过goroutine和channel来实现。 GoroutineGo语言独有的并发执行单元,它允许函数或方法并发执行,而无需手动管理线程。 Channel是Go语言中进行goroutine间通信和同步的主要机制。

景天科技苑 5万+

23、掌握Go并发编程goroutine与channel的实战技巧

本文深入探讨了Go语言的并发模型,重点介绍了goroutine和channel的使用。我们了解了goroutine的轻量级线程特性和channel在goroutine间传递数据的机制。通过实战案例,我们掌握了在Go中实现并发下载任务和生产者-消费者模式的方法。最后,我们总结了Go并发编程的优势,并强调了在实际应用中选择合适并发模式的重要性。

silenceallat的博客 1126

Go基础Go语言中 Goroutine 和 Channel 的声明与使用

本文介绍了Go语言中的并发编程核心概念,包括Goroutine和Channel。Goroutine是轻量级的执行单元,由Go运行时调度,启动成本低,适合高并发场景。Channel用于goroutine间的通信,支持同步和异步操作。文章详细讲解了Goroutine的启动方式、调度特点以及Channel的声明和使用,并通过示例代码演示了它们的协同工作原理。此外,还提供了并发编程的实践建议,如避免数据竞争、合理使用Goroutine和优雅退出机制。

数据知道的博客 6482

[Go语言入门] 14 Go语言goroutine和通道详解

Go语言入门, Go语言goroutine, Go语言通道, Go语言chan

时空旅客的专栏 700

goroutine详解

目录 、创建 goroutine 1、启动单个协程 2、使用goroutine的问题 3、启动多个goroutine 二、使用匿名函数创建goroutine 、创建 goroutine Go 程序中使用go关键字为个函数创建goroutine个函数可以被创建多个 goroutinegoroutine 必定对应个函数。 go 函数名( 参数列表 ) 使用 go 关键字创建 goroutine 时,被调用函数的返回值会...

大道至简,持之以恒! 672

go语言中goroutine的使用

go中的goroutinego语言在语言级别支持并发的种特性。初接触go的时候对gogoroutine的欢喜至极,实现并发简便到简直bt的地步。但是在项目过程中,越来越发现goroutine个很容易被大家滥用的东西。goroutine把双面刃。这里列举goroutine使用的几宗罪: 1 goroutine的指针传递是不安全的 fun main() { request...

weixin_34125592的博客 388

Go语言之goroutine详解

有很多人对 goroutine还不死很理解,goroutineGo语言中的轻量级线程实现,由 Go 运行时(runtime)管理。Go 程序会智能地将 goroutine 中的任务合理地分配给每个 CPU。 goroutine由来 在编写 Socket 网络程序时,需要提前准备个线程池为每个 Socket 的收发包分配个线程。我们需要在线程数量和 CPU 数量间建立个对应关系,以保证每个任务能及时地被分配到 CPU 上进行处理,同时避免多个任务频繁地在线程间切换执行而损失效率。 虽然,线程池为

zp17834994071的博客 1808

看就懂系列Golanggoroutine和通道

前言 10s后,以下知识点即将靠近: 1.从并发模型说起 2.goroutine的简介 3.goroutine的使用姿势 4.通道(channel)的简介 5.重要的四种通道使用 6.goroutine死锁与处理 7.select的多路复用 8.select死锁 正文 1.从并发模型说起 看过很多大神简介,各种研究高并发,那么就通俗的说下并发。 并发目前来看比较主流的...

咖啡色的羊驼 3万+

Golang 并发编程入门:Goroutine 简介与基础用法

GoroutineGolang 的强大并发工具,其高效、易用的特点让它成为开发者实现并发程序的首选。在这篇博客中,我们介绍了 Goroutine基础用法、参数传递和同步机制,并演示了常见的应用场景和注意事项。

Linke的博客 7169

吃透 Golang 基础Goroutine

基于《Go 语言圣经》对 Golang Goroutine 以及 Channel 的相关内容进行系统性的回顾。

YGGP的博客 1479

14 go语言(golang) - 并发编程goroutine和channel

并发编程是指在计算机程序中同时执行多个计算任务的技术。这种编程方式旨在利用多核处理器的计算能力,提高程序的执行效率和响应速度。而Go 语言的并发编程主要依赖于两个核心概念:Goroutine 和 Channel。

瑞瑞的博客 1062

Go并发编程系列(六)go并发机制之goroutine调度和goroutine阻塞

系列文章目录 展开/收起 Go并发编程系列) 多进程编程与进程同步之Pipe管道 Go并发编程系列(二) 多进程编程与进程同步之Signal信号量 Go并发编程系列(三) 多进程编程与进程同步之Socket编程 Go并发编程系列(四) 多线程基本概念与线程模型 Go并发编程系列(五) go并发机制之MPG模型 ...

jqsfjqsf的博客 2477

Go并发编程-goroutine

本文是书籍:Go 并发编程实战 》的读书笔记.

Duramentee的博客 859

GolangGo语言编程思想(五):Goroutine

GolangGoroutine 进行学习,并复习了协程的概念。

YGGP的博客 1335

Golang Goroutine

什么是 Goroutine goroutineGo 并行设计的核心。goroutine 说到底其实就是协程,它比线程更小,十几个 goroutine 可能体现在底层就是五六个线程,Go 语言内部帮你实现了这些 goroutine 之间的内存共享。 执行 goroutine 只需极少的栈内存(大概是4~5KB),当然会根据相应的数据伸缩。也正因为如此,可同时运行成千上万个并发任务。goroutine 比 thread 更易用、更高效、更轻便。 般情况下,个普通计算机跑几十个线程就有点负载过大了,但是

李培冠的博客 9707

玩转goroutineGolang中对goroutine的理解

Go语言的 goroutine种轻量级的线程管理机制,它是 Go 提供的并发编程的核心之。与传统的线程相比,goroutine 的创建和销毁开销非常小,可以轻松地处理成千上万的并发任务。理解 goroutine 的机制对于高效编写 Go 并发代码非常重要。在 Go 中,goroutine个由 Go 运行时(runtime)管理的轻量级线程。你可以使用 go 关键字来启动个新的 goroutine,它会在后台并发执行某个函数。不同于传统的线程,goroutine 的创建和销毁非常快速且开销小。

程序员林北北的博客 1097

Golang标准库中的并发编程goroutine与channel详解

本文旨在全面解析Golang标准库中的并发编程核心组件——goroutine和channel。我们将深入探讨其设计原理、实现机制、使用模式以及性能特征,帮助开发者理解并掌握Golang独特的并发编程范式。文章首先介绍并发编程基础理论,然后深入goroutine和channel的实现原理,接着通过实际案例展示应用场景,最后讨论高级主题和最佳实践。goroutineGolang中的轻量级线程,由运行时管理channel:Golang提供的线程安全通信管道CSP模型。

AI Agent Harness Engineering 800
上一篇: 【Go语言爬虫系列06】模拟登录与会话维持
下一篇: 【Go语言学习系列29】并发编程(二):channel基础
Gopher部落
博客等级 码龄1年 784粉丝 92原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Gopher部落

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值