基本概念

串行、并发与并行

串行:按照先后顺序来执行任务
并发:同一时间段内执行多个任务
并行:同一时刻执行多个任务

进程、线程和协程

  • 进程(Process):程序在操作系统中的一次执行过程,是系统进行资源分配和调度的一个独立单位
  • 线程(Thread):操作系统基于进程开启的轻量级进程,是操作系统调度执行的最小单位
  • 协程(coroutine):非操作系统提供,而是由用户自行创建和控制的用户态“进程”,比线程更轻量级

goroutine

goroutine是go语言并发的核心
区别于操作系统线程由系统的内核进行调度,goroutinegoruntime负责调度
比如会将mgoroutine合理地分配给n个操作系统线程,类似于m:n的调度机制,从而不再需要开发者手动维护一个线程池

goroutine是go程序中最基本的并发执行单元,每一个Go程序都至少有一个goroutine,也就是main goroutine

当你需要让某个任务并发执行的时候,只需要将这一部分任务包装成为一个函数,开启一个goroutine来执行这个函数

go关键字

创建一个新的goroutine,只需要使用go关键字即可

  1. go f()
  2. // 匿名函数也可以
  3. go func(){
  4. }()

启动goroutine

串行执行的代码

  1. package main
  2. import (
  3. "fmt"
  4. )
  5. func hello() {
  6. fmt.Println("hello")
  7. }
  8. func main() {
  9. hello()
  10. fmt.Println("你好")
  11. }

由于是串行执行,所以结果如下所示:

  1. hello
  2. 你好

那么,在hello()之前使用go开启一个goroutine去执行,结果如何

  1. func main() {
  2. go hello() // 启动另外一个goroutine去执行hello函数
  3. fmt.Println("你好")
  4. }

结果发现,输出的结果如下

  1. 你好

其实在 Go 程序启动时,Go 程序就会为 main 函数创建一个默认的 goroutine 。在上面的代码中我们在 main 函数中使用 go 关键字创建了另外一个 goroutine 去执行 hello 函数,而此时 main goroutine 还在继续往下执行,我们的程序中此时存在两个并发执行的 goroutine。当 main 函数结束时整个程序也就结束了,同时 main goroutine 也结束了,所有由 main goroutine 创建的 goroutine 也会一同退出。也就是说我们的 main 函数退出太快,另外一个 goroutine 中的函数还未执行完程序就退出了,导致未打印出“hello”。

goroutine02.png
我们可以使用time.Sleep(time.Second)来让main goroutine等待1s后再退出
但这种方式并不算优雅,有可能会停止等待较长的时间
可以换用sync包下面的相关api来帮我们完成相关的任务

  1. package main
  2. import (
  3. "fmt"
  4. "sync"
  5. )
  6. // 声明全局等待组变量
  7. var wg sync.WaitGroup
  8. func hello() {
  9. fmt.Println("hello")
  10. wg.Done() // 告知当前goroutine完成
  11. }
  12. func main() {
  13. wg.Add(1) // 登记1个goroutine
  14. go hello()
  15. fmt.Println("你好")
  16. wg.Wait() // 阻塞等待登记的goroutine完成
  17. }

ws.Add(x)会在组中登记x个goroutine
ws.Wait()会等待直到登记的goroutine数减少到0

启动多个goroutine

假设我们现在需要以随机的顺序输出0~10十个数,那么可以使用如下代码

  1. package main
  2. import "sync"
  3. var wg sync.WaitGroup
  4. func Hello(x int) {
  5. defer wg.Done()
  6. println("Hello:", x)
  7. }
  8. func main() {
  9. wg.Add(10)
  10. for i := 1; i <= 10; i++ {
  11. go Hello(i)
  12. }
  13. wg.Wait()
  14. }

每次打印的顺序都是不一样的,因为10个goroutine是并发执行的,并且goroutine的调度是随机的

channel

与Java中线程之间的通信相似,在go中,单纯的将函数并发执行是没有任何意义的
函数与函数之间需要交换数据才能体现并发执行的意义

虽然可以使用共享某一块内存的方法来实现内存的交换,但是共享内存在不同的goroutine中会发生竞态问题(读写不一致)。 为了保证数据交换的正确性,很多并发模型采用的方式来对内存进行互斥加锁,但这也会带来一定的性能问题

goroutine是go程序并发的执行体,channel就是它们之间的连接,通过channel,是可以让一个goroutine发送特定的值到另外一个goroutine的通信机制

Go 语言中的通道(channel)是一种特殊的类型。通道像一个传送带或者队列,总是遵循先入先出(First In First Out)的规则,保证收发数据的顺序。每一个通道都是一个具体类型的导管,也就是声明channel的时候需要为其指定元素类型。

channel类型

声明通道类型的变量格式如下:

  1. var 变量名称 chan 元素类型
  1. var ch1 chan int // 声明一个传递整型的通道
  2. var ch2 chan bool // 声明一个传递布尔型的通道
  3. var ch3 chan []int // 声明一个传递int切片的通道

channel零值

未初始化的通道类型变量,默认零值是nil

  1. var ch chan int
  2. fmt.Println(ch) // <nil>

channel初始化

声明的通道类型变量需要使用内置的make函数初始化之后才能使用

  1. make(chan 元素类型, [缓冲大小])

其中,

  • channel的缓冲大小是可选的
    1. ch1 := make(chan int)
    2. ch2 := make(chan int, 2)

    channel操作

    通道共有发送sendreceiveclose三种操作,而发送和接收操作都使用<-符号
    定义一个通道:
    1. ch := make(chan int)
    发送
    讲一个值发送到通道中
    1. ch <- 10
    接收
    从一个通道中接受值
    1. x := <- ch // 从ch中接收值并赋值给变量x
    2. <-ch // 从ch中接收值,忽略结果
    关闭
    使用内置的close关键字来关闭通道
    1. close(ch)
    注意:一个通道值是可以被垃圾回收掉的。通道通常由发送方执行关闭操作,并且只有在接收方明确等待通道关闭的信号时才需要执行关闭操作。它和关闭文件不一样,通常在结束操作之后关闭文件是必须要做的,但关闭通道不是必须的。
    关闭后的通道有如下特点:
  1. 对一个关闭的通道再发送值就会导致panic
  2. 对一个关闭的通道进行接收会一直获取值直到通道为空
  3. 对一个关闭的并且没有值的通道再执行接收操作会得到对应类型的零值
  4. 关闭一个已经关闭的通道会导致panic

    无缓冲的通道

    无缓冲的通道又被称为阻塞的通道,如下所示:
    1. func main() {
    2. ch := make(chan int)
    3. ch <- 10
    4. fmt.Println("发送成功")
    5. }
    上述代码能够通过编译,但是在运行过程中会出现程序死锁错误: ```go fatal error: all goroutines are asleep - deadlock!

goroutine 1 [chan send]: main.main() …/main.go:8 +0x54

  1. > 因为我们使用`ch := make(chan int)`创建的是无缓冲的通道,无缓冲的通道只有在有接收方能够接收值的时候才能发送成功,否则会一直处于等待发送的阶段。同理,如果对一个无缓冲通道执行接收操作时,没有任何向通道中发送值的操作那么也会导致接收操作阻塞。就像田径比赛中的4x100接力赛,想要完成交棒必须有一个能够接棒的运动员,否则只能等待。简单来说就是无缓冲的通道必须有至少一个接收方才能发送成功。
  2. 上面的代码会阻塞在`ch <- 10`,因为没有变量可以接收通道中的值<br />因此可以新建一个`goroutine`去接收通道中的值
  3. ```go
  4. func recv(c chan int) {
  5. ret := <-c
  6. fmt.Println("接收成功", ret)
  7. }
  8. func main() {
  9. ch := make(chan int)
  10. go recv(ch) // 创建一个 goroutine 从通道接收值
  11. ch <- 10
  12. fmt.Println("发送成功")
  13. }

首先无缓冲通道ch上的发送操作会阻塞,直到另一个 goroutine 在该通道上执行接收操作,这时数字10才能发送成功,两个 goroutine 将继续执行。相反,如果接收操作先执行,接收方所在的 goroutine 将阻塞,直到 main goroutine 中向该通道发送数字10。 使用无缓冲通道进行通信将导致发送和接收的 goroutine 同步化。因此,无缓冲通道也被称为同步通道

有缓冲的通道

在使用make函数的时候,可以在第二个参数中设置缓冲区的大小

  1. func main() {
  2. ch := make(chan int, 1) // 创建一个容量为1的有缓冲区通道
  3. ch <- 10
  4. fmt.Println("发送成功")
  5. }

多返回值模式

对于一个已经关闭通道我们再执行操作,有时候会导致这样或那样的异常
那么如何判断一个通道是否关闭?
我们可以在接收值的时候,使用两个参数来接受返回值,如下所示:

  1. func f2(ch chan int) {
  2. for {
  3. v, ok := <-ch
  4. if !ok {
  5. fmt.Println("通道已关闭")
  6. break
  7. }
  8. fmt.Printf("v:%#v ok:%#v\n", v, ok)
  9. }
  10. }
  11. func main() {
  12. ch := make(chan int, 2)
  13. ch <- 1
  14. ch <- 2
  15. close(ch)
  16. f2(ch)
  17. }

其中:

  • value:从通道中取出的值,如果通道被关闭则返回对应类型的零值。
  • ok:通道ch关闭时返回 false,否则返回 true。

for range接收值

通常我们会选择使用for range循环从通道中接收值,当通道被关闭后,会在通道内的所有值被接收完毕后会自动退出循环。上面那个示例我们使用for range改写后会很简洁。

  1. package main
  2. import (
  3. "fmt"
  4. "sync"
  5. )
  6. var wg sync.WaitGroup
  7. func ReadData(ch chan int) {
  8. defer wg.Done()
  9. for data := range ch {
  10. fmt.Println("data is:", data)
  11. }
  12. }
  13. func WriteData(ch chan int) {
  14. defer wg.Done()
  15. for i := 1; i <= 10; i++ {
  16. ch <- i
  17. }
  18. close(ch)
  19. }
  20. func main() {
  21. ch := make(chan int)
  22. wg.Add(2)
  23. go ReadData(ch)
  24. go WriteData(ch)
  25. wg.Wait()
  26. }

单向通道

总结

channel.png

select多路复用

并发安全和锁

有时候我们的代码中可能存在多个goroutine同时操作一个资源的情况,从而导致出现竞态问题
这与Java中多线程操作同一份数据是相同的原理
比如我们起10个线程,每个线程都对某个变量执行1000次+1操作,最后变量的值很大概率不会为1000
原因就是因为可能修改操作存在覆盖的情况
image.png

互斥锁

互斥锁是控制共享资源访问的一种情况,能够保证同一时间内只有一个goroutine可以访问共享资源

方法名 功能
func (m *Mutex) Lock() 获取互斥锁
func (m *Mutex) Unlock() 释放互斥锁

使用互斥锁可以使每次只有一个goroutine能够操作共享变量,从而保证数据的正确性

  1. package main
  2. import (
  3. "fmt"
  4. "sync"
  5. )
  6. var (
  7. sum = 0
  8. wg sync.WaitGroup
  9. m sync.Mutex
  10. )
  11. func HandleAdd() {
  12. defer wg.Done()
  13. for i := 1; i <= 1000; i++ {
  14. m.Lock()
  15. sum += 1
  16. m.Unlock()
  17. }
  18. }
  19. func main() {
  20. wg.Add(10)
  21. for i := 0; i < 10; i++ {
  22. go HandleAdd()
  23. }
  24. wg.Wait()
  25. fmt.Println("sum:", sum)
  26. }

在进行加锁之后,无论运行多少次,最后的结果一定都是10 * 1000 = 10000

读写互斥锁

互斥锁是完全互斥的,但是实际上
使用互斥