并发Concurrency缓存
不少人都是冲着 Go 大肆宣扬的高并发而忍不住跃跃欲试,但其实从源码的解析来看,goroutine 只是由官方实现的超级“线程池”而已。不过话说回来,每一个实例 4~5KB的栈内存占用和因为实现机制而大幅减小的建立和销毁开销,是制造 Go 号称的高并发的根本缘由。另外,goroutine 的简单易用,也在语言层面上给予了开发者巨大的遍历。安全
高并发当中必定要注意:并发可不是并行。多线程
并发主要由切换时间片来实现“同时”运行,而并行则是直接利用多核实现多线程的运行,但 Go 能够设置使用核数,以发挥多核计算机的处理能力。并发
goroutine 奉行经过通讯来共享内存,而不是共享内存来通讯。Go 语言主要是经过 Channe 技术通讯来实现内存的共享的,由于 channel 是一个通道,Go 是经过通道来通讯进行内存数据的共享。异步
对于初学者,goroutine直接理解成为线程就能够了。当对一个函数调用go,启动一个goroutine的时候,就至关于起来一个线程,执行这个函数。函数
实际上,一个goroutine并不至关于一个线程,goroutine的出现正是为了替代原来的线程概念成为最小的调度单位。一旦运行goroutine时,先去当先线程查找,若是线程阻塞了,则被分配到空闲的线程,若是没有空闲的线程,那么就会新建一个线程。注意的是,当goroutine执行完毕后,线程不会回收推出,而是成为了空闲的线程。高并发
让咱们先来看一个最简单的 goroutine 案例:spa
package main import ( "fmt" "time" ) func main() { //启用一个goroutine go GoRun() //这里加一个休眠是由于主线程已启动就执行完毕消亡来,子线程还来不及执行 time.Sleep(2 * time.Second) } func GoRun() { fmt.Println("Go Go Go!!!") }
运行结果:线程
1
|
Go Go Go!!!
|
Channelcode
1. Channel 是 goroutine 沟通的桥梁,大都是阻塞同步的
2. 它是经过 make 建立,close 关闭
3. Channel 是引用类型
4. 可使用 for range 来迭代,不断操做 channel
5. 能够设置单向 或 双向通道
6. 能够设置缓存大小,在未被填满前不会发生阻塞,即它是异步的
那么针对上溯代码咱们不使用休眠,而使用 Channel 来实现咱们想要的效果:
channel的意思用白话能够这么理解:主线程告诉你们你开goroutine能够,可是我在个人主线程开了一个管道,你作完了你要作的事情以后,往管道里面塞个东西告诉我你已经完成了。
package main import ( "fmt" ) func main() { //声明建立一个通道,存储类型为bool型 c := make(chan bool) //启用一个goroutine,使用的是匿名方法方式 go func() { fmt.Println("Go Go Go!!!") c <- true //向 channel 中存入一个值 }() //当程序执行完毕以后再从通道中取出刚才赋的值 <- c /** 主线程启动了一个匿名子线程后就执行到了:<-c , 到达这里主线程就被阻塞了。只有当子线程向通道放入值后主线程阻塞才会被释放 其实这个就是完成了消息的发送 */ }
上溯代码能够修改成使用 for range 来进行消息的发送:
package main import ( "fmt" ) func main() { //声明建立一个通道,存储类型为bool型,这里设置的channel就是双向通道,既能够存也能够取 c := make(chan bool) //启用一个goroutine,使用的是匿名方法方式 go func() { fmt.Println("Go Go Go!!!") c <- true //向 channel 中存入一个值 close(c) //切记若是使用for range来进行取值的时候须要在某个地方进行关闭,不然会发生死锁 }() //从通道中循环取出刚才赋的值 for v := range c { fmt.Println(v) } }
从以上代码能够看出,通常使用的 Channel 都是双向通道的,即:既能够取又能够存。那单向通道通常用于什么场景下呢?
单向通道又分为两种,一种是只能读取,一种是只能存放,通常用于参数类型传递使用。例若有个方法返回一个Channel类型,通常要求操做只能从这里取,那么此时它的用途就是只能存放类型,若是此时你不当心存数据,此时会发生panic 致使程序奔溃发生异常。那么读取类型的Channel同理。这样作其实也是为了程序的安全性与健壮性,防止一些误操做。
这里还有一个知识点,就是有缓存的channel 和 无缓存的channel的区别?
make(chan bool, 1) 表示带有一个缓存大小的缓存channel
make(chan bool) 或 make(chan bool, 0) 表示一个无缓存的channel
无缓存channel是阻塞的即同步的,而有缓存channel是异步的。怎么说?好比
c1:=make(chan int) 无缓冲
c2:=make(chan int,1) 有缓冲
c1 <- 1 //往无缓存通道放入数据 1
无缓冲的 不只仅是 向 c1 通道放 1 并且必定要有别的线程 <- c1 接手了这个参数,那么 c1 <- 1 才会继续下去,要否则就一直阻塞着
而 c2 <- 1 则不会阻塞,由于缓冲大小是1 只有当放第二个值的时候第一个还没被人拿走,这时候才会阻塞。
打个比喻
无缓冲的 就是一个送信人去你家门口送信 ,你不在家 他不走,你必定要接下信,他才会走。
无缓冲保证信能到你手上
有缓冲的 就是一个送信人去你家仍到你家的信箱 转身就走 ,除非你的信箱满了 他必须等信箱空下来。
有缓冲的 保证 信能进你家的邮箱
那若是在多线程环境下,多个线程并发抢占会使得打印不是按照顺序来,那么咱们如何确保子线程所有结束完以后主线程再中止呢?主要有两种方式:
第一种:使用阻塞channel
package main import ( "fmt" "runtime" ) func main() { fmt.Println("当前系统核数:", runtime.NumCPU()) runtime.GOMAXPROCS(runtime.NumCPU()) //设置当前程序执行使用的并发数 //定义一个阻塞channel c := make(chan bool) //这里启动10个线程运行 for i :=0; i < 10; i++ { go goRun(c, i) } //咱们知道一共有10次循环,那么在这里就取10次,那么子线程goRun只有都执行完了主线程取才能完毕,由于这里也循环取10次,不够的话会被阻塞 for i := 0; i < 10; i++ { <- c } } func goRun(c chan bool, index int) { a := 1 //循环叠加1千万次并返回最终结果 for i := 0; i < 10000000; i++ { a += i } fmt.Println("线程序号:", index, a) //往阻塞队列插入内容 c <- true }
打印结果:
1
2
3
4
5
6
7
8
9
10
11
|
当前系统核数: 4
线程序号: 9 49999995000001
线程序号: 5 49999995000001
线程序号: 2 49999995000001
线程序号: 0 49999995000001
线程序号: 6 49999995000001
线程序号: 1 49999995000001
线程序号: 3 49999995000001
线程序号: 7 49999995000001
线程序号: 8 49999995000001
线程序号: 4 49999995000001
|
从打印结果能够看出,多线程环境下运行代码打印和顺序没有关系,由 CPU 调度本身决定,多运行几回打印结果必定不会同样,就是这个道理。
第二种:使用同步机制
package main import ( "fmt" "runtime" "sync" ) func main() { fmt.Println("当前系统核数:", runtime.NumCPU()) runtime.GOMAXPROCS(runtime.NumCPU()) //设置当前程序执行使用的并发数 /** waitGroup即任务组,它的最要做用就是用来添加须要工做的任务,没完成一次任务就标记一次Done,这样任务组的待完成量会随之减1 那么主线程就是来判断任务组内是否还有未完成任务,当没有未完成当任务以后主线程就能够结束运行,从而实现了与阻塞队列相似的同步功能 这里建立了一个空的waitGroup(任务组) */ wg := sync.WaitGroup{} wg.Add(10) //添加10个任务到任务组中 //这里启动10个线程运行 for i :=0; i < 10; i++ { go goRun(&wg, i) } wg.Wait() } /** 这里须要传入引用类型不能传入值拷贝,由于在子线程中是须要执行Done操做,相似与咱们修改结构体中的int变量主词递减,若是是只拷贝的话是不会影响原类型内的数据 这样就会发生死循环致使死锁程序奔溃,报错异常为:fatal error: all goroutines are asleep - deadlock! */ func goRun(wg *sync.WaitGroup, index int) { a := 1 //循环叠加1千万次并返回最终结果 for i := 0; i < 10000000; i++ { a += i } fmt.Println("线程序号:", index, a) wg.Done() }
打印结果:
1
2
3
4
5
6
7
8
9
10
11
|
当前系统核数: 4
线程序号: 1 49999995000001
线程序号: 5 49999995000001
线程序号: 0 49999995000001
线程序号: 9 49999995000001
线程序号: 4 49999995000001
线程序号: 3 49999995000001
线程序号: 2 49999995000001
线程序号: 6 49999995000001
线程序号: 8 49999995000001
线程序号: 7 49999995000001
|
以上全部讲解到的都是基于一个 channel 来讲的,那么当咱们有多个 channel 的时候又该怎么处理呢?
Go 语言为咱们提供了一种结构名为:Select,它和 switch 是很是类似的,switch 主要用于普通类型作判断的,而 select 主要是针对多个 channel 来进行判断的。
Select
1. 可处理一个或多个 channel 的发送与接收
2. 同时有多个可用的 channel 时,能够按随机顺序处理
3. 可使用空的 select 来阻塞 main 函数
4. 它还能够设置超时时间
案例一:用多个 channel 来接收数据:
package main import ( "fmt" ) /** 数据接收处理 */ func main() { //批量初始化channel c1, c2 := make(chan int), make(chan string) //建立一个启动goroutine的匿名函数 go func() { /** 建立一个无限循环语句,使用select进行处理 咱们通常都是使用这种方式来处理不断的消息发送和处理 */ for { select { case v, ok := <- c1: if !ok { break } fmt.Println("c1:", v) case v, ok := <- c2: if !ok { break } fmt.Println("c2:", v) } } }() c1 <- 1 c2 <- "liang" c1 <- 2 c2 <- "xuli" //关闭channel close(c1) close(c2) }
打印结果:
1
2
3
4
|
c1: 1
c2: liang
c1: 2
c2: xuli
|
案例二:用多个 channel 来发送数据:
package main import ( "fmt" ) /** 数据接收处理,这里实现随机接收0、1 数字并打印 */ func main() { c := make(chan int) num := 0 //建立一个启动goroutine的匿名函数 go func() { for v := range c { num++ if num & 15 == 0 { fmt.Println() } fmt.Print(v, " ") } }() for { select { case c <- 0: case c <- 1: } } }
打印结果:(只是粘贴了其中一部分)
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
|
1 1 0 1 1 0 0 0 0 1 0 1 0 0 1 0
0 1 0 1 1 0 1 1 0 0 1 1 1 0 0 1
1 1 1 1 0 0 1 1 0 0 0 0 0 1 0 1
0 1 1 0 0 0 1 1 1 0 0 0 1 1 0 0
1 1 1 0 0 0 0 0 1 0 1 1 1 1 1 1
0 0 1 0 0 0 0 1 0 1 1 0 1 1 1 0
1 1 1 0 0 0 1 1 1 0 0 0 1 0 0 1
1 0 1 1 1 1 0 0 1 0 0 1 1 1 1 1
1 1 0 0 0 0 0 1 1 1 0 1 1 0 1 1
1 1 0 0 0 0 1 0 0 1 0 1 0 0 1 1
0 0 0 1 1 1 1 1 0 0 0 1 0 0 0 1
0 1 1 0 1 0 1 0 1 0 0 1 1 0 0 0
0 1 0 0 0 1 0 0 0 1 1 0 0 0 1 1
1 1 0 1 1 1 1 0 0 0 1 0 0 0 1 1
0 1 1 0 0 1 1 0 1 0 1 0 0 0 0 1
0 1 1 0 0 0 1 1 0 1 0 1 0 0 0 0
0 0 0 1 0 0 0 1 1 1 1 1 1 1 1 0
|
案例三:用 channel 设置超时时间:
package main import ( "fmt" "time" ) /** select的超时应用 */ func main() { c := make(chan bool) select { case v := <- c : fmt.Println(v) case <- time.After(3 * time.Second): fmt.Println("TimeOut!!!") } }
打印结果:
1
|
TimeOut!!!
|