线程安全&锁

定时器&一次性定时器

  • 定时器
func main() {
   ticker := time.NewTicker(time.Second)
   //ticker.C是一个只读的chan,所以直接可以使用for range读取
   for v := range ticker.C {
      fmt.Printf("hello %v\n",v)   //按秒输出
   }
}
  • 一次性定时器
func main() {
   select {
   case <- time.After(time.Second):
      fmt.Printf("after\n")
   }
}
  • 超时控制

func queryDb(ch chan int) {
   //模拟DB查询
   time.Sleep(time.Second)  //模拟查询1秒
   ch <- 100
}

func main() {
   ch := make(chan int)
   go queryDb(ch)   //异步查询
   t := time.NewTicker(time.Second*3)    //定时3秒
   select {
   case v:= <- ch:
      fmt.Printf("result:%v\n",v)   //
   case <- t.C:
      fmt.Printf("timeout\n")
   }
}
  • 异常处理: 记录异常,不至于进程被panic等问题
func main() {
   go func() {
      // 使用recover()可以捕获goroutine的任何异常,从而不至于使得整个进程挂掉
      defer func() {
         err := recover()
         if err != nil {
            fmt.Printf("catch a panic,err:%v \n",err)
         }
      }()

      var p *int
      *p = 1000
      fmt.Printf("hello")
   }()
   var i int
   for {
      fmt.Printf("%d\n",i)
      time.Sleep(time.Second)
   }
}

线程安全

  • 典型的例子

    • 多个goroutine同时操守做一个资源,这个资源叫做临界区
    • 现实生活中的十字路口,通过红绿灯来实现线程安全
    • 火车上卫生间,通过互斥锁实现线程安全
  • 实际例子: x=x+1
    • 先从内存中取出x的值
    • CPU进行计算+1
    • 然后将x+1的结果放到内存

解决线程冲突问题

  • 以下代码的输出数据不是2000000
var count int

func test1(waitGroup *sync.WaitGroup) {
   for i:=0;i<1000000;i++ {
      count ++
   }
   waitGroup.Done()
}

func test2(waitGroup *sync.WaitGroup) {
   for i:=0;i<1000000;i++ {
      count ++
   }
   waitGroup.Done()
}

func main() {
   var wg sync.WaitGroup
   wg.Add(2)
   go test1(&wg)
   go test2(&wg)
   wg.Wait()
   fmt.Printf("count=%d\n",count)
}

互斥锁

  • 同时且只有一个线程进入临界区,其他的线程则在等待锁
  • 当互斥锁释放之后,等待锁的线程才可以获取锁进入临界区
  • 多个线程同时等待同一个锁,唤醒的策略是随机的

修复线程问题,使其正确输出

var count int
var mutex sync.Mutex

func test1(waitGroup *sync.WaitGroup) {
   for i:=0;i<1000000;i++ {
      mutex.Lock()
      count ++
      mutex.Unlock()
   }
   waitGroup.Done()
}

func test2(waitGroup *sync.WaitGroup) {
   for i:=0;i<1000000;i++ {
      //加锁
      mutex.Lock()
      count ++
      //解锁
      mutex.Unlock()
   }
   waitGroup.Done()
}

func main() {
   var wg sync.WaitGroup
   wg.Add(2)
   go test1(&wg)
   go test2(&wg)
   wg.Wait()
   fmt.Printf("count=%d\n",count)
}

读写锁

  • 使用场景: 读多写少的场景
  • 分为两种角色: 读锁和写锁
  • 当一个goroutine获取写锁之后,其他的goroutine获取写锁或读锁都会等待
  • 当一个goroutine获取读锁之后,其他的goroutine获取写锁都会等待,但其他goroutine获取读锁时,都会继续获得锁
var rwlock sync.RWMutex
var wg sync.WaitGroup
var counter int

func writer() {
   for i := 0;i<1000;i++ {
      rwlock.Lock()
      counter++
      rwlock.Unlock()
      time.Sleep(10*time.Millisecond)
   }
   wg.Done()
}

func reader()  {
   for i:=0;i<1000;i++ {
      rwlock.RLock()
      fmt.Printf("counter=%d\n",counter)
      time.Sleep(time.Millisecond)
      rwlock.RUnlock()
   }
   wg.Done()
}

func main() {
   wg.Add(1)
   go writer()
   for i:=0;i<10;i++ {
      wg.Add(1)
      go reader()
   }
   wg.Wait()
}
  • 对比读写锁与互斥锁的性能

var rwlock sync.RWMutex
var wg sync.WaitGroup
var mlock sync.Mutex
var counter int

func writer() {
   for i := 0;i<1000;i++ {
      rwlock.Lock()
      counter++
      rwlock.Unlock()
      time.Sleep(10*time.Millisecond)
   }
   wg.Done()
}

func reader()  {
   for i:=0;i<1000;i++ {
      rwlock.RLock()
      //fmt.Printf("counter=%d\n",counter)
      time.Sleep(time.Millisecond)
      rwlock.RUnlock()
   }
   wg.Done()
}

func writer_mutex() {
   for i := 0;i<1000;i++ {
      mlock.Lock()
      counter++
      mlock.Unlock()
      time.Sleep(10*time.Millisecond)
   }
   wg.Done()
}

func reader_mutex()  {
   for i:=0;i<1000;i++ {
      mlock.Lock()
      //fmt.Printf("counter=%d\n",counter)
      time.Sleep(time.Millisecond)
      mlock.Unlock()
   }
   wg.Done()
}

func main() {
   start := time.Now().UnixNano()
   wg.Add(1)
   go writer()
   for i:=0;i<10;i++ {
      wg.Add(1)
      go reader()
   }
   wg.Wait()
   end := time.Now().UnixNano()
   cost_time := (float64(end)-float64(start))/1000/1000/1000
   fmt.Printf("RWlock总耗时:%f s\n",cost_time)

   start_m := time.Now().UnixNano()
   wg.Add(1)
   go writer_mutex()
   for i:=0;i<10;i++ {
      wg.Add(1)
      go reader_mutex()
   }
   wg.Wait()
   end_m := time.Now().UnixNano()
   cost_time_m := (float64(end_m)-float64(start_m))/1000/1000/1000
   fmt.Printf("Mutexlock总耗时:%f s\n",cost_time_m)
}

原子操作

  • 计数需求,会使用到原子操作
  • 加锁代价会比较耗时,需要上下文切换
  • 针对基本数据类型,可以使用原子操作确保线程安全
  • 原子操作在用户态就可以完成,因此性能要比互斥锁要高
var counts int32

func test3() {
   for i:=0;i<1000000;i++ {
      //counts ++,替换成原子加1操作
      atomic.AddInt32(&counts,1)
   }
}

func test4() {
   for i:=0;i<1000000;i++ {
      atomic.AddInt32(&counts,1)
   }
}

func main() {
   go test3()
   go test4()
   time.Sleep(time.Second)
   fmt.Printf("counts=%d\n",counts)
}

练习

  • 采用多线程遍历目录,然后生成缩略图
  • 参考代码(单线程模式)
const DEFAULT_MAX_WIDTH float64 = 64
const DEFAULT_MAX_HEIGHT float64 = 64

// 计算图片缩放后的尺寸
func calculateRatioFit(srcWidth, srcHeight int) (int, int) {
   ratio := math.Min(DEFAULT_MAX_WIDTH/float64(srcWidth), DEFAULT_MAX_HEIGHT/float64(srcHeight))
   return int(math.Ceil(float64(srcWidth) * ratio)), int(math.Ceil(float64(srcHeight) * ratio))
}

// 生成缩略图
func makeThumbnail(imagePath, savePath string) error {

   file, _ := os.Open(imagePath)
   defer file.Close()

   img, _, err := image.Decode(file)
   if err != nil {
      return err
   }

   b := img.Bounds()
   width := b.Max.X
   height := b.Max.Y

   w, h := calculateRatioFit(width, height)

   fmt.Println("width = ", width, " height = ", height)
   fmt.Println("w = ", w, " h = ", h)

   // 调用resize库进行图片缩放
   m := resize.Resize(uint(w), uint(h), img, resize.Lanczos3)

   // 需要保存的文件
   imgfile, err := os.Create(savePath)
   if err != nil {
      fmt.Printf("os create file, err:%v\n", err)
      return err
   }
   defer imgfile.Close()

   // 以PNG格式保存文件
   err = png.Encode(imgfile, m)
   if err != nil {
      return err
   }

   return nil
}

func main() {
   var imageFile string
   var saveFile string

   flag.StringVar(&imageFile, "file", "", "--image file")
   flag.StringVar(&saveFile, "dest", "", "--dest file")
   flag.Parse()

   if len(imageFile) == 0 || len(saveFile) == 0 {
      fmt.Printf("%s -file image filename -dest dest filename\n", os.Args[0])
      return
   }

   err := makeThumbnail(imageFile, saveFile)
   if err != nil {
      fmt.Printf("make thumbnail failed, err:%v\n", err)
      return
   }
   fmt.Printf("make thumbnail succ, path:%v\n", saveFile)
}