go设置后端启动_Go语言基础（十四）

Go语言基础（十四）

一、Redis

二、NSQ

三、Go module

四、Context......0

---

一、Redis

Redis是一个key-value存储系统。和Memcached类似，它支持存储的value类型相对更多，包括string(字符串)、list(链表)、set(集合)、zset(sorted set --有序集合)和hash（哈希类型）。此外还有带范围查询的排序集合(sorted sets)、位图(bitmaps)、hyperloglogs、带半径查询和流的地理空间索引等数据结构(geospatial indexes)。

Redis应用场景：

• cache缓存，减轻数据库压力；
• 利用LIST可以实现简单队列
• 排行榜。计数场景，比如微博中的关注数和粉丝数。热门排行榜等。

1、redis安装
redis下载：https://github.com/MicrosoftArchive/redis/releases/tag/win-3.2.100

第一步：下载zip压缩包，安装完成之后配置文件：

第二步：添加环境变量

第三步：启动cmd，输入命令：redis-server --service-install redis.windows.conf

部署redis为windows下的服务

第四步：启动服务命令：redis-server --service-start

第五步：输入命令：redis-cli 接着输入：auth 123456

2、Go操作redis

Go语言中使用第三方库https://github.com/go-redis/redis连接Redis数据库并进行操作。使用以下命令下载并安装:

go get -u github.com/go-redis/redis

连接redis：

package main

import (
	"fmt"

	"github.com/go-redis/redis"
)

var redisdb *redis.Client

func initClient() (err error) {
	redisdb = redis.NewClient(&redis.Options{
		Addr:     "localhost:6379",
		Password: "123456",
		DB:       0,
	})
	_, err = redisdb.Ping().Result()
	if err != nil {
		return err
	}
	return nil
}

func main()  {
	err := initClient()
	if err != nil {
		fmt.Printf("connect redis failed, err:%v", err)
		return
	}
	fmt.Println("连接redis成功~！")
}

Set/Get示例：

func redisExample() {
	err := redisdb.Set("score", 100, 0).Err() // key, value, 超时时间
	if err != nil {
		fmt.Printf("set score failed, err:%v", err)
		return
	}

	val, err := redisdb.Get("score").Result()
	if err != nil {
		fmt.Printf("get score failed, err:%v", err)
		return
	}
	fmt.Println("score", val)

	val2, err := redisdb.Get("name").Result()
	if err == redis.Nil {
		fmt.Println("name does not exist")
	} else if err != nil {
		fmt.Printf("get name failed, err:%v", err)
		return
	} else {
		fmt.Println("name", val2)
	}
}

zset示例：

func redisExample2() {
	zsetKey := "language_rank"
	language := []*redis.Z{
		&redis.Z{Score: 90.0, Member: "Golang"},
		&redis.Z{Score: 98.0, Member: "Java"},
		&redis.Z{Score: 95.0, Member: "Python"},
		&redis.Z{Score: 97.0, Member: "JavaScript"},
		&redis.Z{Score: 99.0, Member: "C/C++"},
	}
	// ZADD() 把元素都追加到key
	num, err := redisdb.ZAdd(zsetKey, language...).Result()
	if err != nil {
		fmt.Printf("zadd failed, err:%v", err)
		return
	}
	fmt.Printf("zadd %d successfuln", num)
}

把Golang的分数加上10：

// 把Golang分数加上10
	newScore, err := redisdb.ZIncrBy(zsetKey, 10.0, "Golang").Result()
	if err != nil {
		fmt.Printf("zincrby failed, err:%v", err)
		return
	}
	fmt.Printf("Golang's score is %f nown", newScore)

取分数最高的3个：

// 取分数最高的3个
	ret, err := redisdb.ZRevRangeWithScores(zsetKey, 0, 2).Result()
	if err != nil {
		fmt.Printf("zrevrangewithscore failed, err:%v", err)
		return
	}
	for _, z := range ret {
		fmt.Println(z.Member, z.Score)
	}

取95-100分的：

// 取95-100分的
	op := &redis.ZRangeBy{
		Min: "95",
		Max: "100",
	}
	ret, err = redisdb.ZRangeByScoreWithScores(zsetKey, op).Result()
	if err != nil {
		fmt.Printf("zrangebyscore failed, err:%v", err)
		return
	}
	for _, z := range ret {
		fmt.Println(z.Member, z.Score)
	}

二、NSQ

NSQ是目前比较流行的一个分布式消息队列，是Go语言编写的一个开源的实时分布内存消息队列，具有以下优势：

1。NSQ提倡分布式和分散的拓扑，没有单点故障，支持容错和高可用性，并提供可靠的消息交付保证；

2。NSQ支持横向扩展，没有任何集中式代理；

3。易于配置和部署，并且内置了管理界面；

NSQ的应用场景：

• 异步处理。利用消息队列把业务流程中的非关键流程异步化，从而显著降低业务请求响应时间。
• 应用解耦：通过应用消息队列将不同的业务逻辑解耦，降低系统间的耦合，提高系统的健壮性。
• 流量削峰：类似于秒杀场景下，某一时间可能会产生大量的请求，使用消息队列能够为后端处理请求提供一定的缓冲区，保证后端服务的稳定性。

1、NSQ安装

NSQ下载：https://nsq.io/deployment/installing.html

添加环境变量：

启动NSQlookupd：nsqlookupd是维护所有nsqd状态、提供服务发现的守护进程，它能为消费者查找特定topic下的nsqd提供运行时的自动发现服务。

输入命令：nsqlookupd

启动nsqd：nsqd是一个守护进程，它接收、排队并向客户端发送消息。

输入命令：nsqd --lookupd-tcp-address=127.0.0.1:4160

启动nsqadmin：一个实时监控集群状态、执行各种管理任务的Web管理平台。

输入命令：nsqadmin --lookupd-http-address=127.0.0.1:4161

2、NSQ接收和发送数据的流程

NSQ特性：

• 消息默认不会持久化，可以配置成持久化模式，nsq采用的方式是内存+硬盘模式，当内存到达一定程度时就会将数据持久化到硬盘。如果将--mem-queue-size设置为0，所有消息将会存储到磁盘，服务器重启时也将当时在内存中的消息持久化。
• 每条消息至少传递一次；
• 消息不保证有序；

3、Go操作NSQ

官方提供了Go语言版的客户端，安装：

go get -u github.com/nsqio/go-nsq

生产者：

package main

import (
	"bufio"
	"fmt"
	"os"
	"strings"

	"github.com/nsqio/go-nsq"
)

// NSQ Producer Demo

var producer *nsq.Producer

// 初始化生产者
func initProducer(str string) (err error) {
	config := nsq.NewConfig()
	producer, err = nsq.NewProducer(str, config)
	if err != nil {
		fmt.Printf("create producer failed, err:%vn", err)
		return err
	}
	return nil
}

func main() {
	nsqAddress := "127.0.0.1:4150"
	err := initProducer(nsqAddress)
	if err != nil {
		fmt.Printf("init producer failed, err:%vn", err)
		return
	}

	reader := bufio.NewReader(os.Stdin) // 从标准输入读取
	for {
		data, err := reader.ReadString('n')
		if err != nil {
			fmt.Printf("read string from stdin failed, err:%vn", err)
			continue
		}
		data = strings.TrimSpace(data)
		if strings.ToUpper(data) == "Q" { // 输入Q退出
			break
		}
		// 向 'topic_demo' publish 数据
		err = producer.Publish("topic_demo", []byte(data))
		if err != nil {
			fmt.Printf("publish msg to nsq failed, err:%vn", err)
			continue
		}
	}
}

消费者：

package main

import (
	"fmt"
	"os"
	"os/signal"
	"syscall"
	"time"

	"github.com/nsqio/go-nsq"
)

// NSQ Consumer Demo

// MyHandler 是一个消费者类型
type MyHandler struct {
	Title string
}

// HandleMessage 是需要实现的处理消息的方法
func (m *MyHandler) HandleMessage(msg *nsq.Message) (err error) {
	fmt.Printf("%s recv from %v, msg:%vn", m.Title, msg.NSQDAddress, string(msg.Body))
	return
}

// 初始化消费者
func initConsumer(topic string, channel string, address string) (err error) {
	config := nsq.NewConfig()
	config.LookupdPollInterval = 15 * time.Second
	c, err := nsq.NewConsumer(topic, channel, config)
	if err != nil {
		fmt.Printf("create consumer failed, err:%vn", err)
		return
	}
	consumer := &MyHandler{
		Title: "智慧诸葛",
	}
	c.AddHandler(consumer)

	// if err := c.ConnectToNSQD(address); err != nil { // 直接连NSQD
	if err := c.ConnectToNSQLookupd(address); err != nil { // 通过lookupd查询
		return err
	}
	return nil
}

func main() {
	err := initConsumer("topic_demo", "first", "127.0.0.1:4161")
	if err != nil {
		fmt.Printf("init consumer failed, err:%vn", err)
		return
	}
	c := make(chan os.Signal)        // 定义一个信号的通道
	signal.Notify(c, syscall.SIGINT) // 转发键盘中断信号到c
	<-c                              // 阻塞
}

可以再本地浏览器打开：http://127.0.0.1:4171/

三、Go module

godep是一个通过vender模式实现的Go语言的第三方依赖管理工具，类似的还有社区维护准官方工具dep。其实现在已经不常用了，最长用的还是go module。

godep安装：

go get github.com/tools/godep

安装完成之后，在终端输入godep查看支持的命令。

Go module

go module是Go1.11版本之后官方推出的版本管理工具，并且在Go1.13版本开始，go module是Go语言默认的依赖管理工具。

1、关于GO111MODULE

如果GO111MODULE=on, go command 将使用modules查找依赖包，不再使用GOPATH。

如果 GO111MODULE=off，go command不再使用module查找依赖包，而是在vendor目录和GOPATH查找依赖包。

如果 GO111MODULE=auto 或没有设置, go command是否使用module取决于是否存在go.mod文件。如果当前目录，或父目录中存在go.mod文件，那么go command就会使用module，否则不会使用module。

注意：GO111MODULE默认为auto，GOPROXY默认为https://proxy.golang.org

2、初始化

go mod init

会在执行目录下生成一个go.mod文件，这个文件中标识了我们的项目的依赖的 package 的版本。但是执行完init暂时还没有将所有的依赖管理起来。我们需要将程序 run 起来（比如执行 go run/test），或者 build（执行命令 go build）的时候，才会触发依赖的解析。

3、依赖升级或者降级

go get package@version

需要注意的是，在 modules 模式开启和关闭的情况下，go get的使用方式不是完全相同的。在 modules 模式开启的情况下，可以通过在 package 后面添加@version来表明要升级（降级）到某个版本。如果没有指明 version 的情况下，则默认先下载打了 tag 的 release 版本，比如 v0.4.5 或者 v1.2.3；如果没有 release 版本，则下载最新的 pre release 版本，比如 v0.0.1-pre1。如果还没有则下载最新的 commit。这个地方给我们的一个启示是如果我们不按规范的方式来命名我们的 package 的 tag，则 modules 是无法管理的。version 的格式为v(major).(minor).(patch)，更多信息可以参考：https://semver.org/ 。

在 modules 开启的模式下，go get 还支持 version 模糊查询，比如 > v1.0.0 表示大于 v1.0.0 的可使用版本；< v1.12.0 表示小于 v1.12.0 版本下最近可用的版本。version 的比较规则按照 version 的各个字段来展开。

除了指定版本，我们还可以使用如下命名使用最近的可行的版本：

• go get -u 使用最新的 minor 或者 patch 版本
• go get -u=patch 使用最新的 patch 版本

4、GoProxy

代理服务器。有些 Golang 的 package 在国内是无法直接 go get 的。在之前，我们解决这个问题，一般都是通过设置 http_proxy/https_proxy 来解决。GoProxy 相当于官方提供了一种 proxy 的方式让用户来进行包下载。要使用 GoProxy 只需要设置环境变量 GOPROXY 即可。目前公开的 GOPROXY 有：

• http://goproxy.io
• goproxy.cn: 由七牛云提供，参考 github repo

SET GOPROXY=https://goproxy.cn

设置代码，下载墙外的库更快！

值得注意的是，在最新 release 的 Go 1.13 版本中默认将 GOPROXY 设置为https://proxy.golang.org，这个对于国内的开发者是无法直接使用的。所以如果升级了 Go 1.13 版本一定要把 GOPROXY 手动改掉。

5、其他功能

replace

SubCommand

四、Context

在Go http包的Sever中，每一个请求都有一个对应的goroutine去处理，请求函数通常会启动额外的goroutine用来访问后端服务，比如数据库和RPC服务，用来处理一个请求的goroutine通常需要访问一些与请求特定的数据，比如终端用户的身份认证信息，验证相关的token，请求的截止时间，当一个请求被取消或超时时，所有用来处理该请求的goroutine都应该迅速推出，然后系统才能释放这些goroutine占用的资源。

如何通知子goroutine退出？

1、使用全局变量

package main

import (
	"fmt"
	"sync"
	"time"
)

// 为什么需要context

var wg sync.WaitGroup
var notify bool

func f()  {
	defer wg.Done()
	for {
		fmt.Println("嘿嘿嘿")
		time.Sleep(time.Millisecond * 500)
		if notify {
			break
		}
	}
}

func main()  {
	wg.Add(1)
	go f()
	time.Sleep(time.Second * 5)
	notify = true
	wg.Wait()
	// 如何通知子goroutine退出
}

2、使用channel

package main

import (
	"fmt"
	"sync"
	"time"
)

// 为什么需要context

var wg sync.WaitGroup
var exitChan = make(chan bool, 1)

func f() {
	defer wg.Done()
	// FORLOOP:
	for {
		fmt.Println("嘿嘿嘿")
		time.Sleep(time.Millisecond * 500)
		select {
		case <-exitChan:
			// break FORLOOP
			return
		default:
		}
	}
}

func main() {
	wg.Add(1)
	go f()
	time.Sleep(time.Second * 5)
	exitChan <- true
	wg.Wait()
	// 如何通知子goroutine退出
}

3、使用context

package main

import (
	"context"
	"fmt"
	"sync"
	"time"
)

// 为什么需要context

var wg sync.WaitGroup

func f2(ctx context.Context) {
	defer wg.Done()
	for {
		fmt.Println("哈哈哈")
		time.Sleep(time.Millisecond * 500)
		select {
		case <-ctx.Done():
			return
		default:
		}
	}
}

func f(ctx context.Context) {
	defer wg.Done()
	go f2(ctx)
	// FORLOOP:
	for {
		fmt.Println("嘿嘿嘿")
		time.Sleep(time.Millisecond * 500)
		select {
		case <-ctx.Done():
			// break FORLOOP
			return
		default:
		}
	}
}

func main() {
	ctx, cancel := context.WithCancel(context.Background())
	wg.Add(1)
	go f(ctx)
	time.Sleep(time.Second * 5)
	cancel()
	wg.Wait()
	// 如何通知子goroutine退出
}

context初识:

对服务器传入的请求应该创建上下文，而对服务器的传出调用应该接受上下文，他们之间的函数调用链必须传递上下文，或者可以用WithConcel、WithDeadline、WithTimeout、WithValue创建的派生上下文，当一个上下文被取消时，它派生的所有上下文也被取消。

context.Context是一个接口，该接口定义了四个需要实现的方法，具体如下：

type Context interface {
     Deadline() (deadline time.Time, ok bool)
     Done() <-chan struct{}
     Err() error
     Value(key interface{}) interface{}
}

其中：Deanline方法需要返回当前context被取消的时间，也就是完成工作的截止时间。

Background和TODO

Go语言内置的两个函数：Background()和TODO()，这两个函数分别返回一个实现了Context接口的background和todo。Background()主要用于main函数，初始化以及测试代码中，作为Context这个树结构的最顶层Context，TODO()目前还不知道具体的应用场景。

使用Context注意事项：

• 推荐以参数的方式显示传递Context
• 以Context作为参数的函数方法，应该把Context作为第一个参数。
• 给一个函数方法传递Context的时候，不要传递nil，如果不知道传递什么，就使用context.TODO()
• Context的Value相关方法应该传递请求域的必要数据，不应该用于传递可选参数
• Context是线程安全的，可以放心的在多个goroutine中传递

我是尾巴~

每日一句毒鸡汤：

面对嫉妒最好的解决办法就是强大到追赶不上，我就喜欢你看到我不满却又无可奈何的样子！

本次推荐：code compare代码对比工具

https://devart-code-compare.en.softonic.com/​devart-code-compare.en.softonic.com

继续加油~！