新钛云服已累计为您分享665篇技术干货
最近做了一个项目,其中用到了网络编程,下面和大家分享下在Go中网络编程的实现。
在Go中, 网络编程主要通过 net 包实现。支持 包括TCP/IP、UDP、域名解析和Unix域socket等连接,此外,还通过 net/http ,net/rpc 等提供了 HTTP,RPC等主流应用层的连接协议。
TCP 是最常用的网络连接方式,以 TCP 连接为例,一个简单的 TCP 连接代码示例。
Client:
package main
import (
"bufio"
"fmt"
"os"
"strings"
"net"
)
func main() {
conn, err := net.Dial("tcp", "tyun.cn:8088")
if err != nil {
//handle
}
defer conn.Close()
inputReader := bufio.NewReader(os.Stdin)
for{
//读取输入
readString,_ :=inputReader.ReadString('\n')
trim := strings.Trim(readString,"\r\n")
_,err :=conn.Write([]byte(trim))
if err!=nil{
return
}
buf := [512]byte{}
n,err := conn.Read(buf[:])
if err!=nil{
return
}
fmt.Println(string(buf[:n]))
}
}
Server:
package main
import (
"bufio"
"fmt"
"net"
)
func main() {
listen,err:= net.Listen("tcp",":8088")
if err != nil{
//handle
}
for {
conn,err := listen.Accept()
if err != nil{
//handle
continue
}
defer conn.Close()
for {
//处理
reader := bufio.NewReader(conn)
var buf [1024]byte
read,err:= reader.Read(buf[:])
if err != nil{
//handle
}
recv := string(buf[:read])
fmt.Println("GET MESSAGE: ",recv)
conn.Write([]byte(recv))
}
}
}
包括 TCP/IP 在内的各种网络连接,在类 unix 的操作系统里,都是通过网络系统调用实现的,使用系统调用创建 TCP 服务器的核心流程是:
· 首先得能创建socket ,也就是得有个 create 的接口;
· 其次还得能绑定 ip 和端口号,也就是 bind,不然别人找不到你;
· 有了这些还得有点东西,那就是别人怎么连接你。也就是要有个 connect 和 accept 的功能;
· 再者还得实现读和写,也就是 read 和 write,因为我们要通过socket 通信,不能读不能写肯定不行;
· 通信完毕后socket 要关闭;
· 创建 socket 连接 s = socket(AF_INET, SOCK_STREAM, 0);
· 绑定 地址 bind(s, (struct sockaddr *) &serv_addr, sizeof(serv_addr));
· 启动监听 listen(s,5);
· 接收客户端的连接 ns= accept(s, (struct sockaddr *)&cli_addr, &clilen);
· 接收数据 n = read( ns,buffer,255 );
· 发送数据,n = write(ns,"hello world",11)。
创建 TCP 客户端的核心流程:
· 创建 socket 连接 s= socket(AF_INET, SOCK_STREAM, 0);
· 连接服务器地址:connect(s, (struct sockaddr*)&serv_addr, sizeof(serv_addr));
· 接收数据 n = read( ns,buffer,255 );
· 发送数据,n = write(ns,"hello world",11)。
socket()
等系统调用的实现,是 kernel 层面完成的,而net包就是对这些底层的流程做了封装。
在客户端中,建立连接conn, err := net.Dial("tcp", "tyun.cn:8088")的底层源码实现方法是:
func (d *Dialer) DialContext(ctx context.Context, network, address string) (Conn, error)
这个方法解析完网络和地址后 ,主要有2种连接方式:
if len(fallbacks) > 0 {
c, err = sd.dialParallel(ctx, primaries, fallbacks)
} else {
c, err = sd.dialSerial(ctx, primaries)
}
而这两种连接方式的都是调用:
func (sd *sysDialer) dialSingle(ctx context.Context, ra Addr) (c Conn, err error)
sd.dialSingle又支持4种类型:
sd.dialTCP(ctx, la, ra)
sd.dialUDP(ctx, la, ra)
sd.dialIP(ctx, la, ra)
sd.dialUnix(ctx, la, ra)
接续往下追溯,就能看到其实调用的是socket函数,实现系统调用socket()。
如果多个 goroutine 对 conn 进行读写,就会有多重读,多重写两种情况,socket 是全双工,所以读写之间互不影响。多 goroutine 读的时候,其实没什么影响。因为读的话,不会重复读,多重读不会引发安全问题。
多 goroutine 写的时候,就有问题了。多个 goroutine 写不能每个写一半,必须保证每次写是原子操作,好在 Go内部实现写的时候加了锁。
TCP 连接建立后,每当客户端发来请求时,服务端会建立新的连接。
conn,err := listen.Accept()
这个方法同样往下追溯,能看到其实最底层的实现是系统调用syscall.Accept。
连接通信的过程中,如果某一方突然关闭,那另一方会有啥反应?在实践的过程中,总结如下:
· 当对端异常关闭,如果己方 socket 中有数据,那么己方是会继续读取;当 socket 中无数据时,己方 Read 函数返回 EOF;
· 当对端异常关闭,己方如果还在 socket 的缓冲中写入,那么本次写入成功,下次写入就报错;
· 当己端关闭,读写均异常错误。
以上就是关于Go网络编程的一些分享,虽然net包提供了对网络原语的访问,但大多数使用者只需要Dial、Listen和Accpet函数的基本接口;以及Conn和Listener接口。
net包主要是增加 context 控制,封装了一些不同的连接类型以及DNS 查找等等,同时在有需要的地方引入 goroutine 提高处理效率。
了解新钛云服
· 新钛云服成为国内首家荣获 Gartner Customer First 徽章的云和安全管理服务商!
· 新钛云服荣膺“2022爱分析 · IT运维厂商全景报告”云管理平台CMP 代表厂商!
· 新钛云服荣膺第四届FMCG零售消费品行业CIO年会「年度数字化服务最值得信赖品牌奖」
· 新钛云服A轮融资数千万元!获资本和客户双重青睐!
· 新钛云服三周岁,公司月营收超600万元,定下百年新钛的发展目标
· 当IPFS遇见云服务|新钛云服与冰河分布式实验室达成战略协议
· 深耕专业,矗立鳌头,新钛云服获千万Pre-A轮融资
· 新钛云服一周年,完成两轮融资,服务五十多家客户
往期技术干货
· 万字长文:云架构设计原则|附PDF下载
· 万字长文 | 使用 RBAC 限制对 Kubernetes 资源的访问
· 万字长文 | 面向k8s编程,如何写一个Operator
· Terraform 实战 | 万字长文
· 万字长文 | 在 Kubernetes 中部署高可用应用程序的最佳实践!
· CephFS性能基准测试与集群优化 | 万字总结
· 低代码开发,全民开发,淘汰职业程序员!
· 国内主流公有云VPC使用对比及总结
· Ceph OSD故障排除|万字经验总结
· 运维人的终身成长,从清单管理开始|万字长文!
· OpenStack与ZStack深度对比:架构、部署、计算存储与网络、运维监控等
· IT混合云战略:是什么、为什么,如何构建?
点分享
戳在看