深入了解Golang网络编程Net包的使用

目录
  • 1.TCP 服务
  • 2.TCP 连接在系统调用层面的实现
  • 3.Go中TCP连接的实现
  • 4.结语

​最近做了一个项目,其中用到了网络编程,下面和大家分享下在Go中网络编程的实现。在Go中, 网络编程主要通过 net 包实现。支持 包括TCP/IP、UDP、域名解析和Unix域socket等连接,此外,还通过 net/http ,net/rpc 等提供了 HTTP,RPC等主流应用层的连接协议。

1.TCP 服务

TCP 是最常用的网络连接方式,以 TCP 连接为例,一个简单的 TCP 连接代码示例。Client:

package main

import (
 "bufio"
 "fmt"
 "os"
 "strings"
 "net"
)

func main() {
 conn, err := net.Dial("tcp", "tyun.cn:8088")
 if err != nil {
  //handle
 }
 defer conn.Close()
 inputReader := bufio.NewReader(os.Stdin)
 for{
  //读取输入
  readString,_ :=inputReader.ReadString('\n')
  trim := strings.Trim(readString,"\r\n")
  _,err :=conn.Write([]byte(trim))
  if err!=nil{
   return
  }
  buf := [512]byte{}
  n,err := conn.Read(buf[:])
  if err!=nil{
   return
  }
  fmt.Println(string(buf[:n]))
 }

}

Server:

package main

import (
 "bufio"
 "fmt"
 "net"
)

func main() {
 listen,err:= net.Listen("tcp",":8088")
 if err != nil{
  //handle
 }
 for {
  conn,err := listen.Accept()
  if err != nil{
   //handle
   continue
  }
  defer conn.Close()
  for {
   //处理
   reader := bufio.NewReader(conn)
   var buf [1024]byte
   read,err:= reader.Read(buf[:])
   if err != nil{
    //handle
   }
   recv := string(buf[:read])
   fmt.Println("GET MESSAGE: ",recv)
   conn.Write([]byte(recv))
  }
 }
}

2.TCP 连接在系统调用层面的实现

包括 TCP/IP 在内的各种网络连接,在类 unix 的操作系统里,都是通过网络系统调用实现的,使用系统调用创建 TCP 服务器的核心流程是:· 首先得能创建socket ,也就是得有个 create 的接口;

  • 首先得能创建socket ,也就是得有个 create 的接口;
  • 其次还得能绑定 ip 和端口号,也就是 bind,不然别人找不到你;
  • 有了这些还得有点东西,那就是别人怎么连接你。也就是要有个 connect 和 accept 的功能;
  • 再者还得实现读和写,也就是 read 和 write,因为我们要通过socket 通信,不能读不能写肯定不行;
  • 通信完毕后socket 要关闭;
  • 创建 socket 连接 s = socket(AF_INET, SOCK_STREAM, 0);
  • 绑定 地址 bind(s, (struct sockaddr *) &serv_addr, sizeof(serv_addr));
  • 启动监听 listen(s,5);
  • 接收客户端的连接 ns= accept(s, (struct sockaddr *)&cli_addr, &clilen);
  • 接收数据 n = read( ns,buffer,255 );
  • 发送数据,n = write(ns,"hello world",11)。

创建 TCP 客户端的核心流程:

  • 创建 socket 连接 s= socket(AF_INET, SOCK_STREAM, 0);
  • 连接服务器地址:connect(s, (struct sockaddr*)&serv_addr, sizeof(serv_addr));
  • 接收数据 n = read( ns,buffer,255 );
  • 发送数据,n = write(ns,"hello world",11)。

​socket() 等系统调用的实现,是 kernel 层面完成的,而net包就是对这些底层的流程做了封装。

3.Go中TCP连接的实现

在客户端中,建立连接conn, err := net.Dial("tcp", "tyun.cn:8088")的底层源码实现方法是:

func (d *Dialer) DialContext(ctx context.Context, network, address string) (Conn, error)

这个方法解析完网络和地址后 ,主要有2种连接方式:

if len(fallbacks) > 0 {
  c, err = sd.dialParallel(ctx, primaries, fallbacks)
} else {
  c, err = sd.dialSerial(ctx, primaries)
}

而这两种连接方式的都是调用:

func (sd *sysDialer) dialSingle(ctx context.Context, ra Addr) (c Conn, err error)

sd.dialSingle又支持4种类型:

sd.dialTCP(ctx, la, ra)

sd.dialUDP(ctx, la, ra)

sd.dialIP(ctx, la, ra)

sd.dialUnix(ctx, la, ra)

接续往下追溯,就能看到其实调用的是socket函数,实现系统调用socket()。

如果多个 goroutine 对 conn 进行读写,就会有多重读,多重写两种情况,socket 是全双工,所以读写之间互不影响。多 goroutine 读的时候,其实没什么影响。因为读的话,不会重复读,多重读不会引发安全问题。

多 goroutine 写的时候,就有问题了。多个 goroutine 写不能每个写一半,必须保证每次写是原子操作,好在 Go内部实现写的时候加了锁。

TCP 连接建立后,每当客户端发来请求时,服务端会建立新的连接。

conn,err := listen.Accept()

这个方法同样往下追溯,能看到其实最底层的实现是系统调用syscall.Accept。

连接通信的过程中,如果某一方突然关闭,那另一方会有啥反应?在实践的过程中,总结如下:

当对端异常关闭,如果己方 socket 中有数据,那么己方是会继续读取;当 socket 中无数据时,己方 Read 函数返回 EOF;

当对端异常关闭,己方如果还在 socket 的缓冲中写入,那么本次写入成功,下次写入就报错;· 当己端关闭,读写均异常错误。

4.结语

以上就是关于Go网络编程的一些分享,虽然net包提供了对网络原语的访问,但大多数使用者只需要Dial、Listen和Accpet函数的基本接口;以及Conn和Listener接口。net包主要是增加 context 控制,封装了一些不同的连接类型以及DNS 查找等等,同时在有需要的地方引入 goroutine 提高处理效率。

到此这篇关于深入了解Golang网络编程Net包的使用的文章就介绍到这了,更多相关Golang Net包内容请搜索我们以前的文章或继续浏览下面的相关文章希望大家以后多多支持我们!

(0)

相关推荐

  • Go 语言入门之net/url 包

    目录 引言 URL 格式 Go url 包函数使用格式 如何使用 URL 包 在 Golang 中对查询字符串进行 URL 编码 在 Golang 中对多个查询参数进行 URL 编码 在 Golang 中对路径段进行 URL 编码 通过对各个部分进行编码来构建完整的 URL 在 Golang 中解析 URL 处理相对路径 解析空格 判断绝对地址 解析端口 引言 在 Golang 中,将 URL 打包用于从服务器获取数据非常重要.只需了解您是否正在处理任何应用程序并且您想从任何外部位置或服务器获取

  • golang中net的tcp服务使用

    目录 服务端监听端口 listen() 接受客户端的链接conn.Accept() 接收客户端发过来的数据newConn.Read() 获取客户端的IP地址newConn.RemoteAddr().String() 向客户端发送数据newConn.Write() 关闭客户端连接newConn.Close() 客户端连接tpc服务端 连接服务端net.Dial() 服务端监听端口 listen() 方法:net.listen({监听类型},{监听的ip和端口})(conn, err){} 返回值:

  • Go语言net包RPC远程调用三种方式http与json-rpc及tcp

    目录 一.服务端 二.http客户端 三.TCP客户端 四.json客户端 五.运行结果 rpc有多种调用方式,http.json-rpc.tcp 一.服务端 在代码中,启动了三个服务 package main import ( "log" "net" "net/http" "net/rpc" "net/rpc/jsonrpc" "sync" ) //go对RPC的支持,支持三个级别:T

  • 使用go net实现简单的redis通信协议

     图解redis通信协议 请求协议: 请求协议一般格式: *<参数数量> CR LF $<参数 1 的字节数量> CR LF <参数 1 的数据> CR LF ... $<参数 N 的字节数量> CR LF <参数 N 的数据> CR LF 例如,一个登录命令: *2 2-> 参数数量 $4 4-> 字节数量 AUTH $13 password@2018 返回结果: +OK 实际上,发送的命令为"*2\r\n$4\r\nAU

  • golang中的net/rpc包使用概述(小结)

    RPC,即 Remote Procedure Call(远程过程调用),说得通俗一点就是:调用远程计算机上的服务,就像调用本地服务一样. 我的项目是采用基于Restful的微服务架构,随着微服务之间的沟通越来越频繁,消耗的系统资源越来越多,于是乎就希望可以改成用rpc来做内部的通讯,对外依然用Restful.于是就想到了golang标准库的rpc包和google的grpc. 这篇文章重点了解一下golang的rpc包. 介绍 golang的rpc支持三个级别的RPC:TCP.HTTP.JSONR

  • go语言net包rpc远程调用的使用示例

    rpc 包提供了一个方法来通过网络或者其他的I/O连接进入对象的外部方法. 一个server注册一个对象, 标记它成为可见对象类型名字的服务.注册后,对象的外部方法就可以远程调用了.一个server可以注册多个 不同类型的对象,但是却不可以注册多个相同类型的对象. 只有满足这些标准的方法才会被远程调用视为可见:其他的方法都会被忽略: - 方法是外部可见的. - 方法有两个参数,参数的类型都是外部可见的. - 方法的第二个参数是一个指针. - 方法有返回类型错误 一.基于http的RPC 服务端:

  • 深入了解Golang网络编程Net包的使用

    目录 1.TCP 服务 2.TCP 连接在系统调用层面的实现 3.Go中TCP连接的实现 4.结语 ​最近做了一个项目,其中用到了网络编程,下面和大家分享下在Go中网络编程的实现.在Go中, 网络编程主要通过 net 包实现.支持 包括TCP/IP.UDP.域名解析和Unix域socket等连接,此外,还通过 net/http ,net/rpc 等提供了 HTTP,RPC等主流应用层的连接协议. 1.TCP 服务 TCP 是最常用的网络连接方式,以 TCP 连接为例,一个简单的 TCP 连接代码

  • golang网络socket粘包问题的解决方法

    本文实例讲述了golang网络socket粘包问题的解决方法.分享给大家供大家参考,具体如下: 看到很多人问这个问题, 今天就写了个例子, 希望能帮助大家 首先说一下什么是粘包:百度上比较通俗的说法是指TCP协议中,发送方发送的若干包数据到接收方接收时粘成一包,从接收缓冲区看,后一包数据的头紧接着前一包数据的尾. 解决方案如下: 服务端: 复制代码 代码如下: package main import (     "bytes"     "encoding/binary&quo

  • Golang并发编程重点讲解

    目录 1.通过通信共享 2.Goroutines 3.Channels 3.1 Channel都有哪些特性 3.2 channel 的最佳实践 4.Channels of channels 5.并行(Parallelization) 6.漏桶缓冲区(A leaky buffer) 1.通过通信共享 并发编程是一个很大的主题,这里只提供一些特定于go的重点内容. 在许多环境中,实现对共享变量的正确访问所需要的微妙之处使并发编程变得困难.Go鼓励一种不同的方法,在这种方法中,共享值在通道中传递,实际

  • Linux网络编程之基于UDP实现可靠的文件传输示例

    了解网络传输协议的人都知道,采用TCP实现文件传输很简单.相对于TCP,由于UDP是面向无连接.不可靠的传输协议,所以我们需要考虑丢包和后发先至(包的顺序)的问题,所以我们想要实现UDP传输文件,则需要解决这两个问题.方法就是给数据包编号,按照包的顺序接收并存储,接收端接收到数据包后发送确认信息给发送端,发送端接收确认数据以后再继续发送下一个包,如果接收端收到的数据包的编号不是期望的编号,则要求发送端重新发送. 下面展示的是基于linux下C语言实现的一个示例程序,该程序定义一个包的结构体,其中

  • Java 网络编程socket编程等详解

    网络编程是指编写运行在多个设备(计算机)的程序,这些设备都通过网络连接起来. java.net包中J2SE的API包含有类和接口,它们提供低层次的通信细节.你可以直接使用这些类和接口,来专注于解决问题,而不用关注通信细节. java.net包中提供了两种常见的网络协议的支持: TCP: TCP是传输控制协议的缩写,它保障了两个应用程序之间的可靠通信.通常用于互联网协议,被称TCP / IP. UDP:UDP是用户数据报协议的缩写,一个无连接的协议.提供了应用程序之间要发送的数据的数据包. 本教程

  • 从零开始学Python第八周:详解网络编程基础(socket)

    一,Socket编程 (1)Socket方法介绍 Socket是网络编程的一个抽象概念.通常我们用一个Socket表示"打开了一个网络链接",而打开一个Socket需要知道目标计算机的IP地址和端口号,再指定协议类型即可. 套接字是一个双向的通信信道的端点.套接字可能在沟通过程,进程之间在同一台机器上,或在不同的计算机之间的进程 要创建一个套接字,必须使用Socket模块的socket.socket()方法 在socket模块中的一般语法: s = socket.socket(sock

  • 老生常谈Java网络编程TCP通信(必看篇)

    Socket简介: Socket称为"套接字",描述IP地址和端口.在Internet上的主机一般运行多个服务软件,同时提供几种服务,每种服务都打开一个Socket,并绑定在一个端口上,不同的端口对应于不同的服务.Socket和ServerSocket类位于java.net包中.ServerSocket用于服务端,Socket是建立网络连接时使用的.连接成功时,应用程序两端都会产生一个Socket实例,通过操作这个实例完成所需会话. Socket常用方法: -int getLocalP

  • NodeJS学习笔记之网络编程

    Node提供丰富的网络编程模块 Node模块 协议 net TCP dgram UDP http HTTP https HTTPS TCP服务事件分为下面两类 (1).服务器事件 对于通过net.createServer()创建的服务器而言,它是一个EventEmitter实例,自定义事件有以下几种: listening :在调用listen()绑定端口或Domain Socket后触发,简写为server.listen(port, listener),通过第二个参数传入. connection

  • android 网络编程之网络通信几种方式实例分享

    如今,手机应用渗透到各行各业,数量难以计数,其中大多数应用都会使用到网络,与服务器的交互势不可挡,那么android当中访问网络有哪些方式呢? 现在总结了六种方式: (1)针对TCP/IP的Socket.ServerSocket (2)针对UDP的DatagramSocket.DatagramPackage.这里需要注意的是,考虑到Android设备通常是手持终端,IP都是随着上网进行分配的.不是固定的.因此开发也是有一点与普通互联网应用有所差异的. (3)针对直接URL的HttpURLConn

  • iOS socket网络编程实例详解

    代码下载 服务端代码下载地址 客户端代码下载地址 相关概念 socket是一个针对TCP和UDP编程的接口,你可以借助它建立TCP连接等.socket是对TCP/IP协议的封装,Socket本身并不是协议,而是一个调用接口(API),通过Socket,我们才能使用TCP/IP协议.Socket的出现只是使得程序员更方便地使用TCP/IP协议栈而已,是对TCP/IP协议的抽象,从而形成了我们知道的一些最基本的函数接口. socket连接:socket连接就是所谓的长连接,理论上客户端和服务器端一旦

随机推荐