socket接受一个http请求,read到哪里就可以判定请求结束了呢?

Question

用go想做一个http代理的小工具:

   func main() {
        listener, err := net.Listen("tcp", ":8080")
        if err != nil {
            log.Panic(err)
        }
        for {
            client, err := listener.Accept()
            if err != nil {
                log.Panic(err)
            }
            go handleClientRequest(client)
        }
    }
    
    func handleClientRequest(client net.Conn) {
        if client == nil {
            return
        }
        defer client.Close()
    
        var buf [1024]byte
        n, err := client.Read(buf[:])
        if err != nil {
            log.Println(err)
            return
        }
        fmt.Println("recv msg:", string(buf[0:n]))
    }

1024个字节不一定够,肯定要有个结束标志吧?

Answer 1

其实你不必解析http，在go 的http 包中自带了解析方法

// ReadRequest reads and parses an incoming request from b.
func ReadRequest(b *bufio.Reader) (*Request, error) {}

举个例子

rd := bufio.NewReader(client)
request, err := http.ReadRequest(rd)

request 就是一个http 的请求信息，可以获取到需要访问的地址，然后代理访问即可

我觉得这个方法可以满足你的需求

Answer 2

请求头读到\r\n\r\n，然后再通过请求头中的content-length取请求体里的具体字节数。

Answer 3

Http协议是建立在TCP协议基础之上的，当浏览器需要从服务器获取网页数据的时候，会发出一次Http请求。Http会通过TCP建立起一个到服务器的连接通道，当本次请求需要的数据完毕后，Http会立即将TCP连接断开

TCP协议通过发送FIN包来释放连接，所以FIN包就是结束标志，也就是说一直接收直到连接断开就接收完了。

但是

随着时间的推移，html页面变得复杂了，里面可能嵌入了很多图片，这时候每次访问图片都需要建立一次tcp连接就显得低效了。因此Keep-Alive被提出用来解决效率低的问题。从HTTP/1.1起，默认都开启了Keep-Alive，保持连接特性，简单地说，当一个网页打开完成后，客户端和服务器之间用于传输HTTP数据的TCP连接不会关闭，如果客户端再次访问这个服务器上的网页，会继续使用这一条已经建立的连接Keep-Alive不会永久保持连接，它有一个保持时间，可以在不同的服务器软件（如Apache）中设定这个时间。虽然这里使用TCP连接保持了一段时间，但是这个时间是有限范围的，到了时间点依然是会关闭的，所以我们还把其看做是每次连接完成后就会关闭。

那么开启了Keep-Alive之后该如何判断结束呢？
其实，HTTP头有个content-length，这个就是HTTP包正文长度了

当然也有没有content-length的情况，那就是使用了分块编码（chunked encoding）数据是分为一系列的块来发送的，每块都有大小说明。哪怕服务器在生成首部的时候不知道整个实体的大小（通常是因为实体是动态生成的），仍然可以使用分块编码传输若干已知大小的块。

编码使用若干个Chunk组成，由一个标明长度为0的chunk结束，每个Chunk有两部分组成，第一部分是该Chunk的长度和长度单位（一般不写），第二部分就是指定长度的内容，每个部分用CRLF(全称carriage
return/line feed 回车换行)隔开。在最后一个长度为0的Chunk中的内容是称为footer的内容，是一些附加的Header信息（通常可以直接忽略）。

另外HTTP消息头与消息正文之间通过CRLF(回车换行），\r\n\r\n来分隔

Answer 4

如果非要手撸http协议，还是去找rfc看吧

Answer 5

需要去了解下http协议组成部分，建议去看rfc
go语言的实现：
net/http/request.go
func readRequest(b bufio.Reader, deleteHostHeader bool) (req Request, err error) {
.......
}

Answer 6

http协议大概有 两种模式，

1. 定长消息， content-length头中指定消息长度

2. 流式消息

具体请参考。 http://www.cnblogs.com/chris-...

Answer 7

大佬你好。可以请教下proxyee项目怎么修改https websocket请求内容吗