golang 自定义协议发送数据， append []byte 居然被截断。

The Go Programming Language

Go Projects

This topic created in 3161 days ago, the information mentioned may be changed or developed.

append []byte 居然被截断。求指导。。调不出来了。

func (msg *Msg)PackMsg() []byte{
    buf:=make([]byte,0)
    buf = append(buf,msg.Proto...)
    buf = append(buf,util.Uint32ToBytes(msg.ProtoLen)...)
    buf = append(buf,msg.ProtoData...)
    //buf = append(buf,msg.FileData...)
    buf = append(buf,util.Uint32ToBytes(msg.FileLen)...)
    //被截断了。不知道为什么
    //这里 msg.FileData 长度明明是 1024
    buf = append(buf,msg.FileData...)
    //这里最后的 buflen 是被截断过的，也就是说 buf = append(buf,msg.FileData...)只有一部分数据 append 进去了
    return buf
}

13 replies • 2018-03-13 14:42:39 +08:00

Crabbbbb

Mar 9, 2018

len(msg.FileData)看看是不是 msg.FileData 被截断了

sunny352787

Mar 9, 2018

我勒个去，别这么 append，内存累死了

wweir

Mar 9, 2018 via Android

@sunny352787 没事的，不是每次都拷贝

sunny352787

Mar 9, 2018

@wweir 用内存 buff 也比这个强啊

sunny352787

Mar 9, 2018

@wweir bytes.Buffer

blless

Mar 9, 2018 via Android

bytes encoding/binary 善用基础库啊

wweir

Mar 9, 2018

@sunny352787 这个是，有现成、好用的轮子，再自己造就没啥意思了

MungBeanSoup

Mar 10, 2018

@sunny352787
我自己试了下好像 append 对比 Buffer 似乎没有很大的性能差距
BenchmarkPack-4 500000 3051 ns/op
BenchmarkPackBuffer-4 500000 2992 ns/op
我只是简单地用 Buffer.Write 替换了 append,请问是不是漏了什么

sunny352787

Mar 10, 2018

@MungBeanSoup 性能本身区别肯定不大，都是那点东西，该怎么分配内存就怎么分配，主要的区别其实一个是书写上更方便，再有 Buffer 是 io 接口的，可以用在所有需要 io 的地方。但我在项目里的要求是用 Buffer，主要是 append 容易写错，每次都要带上"..."这种很容易忘记，算是内部代码规范的强制要求吧。

hehe12dyo

Mar 12, 2018

@Crabbbbb 没截断。。是 1024.但是 append 之后整个 slice 长度并不会变长。。被截断了。

ssoor

Mar 13, 2018

@hehe12dyo 我写了一段测试代码，但是没发现截断的情况啊。slice 的长度在 append 的时候会自动增长.
func main() {
buf := make([]byte, 0)

buf = append(buf, "1234567890"...)
buf = append(buf, "1234567890"...)
buf = append(buf, "1234567890"...)
buf = append(buf, "1234567890"...)
buf = append(buf, "1234567890"...)

text := ""
for i := 0; i < 1024; i++ {
text += "x"
}
buf = append(buf, text...)

fmt.Println(len(buf))
fmt.Println(string(buf))
}

这段代码运行后，buf 长度为 1074.

hehe12dyo

Mar 13, 2018

@ssoor 我自己测也是你这样的，，但是那个代码就是会被截断。。

ssoor

Mar 13, 2018

@hehe12dyo 线上和测试环境 go 版本是否一致, 把代码提出来单独运行看看, 调试单步跟踪一下, 看是否正常, 可能不是这边的问题.