在Golang中实现TCP固定大小报文分帧的方法
在IT行业这个发展更新速度很快的行业,只有不停止的学习,才不会被行业所淘汰。如果你是Golang学习者,那么本文《在Golang中实现TCP固定大小报文分帧的方法》就很适合你!本篇内容主要包括##content_title##,希望对大家的知识积累有所帮助,助力实战开发!
我无法理解使用固定大小前缀长度标头的消息帧是如何工作的。
据说固定大小的字节数组将包含要发送的消息的长度。但是如何定义固定大小的字节数组,特别是在 golang 中。
说这是我的消息:
hello
它的长度是5。
因此,如果我想通过 tcp 流发送此消息,为了确保在另一端收到所有消息,我必须告诉它应该读取多少字节。
一个简单的标头是 length:message:
5:hello // [53 58 104 101 108 108 111]
但是如果消息长度每次增长 10 倍,就会有更多的字节。因此标头大小是动态的。
36:hello, this is just a dumb question. // [51 54 58 72 101 108 108 111 44 32 116 104 105 115 32 105 115 32 106 117 115 116 32 97 32 100 117 109 98 32 113 117 101 115 116 105 111 110 46]
所以这里 36 占用 2 个字节。
我想到的一种方法是考虑协议的最大消息长度。假设 10kb = 10240 字节。然后将前导 0 添加到消息长度中。这样我就可以确定我将拥有一个固定的 5 字节标头。
这适用于所有情况吗?
如果是,如果我的消息超过 10kb,我应该将其分成 2 条消息吗?
如果没有,还有什么其他解决方案?
我想在 golang 中实现这些解决方案。
更新1:
我读到了有关 endian 的内容,尽管我无法理解它们是如何导致固定长度字节的。但我在python中找到了一个例子,并尝试用go这样写:
客户:
const maxlengthbytes = 8
conn, err := net.dial("tcp", "127.0.0.1:9999")
if err != nil {
fmt.println(err)
return
}
message := "hello, this is just a dumb question"
bs := make([]byte, maxlengthbytes)
binary.littleendian.putuint64(bs, uint64(len(text)))
bytes := append(bs, []byte(text)...)
conn.write(bytes)
服务器:
listener, err := net.ListenTCP("tcp", &net.TCPAddr{Port: 9999})
if err != nil {
fmt.Println(err)
return
}
for {
tcp, err := listener.AcceptTCP()
if err != nil {
fmt.Println(err)
continue
}
go Reader(tcp)
}
func Reader(conn *net.TCPConn) {
foundLength := false
messageLength := 0
for {
if !foundLength {
var b = make([]byte, maxLengthBytes)
read, err := conn.Read(b)
if err != nil {
fmt.Println(err)
continue
}
if read != 8 {
fmt.Println("invalid header")
continue
}
foundLength = true
messageLength = int(binary.LittleEndian.Uint64(b))
} else {
var message = make([]byte, messageLength)
read, err := conn.Read(message)
if err != nil {
fmt.Println(err)
continue
}
if read != messageLength {
fmt.Println("invalid data")
continue
}
fmt.Println("Received:", string(message))
foundLength = false
messageLength = 0
}
}
}
解决方案
请参考我这篇文章的回答 TCP client for Android: text is not received in full
基本上,您必须定义数据的存储/格式化方式。 例如:
我们将前缀长度存储为
int32(4 字节),采用小端字节序。这和你的不一样。根据您的解决方案,长度是
string,很难固定长度。 对于您的解决方案,您必须使用固定长度的字符串。例如:10个字符,并添加前导零。
回答您的问题。
它并不适用于只有前缀长度的所有情况。它有它的局限性,例如如果我们使用
int32作为前缀长度,那么消息的长度必须小于Integer32.max,对吧?是的,我们必须拆分甚至合并(请参阅上面链接中我的解释)。
如果我们关心长度限制,我们有很多方法来处理它(实际上,几乎应用程序协议都有最大请求大小)。 您可以再使用一位来指示消息是否超过最大长度来解决它,对吗?
本篇关于《在Golang中实现TCP固定大小报文分帧的方法》的介绍就到此结束啦,但是学无止境,想要了解学习更多关于Golang的相关知识,请关注golang学习网公众号!
读取状态码为 101的响应的消息体
- 上一篇
- 读取状态码为 101的响应的消息体
- 下一篇
- Golang 最佳实践:在返回值中使用空数组还是错误?
-
- Golang · Go问答 | 2天前 | go · TypeSymlink Go archive/tar链接条目 Tar硬链接 Tar符号链接 Header.Linkname TypeLink
- Go archive/tar识别 Tar 硬链接与符号链接的排查指南
- 459浏览 收藏
-
- Golang · Go问答 | 2天前 |
- Go archive/tar读取 PAX 扩展头字段的兼容方法
- 487浏览 收藏
-
- Golang · Go问答 | 2天前 | go · Go archive/zip Go Zip重复条目 Go Writer.Create Go压缩包去重 Go Zip覆盖策略
- Go archive/zip写入 Zip 时处理重复条目的实现方法
- 435浏览 收藏
-
- Golang · Go问答 | 2天前 | 文件读取 · Go问答 · Go archive/zip File.Open OpenReader Zip读取
- Go archive/zip读取 Zip 文件并及时关闭的资源方案
- 175浏览 收藏
-
- Golang · Go问答 | 2天前 | go · Go archive/zip文件名校验 Go ZIP路径安全 Go压缩包目录穿越防护 Go ErrInsecurePath Go解压文件名检查
- Go archive/zip校验压缩包内文件名的安全边界
- 187浏览 收藏
-
- Golang · Go问答 | 2天前 | go · 数据安全 · 持久化 临时文件 原子替换 Go os.File
- Go os.File写入临时文件后原子替换的持久化方案
- 448浏览 收藏
-
- Golang · Go问答 | 2天前 | 错误处理 · 事务 · database/sql · Go问答 · Go database/sql Tx Go事务重试 Go死锁处理 Go序列化冲突 database/sql错误分类
- Go database/sql Tx区分可重试冲突与业务错误的处理边界
- 218浏览 收藏
-
- Golang · Go问答 | 2天前 | go · database/sql · Go 事务 database/sql Tx
- Go database/sql Tx把事务边界放到业务操作外层的设计方法
- 215浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
- 87次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 169次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 109次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 85次使用
-
- CMMLU
- 深入了解CMMLU中文评估基准,涵盖67个学科主题,提供数据集下载、Zero-shot/Five-shot评估方法及排行榜,助力优化中文语言模型性能。
- 62次使用
-
- 用Nginx反向代理部署go写的网站。
- 2023-01-17 502浏览
-
- GoLand调式动态执行代码
- 2023-01-13 502浏览
-
- Go select 用 time.After 做超时有什么资源代价
- 2026-09-10 501浏览
-
- Go 取 range 变量地址为什么得到重复指针
- 2026-09-07 501浏览
-
- Go net.Conn 写入超时为何仍会卡住:SetWriteDeadline、部分写入与连接复用检查
- 2026-08-30 501浏览

