go中 NewReader是读取全部数据吗?
来源:SegmentFault
2023-01-08 12:45:29
0浏览
收藏
本篇文章主要是结合我之前面试的各种经历和实战开发中遇到的问题解决经验整理的,希望这篇《go中 NewReader是读取全部数据吗?》对你有很大帮助!欢迎收藏,分享给更多的需要的朋友学习~
问题内容
content := bufio.NewReader(resp.Body) // 先复制一份再传递 不然peek会改变原始数据 // 疑问,这里content不就变成4096个字节,为什么后面从它ReadAll是没问题的 e := judgeEncoding(content) utf8_reader := transform.NewReader(content, e.NewDecoder()) // gbk 转成utf-8 NewDecoder() 用什么编码作为解码 all, err := ioutil.ReadAll(utf8_reader)
使用bufio.NewReader创建的新buffer不是4096字节码,为什么后面 ReadAll content,得到的是全部的信息?
1.
nReader := bufio.NewReader(f)
_,err = nReader.Peek(64)
- _,err= bufio.NewReader(f).Peek(64)
1 2的写法有什么区别?
正确答案
问题一
bufio.NewReader(r io.Reader)并没有真正地开始读取数据,它只是创建了一个
4096 byte大小的缓冲区,即
make([]byte, 4096),以及同底层读取句柄
r io.Reader进行关联。
缓冲区的作用:打个比方,上层可能每次只需要读取
1 byte,底层是从文件中读取,每次读取
1 byte都需要 1 次系统调用,很不划算;通过一次性读取较多数据至缓冲区,上层再每次从缓冲区读取
1 byte,可以显著减少系统调用。
忽略问题举例代码中的编码部分,读取数据的顺序是以下这样的。
ioutil.ReadAll(r io.Reader) ([]byte, error)
r := bufio.NewReader(rd io.Reader) *Reader
rd io.Reader
问题二
# 写法1 nReader := bufio.NewReader(f) _,err = nReader.Peek(64) # 写法2 _,err= bufio.NewReader(f).Peek(64)
如果楼主的这段代码的只是想要调用
.Peek(64)并获取结果,那么两种方法没有区别;
如果想继续从
nReader中读取数据,显然
写法2不可取,它都没有保存
nReader读取句柄,根本无从谈起继续读取。
以上就是《go中 NewReader是读取全部数据吗?》的详细内容,更多关于golang的资料请关注golang学习网公众号!
版本声明
本文转载于:SegmentFault 如有侵犯,请联系study_golang@163.com删除
golang 切片转json 为空[] 如何处理?
- 上一篇
- golang 切片转json 为空[] 如何处理?
- 下一篇
- docker-compose 为什么用的是 golang 开发的?
评论列表
-
- 整齐的微笑
- 这篇文章真是及时雨啊,太细致了,感谢大佬分享,码起来,关注老哥了!希望老哥能多写Golang相关的文章。
- 2023-04-20 02:35:19
-
- 光亮的老鼠
- 很棒,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,帮助很大,总算是懂了,感谢作者大大分享技术文章!
- 2023-04-17 23:47:48
-
- 含糊的航空
- 这篇技术文章太及时了,细节满满,很棒,码起来,关注博主了!希望博主能多写Golang相关的文章。
- 2023-03-23 20:37:53
-
- 失眠的芒果
- 这篇技术文章真是及时雨啊,老哥加油!
- 2023-03-13 12:19:20
-
- 自觉的大神
- 细节满满,已加入收藏夹了,感谢作者大大的这篇博文,我会继续支持!
- 2023-03-11 08:54:24
-
- 开朗的镜子
- 太给力了,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,帮助很大,总算是懂了,感谢up主分享博文!
- 2023-01-08 13:50:21
查看更多
最新文章
-
- Golang · Go问答 | 12小时前 |
- Go io.Pipe 写入端阻塞的背压排查
- 468浏览 收藏
-
- Golang · Go问答 | 13小时前 | go · range text/template Go template with 模板作用域 子模板
- Go template 变量输出为空的作用域排查
- 458浏览 收藏
-
- Golang · Go问答 | 13小时前 | pprof · 性能排查 · Go问答 · Go pprof heap profile 内存采样 inuse alloc MemProfileRate
- Go pprof heap 采样数量偏小的解释
- 172浏览 收藏
-
- Golang · Go问答 | 14小时前 | Go问答 · Go Go test fuzztime testing/fuzz fuzzminimizetime
- Go fuzz 测试运行时间过长的资源约束
- 234浏览 收藏
-
- Golang · Go问答 | 1天前 |
- Go net/url.URL EscapedPath 怎样保留原始路径编码
- 465浏览 收藏
-
- Golang · Go问答 | 1天前 |
- Go json.Decoder 读取后字段为空的排查清单
- 166浏览 收藏
-
- Golang · Go问答 | 1天前 | 标准库 · JSON · Go问答 · Go encoding/json time.Time json.Unmarshal UnmarshalJSON
- Go json.Unmarshal 时间字段报错的处理方案
- 214浏览 收藏
-
- Golang · Go问答 | 1天前 | Go问答 · Go GC GOMEMLIMIT runtime/debug SetMemoryLimit 容器内存
- Go GCSetMemoryLimit 后进程仍超出容器限制怎么办
- 105浏览 收藏
查看更多
课程推荐
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
查看更多
AI推荐
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
- 551次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 603次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 630次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 585次使用
-
- MMBench
- MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
- 410次使用
查看更多
相关文章
-
- Go map 并发写 panic 怎么办:从共享 map 到可控写入路径
- 2026-06-30 123浏览
-
- go语言中的defer关键字
- 2023-02-17 150浏览
-
- Golang中Interface接口的三个特性
- 2023-01-07 394浏览
-
- go语言中函数与方法介绍
- 2023-01-07 297浏览
-
- go语言数据类型之字符串string
- 2022-12-30 321浏览

