go如何将两个切片转化为一段json?
来源:SegmentFault
2023-02-24 14:08:48
0浏览
收藏
来到golang学习网的大家,相信都是编程学习爱好者,希望在这里学习Golang相关编程知识。下面本篇文章就来带大家聊聊《go如何将两个切片转化为一段json?》,介绍一下goquery、Gin,希望对大家的知识积累有所帮助,助力实战开发!
问题内容
问题描述
初学go,制作可以爬取百度热搜的爬虫,但是最终得到两个切片,不知道怎么弄成json,搜索发现网上资源太少了。
用了goquery和gin两个库。
理想效果是访问http://【ip】/api/v1/baidu/hot返回:
[
{
"title": "...",
"img": "https://..."
},
{
"title": "...",
"img": "https://..."
}
// .......
]相关代码
package main
import (
"net/http"
"strings"
"github.com/PuerkitoBio/goquery"
"github.com/gin-gonic/gin"
)
func main() {
r := gin.Default()
// api
api := r.Group("/api/v1")
{
baidu := api.Group("/baidu")
{
baidu.GET("/hot", getBaiduHotList)
}
api.GET("/", apiTest)
}
// 端口
r.Run(":80")
}
func apiTest(c *gin.Context) {
c.JSON(200, gin.H{
"msg": "200",
})
}
var (
img []string
title []string
)
func getBaiduHotList(c *gin.Context) {
resp, err := http.Get("https://top.baidu.com/board")
if err != nil {
panic(err)
}
dom, err := goquery.NewDocumentFromReader(resp.Body)
if err != nil {
panic(err)
}
dom.Find(".theme-hot .active-item_1Em2h .c-single-text-ellipsis").Each(
func(i int, s *goquery.Selection) {
title := append(title, strings.Join(strings.Fields(s.Text()), ""))
// 然后就不知道怎么搞了
})
dom.Find(".theme-hot .active-item-img_3i_Tx").Each(
func(i int, s *goquery.Selection) {
src, _ := s.Attr("src")
img := append(img, strings.Join(strings.Fields(src), ""))
// 然后就不知道怎么搞了
})
}望大佬们指导一下,非常感谢。
正确答案
只是抓包的话,不需要用gin库,转json的话需要用json库
package main
import (
"encoding/json"
"fmt"
"github.com/PuerkitoBio/goquery"
"net/http"
)
type News struct {
Img string `json:"img"`
Title string `json:"title"`
}
func main() {
getBaiduHotList()
}
func getBaiduHotList() {
var newsList []News
resp, err := http.Get("https://top.baidu.com/board")
if err != nil {
panic(err)
}
dom, err := goquery.NewDocumentFromReader(resp.Body)
if err != nil {
panic(err)
}
dom.Find(".theme-hot .active-item_1Em2h").Each(
func(i int, s *goquery.Selection) {
img, _ := s.Find(".active-item-img_3i_Tx").Attr("src")
title := s.Find(".c-single-text-ellipsis").Text()
newsList = append(newsList, News{
Img: img,
Title: title,
})
})
res, err := json.Marshal(newsList)
if err != nil {
fmt.Println("格式化错误")
fmt.Println(err.Error())
return
}
fmt.Print(string(res))
}调用方法
go run main.go
抓取结果
[{"img":"https://fyb-1.cdn.bcebos.com/hotboard_img/0341875b3e51ae15b2795c5714a4296f?x-bce-process=image/resize,m_fill,w_732,h_272","title":" 国家公路网将覆盖10万人以上市县 "},{"img":"https://fyb-1.cdn.bcebos.com/hotboard_img/d03ec9b7b50ff24500f990a5edc969a7?x-bce-process=image/resize,m_fill,w_732,h_272","title":" 警方将彻查被拖拽女生与男子关系 "},{"img":"https://fyb-1.cdn.bcebos.com/hotboard_img/8fcb8e1f492d161dd595cd88a0860e9e?x-bce-process=image/resize,m_fill,w_732,h_272","title":" 必胜客两家涉事门店被立案调查 "},{"img":"https://fyb-1.cdn.bcebos.com/hotboard_img/2d33a233bcdfb6b412a032524d038e65?x-bce-process=image/resize,m_fill,w_732,h_272","title":" 做好防汛关键期水旱灾害防御 "},{"img":"https://fyb-1.cdn.bcebos.com/hotboard_img/47a1e7d28270ab8322746e5171135325?x-bce-process=image/resize,m_fill,w_732,h_272","title":" 台媒:山东舰疑被美空军侦察机锁定 "},{"img":"https://fyb-1.cdn.bcebos.com/hotboard_img/f94c30082e448b0ae863a8c253547d76?x-bce-process=image/resize,m_fill,w_732,h_272","title":" 多人打砸烧烤摊:不打折就砸 "},{"img":"https://fyb-1.cdn.bcebos.com/hotboard_img/b68e4e6f4a3ab5869e8f06a56f07b5ec?x-bce-process=image/resize,m_fill,w_732,h_272","title":" 新冠康复者求职现状 "},{"img":"https://fyb-1.cdn.bcebos.com/hotboard_img/f6f5c5d516e67ecf030b1afd3e5a224e?x-bce-process=image/resize,m_fill,w_732,h_272","title":" 天津一居民楼燃爆 1死12伤3失联 "},{"img":"https://fyb-1.cdn.bcebos.com/hotboard_img/fdf013459bf6d8fbf560c5b7b064c0b3?x-bce-process=image/resize,m_fill,w_732,h_272","title":" 广西北海隔离环境不忍直视 "},{"img":"https://fyb-1.cdn.bcebos.com/hotboard_img/24eb04e273d1ba4795272e232b0b53e8?x-bce-process=image/resize,m_fill,w_732,h_272","title":" 女子发订婚宴照被谣传为会所技师 "},{"img":"https://fyb-1.cdn.bcebos.com/hotboard_img/d2f717b05338eb149e9d8c9839bbb9f7?x-bce-process=image/resize,m_fill,w_732,h_272","title":" 担心疫情被封外地 男子提前过年 "}]注意转Json时结构体中变量首字母大写才可以导出
本篇关于《go如何将两个切片转化为一段json?》的介绍就到此结束啦,但是学无止境,想要了解学习更多关于Golang的相关知识,请关注golang学习网公众号!
版本声明
本文转载于:SegmentFault 如有侵犯,请联系study_golang@163.com删除
oss 的 path 有必要分路径吗?
- 上一篇
- oss 的 path 有必要分路径吗?
- 下一篇
- 如何打造一款NewSQL + MySQL的分布式数据库?
查看更多
最新文章
-
- Golang · Go问答 | 1天前 | go · RGBA image ColorModel At
- Go image 怎样读取不同颜色模型的像素
- 291浏览 收藏
-
- Golang · Go问答 | 1天前 |
- Go 怎样把 pprof 挂到独立 ServeMux
- 491浏览 收藏
-
- Golang · Go问答 | 1天前 |
- Go embed FS 打开不存在资源时怎样保留错误上下文
- 141浏览 收藏
-
- Golang · Go问答 | 1天前 |
- Go template.Funcs 怎样在 ParseFS 前注册自定义函数
- 406浏览 收藏
-
- Golang · Go问答 | 1天前 |
- Go XML Decoder Strict 关闭后适合什么兼容场景
- 412浏览 收藏
-
- Golang · Go问答 | 1天前 |
- Go 怎样读取子进程资源使用量
- 373浏览 收藏
-
- Golang · Go问答 | 1天前 |
- Go os/user Current 和 Lookup 怎样选择
- 171浏览 收藏
-
- Golang · Go问答 | 1天前 | 权限 · Go问答 · Go Unix Socket UnixConn 对端凭据 SO_PEERCRED x/sys/unix
- Go Unix socket 怎样读取对端凭据
- 302浏览 收藏
-
- Golang · Go问答 | 1天前 |
- Go Unix 数据报套接字怎样处理报文边界
- 336浏览 收藏
-
- Golang · Go问答 | 1天前 |
- Go 项目怎样为 HTTP/3 客户端划分可选依赖
- 471浏览 收藏
-
- Golang · Go问答 | 1天前 |
- Go HTTP/2 异常怎样用 GODEBUG 获取线索
- 366浏览 收藏
查看更多
课程推荐
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
查看更多
AI推荐
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
- 487次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 543次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 566次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 521次使用
-
- MMBench
- MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
- 334次使用
查看更多
相关文章
-
- Go map 并发写 panic 怎么办:从共享 map 到可控写入路径
- 2026-06-30 123浏览
-
- golanggoqueryselector选择器使用示例大全
- 2023-01-07 308浏览
-
- Go爬虫(http、goquery和colly)详解
- 2022-12-31 353浏览
-
- go语言中的defer关键字
- 2023-02-17 150浏览
-
- Golang中Interface接口的三个特性
- 2023-01-07 394浏览
