使用Golang利用Jsoup抓取网站制作JSON

编程并不是一个机械性的工作，而是需要有思考，有创新的工作，语法是固定的，但解决问题的思路则是依靠人的思维，这就需要我们坚持学习和更新自己的知识。今天golang学习网就整理分享《使用Golang利用Jsoup抓取网站制作JSON》，文章讲解的知识点主要包括，如果你对Golang方面的知识点感兴趣，就不要错过golang学习网，在这可以对大家的知识积累有所帮助，助力开发能力的提升。

我想抓取一个网站（bbs.archusers.ir），以便为用户发布新帖子或主题通知。

我尝试编写下面的代码来获取阅读名称、上次更改日期和每个部分的 url，然后保存到结构中，并将结构保存到 json 对象中。但我的结构中的链接部分不会获得任何值，并且不会出现在我的控制台中，这是我的代码

package main

import (
    "fmt"
    "github.com/anaskhan96/soup"
    "log"
    "os"
    "encoding/json"
)

type Message struct {
    Name string
    Date string
    link string

}

type myJSON struct {
    Array []Message
}

var input []Message

func main() {

    resp, err := soup.Get("https://bbs.archusers.ir")

    if err != nil {
        os.Exit(1)
    }

    doc := soup.HTMLParse(resp)
    links := doc.Find("div", "id", "brdmain").FindAll("a")
    for i := 0; i < len(links); i += 2 {
        link := Message{links[i].Text(), links[i+1].Text(), links[i].Attrs()["href"] }
        input = append(input, link)
    }


    if err != nil {
        log.Fatal(err)
    }

    jsondat := &myJSON{input}
    encjson, _ := json.Marshal(jsondat)
    fmt.Println(string(encjson))

}

我哪部分做错了？

解决方案

您的消息结构中有问题 它必须以大写 k 命名“链接” ---< link

type Message struct {
Name string
Date string
Link string
}

输出将是正确的

{"名称":"manjaro","日期":"2018-10-18 10:55:09","链接":"viewforum.php?id=22"}

以上就是本文的全部内容了，是否有顺利帮助你解决问题？若是能给你带来学习上的帮助，请大家多多支持golang学习网！更多关于Golang的相关知识，也可关注golang学习网公众号。