如何在Golang的Colly中处理XML路径不存在的问题

偷偷努力，悄无声息地变强，然后惊艳所有人！哈哈，小伙伴们又来学习啦~今天我将给大家介绍《如何在Golang的Colly中处理XML路径不存在的问题》，这篇文章主要会讲到等等知识点，不知道大家对其都有多少了解，下面我们就一起来看一吧！当然，非常希望大家能多多评论，给出合理的建议，我们一起学习，一起进步！

我正在使用 colly 来废弃一个电子商务网站。我将循环浏览许多产品。

这是我获取副标题的代码片段

c.onxml("/html/body/div[4]/div/div[3]/div[2]/div/div[1]/div[3]/div/div/h1/1234", func(e *colly.xmlelement) {
        fmt.println(e.text)
})

但是，并非所有产品都有副标题，因此上述 xml 路径并不适用于所有情况。

当我到达没有副标题的产品时，我的代码崩溃并返回错误

panic：表达式的计算结果必须为节点set

这是我到目前为止的代码：

c := colly.newcollector()
c.onerror(func(_ *colly.response, err error) {
    log.println("something went wrong:", err)
})

//sub title
c.onxml("/html/body/div[4]/div/div[3]/div[2]/div/div[1]/div[3]/div/div/h1/1234", func(e *colly.xmlelement) {
    fmt.println(e.text)
})

c.onrequest(func(r *colly.request) {
    fmt.println("visiting", r.url)
})

c.visit("https://www.lazada.vn/-i1701980654-s7563711492.html")

这就是我想要的

c.OnXML("/html/b.....v/h1/1234", func(e *colly.XMLElement) {
    if no error {

        fmt.Println("NO ERROR)

    } else {

        fmt.Println("GOT ERROR")

    }
    
})

正确答案

也许我发现你的代码出了什么问题。让我从决赛开始吧。如您所见，该错误源自 parse.go 文件第 473 行的 panic 语句。包 xpath 有一个名为 parsenodetest 的方法，它执行以下检查：

func (p *parser) parseNodeTest(n node, axeTyp string) (opnd node) {
    switch p.r.typ {
    case itemName:
        if p.r.canBeFunc && isNodeType(p.r) {
            var prop string
            switch p.r.name {
            case "comment", "text", "processing-instruction", "node":
                prop = p.r.name
            }
            var name string
            p.next()
            p.skipItem(itemLParens)
            if prop == "processing-instruction" && p.r.typ != itemRParens {
                checkItem(p.r, itemString)
                name = p.r.strval
                p.next()
            }
            p.skipItem(itemRParens)
            opnd = newAxisNode(axeTyp, name, "", prop, n)
        } else {
            prefix := p.r.prefix
            name := p.r.name
            p.next()
            if p.r.name == "*" {
                name = ""
            }
            opnd = newAxisNode(axeTyp, name, prefix, "", n)
        }
    case itemStar:
        opnd = newAxisNode(axeTyp, "", "", "", n)
        p.next()
    default:
        panic("expression must evaluate to a node-set")
    }
    return opnd
}

p.r.typ 的值为 itemnumber (28)。这会导致交换机进入默​​认分支并给出错误。在上述方法之前调用的方法（您可以在 ide 的调用堆栈中看到它们）将文字 1234 的 typ 设置为该值，这导致了无效的 xpath 查询。为了使其正常工作，您必须删除 1234 并输入一些有效值。
如果这解决了您的问题，请告诉我，谢谢！

今天带大家了解了的相关知识，希望对你有所帮助；关于Golang的技术知识我们会一点点深入介绍，欢迎大家关注golang学习网公众号，一起学习编程~