当前位置:首页 > 文章列表 > Golang > Go问答 > 将 yaml 字段动态解析为 Go 中的一组有限结构之一

将 yaml 字段动态解析为 Go 中的一组有限结构之一

来源:stackoverflow 2024-04-11 11:15:32 0浏览 收藏

知识点掌握了,还需要不断练习才能熟练运用。下面golang学习网给大家带来一个Golang开发实战,手把手教大家学习《将 yaml 字段动态解析为 Go 中的一组有限结构之一》,在实现功能的过程中也带大家重新温习相关知识点,温故而知新,回头看看说不定又有不一样的感悟!

问题内容

我有一个 yaml 文件,其中一个字段可以由一种可能的结构类型表示。为了简化代码和 yaml 文件,假设我有这些 yaml 文件:

kind: "foo"
spec:
  fooval: 4
kind: "bar"
spec:
  barval: 5

这些用于解析的结构:

    type spec struct {
        kind string      `yaml:"kind"`
        spec interface{} `yaml:"spec"`
    }
    type foo struct {
        fooval int `yaml:"fooval"`
    }
    type bar struct {
        barval int `yaml:"barval"`
    }

我知道我可以使用 map[string]interface{} 作为 spec 字段的类型。但真实的例子更复杂,涉及更多可能的结构类型,不仅仅是foo和bar,这就是为什么我不喜欢将spec解析到字段中。

我找到了解决方法:将 yaml 解组为中间结构,然后检查 kind 字段,并将 map[string]interface{} 字段编组回 yaml,然后将其解组为具体类型:

    var spec Spec
    if err := yaml.Unmarshal([]byte(src), &spec); err != nil {
        panic(err)
    }
    tmp, _ := yaml.Marshal(spec.Spec)
    if spec.Kind == "foo" {
        var foo Foo
        yaml.Unmarshal(tmp, &foo)
        fmt.Printf("foo value is %d\n", foo.FooVal)
    }
    if spec.Kind == "bar" {
        tmp, _ := yaml.Marshal(spec.Spec)
        var bar Bar
        yaml.Unmarshal(tmp, &bar)
        fmt.Printf("bar value is %d\n", bar.BarVal)
    }

但它需要额外的步骤并消耗更多的内存(真实的 yaml 文件可能比示例中的更大)。是否存在一些更优雅的方法将 yaml 动态解组为一组有限的结构?

更新:我正在使用 github.com/go-yaml/yaml v2.1.0 yaml 解析器。


解决方案


要与 yaml.v2 一起使用,您可以执行以下操作:

type yamlnode struct {
    unmarshal func(interface{}) error
}

func (n *yamlnode) unmarshalyaml(unmarshal func(interface{}) error) error {
    n.unmarshal = unmarshal
    return nil
}

type spec struct {
    kind string      `yaml:"kind"`
    spec interface{} `yaml:"-"`
}
func (s *spec) unmarshalyaml(unmarshal func(interface{}) error) error {
    type s spec
    type t struct {
        s    `yaml:",inline"`
        spec yamlnode `yaml:"spec"`
    }

    obj := &t{}
    if err := unmarshal(obj); err != nil {
        return err
    }
    *s = spec(obj.s)

    switch s.kind {
    case "foo":
        s.spec = new(foo)
    case "bar":
        s.spec = new(bar)
    default:
        panic("kind unknown")
    }
    return obj.spec.unmarshal(s.spec)
}

https://play.golang.org/p/Ov0cOaedb-x

要与 yaml.v3 一起使用,您可以执行以下操作:

type spec struct {
    kind string      `yaml:"kind"`
    spec interface{} `yaml:"-"`
}
func (s *spec) unmarshalyaml(n *yaml.node) error {
    type s spec
    type t struct {
        *s   `yaml:",inline"`
        spec yaml.node `yaml:"spec"`
    }

    obj := &t{s: (*s)(s)}
    if err := n.decode(obj); err != nil {
        return err
    }

    switch s.kind {
    case "foo":
        s.spec = new(foo)
    case "bar":
        s.spec = new(bar)
    default:
        panic("kind unknown")
    }
    return obj.spec.decode(s.spec)
}

https://play.golang.org/p/ryEuHyU-M2Z

您可以通过实现自定义 unmarshalyaml 函数来实现此目的。但是,使用 v2 版本的 api,您基本上会做与现在相同的事情,只是封装得更好一些。

但是,如果您改用 v3 api,您将获得更好的 unmarshalyaml,它实际上可以让您在将解析的 yaml 节点处理为原生 go 类型之前对其进行处理。看起来是这样的:

package main

import (
    "errors"
    "fmt"
    "gopkg.in/yaml.v3"
)

type spec struct {
    kind string      `yaml:"kind"`
    spec interface{} `yaml:"spec"`
}
type foo struct {
    fooval int `yaml:"fooval"`
}
type bar struct {
    barval int `yaml:"barval"`
}

func (s *spec) unmarshalyaml(value *yaml.node) error {
    s.kind = ""
    for i := 0; i < len(value.content)/2; i += 2 {
        if value.content[i].kind == yaml.scalarnode &&
            value.content[i].value == "kind" {
            if value.content[i+1].kind != yaml.scalarnode {
                return errors.new("kind is not a scalar")
            }
            s.kind = value.content[i+1].value
            break
        }
    }
    if s.kind == "" {
        return errors.new("missing field `kind`")
    }
    switch s.kind {
    case "foo":
        var foo foo
        if err := value.decode(&foo); err != nil {
            return err
        }
        s.spec = foo
    case "bar":
        var bar bar
        if err := value.decode(&bar); err != nil {
            return err
        }
        s.spec = bar
    default:
        return errors.new("unknown kind: " + s.kind)
    }
    return nil
}

var input1 = []byte(`
kind: "foo"
spec:
  fooval: 4
`)

var input2 = []byte(`
kind: "bar"
spec:
  barval: 5
`)

func main() {
    var s1, s2 spec
    if err := yaml.unmarshal(input1, &s1); err != nil {
        panic(err)
    }
    fmt.printf("type of spec from input1: %t\n", s1.spec)
    if err := yaml.unmarshal(input2, &s2); err != nil {
        panic(err)
    }
    fmt.printf("type of spec from input2: %t\n", s2.spec)
}

我建议研究一下使用 yaml 标签而不是当前结构在 yaml 中对此进行建模的可能性;标签正是为此目的而设计的。而不是当前的 yaml

kind: "foo"
spec:
  fooval: 4

你可以写

--- !foo
fooVal: 4

现在您不再需要 kind 和 spec 的描述结构。加载它看起来有点不同,因为您需要一个可以定义 unmarshalyaml 的包装根类型,但如果这只是较大结构的一部分,则可能是可行的。您可以在 yaml.node 的 tag 字段中访问标签 !foo。

理论要掌握,实操不能落!以上关于《将 yaml 字段动态解析为 Go 中的一组有限结构之一》的详细介绍,大家都掌握了吧!如果想要继续提升自己的能力,那么就来关注golang学习网公众号吧!

版本声明
本文转载于:stackoverflow 如有侵犯,请联系study_golang@163.com删除
Java线程生命周期探微Java线程生命周期探微
上一篇
Java线程生命周期探微
Python启动器是什么_Python启动器介绍
下一篇
Python启动器是什么_Python启动器介绍
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    327次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    385次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    377次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    344次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    170次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码