登录
首页 >  Golang >  Go问答

从 json 流中读取地图

来源:stackoverflow

时间:2024-04-12 09:39:32 358浏览 收藏

怎么入门Golang编程?需要学习哪些知识点?这是新手们刚接触编程时常见的问题;下面golang学习网就来给大家整理分享一些知识点,希望能够给初学者一些帮助。本篇文章就来介绍《从 json 流中读取地图》,涉及到,有需要的可以收藏一下

问题内容

我需要解析很长的 json 文件(超过一百万个项目)。我不想将它加载到内存中并逐块读取它。这里有一个关于项目数组的很好的例子。问题是我处理地图。当我调用 decode 时,我得到 not 在值 的开头。 我不明白应该改变什么。

const data = `{
  "object1": {"name": "cattle","location": "kitchen"},
  "object2": {"name": "table","location": "office"}
}`

type ReadObject struct {
    Name     string `json:"name"`
    Location string `json:"location"`
}

func ParseJSON() {

    dec := json.NewDecoder(strings.NewReader(data))

    tkn, err := dec.Token()
    if err != nil {
        log.Fatalf("failed to read opening token: %v", err)
    }
    fmt.Printf("opening token: %v\n", tkn)

    objects := make(map[string]*ReadObject)

    for dec.More() {

        var nextSymbol string
        if err := dec.Decode(&nextSymbol); err != nil {
            log.Fatalf("failed to parse next symbol: %v", err)
        }

        nextObject := &ReadObject{}

        if err := dec.Decode(&nextObject); err != nil {
            log.Fatalf("failed to parse next object")
        }

        objects[nextSymbol] = nextObject

    }

    tkn, err =  dec.Token()
    if err != nil {
        log.Fatalf("failed to read closing token: %v", err)
    }
    fmt.Printf("closing token: %v\n", tkn)

    fmt.Printf("OBJECTS: \n%v\n", objects)
}


正确答案


tl,dr:当您第一次调用 token() 方法时,您会从(json 值)的开头移动偏移量,因此会收到错误。

您正在使用此结构(link):

type decoder struct {
    // others fields omits for simplicity
    tokenstate int
}

注意tokenstate字段。该值可以是 (link) 之一:

const (
    tokentopvalue = iota
    tokenarraystart
    tokenarrayvalue
    tokenarraycomma
    tokenobjectstart
    tokenobjectkey
    tokenobjectcolon
    tokenobjectvalue
    tokenobjectcomma
)

让我们回到您的代码。您正在调用 token() 方法。此方法获取第一个 json 有效令牌 { 并将 tokenstatetokenobjectvalue 更改为 tokenobjectstart (link)。现在你处于“in-an-object”状态。

如果您此时尝试调用 decode(),您将收到错误(不在值的开头)。这是因为调用 decode() 时允许的 tokenstate 状态为 tokentopvaluetokenarraystarttokenarrayvalue >tokenobjectvalue,即“完整”值,而不是其中的一部分(link)。

为了避免这种情况,您可以根本不调用 token() 并执行如下操作:

dec := json.newdecoder(strings.newreader(datamapfromjson))

objects := make(map[string]*readobject)
if err := dec.decode(&objects); err != nil {
    log.fatalf("failed to parse next symbol: %v", err)
}

fmt.printf("objects: \n%v\n", objects)

或者,如果您想逐块读取,您可以继续调用 token() 直到达到“完整”值。然后对该值调用 decode() (我想这应该可行)。

在第一次调用 dec.token() 并消耗初始 { 后,您必须:

  • 使用 dec.token() 提取下一个密钥
  • 提取密钥后,可以调用 dec.decode(&nextobject) 解码条目

示例代码:

for dec.More() {
        key, err := dec.Token()
        if err != nil {
            // handle error
        }

        var val interface{}
        err = dec.Decode(&val)
        if err != nil {
            // handle error
        }

        fmt.Printf("  %s : %v\n", key, val)
    }

https://play.golang.org/p/5r1d8MsNlKb

到这里,我们也就讲完了《从 json 流中读取地图》的内容了。个人认为,基础知识的学习和巩固,是为了更好的将其运用到项目中,欢迎关注golang学习网公众号,带你了解更多关于的知识点!

声明:本文转载于:stackoverflow 如有侵犯,请联系study_golang@163.com删除
相关阅读
更多>
最新阅读
更多>
课程推荐
更多>