从 json 流中读取地图
来源:stackoverflow
时间:2024-04-12 09:39:32 358浏览 收藏
怎么入门Golang编程?需要学习哪些知识点?这是新手们刚接触编程时常见的问题;下面golang学习网就来给大家整理分享一些知识点,希望能够给初学者一些帮助。本篇文章就来介绍《从 json 流中读取地图》,涉及到,有需要的可以收藏一下
我需要解析很长的 json 文件(超过一百万个项目)。我不想将它加载到内存中并逐块读取它。这里有一个关于项目数组的很好的例子。问题是我处理地图。当我调用 decode
时,我得到 not 在值
的开头。
我不明白应该改变什么。
const data = `{ "object1": {"name": "cattle","location": "kitchen"}, "object2": {"name": "table","location": "office"} }` type ReadObject struct { Name string `json:"name"` Location string `json:"location"` } func ParseJSON() { dec := json.NewDecoder(strings.NewReader(data)) tkn, err := dec.Token() if err != nil { log.Fatalf("failed to read opening token: %v", err) } fmt.Printf("opening token: %v\n", tkn) objects := make(map[string]*ReadObject) for dec.More() { var nextSymbol string if err := dec.Decode(&nextSymbol); err != nil { log.Fatalf("failed to parse next symbol: %v", err) } nextObject := &ReadObject{} if err := dec.Decode(&nextObject); err != nil { log.Fatalf("failed to parse next object") } objects[nextSymbol] = nextObject } tkn, err = dec.Token() if err != nil { log.Fatalf("failed to read closing token: %v", err) } fmt.Printf("closing token: %v\n", tkn) fmt.Printf("OBJECTS: \n%v\n", objects) }
正确答案
tl,dr:当您第一次调用 token()
方法时,您会从(json 值)的开头移动偏移量,因此会收到错误。
您正在使用此结构(link):
type decoder struct { // others fields omits for simplicity tokenstate int }
注意tokenstate字段。该值可以是 (link) 之一:
const ( tokentopvalue = iota tokenarraystart tokenarrayvalue tokenarraycomma tokenobjectstart tokenobjectkey tokenobjectcolon tokenobjectvalue tokenobjectcomma )
让我们回到您的代码。您正在调用 token()
方法。此方法获取第一个 json 有效令牌 {
并将 tokenstate 从 tokenobjectvalue 更改为 tokenobjectstart (link)。现在你处于“in-an-object”状态。
如果您此时尝试调用 decode()
,您将收到错误(不在值的开头)。这是因为调用 decode()
时允许的 tokenstate 状态为 tokentopvalue、tokenarraystart、tokenarrayvalue、 >tokenobjectvalue,即“完整”值,而不是其中的一部分(link)。
为了避免这种情况,您可以根本不调用 token()
并执行如下操作:
dec := json.newdecoder(strings.newreader(datamapfromjson)) objects := make(map[string]*readobject) if err := dec.decode(&objects); err != nil { log.fatalf("failed to parse next symbol: %v", err) } fmt.printf("objects: \n%v\n", objects)
或者,如果您想逐块读取,您可以继续调用 token()
直到达到“完整”值。然后对该值调用 decode()
(我想这应该可行)。
在第一次调用 dec.token()
并消耗初始 {
后,您必须:
- 使用
dec.token()
提取下一个密钥 - 提取密钥后,可以调用
dec.decode(&nextobject)
解码条目
示例代码:
for dec.More() { key, err := dec.Token() if err != nil { // handle error } var val interface{} err = dec.Decode(&val) if err != nil { // handle error } fmt.Printf(" %s : %v\n", key, val) }
https://play.golang.org/p/5r1d8MsNlKb
到这里,我们也就讲完了《从 json 流中读取地图》的内容了。个人认为,基础知识的学习和巩固,是为了更好的将其运用到项目中,欢迎关注golang学习网公众号,带你了解更多关于的知识点!
-
502 收藏
-
502 收藏
-
501 收藏
-
501 收藏
-
501 收藏
-
139 收藏
-
204 收藏
-
325 收藏
-
477 收藏
-
486 收藏
-
439 收藏
-
357 收藏
-
352 收藏
-
101 收藏
-
440 收藏
-
212 收藏
-
143 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 508次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习