0

0

处理Go JSON流中的非JSON内容:一种实用教程

心靈之曲

心靈之曲

发布时间:2025-10-18 11:54:01

|

1026人浏览过

|

来源于php中文网

原创

处理go json流中的非json内容:一种实用教程

本文针对Go语言处理JSON流时遇到的非JSON内容干扰问题,提供了一种有效的解决方案。通过读取字节切片、裁剪非JSON字符串,并使用JSON Unmarshaller进行解析,实现了在混合数据流中提取和处理JSON数据的能力。本教程将详细介绍该方法的实现步骤和代码示例,帮助开发者解决类似问题。

在处理来自标准输入或其他数据源的JSON流时,有时会遇到JSON数据与非JSON数据混合的情况。例如,JSON对象之间穿插着分隔符或其他控制信息,这会导致Go语言内置的encoding/json包在解码时产生错误。本教程将介绍一种绕过这些非JSON内容,成功解析JSON数据的实用方法。

解决方案:手动解析JSON流

核心思路是放弃使用json.Decoder,转而采用更底层的操作方式:

  1. 读取字节切片: 从输入流中读取一定大小的字节数据。
  2. 裁剪非JSON字符串: 在读取到的字节切片中,找到非JSON字符串(例如,示例中的"end")的位置,并将切片裁剪到JSON数据的末尾。
  3. JSON Unmarshaller解析: 使用json.Unmarshal函数将裁剪后的字节切片解析为Go结构体。

以下是具体的代码实现:

PHP经典实例(第二版)
PHP经典实例(第二版)

PHP经典实例(第2版)能够为您节省宝贵的Web开发时间。有了这些针对真实问题的解决方案放在手边,大多数编程难题都会迎刃而解。《PHP经典实例(第2版)》将PHP的特性与经典实例丛书的独特形式组合到一起,足以帮您成功地构建跨浏览器的Web应用程序。在这个修订版中,您可以更加方便地找到各种编程问题的解决方案,《PHP经典实例(第2版)》中内容涵盖了:表单处理;Session管理;数据库交互;使用We

下载
package main

import (
    "bytes"
    "encoding/json"
    "fmt"
    "os"
)

// MyStruct 替换成你实际的JSON结构体
type MyStruct struct {
    Command string `json:"command"`
    ID      string `json:"id"`
    Msg     string `json:"msg,omitempty"` //omitempty表示如果该字段为空,则不包含在JSON中
}

func main() {
    // 创建一个缓冲区来保存流数据
    data := make([]byte, 5000)
    var err error

    // 从标准输入循环读取数据
    for {
        _, err = os.Stdin.Read(data)
        if err != nil {
            fmt.Println("Error reading from stdin:", err)
            return // 或者根据你的需求进行错误处理,例如 break
        }

        // 找到换行符的位置,假设JSON数据以换行符结尾,"end"也在换行符后
        index := bytes.Index(data, []byte("\n"))
        if index == -1 {
            fmt.Println("No newline found in data")
            continue // 或者根据你的需求进行错误处理
        }

        // 裁剪数据到换行符之前,提取JSON数据
        jsonData := data[:index]

        // 创建一个MyStruct实例
        var myStruct MyStruct

        // 将JSON数据解析到MyStruct实例中
        err = json.Unmarshal(jsonData, &myStruct)
        if err != nil {
            fmt.Println("Error unmarshaling JSON:", err)
            continue // 或者根据你的需求进行错误处理
        }

        // 使用myStruct进行后续操作
        fmt.Printf("Received: %+v\n", myStruct)

        // 清空data,准备读取下一段数据
        data = make([]byte, 5000)
    }
}

代码解释:

  • MyStruct:这是一个示例结构体,你需要根据你的实际JSON数据结构进行定义。json:"command"这样的tag用于指定JSON字段与结构体字段的映射关系。
  • os.Stdin.Read(data):从标准输入读取数据到data字节切片中。
  • bytes.Index(data, []byte("\n")):查找data中换行符的位置。 这里假设每条JSON数据后面都有一个换行符,end字符串也在换行符后面,这样就可以通过换行符来分割JSON数据。
  • data[:index]:裁剪data,只保留JSON数据部分。
  • json.Unmarshal(jsonData, &myStruct):将JSON数据解析到myStruct结构体中。
  • fmt.Printf("Received: %+v\n", myStruct):打印接收到的数据,你可以在这里进行后续处理。
  • data = make([]byte, 5000):清空data,避免旧数据干扰下一次读取。

注意事项:

  • 缓冲区大小: data := make([]byte, 5000)中的5000是缓冲区大小,需要根据实际情况调整。如果JSON数据超过缓冲区大小,会导致读取不完整。
  • 错误处理: 代码中包含了基本的错误处理,例如读取错误和JSON解析错误。在实际应用中,需要根据具体需求进行更完善的错误处理。
  • 分隔符: 代码假设JSON数据以换行符分隔。如果分隔符不同,需要修改bytes.Index中的参数。
  • 性能: 这种方法比使用json.Decoder效率稍低,因为它需要手动进行字节切片操作。如果性能要求较高,可以考虑使用更高级的流式解析器。

总结

本教程提供了一种处理Go JSON流中非JSON内容的实用方法。通过手动读取和裁剪字节切片,并使用json.Unmarshal进行解析,可以有效地绕过非JSON数据的干扰,成功提取和处理JSON数据。在实际应用中,需要根据具体情况调整代码,例如缓冲区大小、分隔符和错误处理。

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

418

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

535

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

311

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

76

2025.09.10

printf用法大全
printf用法大全

php中文网为大家提供printf用法大全,以及其他printf函数的相关文章、相关下载资源以及各种相关课程,供大家免费下载体验。

73

2023.06.20

fprintf和printf的区别
fprintf和printf的区别

fprintf和printf的区别在于输出的目标不同,printf输出到标准输出流,而fprintf输出到指定的文件流。根据需要选择合适的函数来进行输出操作。更多关于fprintf和printf的相关文章详情请看本专题下面的文章。php中文网欢迎大家前来学习。

283

2023.11.28

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

298

2023.08.03

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

212

2023.09.04

c++ 根号
c++ 根号

本专题整合了c++根号相关教程,阅读专题下面的文章了解更多详细内容。

58

2026.01.23

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
WEB前端教程【HTML5+CSS3+JS】
WEB前端教程【HTML5+CSS3+JS】

共101课时 | 8.5万人学习

JS进阶与BootStrap学习
JS进阶与BootStrap学习

共39课时 | 3.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号