go解析Prometheus的数据

本文涉及的产品
可观测监控 Prometheus 版,每月50GB免费额度
云解析 DNS,旗舰版 1个月
公共DNS(含HTTPDNS解析),每月1000万次HTTP解析
简介: 访问一个api, 返回如下数据: {"status":"success","data":{"resultType":"matrix","result":[{"metric":{},"values":[[1473820558.

访问一个api, 返回如下数据:

{"status":"success","data":{"resultType":"matrix","result":[{"metric":{},"values":[[1473820558.361,"28765"],[1473820573.361,"28768"],[1473820588.361,"28772"],[1473820603.361,"28776"],[1473820618.361,"28780"],[1473820633.361,"28783"],[1473820648.361,"28786"],[1473820663.361,"28790"],[1473820678.361,"28793"],[1473820693.361,"28796"],[1473820708.361,"28799"],[1473820723.361,"28802"],[1473820738.361,"28806"],[1473820753.361,"28809"],[1473820768.361,"28817"],[1473820783.361,"28829"],[1473820798.361,"28832"],[1473820813.361,"28858"],[1473820828.361,"28862"],[1473820843.361,"28867"],[1473820858.361,"28873"]]}]}}


js, err := simplejson.NewJson(body)
    if err != nil {
        panic(err.Error())
    }
    //解析数组
    arr, _ := js.Get("data").Get("result").GetIndex(0).Get("values").Array()
    length := len(arr)
 
    for i := 0; i < length; i++ {
        x:= *js.Get("data").Get("result").GetIndex(0).Get("values").GetIndex(i).GetIndex(0))
        //fmt.Println(*js.Get("data").Get("result").GetIndex(0).Get("values").GetIndex(i).GetIndex(1))
    }

访问一个api, 返回如下数据:

{
  "data": {
    "trend": {
      "fields": [
        "min_time",
        "last_px",
        "avg_px",
        "business_amount"
      ],
      "600570.SS": [
        [
          201501090930,
          54.98,
          54.98,
          28327
        ],
        [
          201501090931,
          54.63,
          54.829486,
          49700
        ]
      ]
    }
  }
}

需要解析 600570.SS 后的json数据,用了 simplejson包

js, err := simplejson.NewJson([]byte(str))
check(err)
arr, _ := js.Get("data").Get("trend").Get("600570.ss").Array()

可是对返回的arr数据,用了18般武艺都解析不了。 arr类型理论是一个interface{}类型,但是里面又包含了四组数据,对于这类json数据,网上文档都没有解析的方法。 反复尝试后,用reflect.type 测试了下,发现系统把arr 认定为[]interface 类型,于是类型断言后,遍历。 这回可以把里面数据分拆开了,系统又把里面的数据判断为 json.Number数据类型。 然后就没有然后了.... 经过这一番摸索,对于空接口、类型断言,json包内部的一些设定有了更深的理解:空接口就是因为它灵活,所以在使用时要经过一系列的判断。

上代码:

package main

import (
    "encoding/json"
    "fmt"
    "github.com/bitly/go-simplejson"
    "io/ioutil"
    "net/http"
    //"reflect"
    "regexp"
    "strconv"
    "strings"
)

//const blkSize int = 10000

type trend struct {
    date    int64
    last_px float32 //最新价
    avg_px  float32 //平均价
    volumn  float32 //成交量
}

var (
    lines   []string
    blksLen []int
    isGB    bool
)

func check(err error) {
    if err != nil {
        panic(err.Error())
    }
}

func Get(url string) ([]byte, error) {
    defer func() {
        if err := recover(); err != nil {
            fmt.Println(err)
        }
    }()
    resp, err := http.Get(url)
    check(err)
    //Println(resp.StatusCode)
    if resp.StatusCode != 200 {
        panic("FUCK")
    }
    return ioutil.ReadAll(resp.Body)
}

func strip(src string) string {
    src = strings.ToLower(src)
    re, _ := regexp.Compile(`<!doctype.*?>`)
    src = re.ReplaceAllString(src, "")

    re, _ = regexp.Compile(`<!--.*?-->`)
    src = re.ReplaceAllString(src, "")

    re, _ = regexp.Compile(`<script[\S\s]+?</script>`)
    src = re.ReplaceAllString(src, "")

    re, _ = regexp.Compile(`<style[\S\s]+?</style>`)
    src = re.ReplaceAllString(src, "")

    re, _ = regexp.Compile(`<.*?>`)
    src = re.ReplaceAllString(src, "")

    re, _ = regexp.Compile(`&.{1,5};|&#.{1,5};`)
    src = re.ReplaceAllString(src, "")

    src = strings.Replace(src, "\r\n", "\n", -1)
    src = strings.Replace(src, "\r", "\n", -1)
    return src
}

func Do(url string) string {
    body, err := Get(url)
    check(err)
    plainText := strip(string(body))
    return plainText
}

func main() {

    str := Do("http://xxx:8081/quote/v1/trend?prod_code=600570.SS&fields=last_px,business_amount,avg_px")
    js, err := simplejson.NewJson([]byte(str))
    check(err)
    arr, _ := js.Get("data").Get("trend").Get("600570.ss").Array()
    t := len(arr)
    stockdata := trend{}
    trends := make([]trend, 0, t)
    for _, v := range arr {
        //就在这里i进行类型判断
        value, _ := v.([]interface{})
        for k, u := range value {

            x, _ := u.(json.Number) //类型断言
            y, _ := strconv.ParseFloat(string(x), 64) //将字符型号转化为float64
            //v := reflect.ValueOf(k)
            //fmt.Println("type:", v.Type())
            switch k {
            case 0:
                stockdata.date = int64(y)
            case 1:
                stockdata.last_px = float32(y)
            case 2:
                stockdata.volumn = float32(y)
            case 3:
                stockdata.avg_px = float32(y)
            default:
                fmt.Println("结构体中不存在此元素")

            }

        }
        trends = append(trends, stockdata)

    }
    fmt.Println(trends)
}
目录
相关文章
|
1月前
|
消息中间件 存储 缓存
十万订单每秒热点数据架构优化实践深度解析
【11月更文挑战第20天】随着互联网技术的飞速发展,电子商务平台在高峰时段需要处理海量订单,这对系统的性能、稳定性和扩展性提出了极高的要求。尤其是在“双十一”、“618”等大型促销活动中,每秒需要处理数万甚至数十万笔订单,这对系统的热点数据处理能力构成了严峻挑战。本文将深入探讨如何优化架构以应对每秒十万订单级别的热点数据处理,从历史背景、功能点、业务场景、底层原理以及使用Java模拟示例等多个维度进行剖析。
54 8
|
1月前
|
数据采集 自然语言处理 搜索推荐
基于qwen2.5的长文本解析、数据预测与趋势分析、代码生成能力赋能esg报告分析
Qwen2.5是一款强大的生成式预训练语言模型,擅长自然语言理解和生成,支持长文本解析、数据预测、代码生成等复杂任务。Qwen-Long作为其变体,专为长上下文场景优化,适用于大型文档处理、知识图谱构建等。Qwen2.5在ESG报告解析、多Agent协作、数学模型生成等方面表现出色,提供灵活且高效的解决方案。
139 49
|
19天前
|
XML JSON JavaScript
HttpGet 请求的响应处理:获取和解析数据
HttpGet 请求的响应处理:获取和解析数据
|
2月前
|
自然语言处理 数据可视化 前端开发
从数据提取到管理:合合信息的智能文档处理全方位解析【合合信息智能文档处理百宝箱】
合合信息的智能文档处理“百宝箱”涵盖文档解析、向量化模型、测评工具等,解决了复杂文档解析、大模型问答幻觉、文档解析效果评估、知识库搭建、多语言文档翻译等问题。通过可视化解析工具 TextIn ParseX、向量化模型 acge-embedding 和文档解析测评工具 markdown_tester,百宝箱提升了文档处理的效率和精确度,适用于多种文档格式和语言环境,助力企业实现高效的信息管理和业务支持。
4071 5
从数据提取到管理:合合信息的智能文档处理全方位解析【合合信息智能文档处理百宝箱】
|
1月前
|
存储 分布式计算 Java
存算分离与计算向数据移动:深度解析与Java实现
【11月更文挑战第10天】随着大数据时代的到来,数据量的激增给传统的数据处理架构带来了巨大的挑战。传统的“存算一体”架构,即计算资源与存储资源紧密耦合,在处理海量数据时逐渐显露出其局限性。为了应对这些挑战,存算分离(Disaggregated Storage and Compute Architecture)和计算向数据移动(Compute Moves to Data)两种架构应运而生,成为大数据处理领域的热门技术。
60 2
|
1月前
|
JavaScript API 开发工具
<大厂实战场景> ~ Flutter&鸿蒙next 解析后端返回的 HTML 数据详解
本文介绍了如何在 Flutter 中解析后端返回的 HTML 数据。首先解释了 HTML 解析的概念,然后详细介绍了使用 `http` 和 `html` 库的步骤,包括添加依赖、获取 HTML 数据、解析 HTML 内容和在 Flutter UI 中显示解析结果。通过具体的代码示例,展示了如何从 URL 获取 HTML 并提取特定信息,如链接列表。希望本文能帮助你在 Flutter 应用中更好地处理 HTML 数据。
115 1
|
27天前
|
存储 Go PHP
Go语言中的加解密利器:go-crypto库全解析
在软件开发中,数据安全和隐私保护至关重要。`go-crypto` 是一个专为 Golang 设计的加密解密工具库,支持 AES 和 RSA 等加密算法,帮助开发者轻松实现数据的加密和解密,保障数据传输和存储的安全性。本文将详细介绍 `go-crypto` 的安装、特性及应用实例。
64 0
|
1月前
|
数据采集 存储 自然语言处理
基于Qwen2.5的大规模ESG数据解析与趋势分析多Agent系统设计
2022年中国上市企业ESG报告数据集,涵盖制造、能源、金融、科技等行业,通过Qwen2.5大模型实现报告自动收集、解析、清洗及可视化生成,支持单/多Agent场景,大幅提升ESG数据分析效率与自动化水平。
104 0
|
1月前
|
安全 测试技术 Go
Go语言中的并发编程模型解析####
在当今的软件开发领域,高效的并发处理能力是提升系统性能的关键。本文深入探讨了Go语言独特的并发编程模型——goroutines和channels,通过实例解析其工作原理、优势及最佳实践,旨在为开发者提供实用的Go语言并发编程指南。 ####
|
2月前
|
数据采集 XML 前端开发
Jsoup在Java中:解析京东网站数据
Jsoup在Java中:解析京东网站数据

推荐镜像

更多
下一篇
DataWorks