Fastjson 在HiTSDB中的应用-阿里云开发者社区

开发者社区> 开发与运维> 正文

Fastjson 在HiTSDB中的应用

简介:

HiTSDB协议使用json作为轻量级的数据交换语言。
Jackson是最为广泛使用的Json格式数据的生成和解析框架之一。
HiTSDB服务端默认使用Jackson。
本文主要分析了Jackson对HiTSDB性能的影响以及提高方案

先来看一下Java性能tuning 利器jmc的分析结果:
image

哇, 排到了第二位,值得投点精力进去了。
搭个环境看看机器的资源消耗:

写入TPS

tps

24Core, 96G物理机,100万TPS下测试, CPU消耗到了40+。

Jackson CPU 占用

jackson

FastJson 应用

第一弹:

换成Fastjson的大利器,BeanToArray映射模式。

由于HiTSDB的写入字段固定并且有序
[metric,timestamp,value, tags, tsuid, granularity, aggregator]
所以解析可以节省json key的部分。

效果不错, 大部分CPU 到了40-。
fastjson_beanarray

第二弹:

忽略optional字段;Value采用Double类型

由于tsuid, granularity, aggregator这三个字段是optional的,所以可以省略解析。

value字段默认是String,由于目前支持数值型的技术,可以存储成Double类型

最终采用FastJson CPU 占用稳定在30+。
fastjson

结论:

HiTSDB采用Fastjson后,CPU消耗比降低了10点左右

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

分享:
开发与运维
使用钉钉扫一扫加入圈子
+ 订阅

集结各类场景实战经验,助你开发运维畅行无忧

其他文章