本文介绍日志服务投递OSS使用CSV存储的相关细节,其它内容请参考
投递日志到 OSS。
CSV存储字段配置
配置页面
可以在日志服务数据预览或索引查询页面查看一条日志的多个Key-Value,将你需要投递到OSS的字段名(Key)有序填入。
如您配置的Key名称在日志中找不到,CSV行中这里一列值将设置为空值字符串(null)。
配置项
细节请参考
CSV标准、
postgresql CSV说明。
可配置的保留字段
在投递OSS过程中,除了使用日志本身的Key-Value外,日志服务保留同时提供以下几个保留字段可供选择:
JSON格式存储会默认带上以上字段内容。
CSV存储可以根据您的需求自行选择。例如您需要日志的topic,那么可以填写字段名:__topic__。
OSS存储地址
数据消费
HybridDB
建议配置如下:
- 分隔符 delimiter:逗号(,)
- 转义符 quote:双引号(“)
- 无效字段内容 null:不填写(空)
- 投递字段名称 header:不勾选(HybirdDB默认csv文件行首无字段说明)
更多细节请参考
HybidDB相关使用说明。
其它
CSV是可读格式,可以直接从OSS下载以文本形式打开查看。
如果使用了snappy压缩,可以参考
OSS投递JSON存储的snappy解压缩说明。