开发者社区> 问答> 正文

flume-ng 使用 MySQL Sink

准备使用apache flume 1.3 来处理日志的收集工作,日志的量不是很大,每天10个G左右,
我准备仅把WARN和ERROR级别的日志抽取出来保存,供后续分析使用。
由于目前这两类数据不会很多,初步打算把他们写入MySQL DB, 使用起来方便一些。
问题:

  1. 官方文档没有提供到普通关系数据的Sink实现,我是否需要自己实现,或者是否已经有比较好的第三方实现?

展开
收起
蛮大人123 2016-02-06 16:10:05 4179 0
1 条回答
写回答
取消 提交回答
  • 我说我不帅他们就打我,还说我虚伪

    flume本身没有实现,自己写个插件吧,不费力。将日志写到mysql没问题的,但是得考虑到分表,也便于以后统计。

    2019-07-17 18:38:29
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
One Box: 解读事务与分析一体化数据库 HybridDB for MySQL 立即下载
One Box:解读事务与分析一体化数据库HybridDB for MySQL 立即下载
如何支撑HTAP场景-HybridDB for MySQL系统架构和技术演进 立即下载

相关镜像