开发者社区> 问答> 正文

Flume采集数据会丢失吗?

Flume采集数据会丢失吗?

展开
收起
游客mm5dulkpivqdo 2021-12-05 15:49:59 660 0
1 条回答
写回答
取消 提交回答
  • 根据Flume的架构原理,Flume是不可能丢失数据的,其内部有完善的事务机制,Source到Channel是事务性的,Channel到Sink是事务性的,因此这两个环节不会出现数据的丢失,唯一可能丢失数据的情况是Channel采用memoryChannel,agent宕机导致数据丢失,或者Channel存储数据已满,导致Source不再写入,未写入的数据丢失。

    2021-12-05 15:50:25
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
零基础实现Flume收集网站日志数据到MaxCompute 立即下载
数据采集:日志数据上传 立即下载
时序及分析在hbase上的使用 立即下载

相关实验场景

更多