开发者社区 问答 正文

数据集成与存储层流批一体会产生什么问题?

数据集成与存储层流批一体会产生什么问题?

展开
收起
芯在这 2021-12-09 23:02:21 215 分享 版权
1 条回答
写回答
取消 提交回答
  • 流处理更容易出现数据丢失,丢失的查询操作。

    一般使用消息中间件对流数据进行存储,消息中间件的存储特点也决定了,丢失的查询操作,非常苦难,难以对数。

    Schema 的同步与转换问题,基于流处理来确保 Schema 保持一致,并且数据不受影响其实并不容易。面对频繁变动的业务系统,往往维护量会变高。

    2021-12-09 23:02:46
    赞同 展开评论