开发者社区 问答 正文

Structured Streaming当前的问题有哪些?

Structured Streaming当前的问题有哪些?

展开
收起
游客daliwbfb2wo66 2021-12-07 20:43:03 340 分享 版权
1 条回答
写回答
取消 提交回答
  • 1.框架自身只能根据Batch time单元进行数据处理,很难处理基于event time(即时间戳)的数据,很难处理延迟,乱序的数据

    2.流式和批量处理的API还是不完全一致,两种使用场景中,程序代码还是需要一定的转换

    3.端到端的数据容错保障逻辑需要用户自己小心构建,难以处理增量更新和持久化存储等一致性问题

    2021-12-07 20:43:25
    赞同 展开评论
问答分类:
问答地址: