开发者社区> 问答> 正文

Structured Streaming当前的问题有哪些?

Structured Streaming当前的问题有哪些?

展开
收起
游客daliwbfb2wo66 2021-12-07 20:43:03 305 0
1 条回答
写回答
取消 提交回答
  • 1.框架自身只能根据Batch time单元进行数据处理,很难处理基于event time(即时间戳)的数据,很难处理延迟,乱序的数据

    2.流式和批量处理的API还是不完全一致,两种使用场景中,程序代码还是需要一定的转换

    3.端到端的数据容错保障逻辑需要用户自己小心构建,难以处理增量更新和持久化存储等一致性问题

    2021-12-07 20:43:25
    赞同 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
Structured Streaming for Colum 立即下载
From Spark Streaming to Structured Streaming 立即下载
Structured Spark Streaming-as- 立即下载