开发者社区> 问答> 正文

为什么仅支持recoverableWriter

Flink的StreamFileSink和1.12提供的FileSink中,BucketsBuilder的createBucketWriter中仅支持recoverableWriter。 我这边用的是一个公司自研的大型分布式文件系统,支持hadoop协议(但不清楚是否所有特性都支持),目前使用streamFileSink和FileSink貌似都无法正常写。

不清楚是否有其他问题,至少当前是卡住在这个recoverable上了。 报错是只有hdfs才支持recoverableWriter。

有人知道如何解吗? *来自志愿者整理的flink邮件归档

展开
收起
JACKJACK 2021-12-08 15:46:40 1221 0
1 条回答
写回答
取消 提交回答
  • 对的是我!

    重改写了flink源码覆盖了这部分限制就可以了。*来自志愿者整理的flink邮件归档

    2021-12-08 16:45:56
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
《深度解读MongoDB 最全面的增强版本4.4 新特性》 立即下载
POLARDB 产品特性和通用业务场景 立即下载
荷鲁斯移动端第三方库安全检测引擎介绍 立即下载