开发者社区> 问答> 正文

Flink报错No more available blockId

已解决

Flink报错No more available blockId

展开
收起
提个问题 2024-06-03 13:13:27 27 0
1 条回答
写回答
取消 提交回答
  • 开发者社区问答官方账号
    官方回答
    采纳回答
    ODPS写入的block数量超过限制,说明每次flush的数据量太小而且flush太频繁。
    Blink排查思路
    检查odps sink表的with参数,batchCount(每次flush的数据条数,默认Long.MAX,也就是只按时间和odps client本身的buffer大小去flush,odps buffer大小64MB)和flushIntervalMs(flush间隔的毫秒数,默认30000)这两项是不是太小。调大这两项。
    VVP FLINK排查思路
    检查odps sink表的with参数,batchSize(每次flush的数据大小,默认64MB)和flushIntervalMs(flush间隔的毫秒数,默认30000)这两项是不是太小。调大这两项。
    2024-06-03 13:13:28
    赞同 1 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 覃立辉 立即下载
Flink CDC Meetup PPT - 孙家宝 立即下载
Flink CDC Meetup PPT - 徐榜江 立即下载