开发者社区> 问答> 正文

写入hdfs的文件都是part-{parallel-task}-{count}这种格式,如何重命

link 1.9.0

  1. 使用StreamingFileSink 消费kafka数据到HDFS
  2. 开启了EXACTLY_ONCE

写入hdfs的文件都是 part-{parallel-task}-{count} 这种格式

如何重命名啊? *来自志愿者整理的flink邮件归档

展开
收起
彗星halation 2021-12-08 10:10:02 778 0
1 条回答
写回答
取消 提交回答
  • 简单看了下拼文件名的规则,你可以试试

    RowFormatBuilder#withPartFilePrefix RowFormatBuilder#withPartFileSuffix

    这两个方法。应该可以将你的文件名设置成

    - -

    中间段是写死的。

    如果你有更自定义的重命名需求,建议把你为什么需要重命名具体的说一下。*来自志愿者整理的flink邮件归档

    2021-12-08 10:44:01
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
海量数据分布式存储——Apache HDFS之最新进展 立即下载
Bulletproof Jobs @ Scale Patterns for Spark Magic 立即下载
Show Me The Money! Cost & Resource Tracking for Hadoop & Storm 立即下载