开发者社区> 问答> 正文

求助!!flink 批方式如何读取多路径文件或通配符文件呀?

HI ALL :      请问下,flink批方式如何读取多路径文件或通配符文件?如下:            /abc/202004*/t1.data  读2020年4月所有t1.data文件;            /abc/20200401/t*.data 读2020年4月1日目录下所有t开头的文件      谢谢!*来自志愿者整理的FLINK邮件归档

展开
收起
又出bug了-- 2021-12-03 17:33:57 899 0
1 条回答
写回答
取消 提交回答
  • "all FileInputFormats have to support multiple paths" 如果你有自己的实现,overwrite supportsMultiPaths它为true,几乎所有的实现有是true的。

    如果你使用DataStream,需注意了,不能使用StreamExecutionEnvironment.createInput(不支持多路径),需显示使用addSource(new InputFormatSourceFunction)*来自志愿者整理的FLINK邮件归档

    2021-12-03 18:01:32
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载