开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

请问怎么判断filesink写文件成功呢?

请问怎么判断filesink写文件成功呢?

展开
收起
圆葱猪肉包 2023-03-08 11:12:53 438 0
2 条回答
写回答
取消 提交回答
  • 发表文章、提出问题、分享经验、结交志同道合的朋友

    可以通过实现 BucketAssigner 接口并使用 onSuccessfulWrite 回调方法来判断文件写入是否成功。

       @Override
        public void onSuccessfulWrite(String bucketPath) {
            // 在写入数据成功后执行的操作
            System.out.println("File written to " + bucketPath);
        }
    
    2023-03-24 21:44:49
    赞同 展开评论 打赏
  • 24a8fe7cbfcf4a04eeee8c1e6168b7d6.png 应该是这个3个参数控制滚动时间 和文件大小。如果还没有滚动 就有一个.inoss的标记,你不可查询。你可以考虑加上唯一的 文件前缀或者后缀,这样你后面的下游服务可以定时扫描文件目录,有了对应前缀或后缀文件再执行任务。此答案出自钉群“【③群】Apache Flink China社区”

    2023-03-08 12:02:49
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载