开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink 读取HDFS需要放开啥权限么?

Flink 读取HDFS需要放开啥权限么?

展开
收起
爱喝咖啡嘿 2022-12-20 16:18:43 317 0
3 条回答
写回答
取消 提交回答
  • 没开Kerberos的话,只要你运行Flink作业的Hadoop环境能读目标HDFS就可以了。——此答案整理自钉群“Flink CDC 社区”

    2022-12-21 14:19:18
    赞同 展开评论 打赏
  • 十分耕耘,一定会有一分收获!

    楼主你好,需要开通的权限有以下几个: 一、代码中设置用户名 System.setProperty(“HADOOP_USER_NAME”, “linux有权限的用户”); 二、在VM参数中添加有权限的linux用户 三、在Windows中以环境变量的形式配置linux有权限的用户名 新建系统变量: 变量名:HADOOP_USER_NAME 变量值:linux有权限的用户名

    2022-12-21 07:48:03
    赞同 展开评论 打赏
  • 关闭HDFS 权限,不关闭需要把认证copy到resources目录下

        <property>
            <name>dfs.permissions</name>
            <value>false</value>
        </property>
    
    2022-12-21 07:48:04
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    海量数据分布式存储——Apache HDFS之最新进展 立即下载