"在Azure HDInsights群集上设置flink时会出现异常。
./bin/yarn-session.sh -n 4 -jm 1024m -tm 4096m
抛出:
org.apache.flink.client.deployment.ClusterDeploymentException:
Couldn't deploy Yarn session cluster
Caused by:
Failing this attempt.Diagnostics:
[2018-10-24 00:41:17.703]Resource wasb://../.flink/application_1539730571763_0057/
application_1539730571763_0057-flink-conf.yaml8158650202504017094.tmp
changed on src filesystem (expected 1540341676000, was 1540341677000
java.io.IOException:
at org.apache.hadoop.yarn.util.FSDownload.verifyAndCopy(FSDownload.java:273)
这似乎是因为wasb blob存储没有保留复制文件的原始时间戳,破坏了在wasb之上的HDFS API抽象。这有什么变通方法吗?
只有我能找到的其他线程是Oozie / yarn:src文件系统上的资源已更改。"
"我们使用MS Azure支持,他们确认它只适用于Flink 1.4.x而不适用于1.5.x或1.6.x.
我们将其降级到1.4.x,现在在Azure群集中工作正常。"
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。