如何用flink sql客户端用yarn application模式提交任务呢?
Flink SQL 客户端提供了 yarn-application 命令用于提交任务。以下是使用 yarn-application 命令提交任务的步骤:
创建一个 flink-conf.yaml 文件,配置 Flink 的相关参数。
execution.mode=yarn-application
yarn.application.name=flink-sql-job
yarn.resourcemanager.address=rm1:8032
yarn.resourcemanager.scheduler.address=rm1:8030
jobmanager.taskmanager.number=1
jobmanager.memory.mb=1024
jobmanager.cores=1
taskmanager.memory.mb=1024
taskmanager.cores=1
创建一个 flink-sql-job.sql 文件,编写 SQL 语句。
SELECT * FROM orders;
使用 flink sql yarn-application 命令提交任务。
flink sql yarn-application -c /path/to/flink-conf.yaml -s /path/to/flink-sql-job.sql
查看 Flink 的 Web UI 页面,可以看到任务的运行状态。
http://localhost:8080/jobs
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。