大佬们flink同步后时区变了是什么原因? ![b0d3d3623bb6157ee6ab411b5b

大佬们flink同步后时区变了是什么原因? b0d3d3623bb6157ee6ab411b5be81ed3.png 17e6850873bd2ca6ef4207fc61c15dce.png 这是同步之后的

展开
收起
十一0204 2023-04-05 09:52:25 326 分享 版权
1 条回答
写回答
取消 提交回答
  • 热爱开发

    解决Flink输出日志中时间比当前时间晚8个小时的问题 在flink standalone集群上,发现log输出时间比当前时间晚8个小时,我的集群系统时间是CTM+8时区的。一开始发现时间不对,还不太上心,后面发现业务在本地跑起来是正常的,提交到集群跑不输出结果,这下就尴尬了。经过一系列的排查。发现ProcessTime时间不对。后面发现flink时间默认为UTC时间(真是个坑啊,心中默念,心平气和)。顺便写个博客记录下。

    那么解决这个问题呢,需要修改脚本jobmanager和taskmanager当中的FLINK_ENV_JAVA_OPTS参数。如下:

    1. jobmanager.sh脚本的修改

    Add JobManager-specific JVM options

    export FLINK_ENV_JAVA_OPTS="${FLINK_ENV_JAVA_OPTS} ${FLINK_ENV_JAVA_OPTS_JM}" #将上面的内容改为 加上 -Duser.timezone=GMT+08 export FLINK_ENV_JAVA_OPTS="${FLINK_ENV_JAVA_OPTS} ${FLINK_ENV_JAVA_OPTS_JM} -Duser.timezone=GMT+08" 2. taskmanager.sh脚本的修改

    Add TaskManager-specific JVM options

    export FLINK_ENV_JAVA_OPTS="${FLINK_ENV_JAVA_OPTS} ${FLINK_ENV_JAVA_OPTS_TM}" #将上面的内容改为 加上 -Duser.timezone=GMT+08 export FLINK_ENV_JAVA_OPTS="${FLINK_ENV_JAVA_OPTS} ${FLINK_ENV_JAVA_OPTS_TM} -Duser.timezone=GMT+08" 然后重启flink standalone集群就好,在重新提交job就好。

    2023-04-06 09:40:42
    赞同 展开评论

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

收录在圈子:
实时计算 Flink 版(Alibaba Cloud Realtime Compute for Apache Flink,Powered by Ververica)是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统,由 Apache Flink 创始团队官方出品,拥有全球统一商业化品牌,完全兼容开源 Flink API,提供丰富的企业级增值功能。
还有其他疑问?
咨询AI助理