开发者社区> 问答> 正文

MaxCompute Spark中出现日志中文乱码可以添加那种配置来解决呢?

MaxCompute Spark中出现日志中文乱码可以添加那种配置来解决呢?

展开
收起
bnbajjyhyjfty 2021-12-12 18:57:27 1069 0
1 条回答
写回答
取消 提交回答
  • spark.executorextraJavaOptions=-Dfileencoding=UTF-8-Dsunjnuencoding=UTF-8

    spark.driver.extraJavaOptions=-Dfileencoding=UTF-8-Dsun.jnuencoding=UTF-8

    如果是pyspark作业需要设置下如下两个参数: spark.yarnappMasterEnvPYTHONIOENCODING=utf8

    sparkexecutorEnvPYTHONIOENCODING=utf8

    2021-12-12 18:58:30
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Data+AI时代大数据平台应该如何建设 立即下载
大数据AI一体化的解读 立即下载
极氪大数据 Serverless 应用实践 立即下载