开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks任务未发布的时候测试是有日志的,现在发布任务没有日志出现,是什么情况?

DataWorks任务未发布的时候测试是有日志的,现在发布任务没有日志出现,是什么情况?image.png

展开
收起
cuicuicuic 2023-08-08 16:07:31 45 0
2 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    如果DataWorks任务没有日志出现,很有可能是日志产生设置存在问题。

    具体情况主要有以下几种:

    未设置任务日志:
    数据采集任务(如SQL查询任务)默认不产生日志。您需要主动设置采集任务的日志级别和存储方式。

    日志级别设置不正确:
    如果任务日志级别设置为ERROR或更高,则只有错误日志会输出。您需要合理设置日志级别。

    日志目标设置问题:
    如果日志目标设置为本地文件而非云日志服务,则云端无权访问这些本地日志。需要将日志输出到云端。

    部署环境问题:
    生产环境和测试环境日志收集设置可能不一致,请检查测试环境与生产环境是否配置存在差异。

    权限不足:
    数据采集任务可能运行在没有足够读取日志权限的用户下,从而导致日志无法输出。

    其他设置问题:
    日志收集Driver没有正确配置,导致日志无法输出。

    因此,若DataWorks任务发布后没有日志,需要检查:

    任务日志是否主动设置
    日志级别是否正确
    日志目标是否设为云端
    测试环境与生产环境设置是否一致
    任务用户是否有足够的日志读取权限
    日志Driver是否正确配置

    2023-08-09 15:05:33
    赞同 展开评论 打赏
  • 点开基本信息 辛苦截图看下,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-08-08 23:48:26
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    移动互联网测试到质量的转变 立即下载
    给ITer的技术实战进阶课-阿里CIO学院独家教材(四) 立即下载
    F2etest — 多浏览器兼容性测试整体解决方案 立即下载