MaxCompute中,我们现在有一个日常任务需要写入External Volume,生产任务是以主

MaxCompute中,我们现在有一个日常任务需要写入External Volume,生产任务是以主账号运行的,也同样没有报没有权限的错误,完整日志可以看最新一次的运行记录,操作External Volume那一步没有logview
https://workbench2-cn-shanghai.data.aliyun.com/?defaultProjectId=323653&env=prod&isOdpsTask=1&taskId=900705792331&userProjectId=323653#/runLog

展开
收起
提个问题 2023-07-20 17:09:39 102 分享 版权
2 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    在 MaxCompute 中,如果您的日常任务需要写入 External Volume,可以使用 Tunnel 或者 DataWorks 等工具将数据从 MaxCompute 导出到 External Volume 中。需要注意的是,如果您的生产任务是以主账号运行的,那么它应该拥有访问 External Volume 的权限,因此在进行数据导出操作时不会报权限错误。

    如果您在操作 External Volume 时没有生成日志信息,可能是由于日志信息被删除或者未开启日志记录所致。为了确保您的操作能够被记录和跟踪,建议在操作 External Volume 时开启日志记录,并将日志信息保存到日志存储系统中,以备后续查询和分析。

    具体来说,您可以在 MaxCompute 控制台中为您的任务或者作业开启日志记录功能,并指定日志存储位置。在任务或者作业运行完成后,您可以通过 MaxCompute 控制台或者其他工具查询日志信息,以了解任务或者作业的执行情况和结果。同时,建议定期清理和备份日志信息,以便节约存储空间并确保数据安全性。

    2023-07-29 10:33:39
    赞同 展开评论
  • 如果在MaxCompute中执行任务写入External Volume的操作时没有生成日志记录,可能是由于以下原因:

    1. 日志配置:检查任务是否正确配置了日志记录。确保在创建任务时,设置了适当的日志输出位置和级别。

    2. 权限问题:请确保主账号具有操作External Volume的权限。虽然你提到生产任务以主账号运行并没有报错权限错误,但仍需确保主账号拥有对External Volume的写入权限。可以通过访问控制策略或角色授权来管理权限。

    3. 资源限制:检查任务运行所在的资源组和队列是否具有足够的配额和资源来处理任务,并确保没有达到资源限制导致无法生成日志。

    4. 并行度设置:确保任务的并行度设置合理。如果设置的并行度过高,可能会导致任务无法正常运行或生成日志。

    2023-07-28 21:00:15
    赞同 展开评论

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

还有其他疑问?
咨询AI助理