DataWorks产品使用合集之运维中心中的运行日志可以保留多久

本文涉及的产品
大数据开发治理平台DataWorks,Serverless资源组抵扣包300CU*H
简介: DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。

问题一:DataWorks一个工作空间,多个项目呢 这种是不是比较合理一些?


DataWorks一个工作空间,多个项目呢 这种是不是比较合理一些,项目之间可以通过package 共享不同用户拥有不同项目的权限, 如果在一个工作空间里面不会影响其他项目的开发吧? 一个工作空间内的 业务流程可以隔离的哈?


参考回答:

也是存在第二种问题 比较少看到这样使用的场景 ;

“开发角色”或默认加上所有开发表的权限,除生产账号以外 所有角色都需要单独申请生产表权限

业务流程是独立的 但是也没有权限强隔离 ;或->会


关于本问题的更多回答可点击原文查看:

https://developer.aliyun.com/ask/647950



问题二:dataworks中的运维中心里面的运行日志能保存多少天呢?


dataworks中的运维中心里面的运行日志能保存多少天呢?


参考回答:

独享调度资源组30天 公共的应该是7天


关于本问题的更多回答可点击原文查看:

https://developer.aliyun.com/ask/647948



问题三:DataWorks是给他们多个项目还是多个工作空间?


DataWorks假设我们公司每个部门都有数据开发 各自ETL,管理数据,聚合数据

但是各个部门之间的数据需要共享,是给他们多个项目还是多个工作空间?


参考回答:

各自ETL-----需要开发etl工作流权限隔离么

一个工作空间 一个项目 也可以各自开发etl 节点各自有负责人,数据互相访问 但是节点之间没有强权限隔离

多个工作空间 多个项目 数据互相访问比较麻烦 一个是表权限 一个是开发过程中需要指定项目名前缀,好处是etl工作流开发权限由各个空间各自管理


关于本问题的更多回答可点击原文查看:

https://developer.aliyun.com/ask/647947



问题四:DataWorks如何将项目绑定到工作空间下面呢?


DataWorks如何将项目绑定到工作空间下面呢?

绑定不了把


参考回答:

可以参考看下 https://help.aliyun.com/zh/dataworks/user-guide/associate-data-sources-in-datastudio?spm=a2c4g.11186623.0.i2#c0d5c3e06chvw

不同的版本有限制 可以创建多个空间 在不同空间下绑定


关于本问题的更多回答可点击原文查看:

https://developer.aliyun.com/ask/647946



问题五:DataWorks简单模式创建的项目/database 是不是在数据地图看不到?


DataWorks简单模式创建的项目/database 是不是在数据地图看不到?


参考回答:

"maxcompute元数据可以看到的 ,/database 指的是 ,截图是某一个具体的工作空间下绑定了哪些计算引擎项目 目前这个空间下只绑定了一个项目;其他项目现先确认一下绑定在哪个空间下面 再搜索对应空间,或者在这边搜索

在dataworks上绑定过的可以看到 模糊搜索一下,这里是maxcompute的项目 最好看下是绑定在哪个dataworks的工作空间下


关于本问题的更多回答可点击原文查看:

https://developer.aliyun.com/ask/647943

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
一站式大数据开发治理平台DataWorks初级课程
DataWorks 从 2009 年开始,十ー年里一直支持阿里巴巴集团内部数据中台的建设,2019 年双 11 稳定支撑每日千万级的任务调度。每天阿里巴巴内部有数万名数据和算法工程师正在使用DataWorks,承了阿里巴巴 99%的据业务构建。本课程主要介绍了阿里巴巴大数据技术发展历程与 DataWorks 几大模块的基本能力。 课程目标  通过讲师的详细讲解与实际演示,学员可以一边学习一边进行实际操作,可以深入了解DataWorks各大模块的使用方式和具体功能,让学员对DataWorks数据集成、开发、分析、运维、安全、治理等方面有深刻的了解,加深对阿里云大数据产品体系的理解与认识。 适合人群  企业数据仓库开发人员  大数据平台开发人员  数据分析师  大数据运维人员  对于大数据平台、数据中台产品感兴趣的开发者
相关文章
|
20天前
|
存储 SQL 关系型数据库
【赵渝强老师】PostgreSQL的运行日志文件
PostgreSQL的物理存储结构包括数据文件、日志文件等。运行日志默认未开启,需配置`postgresql.conf`文件中的相关参数如`log_destination`、`log_directory`等,以记录数据库状态、错误信息等。示例配置中启用了CSV格式日志,便于管理和分析。通过创建表操作,可查看生成的日志文件,了解具体日志内容。
|
23天前
|
存储 Prometheus 监控
Docker容器内进行应用调试与故障排除的方法与技巧,包括使用日志、进入容器检查、利用监控工具及检查配置等,旨在帮助用户有效应对应用部署中的挑战,确保应用稳定运行
本文深入探讨了在Docker容器内进行应用调试与故障排除的方法与技巧,包括使用日志、进入容器检查、利用监控工具及检查配置等,旨在帮助用户有效应对应用部署中的挑战,确保应用稳定运行。
30 5
|
2月前
|
Arthas 监控 Java
JVM知识体系学习七:了解JVM常用命令行参数、GC日志详解、调优三大方面(JVM规划和预调优、优化JVM环境、JVM运行出现的各种问题)、Arthas
这篇文章全面介绍了JVM的命令行参数、GC日志分析以及性能调优的各个方面,包括监控工具使用和实际案例分析。
73 3
|
4月前
|
存储 监控 Serverless
函数计算发布功能问题之用户在使用主流函数计算产品的日志服务时可能会遇到使用成本的问题如何解决
函数计算发布功能问题之用户在使用主流函数计算产品的日志服务时可能会遇到使用成本的问题如何解决
|
4月前
|
JavaScript 前端开发 Serverless
函数计算产品使用问题之打印日志时间与实际时间相差8小时,是什么原因
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。
|
4月前
|
Ubuntu Linux 测试技术
在Linux中,已知 apache 服务的访问日志按天记录在服务器本地目录/app/logs 下,由于磁盘空间紧张现在要求只能保留最近7天的访问日志,请问如何解决?
在Linux中,已知 apache 服务的访问日志按天记录在服务器本地目录/app/logs 下,由于磁盘空间紧张现在要求只能保留最近7天的访问日志,请问如何解决?
|
4月前
|
数据库 Java 监控
Struts 2 日志管理化身神秘魔法师,洞察应用运行乾坤,演绎奇幻篇章!
【8月更文挑战第31天】在软件开发中,了解应用运行状况至关重要。日志管理作为 Struts 2 应用的关键组件,记录着每个动作和决策,如同监控摄像头,帮助我们迅速定位问题、分析性能和使用情况,为优化提供依据。Struts 2 支持多种日志框架(如 Log4j、Logback),便于配置日志级别、格式和输出位置。通过在 Action 类中添加日志记录,我们能在开发过程中获取详细信息,及时发现并解决问题。合理配置日志不仅有助于调试,还能分析用户行为,提升应用性能和稳定性。
65 0
|
4月前
|
JavaScript Serverless Linux
函数计算产品使用问题之遇到Node.js环境下的请求日志没有正常输出时,该如何排查
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。
|
4月前
|
数据采集 DataWorks 监控
DataWorks产品使用合集之怎么把开发环境的任务调度运行到生产环境
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
4月前
|
敏捷开发 前端开发 测试技术
阿里云云效产品使用合集之如何将云效构建执行过程中产生的日志通过邮件发送
云效作为一款全面覆盖研发全生命周期管理的云端效能平台,致力于帮助企业实现高效协同、敏捷研发和持续交付。本合集收集整理了用户在使用云效过程中遇到的常见问题,问题涉及项目创建与管理、需求规划与迭代、代码托管与版本控制、自动化测试、持续集成与发布等方面。

热门文章

最新文章

相关产品

  • 大数据开发治理平台 DataWorks