DataWorks产品使用合集之运维中心中的运行日志可以保留多久

简介: DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。

问题一:DataWorks一个工作空间,多个项目呢 这种是不是比较合理一些?


DataWorks一个工作空间,多个项目呢 这种是不是比较合理一些,项目之间可以通过package 共享不同用户拥有不同项目的权限, 如果在一个工作空间里面不会影响其他项目的开发吧? 一个工作空间内的 业务流程可以隔离的哈?


参考回答:

也是存在第二种问题 比较少看到这样使用的场景 ;

“开发角色”或默认加上所有开发表的权限,除生产账号以外 所有角色都需要单独申请生产表权限

业务流程是独立的 但是也没有权限强隔离 ;或->会


关于本问题的更多回答可点击原文查看:

https://developer.aliyun.com/ask/647950



问题二:dataworks中的运维中心里面的运行日志能保存多少天呢?


dataworks中的运维中心里面的运行日志能保存多少天呢?


参考回答:

独享调度资源组30天 公共的应该是7天


关于本问题的更多回答可点击原文查看:

https://developer.aliyun.com/ask/647948



问题三:DataWorks是给他们多个项目还是多个工作空间?


DataWorks假设我们公司每个部门都有数据开发 各自ETL,管理数据,聚合数据

但是各个部门之间的数据需要共享,是给他们多个项目还是多个工作空间?


参考回答:

各自ETL-----需要开发etl工作流权限隔离么

一个工作空间 一个项目 也可以各自开发etl 节点各自有负责人,数据互相访问 但是节点之间没有强权限隔离

多个工作空间 多个项目 数据互相访问比较麻烦 一个是表权限 一个是开发过程中需要指定项目名前缀,好处是etl工作流开发权限由各个空间各自管理


关于本问题的更多回答可点击原文查看:

https://developer.aliyun.com/ask/647947



问题四:DataWorks如何将项目绑定到工作空间下面呢?


DataWorks如何将项目绑定到工作空间下面呢?

绑定不了把


参考回答:

可以参考看下 https://help.aliyun.com/zh/dataworks/user-guide/associate-data-sources-in-datastudio?spm=a2c4g.11186623.0.i2#c0d5c3e06chvw

不同的版本有限制 可以创建多个空间 在不同空间下绑定


关于本问题的更多回答可点击原文查看:

https://developer.aliyun.com/ask/647946



问题五:DataWorks简单模式创建的项目/database 是不是在数据地图看不到?


DataWorks简单模式创建的项目/database 是不是在数据地图看不到?


参考回答:

"maxcompute元数据可以看到的 ,/database 指的是 ,截图是某一个具体的工作空间下绑定了哪些计算引擎项目 目前这个空间下只绑定了一个项目;其他项目现先确认一下绑定在哪个空间下面 再搜索对应空间,或者在这边搜索

在dataworks上绑定过的可以看到 模糊搜索一下,这里是maxcompute的项目 最好看下是绑定在哪个dataworks的工作空间下


关于本问题的更多回答可点击原文查看:

https://developer.aliyun.com/ask/647943

相关实践学习
基于Hologres轻量实时的高性能OLAP分析
本教程基于GitHub Archive公开数据集,通过DataWorks将GitHub中的项⽬、行为等20多种事件类型数据实时采集至Hologres进行分析,同时使用DataV内置模板,快速搭建实时可视化数据大屏,从开发者、项⽬、编程语⾔等多个维度了解GitHub实时数据变化情况。
相关文章
|
5月前
|
机器学习/深度学习 运维 监控
运维日志里的“读心术”:深度学习能看出啥?
运维日志里的“读心术”:深度学习能看出啥?
310 74
|
8月前
|
运维 安全 关系型数据库
【产品升级】Dataphin V5.1版本发布:跨云数据集成、指标管理、平台运维带来重大更新!
V5.1版本新增多项功能:对接AWS生态(支持Amazon EMR、Redshift等),强化研发技术支撑(如API认证升级、全量任务隔离),完善运营消费链路(新增业务指标管理、指标关系图),提升平台综合能力(自定义菜单、缩短升级停机时间)。这些功能助力企业实现高效数据治理与分析,未来还将拓展智能化与国际化支持。
470 0
|
DataWorks 监控 数据建模
DataWorks产品体验评测
DataWorks产品体验评测
|
11月前
|
存储 缓存 监控
【YashanDB数据库】数据库运行正常,日志出现大量错误metadata changed
数据库运行正常,日志出现大量错误metadata changed
|
7月前
|
人工智能 运维 自然语言处理
首个智能体模型实测:产品、开发、运维“全包了”
2025年,AI进入“动手”时代。智谱发布新一代大模型GLM-4.5,全球排名第三、国产第一,专为智能体设计,融合推理、编码与智能体能力,实现自主规划与执行任务。通过8个Demo展示其强大能力,涵盖网页设计、课件制作、小游戏开发等,展现其“带手的脑”特性,推动AI从实验室走向真实场景。
402 0
|
10月前
|
消息中间件 运维 监控
智能运维,由你定义:SAE自定义日志与监控解决方案
通过引入 Sidecar 容器的技术,SAE 为用户提供了更强大的自定义日志与监控解决方案,帮助用户轻松实现日志采集、监控指标收集等功能。未来,SAE 将会支持 istio 多租场景,帮助用户更高效地部署和管理服务网格。
623 51
|
11月前
|
数据采集 运维 监控
数据采集监控与告警:错误重试、日志分析与自动化运维
本文探讨了数据采集技术从“简单采集”到自动化运维的演进。传统方式因反爬策略和网络波动常导致数据丢失,而引入错误重试、日志分析与自动化告警机制可显著提升系统稳定性与时效性。正方强调健全监控体系的重要性,反方则担忧复杂化带来的成本与安全风险。未来,结合AI与大数据技术,数据采集将向智能化、全自动方向发展,实现动态调整与智能识别反爬策略,降低人工干预需求。附带的Python示例展示了如何通过代理IP、重试策略及日志记录实现高效的数据采集程序。
525 7
数据采集监控与告警:错误重试、日志分析与自动化运维
|
运维 应用服务中间件 nginx
docker运维查看指定应用log文件位置和名称
通过本文的方法,您可以更高效地管理和查看Docker容器中的日志文件,确保应用运行状态可控和可监测。
2013 28

热门文章

最新文章

相关产品

  • 大数据开发治理平台 DataWorks