DataWorks产品使用合集之有哪些审计功能

问题一：DataWorks生成的任务在“数据开发”中可以看到？自动生成在哪？

DataWorks生成的任务在“数据开发”中可以看到？自动生成在哪？

参考回答：

新版的现在不支持查看和手动编辑了

关于本问题的更多回答可点击原文查看：https://developer.aliyun.com/ask/581660

问题二：dataworks是否支持自动重跑前一个月数据？

dataworks是否支持自动重跑前一个月数据？

参考回答：

如果是每次都重跑建议配置成周期调度任务，使用循环或者遍历节点，结合调度参数使用

关于本问题的更多回答可点击原文查看：https://developer.aliyun.com/ask/581659

问题三：Dataworks有哪些审计功能？能审计到什么粒度？

Dataworks有哪些审计功能？能审计到什么粒度？

参考回答：

DataWorks作为阿里云的大数据开发治理平台，提供了多种审计功能以确保数据的安全性和合规性。以下是一些主要的审计功能：

1. 操作审计：
   DataWorks可以记录和追踪用户在平台上进行的各种操作，包括数据的导入、导出、查询、修改、删除等。这些操作记录可以帮助管理员监控和追溯用户的操作行为。
   
2. 权限审计：
   DataWorks支持对用户权限的审计，包括角色分配、资源访问权限变更等。这有助于确保只有授权的用户才能访问和操作相应的数据和资源。
   
3. 数据血缘审计：
   DataWorks能够追踪数据的来源和流向，形成数据血缘关系图。这使得审计人员能够了解数据从产生到使用的全过程，以及在不同处理阶段的数据变化情况。
   
4. 细粒度审计（FGA）：
   虽然DataWorks本身可能不直接提供细粒度审计（Fine-Grained Audit，FGA），但在使用其集成的数据库服务（如Oracle或MySQL）时，可以通过配置数据库的FGA特性来实现更详细的审计。FGA允许根据特定策略定义哪些操作需要生成审计记录，并且可以细化到行级别或者字段级别的审计。
   
5. 任务执行审计：
   DataWorks可以审计任务的执行情况，包括任务的启动时间、结束时间、执行状态、错误信息等。这有助于分析任务的性能和识别潜在的问题。
   
6. MaxCompute操作审计：
   对于使用MaxCompute的大数据处理，DataWorks也提供了操作审计功能，可以记录和追踪对MaxCompute项目中各项操作的审计日志。
   

审计的粒度在DataWorks中可以根据具体的功能和设置有所不同。一般来说，DataWorks可以提供以下粒度的审计：

• 用户操作级别：记录每个用户的登录、登出、权限变更、资源访问等操作。
• 任务级别：记录每个任务的创建、修改、执行、失败等详细信息。
• 数据操作级别：记录对数据表的查询、插入、更新、删除等操作。
• 血缘关系级别：记录数据从源系统到目标系统的完整流转路径和处理过程。

关于本问题的更多回答可点击原文查看：https://developer.aliyun.com/ask/581658

问题四：DataWorks这个实例类型除了周期实例还有其他的么？补数据实例和测试实例么？

DataWorks这个实例类型除了周期实例还有其他的么？

参考回答：

还有补数据实例 测试实例等

关于本问题的更多回答可点击原文查看：https://developer.aliyun.com/ask/581656

问题五：DataWorks为什么调度任务产出的数据和sql查询insert的数据不一样呢？

DataWorks为什么调度任务产出的数据和sql查询insert的数据不一样呢？sql都是完全一样的sql，表也都确认过了是都是生产环境的表，调度跑出来的只有2021-2023年，sql查询跑出来的有2018-2023

参考回答：

建议对比查看两份logview日志 input的表 分区 记录数等是否完全一致

关于本问题的更多回答可点击原文查看：https://developer.aliyun.com/ask/581655