DataWorks的集成任务并发度设置主要影响的是调度资源组。
在DataWorks中,调度资源组是指为了执行任务而分配的一组计算资源。当任务需要并发执行时,这些资源将承担运行任务的压力。以下是一些关于DataWorks集成任务并发度设置和资源使用的重要点:
- 调度资源组的重要性:对于高并发的任务执行,如果无法错峰运行,建议使用DataWorks的独享调度资源组来保障任务能够按时被调度运行。这是因为独享调度资源组可以提供专有的计算资源,确保任务不会因为资源不足而延误。
- 任务实例的影响:在DataWorks中,调度任务会根据调度类型及周期数生成相应的周期实例,这些实例会占用调度资源来运行任务。因此,任务的并发度设置会直接影响到所需调度资源的数量。
- 离线同步任务的资源使用:离线同步任务使用的调度资源组会影响数据集成同步的效率。任务下发机制会将调度资源下发至数据集成任务执行资源上执行,这意味着调度资源的使用情况会直接影响到离线同步任务的执行效率。
综上所述,DataWorks集成任务的并发度设置主要是对调度资源组造成压力,而不是集成资源本身。为了确保任务能够高效并发执行,合理配置和使用调度资源组是关键。
DataWorks的任务/基线告警可以通过多种方式外发,包括邮件、短信、电话、钉钉和Webhook。
- 邮件:告警信息会以邮件形式发送到预设的接收人邮箱。如果接收人没有设置邮箱,告警会发送到对应的主账号邮箱。查看告警邮件时,需要确认相关告警邮件没有被归类到垃圾邮件分类中。
- 短信:告警信息会以短信形式发送到预设的接收人手机号码。如果接收人没有设置手机号码,告警会发送到对应的主账号手机号码。
- 电话:告警信息会以语音电话的形式发送到预设的接收人手机号码。同样,如果接收人没有设置手机号码,告警会发送到对应的主账号手机号码。
- 钉钉:告警信息可以通过钉钉机器人发送到指定的钉钉群或者个人。
- Webhook:告警信息可以通过Webhook接口发送到第三方系统或服务。
总的来说,DataWorks的基线管理功能允许用户将重要任务添加至基线并设置承诺时间,系统会根据任务运行情况计算基线任务的预计完成时间,并在判断任务可能无法按时完成时发出告警。用户在创建和管理基线时,可以设置报警策略,包括报警发送的方式和接收人等。