开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

创建HTTP触发器节点背景信息是什么?

创建HTTP触发器节点背景信息是什么?

展开
收起
十一0204 2023-04-11 14:21:02 205 0
2 条回答
写回答
取消 提交回答
  • 值得去的地方都没有捷径

    DataWorks是阿里巴巴集团旗下的大数据协同工作平台,提供了一系列的数据处理和开发的工具,包括数据采集、数据清洗、数据开发等。HTTP触发器节点是DataWorks中的一种节点类型,可以通过HTTP请求来触发指定的作业或任务。

    在DataWorks中,HTTP触发器节点是基于云函数服务实现的。云函数服务是一种Serverless计算服务,可以按需执行代码,提供弹性、高并发、低成本的计算能力。因此,使用HTTP触发器节点可以方便地实现基于事件的编程模型,可以在接收到HTTP请求时自动触发DataWorks中的作业或任务。

    HTTP触发器节点需要设置触发器URL、HTTP请求方式、请求参数等信息。当用户访问触发器URL时,即可按照设定触发DataWorks的作业或任务,方便了数据处理的自动化和编程的灵活性。

    2023-04-16 15:11:25
    赞同 展开评论 打赏
  • 意中人就是我呀!

    "外部调度系统触发任务运行有以下两种典型场景:HTTP触发器节点无其他上游任务节点 c767e66a9184decb50c7f579f2f4ee8.png 此种场景下,您需要创建HTTP触发节点后,在其他调度系统配置好调度触发,并在DataWorks上配置好各节点的调度和上下游依赖关系,详情可参见创建HTTP触发节点和其他调度系统的触发配置。HTTP触发器节点有上游任务节点 965bd4afb8d8311b915c0ff9f9fe924.png 此种场景下:您需要创建HTTP触发节点后,在其他调度系统配置好调度触发,并在DataWorks上配置好各节点的调度和上下游依赖关系,详情可参见创建HTTP触发节点和其他调度系统的触发配置。HTTP触发器节点默认上游节点为业务流程的根节点,当上游有其他任务节点时,您需要手动修改为对应的上游任务节点。当上游任务节点运行完成,且外部调度系统发出调度指令后,HTTP触发节点才会触发下游任务节点运行。如果外部调度系统提前发出调度指令,但是上游任务节点没有运行完成,HTTP触发节点不会触发下游任务节点。系统会保留外部调度系统的调度指令,待上游任务运行完成后,再通过HTTP触发节点触发下游任务节点运行。注意 外部调度系统的触发指令仅保留24小时。如果24小时内上游任务节点没有运行完成,则触发指令会丢失,外部调度系统本次发出的调度指令失效。 https://help.aliyun.com/document_detail/190911.html此答案整理自钉群“DataWorks交流群(答疑@机器人)”"

    2023-04-12 08:49:08
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关电子书

更多
阿里巴巴HTTP 2.0实践及无线通信协议的演进之路 立即下载
CDN助力企业网站进入HTTPS时代 立即下载
低代码开发师(初级)实战教程 立即下载