DataWorks_赋值节点三种赋值语言+数据库节点MySQL、三种取值方式使用案例

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
大数据开发治理平台 DataWorks,不限时长
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介: DataWorks_赋值节点三种赋值语言+数据库节点MySQL、三种取值方式使用案例

注:整个测试用例截图。

FF96D2AB-44AC-413c-872C-82C2741EBD16.png


使用说明

赋值语言

outputs取值

outputs参数格式

outputs参数大小限制

赋值节点:ODPS SQL

最后一行SELECT语句的输出作为赋值参数,添加为赋值节点的本节点输出参数,供其他节点引用。

将输出结果作为一个二维数组传递至下游。

传递值最大为2 MB。如果赋值语句的输出结果超过该限制,赋值节点会运行失败。

赋值节点:SHELL

最后一行ECHO语句的数据,添加为赋值节点的本节点输出参数,供其他节点引用。

将输出结果基于逗号(,)分割为一维数组。

赋值节点:PYTHON(python2)

最后一行PRINT语句的输出,添加为赋值节点的本节点输出参数,供其他节点引用。

将输出结果基于逗号(,)分割为一维数组。

数据库节点:MySQL

最后一行SELECT语句的输出作为赋值参数,添加为赋值传参的输出参数,供其他节点引用。

将输出结果作为一个二维数组传递至下游。


使用案例

赋值语言

赋值节点outputs取值

赋值节点调度配置

下游节点调度配置

下游节点取值方式

下游节点返回结果

赋值节点:ODPS SQL

SELECT * FROM fuzhi_tb;

fuzhi_tb表内容如下:

step1:调度配置-节点上下文默认会生成一个本节点输出参数ouputs;

step2:提交节点。

以上游赋值节点赋值语言为ODPS SQL的为例

step1:依赖上游赋值节点;

step2:节点上下文添加本节点输入参数,参数取名为inputs_odps_sql。

下游为ODPS SQL节点:

SELECT '${inputs_odps_sql[0][0]}';

Hello

下游为shell节点:

echo '${inputs_odps_sql[0][0]}';

下游为pyodps3节点:

print ('${inputs_odps_sql[0][0]}')

赋值节点:SHELL

echo 'Data','我是赋值节点2赋值语言shell';

下游为ODPS SQL节点:
SELECT '${inputs_shell[0]}';

Data

下游为shell节点:

echo '${inputs_shell[0]}';

下游为pyodps3节点:

print ('${inputs_shell[0]}')

赋值节点:PYTHON(python2)

print "Works!,我是赋值节点3赋值语言是python"

下游为ODPS SQL节点:

SELECT '${inputs_python[0]}';

Works!

下游为shell节点:

echo '${inputs_python[0]}';

下游为pyodps3节点:

print ('${inputs_python[0]}')

数据库节点:MySQL

SELECT * from `fuzhi_tb`;

fuzhi_tb表内容如下:

step1:调度配置-节点上下文-本节点输出参数添加赋值参数,默认会添加名为outputs的参数;

step2:提交节点。

下游为ODPS SQL节点:

SELECT '${inputs_mysql[0][0]}';

Hello

下游为shell节点:

echo '${inputs_mysql[0][0]}';

下游为pyodps3节点:

print ('${inputs_mysql[0][0]}');

若有收获,就点个赞吧

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
一站式大数据开发治理平台DataWorks初级课程
DataWorks 从 2009 年开始,十ー年里一直支持阿里巴巴集团内部数据中台的建设,2019 年双 11 稳定支撑每日千万级的任务调度。每天阿里巴巴内部有数万名数据和算法工程师正在使用DataWorks,承了阿里巴巴 99%的据业务构建。本课程主要介绍了阿里巴巴大数据技术发展历程与 DataWorks 几大模块的基本能力。 课程目标  通过讲师的详细讲解与实际演示,学员可以一边学习一边进行实际操作,可以深入了解DataWorks各大模块的使用方式和具体功能,让学员对DataWorks数据集成、开发、分析、运维、安全、治理等方面有深刻的了解,加深对阿里云大数据产品体系的理解与认识。 适合人群  企业数据仓库开发人员  大数据平台开发人员  数据分析师  大数据运维人员  对于大数据平台、数据中台产品感兴趣的开发者
相关文章
|
1天前
|
SQL 存储 关系型数据库
深入理解MySQL:数据库管理与性能优化
第一章:MySQL基础 MySQL概述:简要介绍MySQL的历史、特点和应用领域
|
1天前
|
SQL 关系型数据库 MySQL
精通MySQL:从数据库管理到性能优化
第一章:MySQL入门 MySQL简介:了解MySQL的起源、发展历程以及在Web开发中的重要性
|
1天前
|
监控 安全 关系型数据库
精通MySQL:数据库核心技术与应用实践
h3> 一、引言 MySQL作为开源关系型数据库管理系统的佼佼者,凭借其出色的性能、灵活性和稳定性,成为许多企业和开发者的首选
|
1天前
|
关系型数据库 MySQL 数据库
精通MySQL:数据库管理、性能优化与最佳实践
h3> 一、引言 MySQL是一个功能强大的开源关系型数据库管理系统,广泛应用于各种Web应用、企业级应用和数据分析等领域
|
2天前
|
存储 关系型数据库 MySQL
MySQL周内训参照1、ER实体关系图与数据库模型图绘制
MySQL周内训参照1、ER实体关系图与数据库模型图绘制
6 1
|
2天前
|
弹性计算 关系型数据库 数据库
手把手带你从自建 MySQL 迁移到云数据库,一步就能脱胎换骨
阿里云瑶池数据库来开课啦!自建数据库迁移至云数据库 RDS原来只要一步操作就能搞定!
|
3天前
|
SQL 存储 关系型数据库
MySQL 示例数据库大全
我们练习 SQL 时,总会自己创造一些测试数据或者网上找些案例来学习,其实 MySQL 官方提供了好几个示例数据库,在 MySQL 的学习、开发和实践中具有非常重要的作用,能够帮助初学者更好地理解和应用 MySQL 的各种功能和特性,特别是练习 SQL 的好帮手。
23 0
|
3天前
|
SQL 关系型数据库 MySQL
MYSQL————DDL方法使用(包含在数据库,以及具体数据库表格的一些操纵)
MYSQL————DDL方法使用(包含在数据库,以及具体数据库表格的一些操纵)
|
4天前
|
SQL 关系型数据库 MySQL
mysqldiff - Golang 针对 MySQL 数据库表结构的差异 SQL 工具
Golang 针对 MySQL 数据库表结构的差异 SQL 工具。https://github.com/camry/mysqldiff
36 7
|
4天前
|
SQL 关系型数据库 MySQL
MySQL中如何查看所有数据库的名称?
【6月更文挑战第12天】MySQL中如何查看所有数据库的名称?
16 3

推荐镜像

更多