DataWorks 2021-11 产品月刊

本文涉及的产品
大数据开发治理平台 DataWorks,不限时长
简介: 1、数据开发新增资源组编排功能2、数据集成HDFS Reader和HDFS Writer增加向导开发模式。

本月DataWorks产品月刊为您带来


【产品活动】

1. 首月特惠!DataWorks专业版原价5000元现首月特惠仅需199元>>

立即前往>>

2. 首月特惠!独享数据集成/独享调度资源组首月5折>>

立即前往>>


【产品功能更新】

1、数据开发新增资源组编排功能

DataWorks的资源组编排功能,帮助您在数据开发阶段,批量修改指定业务流程下目标节点使用的调度资源组。当您的工作空间中有多个调度资源组时,可以根据实际业务需求,使用该功能快速为目标节点重新分配资源组,促进资源的合理使用


参考文档:https://help.aliyun.com/document_detail/343452.htm


2、数据集成HDFS Reader和HDFS Writer增加向导开发模式。

HDFS Reader提供了读取分布式文件系统数据存储的能力。在底层实现上,HDFS Reader获取分布式文件系统上文件的数据,并转换为数据集成传输协议传递给Writer

HDFS Writer提供向HDFS文件系统指定路径中写入TextFile文件、 ORCFile文件以及ParquetFile格式文件,文件内容可以与Hive中的表关联。

参考文档:

HDFS Readerhttps://help.aliyun.com/document_detail/137721.htm#title-2d9-z2s-tty

HDFS Writer:https://help.aliyun.com/document_detail/137759.htm#title-2pk-f81-lj2


【产品文档更新】


数据集成HDFS Reader向导模式

数据集成HDFS Writer向导模式

DataWorks OpenAPI 新增-运维中心ListDags

数据开发高级功能-批量操作
数据开发高级功能-资源组编排


【往期系列】


DataWorks 产品月刊合集


更多DataWorks技术和产品信息,欢迎加入【DataWorks钉钉交流群】,为您提供最新的产品直播、产品活动及技术支持点击查看




相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
一站式大数据开发治理平台DataWorks初级课程
DataWorks 从 2009 年开始,十ー年里一直支持阿里巴巴集团内部数据中台的建设,2019 年双 11 稳定支撑每日千万级的任务调度。每天阿里巴巴内部有数万名数据和算法工程师正在使用DataWorks,承了阿里巴巴 99%的据业务构建。本课程主要介绍了阿里巴巴大数据技术发展历程与 DataWorks 几大模块的基本能力。 课程目标  通过讲师的详细讲解与实际演示,学员可以一边学习一边进行实际操作,可以深入了解DataWorks各大模块的使用方式和具体功能,让学员对DataWorks数据集成、开发、分析、运维、安全、治理等方面有深刻的了解,加深对阿里云大数据产品体系的理解与认识。 适合人群  企业数据仓库开发人员  大数据平台开发人员  数据分析师  大数据运维人员  对于大数据平台、数据中台产品感兴趣的开发者
相关文章
|
数据采集 分布式计算 DataWorks
阿里云DataWorks荣获DAMA中国数据治理优秀产品奖
2022年12月3日,2022 DAMA中国数据管理峰会(线上部分)成功举行,汇聚多位世界级数据大咖分享,阿里云DataWorks凭借全链路数据治理产品体系,丰富的行业客户最佳实践案例,获得“DAMA中国数据治理优秀产品奖”。
1596 0
|
存储 JSON 分布式计算
一体化大数据智能计算平台 ODPS 产品年度发布
阿里云ODPS全新升级,存储、调度、元数据一体化融合 ,从 Processing 升级为 Platform,即 Open Data Platform and Service。本次峰会,同步发布了新的产品能力,即MaxCompute 引擎新功能发布及Hologres 引擎新功能发布。
一体化大数据智能计算平台 ODPS 产品年度发布
|
存储 数据采集 分布式计算
1.5分钟 DataWorks 产品入门|学习笔记
快速学习1.5分钟 DataWorks 产品入门
281 0
1.5分钟 DataWorks 产品入门|学习笔记
|
数据采集 SQL 分布式计算
DataWorks 2021-12 产品月刊
本月DataWorks产品月刊为您带来 【产品活动】 1. 首月特惠!DataWorks专业版原价5000元现首月特惠仅需199元>> 立即前往>> 2. 首月特惠!独享数据集成/独享调度资源组首月5折>> 立即前往>>
471 0
|
SQL 数据采集 存储
DataWorks 2021-09 产品月刊
本月DataWorks产品月刊为您带来:1、数据治理中心全新发布。2、数据服务API资产全面纳入数据地图管理范畴。3、DataStudio支持用户通过扩展程序对页面功能进行卡点
1022 0
|
SQL 消息中间件 运维
DataWorks 2021-08 产品月刊(含用户体验季刊!)
全新上线DataWorks用户体验季刊! 过去几个月我们通过问卷了解到大家对DataWorks体验的满意情况,收集了一些问题。因此,DataWorks产品研发团队针对用户体验问题做了产品优化,并以页面形式向您集中展现!您的声音我们始终关心!(季刊页面拉倒底部有反馈入口,欢迎大家踊跃和我们沟通!)
973 0
DataWorks 2021-08 产品月刊(含用户体验季刊!)
|
数据采集 运维 DataWorks
一站式大数据开发治理DataWorks使用宝典|阿里云产品内容精选(十九)
本文选自《一站式大数据开发治理DataWorks使用宝典》系列
|
数据采集 DataWorks 负载均衡
DataWorks 2021-07 产品月刊
本月DataWorks产品月刊为您带来 产品活动: 1.首月特惠!DataWorks专业版首月仅需199元,省4801元;独享数据集成/调度资源组首月5折 2.「数据地图」开放用户体验问卷啦,快来参与吧 产品功能更新: DataWorks数据治理模块新增审批中心,可自定义审批流程 独享数据服务资源组上线杭州region DataWorks迁移助手8.1日正式商业化 DataWorks支持DLF元数据采集 DataWorks支持任务下发EMR gateway节点
791 0
DataWorks 2021-07 产品月刊
|
SQL 运维 分布式计算
DataWorks 2021-06 产品月刊
本月DataWorks产品月刊为您带来 产品活动: 1.首月特惠!DataWorks专业版原价5000元现首月特惠仅需199元;独享数据集成/调度资源组首月5折 产品功能更新: 1.数据集成首页改版 2.DataWorks支持EMR实时任务开发运维 3.EMR数据开发任务一键迁移DataWorks 4.DataWorks安全模式绑定EMR集群支持LDAP认证 5.数据服务支持MaxCompute数据源封装API 6.DataWorks新增报警联系人中心 7.运维中心新增资源运维,支持独享资源组水位监控
901 0
DataWorks 2021-06 产品月刊
|
SQL 运维 DataWorks
DataWorks 2021-05 产品月刊
产品活动: 1.数据集成开放用户体验调研问卷啦!赶紧开启吐槽模式吧 2.首月特惠!DataWorks专业版原价5000元现飞天会员618特惠仅需99元; 产品功能更新: DataWorks数据集成新增实时同步至AnalyticDB MySQL 3.0的功能; 开放消息服务(Open Message)开启公测,支持订阅DataWorks中的元数据及任务变更事件,可实现DataWorks与您的自有系统的深度集成; 任务调度新增年周期和月末最后一天周期,可实现按年、按季度、按指定月最后一天的周期调度; ......
709 0

热门文章

最新文章

相关产品

  • 大数据开发治理平台 DataWorks