DataWorks 2020-06 产品月刊-阿里云开发者社区

DataWorks 2020-06 产品月刊

2020-07-16 2232

版权

本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

本文涉及的产品

DataWorks独享数据集成资源组，8核16GB 1个月

大数据开发治理平台 DataWorks，不限时长

简介： 本月DataWorks产品月刊为您带来产品活动：1.限时折扣！DataWorks专业版原价5000元现仅需199元；独享数据集成资源组首月5折产品功能更新：1.新增DataWorks首页，帮助新用户快速了解DataWorks的产品定位及使用场景，降低学习成本2.资源优化模块正式商业化，专业版以上可用3.数据地图支持MySQL、Hologres、ADB等多种数据类型元数据采集4.独享资源组支持自定义路由功能5.数据集成6月新功能DataWorks百问百答32-41更新

+关注继续查看

本月DataWorks产品月刊为您带来
产品活动：
1.限时折扣！DataWorks专业版原价5000元现仅需199元；独享数据集成资源组首月5折

产品功能更新：
1.新增DataWorks首页，帮助新用户快速了解DataWorks的产品定位及使用场景，降低学习成本
2.资源优化模块正式商业化，专业版以上可用
3.数据地图支持MySQL、Hologres、ADB等多种数据类型元数据采集
4.独享资源组支持自定义路由功能
5.数据集成6月新功能：

数据源资源组连通性测试、新增hive数据源同步、hive整库迁移
新增PolarDB、OceanBase、SQL Server的实时读取；新增MaxCompute、Hologres的实时写入
MySQL支持了分库分表实时同步，实时同步可以针对于单库和单表进行按场景选择设置
增加同步解决方案模块，一键整库Hologres，资源组推荐功能

DataWorks百问百答32-41更新

【产品活动】

1. 限时折扣！DataWorks专业版原价5000元现仅需199元>>
立即前往>>
2. 限时折扣！独享数据集成/独享调度资源组首月5折>>
立即前往>>

【产品功能更新】

1、DataWorks产品首页发布：

新增DataWorks首页，帮助新用户快速了解DataWorks的产品定位及使用场景，降低学习成本。
正毅1.png

2、资源优化模块结束内测，正式商业化

资源优化功能已开启商用，仅限专业版或以上dataworks版本可用。本功能可以从计算、存储方面扫描发现资源浪费的问题，并提供解决方案，降低客户大数据平台的使用成本。

数据存储：可扫描出未管理的表、空表及90为访问表
数据计算：可扫描出存在的任务冲突、数据倾斜及暴力扫描情况
数据采集：可扫描出导入为空、持续导入一致及同源导入的情况

正毅2.png

3、数据地图支持MySQL、Hologres、ADB等多种数据类型元数据采集和管理

在数据地图中，数据发现新增对Hologres、ADB、MySQL、Oracle等多种数据类型的元数据采集能力，以及与之配套的全局检索和详情查看能力。详见：https://help.aliyun.com/document_detail/163501.html

元数据采集：

202006月刊-4.png

202006月刊-3.png

202006月刊-2.png

表元数据详情查看：

202006月刊-1.png

4、独享资源组支持自定义路由功能

独享资源组新增添加自定义路由功能，支持按需添加资源组VPC和其它VPC、IDC之间的自定义路由，可解决数据同步等场景下网络不可通的痛点问题。详见：https://help.aliyun.com/document_detail/168984.html

资源组加路由
- 通过界面化的产品，使用户自己手工添加打通网络所需路由，大大提升了网络设置效率

5、数据集成6月新功能介绍

数据源资源组连通性测试
- 可以按照资源组进行单个测试连通性
- 支持调度任务和数据服务使用数据源的连通性测试，以保证功能的正常执行
Hive数据源
- 新增hive数据源同步，并支持JDBC模式，实现数据过滤和SQL查询
- hive整库迁移：方便用户的hive系统数据搬站上云。
实时同步
- 新增PolarDB、OceanBase、SQL Server的实时读取
- 新增MaxCompute、Hologres的实时写入
- MySQL支持了分库分表实时同步，可以实现多库多表同时实时同步
- 增加同步解决方案模块
  - 针对某些同步场景流程有了产品级入口，可以场景式解决用户问题，一站式完成所有操作。具体可以参见使用说明
  - 一键整库Hologres
    - 在“同步解决方案”里增加了一键整库同步至Hologres，可以把某些数据库里的表通过简单配置，一次性的全量然后自动实时增量的同步至Hologres中，并支持动态DDL变化。
- 实时同步实现多种形式
  - 实时同步可以针对于单库和单表进行按场景选择设置
资源组推荐
- 将复杂的资源组选择和网络配置方案直观的展示给用户，并引导和介绍用户使用方式和场景