本实验将提供1个“火眼”Web应用工具,1个RDS for MySQL(后续内容简称Mysql)数据库,以及1个Dataphin项目空间,Dataphin空间关联到一个MaxCompute项目。学员将在Dataphin(数据治理产品)配置MySQL数据库作为目标数据源(也就是需要上云的数据表所在的数据库),然后利用火眼平台对Mysql 数据源的几十张数据表配置批量上云任务。并通过火眼平台一键操作实现几十张Mysql数据表批量上云到阿里云MaxCompute项目。

背景知识

本实验涉及的云产品/服务以及数据中台交付技术知识有:

  • “火眼”工具

火眼是基于数据中台标准交付流程打造的一站式数据中台交付工具集,覆盖数据中台全生命周期,旨在帮助交付技术人员提升项目交付质量与效率,降低数据中台建设门槛,同时为客户提供持续运营数据中台的能力。

  • 数据治理平台Dataphin

Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出,一站式提供数据采、建、管、用全生命周期的大数据能力,以助力企业显著提升数据治理水平,构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin提供多种计算平台支持及可拓展的开放能力,以适应各行业企业的平台技术架构和特定诉求。

  • 数据上云

数据上云是企业构建数据中台的最核心环节之一。数据中台开发人员需要将企业分布在各个业务系统的数据库表数据、在线设备监测数据等数据源,上云到阿里云大数据存储系统。接下来才能进行数据中台的模型设计、数据处理代码开发等工作。

前置知识-实验参与者需要具备的基础技能

  • 了解基本数据库知识
  • 熟悉基本SQL语句编写
  • 懂得如何操作信息化系统。本实验涉及的火眼平台、Dataphin数据治理平台都属于信息化系统,操作习惯和其他普通信息化系统比较类似。

注意:本实验操作的产品和系统在chrome浏览器进行操作效果最佳。因此,建议使用chrome浏览器进行本实验。