备案控制台
开发者社区 大数据与机器学习 大数据开发治理DataWorks 文章 正文

带你读《全链路数据治理-全域数据集成》之34：3. 准备工作：添加数据源

2023-05-22 149
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
大数据开发治理平台 DataWorks，不限时长
推荐场景：
Github实时数据分析与可视化
简介： 带你读《全链路数据治理-全域数据集成》之34：3. 准备工作：添加数据源

3. 准备工作：添加数据源

1) 新建 MySQL 数据源

新建 MySQL 数据源，支持阿里云实例模式和连接串模式。


l 阿里云实例模式：适用于阿里云 RDS For MySQL。

l 连接串模式：适用于自建、公网或本地 IDC 机房 MySQL。


本文以阿里云 RDS for MySQL 为例，新建数据源如下：

image.png

点击要同步该数据源的数据集成独享资源组测试连通性，确保数据源连通状态为“可连通”。

image.png

2) 新建 MaxCompute 数据源

如果在创建工作空间时就已经绑定了 MaxCompute 引擎，可以跳过这步。

使用绑定引擎的方式创建 MaxCompute 数据源。

image.png


文章标签：
数据集成 Data Integration
云数据库 RDS MySQL 版
分布式计算
关系型数据库
MySQL
RDS
MaxCompute
关键词：
云原生大数据计算服务 MaxCompute数据
云原生大数据计算服务 MaxCompute数据源
数据集成 Data Integration数据源
云原生大数据计算服务 MaxCompute数据集成
数据集成 Data Integration数据
编程技术君
目录
相关文章
三分钟热度的鱼
|
6天前
|
分布式计算 DataWorks NoSQL
MaxCompute产品使用合集之一张表如果想只保留近七天的数据，应该如何设置
MaxCompute作为一款全面的大数据处理平台，广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践，可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集，涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
三分钟热度的鱼
28 5
真的很搞笑
|
7天前
|
数据采集 DataWorks 定位技术
DataWorks产品使用合集之开发环境执行离线同步不立即更新数据，是什么原因
DataWorks作为一站式的数据开发与治理平台，提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案，帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述，涵盖数据处理的各个环节。
真的很搞笑
15 3
孜倦与shine
|
4天前
|
SQL 关系型数据库 MySQL
基于Hive的天气情况大数据分析系统（通过hive进行大数据分析将分析的数据通过sqoop导入到mysql，通过Django基于mysql的数据做可视化）
基于Hive的天气情况大数据分析系统（通过hive进行大数据分析将分析的数据通过sqoop导入到mysql，通过Django基于mysql的数据做可视化）
孜倦与shine
32 0
嘟嘟嘟嘟嘟嘟
|
5天前
|
DataWorks NoSQL Java
DataWorks操作报错合集之数据集成使用公共数据集成资源组写入到redis数据源（使用的是VPC连接），提示以下错误：request action:[InnerVpcGrantVpcInstanceAccessToApp], message:[InvalidInstanceId.怎么解决
DataWorks是阿里云提供的一站式大数据开发与治理平台，支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中，可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
嘟嘟嘟嘟嘟嘟
27 1
嘟嘟嘟嘟嘟嘟
|
5天前
|
分布式计算 DataWorks 关系型数据库
DataWorks操作报错合集之数据源同步时，使用脚本模式采集mysql数据到odps中，使用querySql方式采集数据，在脚本中删除了Reader中的column，但是datax还是报错OriginalConfPretreatmentUtil - 您的配置有误。如何解决
DataWorks是阿里云提供的一站式大数据开发与治理平台，支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中，可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
嘟嘟嘟嘟嘟嘟
37 3
三分钟热度的鱼
|
6天前
|
存储 分布式计算 大数据
MaxCompute产品使用合集之读取OSS数据出现重复的情况是什么导致的
MaxCompute作为一款全面的大数据处理平台，广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践，可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集，涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
三分钟热度的鱼
51 2
三分钟热度的鱼
|
6天前
|
存储 分布式计算 Java
MaxCompute产品使用合集之元仓包含哪些内容什么数据算是元仓表
MaxCompute作为一款全面的大数据处理平台，广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践，可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集，涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
三分钟热度的鱼
67 0
三分钟热度的鱼
|
6天前
|
存储 分布式计算 大数据
MaxCompute产品使用合集之是否支持创建OSS外部表为分区表，并访问OSS上以分区方式存储的数据
MaxCompute作为一款全面的大数据处理平台，广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践，可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集，涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
三分钟热度的鱼
47 4
三分钟热度的鱼
|
6天前
|
存储 分布式计算 大数据
MaxCompute产品使用合集之在sql里调用自定义的udf时，设置一次同时处理的数据行数，是并行执行还是串行执行的
MaxCompute作为一款全面的大数据处理平台，广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践，可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集，涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
三分钟热度的鱼
27 0
三分钟热度的鱼
|
6天前
|
机器学习/深度学习 分布式计算 大数据
MaxCompute产品使用合集之如何对数据加密解密
MaxCompute作为一款全面的大数据处理平台，广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践，可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集，涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
三分钟热度的鱼
12 0
大数据与机器学习

大数据开发治理DataWorks

热门文章

最新文章

  • 1
    DataWorks常见问题之如何将数据集成到oss链路
  • 2
    大数据公共数据集上线，免费试用TB级数据分析
  • 3
    DataWorks重磅推出全新资源组2.0，实现低成本灵活付费和动态平滑扩缩容
  • 4
    DataWorks产品使用合集之如何将SQL Server中的数据转存到MongoDB
  • 5
    数据中台的智能进化—阿里巴巴十二年数据平台发展历程
  • 6
    2万字揭秘阿里巴巴数据治理平台DataWorks建设实践
  • 7
    DataWorks售前咨询
  • 8
    大数据&AI的16种可能，2020阿里云客户最佳实践合集下载
  • 9
    【2023云栖】田奇铣：大模型驱动DataWorks数据开发治理平台智能化升级
  • 10
    DataWorks操作报错合集之数据源同步时，使用脚本模式采集mysql数据到odps中，使用querySql方式采集数据，在脚本中删除了Reader中的column，但是datax还是报错OriginalConfPretreatmentUtil - 您的配置有误。如何解决
  • 1
    DataWorks重磅推出全新资源组2.0，实现低成本灵活付费和动态平滑扩缩容
    113
  • 2
    DataWorks操作报错合集之调用ListInstances API时报错：ServiceUnavailable The request has failed due to a temporary failure of the server.是什么导致的
    13
  • 3
    DataWorks操作报错合集之实时同步能启动，但是不能同数据，错误提示"Thereplicaidentityoftablesyouselectedisnotfull,pleasealtertablefirst.need alter table"表示什么意思
    13
  • 4
    DataWorks操作报错合集之出现报错数据质量校验不通过，但任务没有设置DQC校验，是什么导致的
    18
  • 5
    DataWorks操作报错合集之遇到错误信息提示："ErrorMessage: ClickHouse exception, code: 210, host: cc-，是什么导致的
    12
  • 6
    DataWorks操作报错合集之在点击DQC监控时，跳转到DQC页面出现报错，是什么导致的
    15
  • 7
    DataWorks操作报错合集之当 Flink 垃圾管理器（Garbage Collector）发生错误时，是什么原因导致的
    22
  • 8
    DataWorks操作报错合集之同步脚本报错This error often occurs when a lot dirty data exists in the source data. 是什么原因
    12
  • 9
    DataWorks操作报错合集之同步任务同步到OSS，报错：Caused by: com.aliyun.oss.ClientException: The target server failed to respond，如何解决
    10
  • 10
    DataWorks操作报错合集之同步Elasticsearch数据报错：Cat response did not contain a JSON Array，是什么导致的
    14

    • 相关课程

    更多
  • 2020版大数据实战项目之DMP广告系统（第二阶段）
  • 2020版大数据实战项目之DMP广告系统（第三阶段）
  • 2020版大数据实战项目之DMP广告系统（第四阶段）
  • 2020版大数据实战项目之DMP广告系统（第五阶段）
  • 2020版大数据实战项目之DMP广告系统（第六阶段）
  • 2020版大数据实战项目之DMP广告系统（第七阶段）

    • 相关电子书

    更多
  • 大数据AI一体化的解读
  • 极氪大数据 Serverless 应用实践
  • 大数据&AI实战派 第2期

    • 相关实验场景

    更多
  • 配置流程编排实现根据天气情况播放歌曲
  • 基于DTS构建一站式实时数据服务
  • 基于OpenSearch向量检索版和MaxCompute快速搭建图搜服务
  • 倚天大数据电商数据分析快速实践
  • 云原生HTAP数据库，让你的交易和分析一库搞定
  • 玩转MaxCompute SQL! 30分钟搞定数据分析挖掘
    • 下一篇
    2024年阿里云免费云服务器及学生云服务器申请教程参考