开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks独享数据集成资源组访问vpc环境数据源时,如何配置?

DataWorks独享数据集成资源组访问vpc环境数据源时,如何配置?

展开
收起
真的很搞笑 2023-10-15 19:45:48 57 0
3 条回答
写回答
取消 提交回答
  • 当使用DataWorks独享数据集成资源组访问VPC环境的数据源时,需要进行以下步骤:

    首先,确保已经在阿里云上创建了一个VPC,并且将DataWorks独享资源组和目标数据源部署在相同的VPC内。

    其次,需要在VPC中创建一个或多个虚拟交换机(VSwitch),以便实现独享数据集成资源组与VPC环境下的数据源之间的网络连通性。

    然后,需要将独享数据集成资源组绑定到某个工作空间,使其可以在该工作空间中使用。

    接下来,进行专有网络绑定:在DataWorks管控台的资源组列表找到创建好的独享资源组,点击网络配置入口,进行专有网络绑定。

    最后,如果数据源处于经典网络环境中,则数据源与独享资源组间网络无法连通,因此建议您将数据源迁移至VPC网络中。

    2023-10-31 20:08:26
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    在DataWorks中,独享数据集成资源组访问VPC环境数据源时,需要进行以下配置:

    1. 在DataWorks控制台中,创建一个新的独享数据集成资源组。
    2. 在创建的独享数据集成资源组中,配置VPC网络环境和数据源。在VPC网络环境中,需要指定VPC、子网和安全组等信息。在数据源中,需要指定数据库类型、数据库名、用户名、密码等信息。
    3. 在DataWorks工作流中,使用独享数据集成资源组作为数据源。在创建工作流时,需要在“数据源”页面中选择创建的独享数据集成资源组。
    4. 在工作流中配置数据集成任务。在数据集成任务中,需要指定数据源、数据处理方式、数据输出方式等信息。
    5. 运行工作流。在运行工作流时,DataWorks会自动连接到VPC环境中的数据源,并进行数据处理和输出。
      需要注意的是,在配置独享数据集成资源组访问VPC环境数据源时,需要确保VPC环境中的数据库和安全组等配置正确,并且数据库的用户名、密码等信息正确无误。此外,还需要确保DataWorks和VPC环境之间的网络连接正常。
    2023-10-16 12:57:11
    赞同 展开评论 打赏
  • 独享数据集成资源组访问VPC环境数据源时,独享数据集成资源组需要绑定数据源所在VPC,绑定该VPC下任意一个交换机后,会自动添加路由至整个VPC网段,实现独享数据集成资源组在该VPC下网络可达。如果目的端数据库有白名单访问限制,走公网,您需要添加独享数据集成资源组的EIP地址,走内网,您需要添加独享数据集成资源组绑定的交换机网段至数据库的白名单和安全组。详情请参见使用独享数据集成资源组执行任务需要在数据库添加的IP白名单。如果独享数据集成资源组访问的是本地idc数据源,或者跨账号访问数据源,请绑定网络打通的专有网络,再添加路由到目的端ip。独享数据集成资源组无法访问阿里云经典网络。如果您的数据源使用的是经典网络,建议使用公共资源组进行同步任务运行。说明 获取独享资源组的EIP地址、独享资源组绑定的专有网络的交换机网段和数据源的网络环境的方式等,请参见独享资源组常见问题。
    https://help.aliyun.com/document_detail/137838.html
    ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-10-15 22:42:14
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    Deep Dive:云上VPC分层安全架构设计 立即下载
    经典网络迁移VPC最佳实践 立即下载
    AWS 数据中心与 VPC 揭秘 立即下载