开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

基于数据库内网的数据源不能使用公共数据集成资源组运行任务怎么?

基于数据库内网的数据源不能使用公共数据集成资源组运行任务怎么?

展开
收起
十一0204 2023-04-11 21:24:46 294 0
3 条回答
写回答
取消 提交回答
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    如果你在使用阿里云大数据开发治理DataWorks时,需要访问内网的数据库数据源,但无法使用公共数据集成资源组运行任务,可以尝试以下两种方式:

    1. 搭建自己的数据集成节点

    DataWorks中支持用户搭建自己的数据集成节点,可以配置内网访问环境,支持访问数据库、文件等内网资源。用户可以将自己的数据集成节点添加到DataWorks中,并将数据集成任务分配给该节点,以实现对内网数据源的访问。

    1. 使用高速通道

    阿里云提供了高速通道(Express Connect)服务,可以建立阿里云VPC和用户本地数据中心之间的专线连接,以实现内网互通和加速传输。用户可以通过高速通道访问内网数据源,并将数据传输到DataWorks中进行处理。

    2023-04-29 23:33:03
    赞同 展开评论 打赏
  • 值得去的地方都没有捷径

    如果你的数据源基于数据库内网且不能使用公共数据集成资源组运行任务,以下是一些可能的解决方案:

    部署一个本地数据集成平台:你可以在公司内部部署一个本地数据集成平台,来实现数据源的连接、转换和加载。这将确保你的敏感数据不会离开内网,而且你可以自主地控制该平台的安全和权限。
    
    VPN连接:如果远程连接到数据库是安全的,则可以使用VPN(虚拟专用网络)连接到内网并使用数据源。使用VPN可以确保数据的安全和隐私性。
    
    混合前后端运行方式:如果数据源仅能够在内网中运行,可以采用前后端分离的方式,将仅用于数据源的前端部署在内网中,而后端部署在公网上(如AWS)。这样可以确保数据源的安全性,同时使得其他人可以通过公共数据集成资源组运行任务。
    

    无论哪种方案,都需要在公司内部制定严格的安全方针,并遵守相应的法规和规定。

    2023-04-15 15:58:27
    赞同 展开评论 打赏
  • 意中人就是我呀!

    目前基于数据库内网的数据源不能使用公共数据集成资源组运行任务,请更换使用独享数据集成资源组运行任务,或者修改数据源配置中链接地址为公网地址后使用公共数据集成资源组运行任务。 https://help.aliyun.com/document_detail/146663.html 此答案整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-04-12 10:17:51
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

热门讨论

热门文章

相关电子书

更多
集成智能接入网关APP:优化企业级移动办公网络 立即下载
《DataWorks 数据集成实时同步》 立即下载
云效助力企业集成安全到DevOps中 立即下载