基于数据库内网的数据源不能使用公共数据集成资源组运行任务怎么?
如果你在使用阿里云大数据开发治理DataWorks时,需要访问内网的数据库数据源,但无法使用公共数据集成资源组运行任务,可以尝试以下两种方式:
DataWorks中支持用户搭建自己的数据集成节点,可以配置内网访问环境,支持访问数据库、文件等内网资源。用户可以将自己的数据集成节点添加到DataWorks中,并将数据集成任务分配给该节点,以实现对内网数据源的访问。
阿里云提供了高速通道(Express Connect)服务,可以建立阿里云VPC和用户本地数据中心之间的专线连接,以实现内网互通和加速传输。用户可以通过高速通道访问内网数据源,并将数据传输到DataWorks中进行处理。
如果你的数据源基于数据库内网且不能使用公共数据集成资源组运行任务,以下是一些可能的解决方案:
部署一个本地数据集成平台:你可以在公司内部部署一个本地数据集成平台,来实现数据源的连接、转换和加载。这将确保你的敏感数据不会离开内网,而且你可以自主地控制该平台的安全和权限。
VPN连接:如果远程连接到数据库是安全的,则可以使用VPN(虚拟专用网络)连接到内网并使用数据源。使用VPN可以确保数据的安全和隐私性。
混合前后端运行方式:如果数据源仅能够在内网中运行,可以采用前后端分离的方式,将仅用于数据源的前端部署在内网中,而后端部署在公网上(如AWS)。这样可以确保数据源的安全性,同时使得其他人可以通过公共数据集成资源组运行任务。
无论哪种方案,都需要在公司内部制定严格的安全方针,并遵守相应的法规和规定。
目前基于数据库内网的数据源不能使用公共数据集成资源组运行任务,请更换使用独享数据集成资源组运行任务,或者修改数据源配置中链接地址为公网地址后使用公共数据集成资源组运行任务。 https://help.aliyun.com/document_detail/146663.html 此答案整理自钉群“DataWorks交流群(答疑@机器人)”
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。