DataWorks把全量的数据都查询出下载下来有什么好的方法?
需要在DataWorks中下载全量数据,可以使用SQLTask配合Tunnel命令进行数据导出,这种方式没有数据量限制。可参考文档:SQLTask配合Tunnel实现大量数据导出。数据分析查询结果下载在标准版及以上可支持最多20万条,但需要租户管理员设置允许下载。如果数据量不大,也可尝试DataStudio查询结果下载,但上限是1万条。
可以先看下数据分析的sql查询下载 如果还是不能满足需求 需要使用maxcompute的tunnel 全量下载 https://help.aliyun.com/zh/dataworks/user-guide/sql-query?spm=a2c4g.11186623.0.i2#:~:text=%E8%A7%84%E8%8C%83%E5%8C%96%E6%8E%92%E7%89%88%E3%80%82-,%E6%9F%A5%E8%AF%A2%E7%BB%93%E6%9E%9C%E6%93%8D%E4%BD%9C,-SQL%E8%AF%AD%E5%8F%A5 ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。