AI 助理
备案控制台
开发者社区 问答 正文

使用PyODPS如何下载全量数据？

使用PyODPS如何下载全量数据？

展开
收起
montos 2020-05-27 16:31:16 3384 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • montos

    PyODPS默认不限制从Instance读取的数据规模。但是对于受保护的Project，通过Tunnel下载数据将受限。此时，如果未设options.tunnel.limit_instance_tunnel,则数据量限制会被自动打开，可下载的数据条数受到Project配置限制，通常该限制为10000条。如果您需要手动限制下载数据的规模，可以为open_reader方法增加limit选项， 或者设置options.tunnel.limit_instance_tunnel = True 。

    如有更多疑问咨询可以加入MaxCompute开发者社区钉群点击链接

    2020-05-27 17:06:23
    赞同 展开评论
问答标签：
大数据开发治理平台 DataWorks数据
问答地址：
开发者社区 > 云计算 > 问答
相关问答
云原生大数据计算服务 MaxCompute数据上云方面，DataWorks数据集成是怎样的？
1203
1
0
使用三个odps sql节点，同时向同一张表的同一个分区写入数据，有时报错，有时不会报错，是什么原因
3567
1
0
Dataworks的数据地图可以查看CDH集群 hive的表以及血缘信息嘛
1915
1
0
根据数据治理的需求五大层次，DataWorks有哪些对应的产品模块？
1118
1
0
DataWorks 数据服务注册 API 支持哪三种数据格式？
690
1
0
DataWorks 数据服务注册 API 支持四种常见请求方式是什么？
763
1
0
DataWorks 数据服务脚本模式生成API有什么特点？
861
1
0
DataWorks 数据服务向导模式生成API有什么特点？
789
1
0
DataWorks 数据服务生成API支持哪两种方式？
668
1
0
在DataWorks 数据服务平台上有哪两种方式新建 API？
1086
1
0