AI 助理
备案控制台
开发者社区 大数据与机器学习 大数据计算 MaxCompute 正文

MaxCompute中使用Pyodps如何不受10000条记录数限制

已解决

MaxCompute中使用Pyodps如何不受10000条记录数限制

展开
收起
阿里云服务支持 2022-12-15 12:36:41 303 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 阿里云服务支持
    官方回答

    PyODPS对于受保护的项目，通过Tunnel下载数据将受限。可以通过以下方法，将数据下载限制打开，可下载的数据条数最多被限制为10000条。

    1、在脚本中设置options.tunnel.limit_instance_tunnel = True，限制下载数据的规模。

    2、在open_reader()方法设置limit参数，限制下载数据的规模。 例如open_reader(tunnel=True, limit=1000)表示限制下载1000行。

    关于使用Pyodps运行sql，详情请参考SQL

    2022-12-15 13:04:58
    赞同 展开评论
问答分类：
分布式计算 MaxCompute 云原生大数据计算服务 MaxCompute
问答标签：
大数据开发治理平台 DataWorks maxcompute 云原生大数据计算服务 MaxCompute pyodps
问答地址：
开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 问答
相关问答
MaxCompute
MaxCompute使用Pyodps如何处理ValueError: invalid liter...
208
1
0
MaxCompute的PyODPS什么时候运行在ODPS机器上
92
1
0
大数据计算MaxCompute py odps文件里面可以直接使用吗？
131
2
0
大数据计算MaxCompute使用pyODPS读取文件，再写入 ODPS，需要指定列名吗？
136
2
0
在大数据计算MaxCompute中使用pyODPS读取文件，再写入 ODPS，需要指定列名吗？
390
10
0
大数据计算MaxCompute的pyodps， win11有概率无法写入数据，怎么回事？
116
0
0
大数据计算MaxCompute安装oss2构建pyodps第三方包成功后导入云平台后报错，如何解决？
100
1
0
大数据计算MaxCompute的pyodps怎样能获取到分区创建时间和分区更新呢？
112
1
0
MaxCompute使用Pyodps如何处理ValueError: could not con...
262
1
0
MaxCompute使用PyODPS打印日志时中文自动转化为编码显示如何显示成原始中文
63
1
0
大数据与机器学习

大数据计算 MaxCompute

MaxCompute（原ODPS）是一项面向分析的大数据计算服务，它以Serverless架构提供快速、全托管的在线数据仓库服务，消除传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您经济并高效的分析处理海量数据。

我要提问
收录在圈子:
阿里云支持与服务
2304
+ 订阅
作为全球云计算的领先者，阿里云为全球230万企业提供着云计算服务，服务范围覆盖200多个国家和地区。我们致力于为企业、政府等组织机构提供安全可靠的云计算服务，给用户带来极速愉悦的服务体验。

相关文章

  • DMS Airflow：企业级数据工作流编排平台的专业实践
  • 阿里云大数据AI产品月刊-2025年10月
  • 一、Scala 基础语法、变量与数据类型
  • 告别繁琐循环：用Java Stream优雅处理集合
  • 别再靠“经验救火”了：用运维数据 + 机器学习，让系统自己告诉你问题在哪

    • 热门讨论

    热门文章

  • MaxCompute这个正则一直报这个错，该怎么处理?
  • 大数据计算MaxCompute阿里云一个CU对应多少cpu和内存？
  • sparksql中cte物化方式是怎样的
  • 大数据计算maxcompute支持递归查询吗？
  • 请问MaxCompute和DataWorks有啥区别？
  • MaxCompute在d2中使用python3调用阿里云的通义千问api接口，报错如下： 貌似无法？
  • 阿里云和腾讯云服务器哪个好！
  • 在大数据计算MaxCompute中，这要怎么修改字段类型？
  • sparksql读取maxcompute表，出现datetime out of range
  • ODPS 的下一个15年，大数据将迎来春天还是寒冬？
    • 展开全部
  • 大数据环境下该如何优雅地设计数据分层
  • odps是什么?
  • 阿里云MaxCompute（大数据）公开数据集---带你玩转人工智能
  • 吴刚专访--大数据和 MaxCompute 技术和故事
  • Python+大数据计算平台，PyODPS架构手把手教你搭建
  • 【大数据干货】轻松处理每天2TB的日志数据，支撑运营团队进行大数据分析挖掘，随时洞察用户个性化需求。
  • 【转载】时隔一年多，我又用起了 Superset
  • [大数据新手上路]“零基础”系列课程--如何将ECS上的Hadoop数据迁移到阿里云数加·MaxCompute
  • 使用 MaxCompute Studio 开发大数据应用
  • ［ETL实践指南］基于Kettle的MaxCompute插件实现数据上云
    • 展开全部
    还有其他疑问?
    咨询AI助理