开发者社区> 问答> 正文

dataworks 最多查询行数

在使用select 语句的时候,最多只能返回10000条,是这样吗,有解决办法没有

展开
收起
xs1h 2018-02-01 14:56:37 5708 0
9 条回答
写回答
取消 提交回答
  • 在ide里的select会自动加上limit 10000的限制,如果你要导出数据的话建议创建一张临时表后走tunnel下载

    2019-07-17 21:57:22
    赞同 展开评论 打赏
  • 可以查出来然后直接插到另外一张新建的表里面
    如果需要导出,那么就用工具导出。

    2019-07-17 21:57:22
    赞同 展开评论 打赏
  • 用tunnel download就好。

    2019-07-17 21:57:22
    赞同 展开评论 打赏
  • 用maxcompute的插件可以直接一次导出整个分片

    2019-07-17 21:57:22
    赞同 展开评论 打赏
  • 1w只是界面查询的限制。建议使用sdk来操作,无限制。

    2019-07-17 21:57:22
    赞同 展开评论 打赏
  • 自己调用api。

    2019-07-17 21:57:22
    赞同 展开评论 打赏
  • 专门的数据导出需要用tunnel download。dataworks只是界面,导出太多数据,会有IO问题和数据安全问题

    2019-07-17 21:57:22
    赞同 展开评论 打赏
  • insert到表是没有限制的
    估计你是要导出数据,需要使用tunnel download,但不支持筛选,需要先处理成表或分区

    2019-07-17 21:57:22
    赞同 展开评论 打赏
  • 如果超过返回的限制,服务器内存和你的查询耗时你是否能接受?
    如果能接受,还是建议将单词查询分割为多次的多批量查询,以减少内存溢出的隐患可能。

    2019-07-17 21:57:22
    赞同 展开评论 打赏
滑动查看更多
问答排行榜
最热
最新

相关电子书

更多
DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载