使用PyODPS库运行SQL,在申请odps实例前, 通过代码设置了odps运行环境-问答-阿里云开发者社区-阿里云

开发者社区> 123ya> 正文

使用PyODPS库运行SQL,在申请odps实例前, 通过代码设置了odps运行环境

2017-05-15 10:42:12 3954 1

使用PyODPS库运行SQL,在申请odps实例前,
通过代码设置了odps运行环境:
from odps import options
options.sql.settings = {'odps.sql.mapper.split.size': 32}
发现任务只启动了6个mapper,感觉之前set的设置并没有设置成功,请问是为什么呢?
我打开终端,设置了:set odps.stage.mapper.split.size=32,感觉一分钟左右,就运行完了!

取消 提交回答
全部回答(1)
  • 123ya
    2019-07-17 21:10:18

    您好,您在客户端和py里设置的参数不一致:
    odps.stage.mapper.split.size 
     这个是py里的
    odps.sql.mapper.split.size

    0 0
相关问答

3

回答

请教一个范围查询的问题

小文文文 2019-06-14 14:37:01 115042浏览量 回答数 3

4

回答

Spark 【问答合集】

社区小助手 2019-05-29 14:13:40 123710浏览量 回答数 4

10

回答

【精品问答合集】Hbase热门问答

hbase小能手 2019-05-29 14:37:26 120246浏览量 回答数 10

38

回答

干货分享:DBA专家门诊一期:索引与sql优化问题汇总

xiaofanqie 2014-12-25 15:13:38 91766浏览量 回答数 38

1

回答

通过spark-thriftserver读取hive表执行sql时,tasks 数量怎么设置

游客iwhrjhvjoyqts 2019-07-05 15:30:22 113864浏览量 回答数 1

38

回答

[@饭娱咖啡][¥20]对于慢sql有没有什么比较实用的诊断和处理方法?

江小白太白 2018-10-30 18:47:38 141675浏览量 回答数 38

5

回答

java.lang.UnsupportedOperationException: This is supposed to be overridden by subclasses.

迷茫君 2019-07-16 09:26:11 118473浏览量 回答数 5

2

回答

mySQL数据库报错You have an error in your SQL syntax

落地花开啦 2016-02-14 16:09:24 126523浏览量 回答数 2

8

回答

flink sql 支持checkpoints吗?

游客izljdlkgbdwfc 2019-07-10 17:46:37 121161浏览量 回答数 8

78

回答

【2013.9.5修正版图文】新手如何使用阿里云(linux)服务器建站(搬站)

姑苏公子 2013-04-11 00:39:13 107745浏览量 回答数 78
+关注
0
文章
80
问答
推荐问答
相关电子书
更多
文娱运维技术
立即下载
《SaaS模式云原生数据仓库应用场景实践》
立即下载
《看见新力量:二》电子书
立即下载