pyODPS执行 open_reader 操作如何获取表中大于1万条的数据

有两个方法

1、 SQL写成create table as select *，这样再使用tunnel下载

odps.execute_sql('create table my_tmp_table as select ***')
t = odps.get_table('my_tmp_table')
with t.open_reader() as reader:
    for record in reader:

2、 使用instance tunnel，可以用tunnel读取instance执行结果。这个会在0.6版本完成，预计在下周末或者下下周初发布。

SQL里必须每次都create table吗？

PyODPS在table上执行 open_reader 操作来打一个reader来读取数据。操作record(修改数据，把数据存入array或list)是在ODPS运行的还是在本地运行的？

with t.open_reader(partition='pt=test') as reader:

count = reader.count
for record in reader[5:10] 
    # 处理一条记录