开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

请教下大数据计算MaxCompute,还有别的方式吗?

请教下大数据计算MaxCompute,pyodps 提交sql的方式除了 execute_sql()/run_sql() 还有别的方式吗。我提交
--归档ds为20170101的数据
alter table my_log partition(ds='20170101') archive; 归档sql 报错?

展开
收起
真的很搞笑 2024-01-16 13:11:34 34 0
1 条回答
写回答
取消 提交回答
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    除了execute_sql()run_sql(),您还可以使用pyodps.DataFrame对象来执行SQL查询。以下是一个示例:

    from pyodps import ODPS
    
    # 初始化ODPS对象
    access_id = 'your_access_id'
    access_key = 'your_access_key'
    project = 'your_project'
    endpoint = 'your_endpoint'
    
    odps = ODPS(access_id, access_key, project, endpoint)
    
    # 创建表对象
    table = odps.get_table('my_log')
    
    # 执行SQL查询
    with table.open_reader() as reader:
        for row in reader:
            print(row)
    

    关于归档SQL报错的问题,您可以尝试将归档操作放在一个单独的SQL语句中执行,如下所示:

    -- 归档ds为20170101的数据
    ALTER TABLE my_log PARTITION(ds='20170101') ARCHIVE;
    

    然后在Python代码中使用pyodps.SQL对象执行这个SQL语句:

    from pyodps import SQL
    
    # 初始化ODPS对象
    access_id = 'your_access_id'
    access_key = 'your_access_key'
    project = 'your_project'
    endpoint = 'your_endpoint'
    
    odps = ODPS(access_id, access_key, project, endpoint)
    
    # 创建SQL对象
    sql = SQL("ALTER TABLE my_log PARTITION(ds='20170101') ARCHIVE;")
    
    # 执行SQL语句
    with odps.execute_sql(sql) as result:
        print(result)
    
    2024-01-16 14:21:39
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 相关电子书

    更多
    Data+AI时代大数据平台应该如何建设 立即下载
    大数据AI一体化的解读 立即下载
    极氪大数据 Serverless 应用实践 立即下载