开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

大数据计算MaxCompute这个功能可用吗?

大数据计算MaxCompute这个功能可用吗?【开启Hologres外部表存储直读功能】set odps.table.api.enable.holo.table=true; 后查询还是报错,需要还是按原来模式建表吗?需要用这个方式先建表吗?CREATE EXTERNAL TABLE IF NOT EXISTS holo_mc_external_dbl
(
id int,
name string,
ds string
)
STORED BY 'com.aliyun.odps.jdbc.JdbcStorageHandler'
location 'jdbc:postgresql://hgprecn-cn-zvp2o6aq**-cn-beijing-internal.hologres.aliyuncs.com:80/mc_test?ApplicationName=MaxCompute&currentSchema=public&preferQueryMode=simple&useSSL=false&table=mf_holo_mc_up/'
TBLPROPERTIES (
'mcfed.mapreduce.jdbc.driver.class'='org.postgresql.Driver',
'odps.federation.jdbc.target.db.type'='holo',
'odps.federation.jdbc.colmapping'='id:id,name:name,ds:ds'
);

展开
收起
cuicuicuic 2024-02-15 08:55:11 21 0
2 条回答
写回答
取消 提交回答
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    根据您提供的信息,您在MaxCompute中开启了Hologres外部表存储直读功能,并尝试使用该功能进行查询。然而,您遇到了报错问题。

    首先,请确保您的MaxCompute项目已经正确配置了访问Hologres的权限。您可以通过以下步骤检查和配置权限:

    1. 登录到MaxCompute控制台。
    2. 选择您的项目,并进入"安全设置"页面。
    3. 确保您的项目具有访问Hologres的权限。如果没有,您可以创建一个新的RAM用户或使用已有的RAM用户,并为该用户授权访问Hologres的权限。
    4. 将RAM用户的AccessKey ID和AccessKey Secret添加到MaxCompute项目的"环境变量"中,以便MaxCompute可以访问Hologres。

    接下来,您可以尝试重新创建外部表并执行查询。以下是创建外部表的示例代码:

    CREATE EXTERNAL TABLE IF NOT EXISTS holo_mc_external_dbl (
        id int,
        name string,
        ds string
    )
    STORED BY 'com.aliyun.odps.jdbc.JdbcStorageHandler'
    location 'jdbc:postgresql://hgprecn-cn-zvp2o6aq**-cn-beijing-internal.hologres.aliyuncs.com:80/mc_test?ApplicationName=MaxCompute&currentSchema=public&preferQueryMode=simple&useSSL=false&table=mf_holo_mc_up/'
    TBLPROPERTIES (
        'mcfed.mapreduce.jdbc.driver.class'='org.postgresql.Driver',
        'odps.federation.jdbc.target.db.type'='holo',
        'odps.federation.jdbc.colmapping'='id:id,name:name,ds:ds'
    );
    

    请注意,您需要将hgprecn-cn-zvp2o6aq**-cn-beijing-internal.hologres.aliyuncs.com替换为您实际的Hologres连接地址。

    完成上述步骤后,您应该能够成功创建外部表并执行查询。如果仍然遇到问题,请检查MaxCompute和Hologres之间的网络连接是否正常,以及您的查询语句是否正确。

    2024-02-16 10:49:05
    赞同 展开评论 打赏
  • 要的。前边的方式正常建表后,满足条件的话可以用直读模式https://help.aliyun.com/zh/maxcompute/user-guide/hologres-foreign-tables?spm=a2c4g.11186623.0.i2#p-r3o-208-b55
    image.png
    ,此回答整理自钉群“MaxCompute开发者社区2群”

    2024-02-15 09:25:27
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 相关电子书

    更多
    大数据AI一体化的解读 立即下载
    极氪大数据 Serverless 应用实践 立即下载
    大数据&AI实战派 第2期 立即下载