开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

大数据计算MaxCompute可以直接使用外部的数据库的数据进行计算吗,也就是不进行数据导入?

大数据计算MaxCompute可以直接使用外部的数据库的数据进行计算吗,也就是不进行数据导入?

展开
收起
青城山下庄文杰 2023-10-17 18:00:19 101 0
5 条回答
写回答
取消 提交回答
  • MaxCompute是阿里云提供的一种云原生大数据计算服务,它可以直接使用外部的数据库的数据进行计算MaxCompute是阿里云提供的一种云原生大数据计算服务,它可以直接使用外部的数据库的数据进行计算,而不需要将数据导入到MaxCompute中。

    2023-10-31 23:08:40
    赞同 展开评论 打赏
  • 月移花影,暗香浮动

    MaxCompute作为阿里云大数据平台的核心计算组件,可以处理大规模的数据计算。它支持直接使用外部数据库的数据进行计算,无需进行数据导入。例如,通过创建外部表的方式,可以将RDS数据源的表映射到MaxCompute中,然后就可以直接对这些数据执行SQL查询等操作。此外,MaxCompute还提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问题。这种方式的优点是可以降低数据传输的时间和成本,同时提高数据处理的效率。

    2023-10-18 10:32:49
    赞同 展开评论 打赏
  • 是的,大数据计算MaxCompute可以直接使用外部的数据库的数据进行计算,而不需要进行数据导入。MaxCompute支持通过标准的JDBC接口来连接外部数据库,并可以直接使用这些数据库中的数据进行计算。
    具体来说,你可以通过MaxComputeJDBC驱动来连接MaxCompute支持的JDBC的外部数据库,然后直接使用这些数据库中的数据进行计算。你可以使用SQL语句来查询和操作这些数据,并将结果存储到MaxCompute中进行计算。
    需要注意的是,使用外部数据库的数据进行计算可能会增加计算的复杂性和成本。因此,在使用外部数据库的数据进行计算之前,你需要评估这些因素,并确定是否适合你的应用场景。

    2023-10-17 21:24:03
    赞同 展开评论 打赏
  • 外部表的方式应该可以。 https://help.aliyun.com/zh/maxcompute/user-guide/external-data-sources/?spm=a2c4g.11186623.0.i3 此回答整理自钉群“MaxCompute开发者社区1群”

    2023-10-17 18:54:12
    赞同 展开评论 打赏
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    MaxCompute 是一款分布式计算引擎,可以对海量数据进行计算和分析。在 MaxCompute 中,可以通过外部表(External Table)的方式,直接引用外部存储系统中的数据,而无需将数据导入 MaxCompute 的表中。

    具体来说,MaxCompute 支持在使用 SQL 语言进行查询、统计、聚合等操作时,访问外部数据库的数据,并与 MaxCompute 存储的数据一起进行计算。这些外部数据可以存储在云上、本地或其他第三方存储系统中,如 OSS、RDS、PolarDB 等。只要能够通过标准的 JDBC 或 ODBC 接口访问这些数据库,就可以在 MaxCompute 中通过创建外部表的方式访问其数据。

    创建外部表时,需要指定外部数据库的连接信息和数据表的元数据信息,如表名、列名、数据类型、分隔符等。在查询时,可以直接引用这些外部表,并通过 SQL 语句对其进行操作,实现数据的计算和分析。

    2023-10-17 18:54:09
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 相关电子书

    更多
    Data+AI时代大数据平台应该如何建设 立即下载
    大数据AI一体化的解读 立即下载
    极氪大数据 Serverless 应用实践 立即下载