开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

在大数据计算MaxCompute中,请问有办法通过tunnel sdk读取delta 表数据吗?

在大数据计算MaxCompute中,请问有办法通过tunnel sdk读取delta 表数据吗?

展开
收起
我睡觉不困 2024-08-26 09:49:10 47 0
1 条回答
写回答
取消 提交回答
  • MaxCompute的Tunnel SDK主要用于上传和下载普通的表数据,而不是Delta表数据。Delta是一种数据湖管理协议,主要用于保持数据的一致性和可查询性,它通常与特定的数据存储系统如Databricks Delta或Lakehouse集成。MaxCompute作为离线大数据处理服务,原生不直接支持Delta格式,因此不能直接通过Tunnel SDK读取Delta表数据。如果需要将Delta数据与MaxCompute结合使用,通常需要先将Delta数据转换为MaxCompute支持的格式,然后通过数据迁移工具(如DataHub、DataWorks等)导入到MaxCompute中。具体的流程可能涉及数据预处理、数据格式转换和使用ETL作业进行数据导入。可参考文档

    2024-08-26 14:54:52
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 相关电子书

    更多
    Data+AI时代大数据平台应该如何建设 立即下载
    大数据AI一体化的解读 立即下载
    极氪大数据 Serverless 应用实践 立即下载