开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

大数据计算MaxCompute这是自带支持delete的意思吗?那好像还真的可以,用datahub采

大数据计算MaxCompute这是自带支持delete的意思吗?那好像还真的可以,用datahub采集,然后delete语句自己特殊标记下,一起写入mc。dacd44c165e0dfc1f02acb6dfe604789.png

展开
收起
cuicuicuic 2023-08-13 11:02:25 81 0
2 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    MaxCompute 是阿里云提供的大数据计算服务,它提供了类似传统数据库的 SQL 语法和数据操作功能,包括 SELECT、INSERT、UPDATE 等。然而,在 MaxCompute 中,DELETE 操作是有限制的。

    在 MaxCompute 中,DELETE 操作是支持的,但是有一些限制:

    DELETE 操作只能应用于分区表的分区或者无分区表的全表。无法通过 DELETE 语句删除表中的部分行,只能删除整个分区或整个表中的数据。

    DELETE 操作会生成一条删除任务,该任务会影响到整个分区或整个表的数据,并在后台异步执行。因此,DELETE 操作可能需要一些时间来完成,并且对于大规模数据的删除可能会造成较大的开销。

    基于上述限制,如果您想在 MaxCompute 中使用 DELETE 操作来删除数据,您可以采用类似的方法,即使用 DataHub 进行数据采集,然后在写入 MaxCompute 之前,将需要删除的数据进行特殊标记,例如添加一个标记字段来指示删除操作,然后将数据写入 MaxCompute。之后,您可以编写相应的 DELETE 语句来删除带有特殊标记的数据。

    2023-08-13 22:22:50
    赞同 展开评论 打赏
  • 0eb2b4aede357ca6ec40f6b454feaece.png
    现在 直接走一套fink-cdc 直接采集的比较多,此回答整理自钉群“MaxCompute开发者社区2群”

    2023-08-13 11:40:22
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 热门讨论

    热门文章

    相关电子书

    更多
    大数据AI一体化的解读 立即下载
    极氪大数据 Serverless 应用实践 立即下载
    大数据&AI实战派 第2期 立即下载