开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

有没有什么其他方法能够每日增量拉取到TableStore到MaxCompute上的?

想把TableStore的表拉取到MaxCompute上,每日拉取增量数据,但是我在TableStore的这张表的主键是id和订单id,我看文档它好像只能根据TableStore的主键范围来拉取数据,这样我就无法按照时间字段来拉取了,而且TableStore的时间字段只支持时间戳格式,有没有什么其他方法能够每日增量拉取到TableStore到MaxCompute上的?

展开
收起
游客uu65yiq7myioi 2023-02-07 13:16:37 194 0
2 条回答
写回答
取消 提交回答
  • 可以使用DataWorks的定时任务功能,在定时任务中调用TableStore的API,指定拉取数据的时间范围,比如每日拉取前一天的数据,然后将拉取到的数据存储到MaxCompute中。

    2023-02-09 10:49:54
    赞同 展开评论 打赏
  • 看下OTSStream Reader是否符合预期呢 https://help.aliyun.com/document_detail/137670.html 图片.png ——该回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-02-07 17:07:21
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 热门讨论

    热门文章

    相关电子书

    更多
    TableStore在社交类场景下的应用 立即下载
    表格存储实时数据流Steam的技术揭秘和应用场景 立即下载
    表格存储(TableStore) 立即下载