AI 助理
备案控制台
开发者社区 数据库 正文

DMS任务编排跨库Spark SQL节点是否支持将数据导出到OSS单个文件？

DMS任务编排跨库Spark SQL节点是否支持将数据导出到OSS单个文件？

展开
收起
wenti 2023-02-06 13:24:01 427 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

2 条回答
写回答
取消 提交回答
  • 665661

    您好，当前不支持。已排期支持该特性。——该回答整理自钉群“阿里云DMS数据管理用户交流群”

    2023-02-06 20:00:33
    赞同 展开评论
  • 离原

    https://www.alibabacloud.com/help/zh/data-management-service/latest/use-cross-database-spark-sql-nodes-to-synchronize-data-to-oss-buckets 可以看一下这个,大致逻辑是在任务编排中新增跨库spark任务流,然后引用oss,最后写好sql发布任务流即可

    2023-02-06 13:36:54
    赞同 展开评论
问答分类：
SQL 分布式计算 对象存储 Spark 数据库管理 对象存储 数据管理
问答标签：
apache spark任务 SQL任务 SQL spark 数据管理文件 spark对象存储
问答地址：
开发者社区 > 数据库 > 问答
相关问答
数据管理DMS
DMS spark sql没办法预览结果（像跑sql取数一样）有没有好的解决办法呢？
82
1
0
云数据仓库ADB集群现在没有什么任务 但是cpu一直占满 有几个bad sql但是10分钟前就结束了
46
0
0
我如何将一个oss 挂载到emr集群。 以便通过hive sql 查询oss 里的日志数据？
64
0
0
DMS数据归档内置存储和oss实际使用费用是差不多的是吗？
54
1
0
DMS归档至oss后，是否还会创建索引？
54
2
0
oss查询sql，按time范围查询的方法是什么？
79
1
0
在大数据计算MaxCompute我想给我的odps sql任务少分配点计算资源，有什么办法吗？
42
1
0
大数据计算MaxCompute有没有只针对同一个任务里一段SQL生效的？
34
1
0
OSS是否有提供文件的在线处理能力？
1065
3
0
dataphin外部表读取OSS的CSV文件，执行完，书记是空的，没有读到csv文件。
886
0
0

数据库

数据库领域前沿技术分享与交流

我要提问
收录在圈子:
阿里云数据库
279462
+ 订阅
让用户数据永远在线，让数据无缝的自由流动

相关文章

  • 【YashanDB 知识库】Hive 命令工具 insert 崖山数据库报错
  • 【YashanDB 知识库】解决 mybatis 的 mapper 文件 sql 语句结尾加分号";"报错
  • 【YashanDB 知识库】导入数据时报错：YAS-00008 type convert error：literal does not match format string
  • 【YashanDB 知识库】并发 update 报错 YAS-02208 lock conflict in consistent write
  • 【YashanDB 知识库】YAS-04115 "SELECT" expected but missing

    • 热门讨论

    热门文章

  • 跟着“小枫社长”用Redis搭建游戏排行榜
  • 你印象最深的一道SQL题目是什么？
  • PolarDB可以在本地部署吗 ？
  • RDS，DRDS，REDIS，ADS，ODPS之间的联系和区别是什么？
  • redis查看某个前缀键值数量
  • 阿里云数据库Clickhouse对单表有大小限制吗？
  • PolarDB这个数据库免费试用多久？ 后续怎么收费？
  • 我插入几千条数据到ADB，就会报这个错误Buffer length is less then exp
  • 怎么申请啊
  • 报错信息：ERROR: workfile per segment size limit exceed
    • 展开全部
  • 什么场景应该用 MongoDB ？
  • PostgreSQL upsert功能(insert on conflict do)的用法
  • PostgreSQL 如何潇洒的处理每天上百TB的数据增量
  • Jedis常见异常汇总
  • 时序数据库分析 - TimescaleDB时序数据库介绍
  • 案例篇-HBase 基本知识介绍及典型案例分析
  • Apache Cassandra 简介
  • 分布式(hadoop)内核研发面试指南
  • MongoDB中使用的SCRAM-SHA1认证机制
  • MongoDB Wiredtiger存储引擎实现原理
    • 展开全部
    还有其他疑问?
    咨询AI助理