AI 助理
备案控制台
开发者社区 云存储 正文

OTS数据导出至ODPS，速度太慢，可以怎么优化？

OTS数据导出至ODPS，速度太慢，可以怎么优化？

展开
收起
真的很搞笑 2023-04-24 23:15:29 325 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • AI研究者手札
    资深技术专家。主攻技术开发，擅长分享、写文、测评。

    批量读取

    使用OTS的BatchGetRow接口进行批量读取，将多条查询请求打包在一个接口请求中，减少了网络IO的开销，可以有效提高查询效率。同时，可以通过调整每次读取的最大行数、每个批次的请求数等参数，找到一个最优的折衷方案。

    2023-04-25 09:38:02
    赞同 展开评论
问答分类：
分布式计算 MaxCompute 表格存储 云原生大数据计算服务 MaxCompute
问答标签：
云原生大数据计算服务 MaxCompute优化 ots云原生大数据计算服务 MaxCompute 大数据开发治理平台 DataWorks优化 表格存储优化 表格存储odps
问答地址：
开发者社区 > 云存储 > 问答
相关问答
大数据计算MaxCompute这种mapjoin构建hash table时间很长，有什么优化方向吗?
95
1
0
DataWorks对于chrome的优化好 其他浏览器的优化不好 是吗？
125
1
0
在表格存储中请问这三个同时使用，怎么优化查询速度呀？
63
1
0
塑云科技如何通过KafKa+OTS+MaxCompute完成物联网系统技术重构？
106
2
0
DataWorks它提示的优化如何做？
58
0
0
大数据计算MaxCompute任务长时间卡在这个 阶段，如何优化？
121
1
0
大数据计算MaxCompute如何根据 logview 优化sql 呀？
81
1
0
DataWorks如何根据 logview 优化sql 呀，有些慢 sql跑了 1-2 个小时 ？
227
14
0
DataWorks中dataX离线同步，内部会分页循环嘛，针对业务表太大的情况，内部有优化机制嘛？
161
1
0
在表格存储中ots支持odps spark进行读写吗？
77
1
0

云存储

阿里云存储基于飞天盘古2.0分布式存储系统，产品多种多样，充分满足用户数据存储和迁移上云需求。

我要提问
收录在圈子:
阿里云存储服务
194039
+ 订阅
阿里云存储基于飞天盘古2.0分布式存储系统，产品包括对象存储OSS、块存储Block Storage、共享文件存储NAS、表格存储、日志存储与分析、归档存储及混合云存储等，充分满足用户数据存储和迁移上云需求，连续三年跻身全球云存储魔力象限四强。

相关文章

  • 别等被黑客敲门才醒悟：大数据如何帮你防住网络攻击？
  • 【万字长文，建议收藏】《高性能ODPS SQL章法》——用古人智慧驾驭大数据战场
  • 买房不是拍脑袋：大数据教你优化房地产投资策略
  • 基于模糊RBF神经网络轨迹跟踪研究（Matlab代码实现）
  • 【升级版本】基于多目标粒子群算法的微电网优化调度【风光、储能、柴油、燃气、电网交互】（Matlab代码实现）

    • 热门讨论

    热门文章

  • 3.31世界备份日：你都在使用哪些备份方式？
  • 如何预览阿里云OSS中存储的图片？
  • OSS如何实现打开图片后不是下载，而是在线预览？
  • 对象存储oss免费存储空间，免费流量和免费访问量是多少
  • The OSS Access Key Id you provided does not...错误
  • https://amp-message.alicdn.com/upload/ 如何存文件到这里
  • 阿里云网盘与相册上次开启了同步盘，但是我还是看不到？
  • 总是提示错误：NoSuchBucket，麻烦哪位大侠解决一下！
  • 关于在钉钉群撤回文件夹，管理员日志无法查询到文件夹下载记录的问题。
  • 阿里云网盘与相册怎么突然上传不了文件夹，直接拖没反应？
    • 展开全部
  • OSS重磅推出OSS Select——使用SQL选取文件的内容
  • 如何将DynamoDB的数据增量迁移到表格存储
  • 深入对比 HBase 与阿里云的表格存储服务
  • 阿里云文件存储SMB协议服务及其申请和使用指南
  • oss php sdk+laravel搭建图片处理静态网站
  • 深度解析阿里云存储
  • 基于TableStore的数据采集分析系统介绍
  • 手把手教你搭建阿里云图床(PicGo+Typora+阿里云OSS)，新手小白一看就会
  • 可用性SLA还不懂？看完这个故事就懂了........
  • 银行卡归属地及开户行查询API查询实战指南
    • 展开全部
    还有其他疑问?
    咨询AI助理