数据管理 DMS数据导入操作流程有哪些

简介: 数据管理DMS提供数据导入功能,支持大批量数据快速导入至数据库,节省人力物力成本。

云栖号快速入门:【点击查看更多云产品快速入门】
不知道怎么入门?这里分分钟解决新手入门等基础问题,可快速完成产品配置操作!

数据管理DMS提供数据导入功能,支持大批量数据快速导入至数据库,节省人力物力成本。

应用场景

  • 应用数据初始化
  • 应急平台数据导入(快速回滚数据)

支持的文件类型

  • TXT格式(目前文件大小限制为5GB。)
  • SQL脚本(目前文件大小限制为5GB。安全协同模式下,默认仅放开INSERT和REPLACE类型。如需调整,可以由DBA或管理员角色在安- - 全规则 > SQL变更 > 批量数据导入中修改。)
  • CSV格式(必须以逗号为分隔符,并且第一行必须为列名。)

支持的数据库引擎

  • MySQL
  • OceanBase
  • PolarDB-X(原DRDS)

注意事项

  • 如果只是少量SQL变更,为保证变更的稳定性,建议使用普通数据变更或无锁数据变更工单。详情请参见数据变更无锁数据变更
  • 在执行批量数据导入期间不会自动切换到无锁结构变更(即使实例开启了无锁结构变更优先)。
  • 为了避免执行期间数据库性能受到影响,建议使用SQL性能较好的语句,如INSERT、使用主键索引的UPDATE和DELETE。
  • 在安全协同模式下,默认的安全规则仅放开INSERT语句,如果需要执行其他SQL类型的语句,需要DBA或管理员角色调整安全规则。

操作流程

1.登录数据管理DMS
2.在页面顶部的导航栏中,单击数据方案 > 数据导入
image
3.在数据导入页签中,根据下表填写工单申请。
image
54994187_037F_4bff_BE17_4FFA7038D07F

4.单击提交申请,等待系统预检查通过,如果预检查失败,请根据提示检查失败原因后重新提交申请。

系统会预检查用户上传的SQL,如果是CSV文件,会生成相应的insert语句。

5.单击审批流程中的提交审批,等待审批通过。
image

6.单击执行流程中的执行变更
7.在弹出的任务设置对话框中,可以选择是否立即执行,如果不想立即执行,可以关闭是否立即执行开关,并选择一个期望开始执行时间,系统会在该时间自动执行。单击确定执行

执行期间,系统流式读取解析好的SQL,分批执行到数据库(每批大小1M)。

本文来自 阿里云文档中心 数据管理 DMS 数据导入

【云栖号在线课堂】每天都有产品技术专家分享!
课程地址:https://yqh.aliyun.com/zhibo

立即加入社群,与专家面对面,及时了解课程最新动态!
【云栖号在线课堂 社群】https://c.tb.cn/F3.Z8gvnK

相关实践学习
如何快速连接云数据库RDS MySQL
本场景介绍如何通过阿里云数据管理服务DMS快速连接云数据库RDS MySQL,然后进行数据表的CRUD操作。
目录
相关文章
|
7月前
|
数据采集 存储 安全
数据治理≠数据管理!90%的企业都搞错了重点!
在数字化转型中,数据不一致、质量差、安全隐患等问题困扰企业。许多组织跳过基础的数据管理,直接进行数据治理,导致方案难以落地。数据管理涵盖数据生命周期中的采集、存储、处理等关键环节,决定了数据是否可用、可靠。本文详解数据管理的四大核心模块——数据质量、元数据、主数据与数据安全,并提供构建数据管理体系的四个阶段:评估现状、确定优先级、建立基础能力与持续改进,助力企业夯实数据基础,推动治理落地。
|
11月前
|
存储 数据管理 数据格式
数据治理 vs. 数据管理:别再傻傻分不清!
数据治理 vs. 数据管理:别再傻傻分不清!
546 10
|
7月前
|
数据采集 存储 SQL
数据管理四部曲:元数据管理、数据整合、数据治理、数据质量管控
老张带你搞定企业数据管理难题!数据找不到、看不懂、用不好?关键在于打好元数据管理、数据整合、数据治理和数据质量管控四大基础。四部曲环环相扣,助你打通数据孤岛,提升数据价值,实现精准决策与业务增长。
数据管理四部曲:元数据管理、数据整合、数据治理、数据质量管控
|
人工智能 关系型数据库 分布式数据库
拥抱Data+AI|“全球第一”雅迪如何实现智能营销?DMS+PolarDB注入数据新活力
针对雅迪“云销通App”的需求与痛点,本文将介绍阿里云瑶池数据库DMS+PolarDB for AI提供的一站式Data+AI解决方案,助力销售人员高效用数,全面提升销售管理效率。
|
9月前
|
数据采集 人工智能 监控
企业数据来源杂、质量差,如何通过主数据管理解决?如何确保数据可信、一致和可用?
本文三桥君系统介绍了主数据管理(MDM)在企业数字化转型中的关键作用。产品专家三桥君从数据清洗、治理、处理到流转四个维度,详细阐述了如何通过标准化流程将数据转化为企业核心资产。重点包括:数据清洗的方法与工具应用;数据治理的组织保障与制度设计;数据处理的三大核心动作;以及数据流转的三种模式与安全控制。专家三桥君强调主数据管理能够推动企业从"经验决策"转向"数据驱动",并提出构建统一数据服务网关、"数据血缘图谱"等实战建议,为企业数字化转型提供系统化解决方案。
330 0
|
物联网 数据管理 Apache
拥抱IoT浪潮,Apache IoTDB如何成为你的智能数据守护者?解锁物联网新纪元的数据管理秘籍!
【8月更文挑战第22天】随着物联网技术的发展,数据量激增对数据库提出新挑战。Apache IoTDB凭借其面向时间序列数据的设计,在IoT领域脱颖而出。相较于传统数据库,IoTDB采用树形数据模型高效管理实时数据,具备轻量级结构与高并发能力,并集成Hadoop/Spark支持复杂分析。在智能城市等场景下,IoTDB能处理如交通流量等数据,为决策提供支持。IoTDB还提供InfluxDB协议适配器简化迁移过程,并支持细致的权限管理确保数据安全。综上所述,IoTDB在IoT数据管理中展现出巨大潜力与竞争力。
604 1
|
人工智能 Cloud Native 多模数据库
实力见证!数据管理服务DMS、云原生多模数据库Lindorm荣获“2024技术卓越奖”
实力见证!数据管理服务DMS、云原生多模数据库Lindorm荣获“2024技术卓越奖”
335 1
|
数据管理 关系型数据库 MySQL
数据管理服务DMS支持MySQL数据库的无锁结构变更
本文介绍了使用Sysbench准备2000万数据并进行全表字段更新的操作。通过DMS的无锁变更功能,可在不锁定表的情况下完成结构修改,避免了传统方法中可能产生的锁等待问题。具体步骤包括:准备数据、提交审批、执行变更及检查表结构,确保变更过程高效且不影响业务运行。
1576 2
|
数据采集 人工智能 数据管理
数据管理进化论:DMS助力企业实现智能Data Mesh
Gartner分析师认为Data Mesh对企业提升数据价值交付效率具有重要意义,阿里云数据管理服务DMS给出了对于Data Mesh的核心思考,包括企业什么时候应该考虑实施Data Mesh,如何解决业务团队素养和意愿问题。结合这些思考,DMS提出了企业可行的落地策略,即企业应以数据价值不断提升为导向,基于元数据驱动的Fabric、AI等能力实现智能Data Mesh,最终形成分布式和集中化的动态平衡,以达到企业数据驱动的最佳状态。
2107 6
数据管理进化论:DMS助力企业实现智能Data Mesh

热门文章

最新文章