采云间DPC迁移方案实施计划

简介: 迁移计划概述: 第一阶段:前期沟通&准备 1、 请先熟悉Dataworks的相关操作,比如节点的新增、执行、调度运维等相关操作; 2、 本次迁移只把用户在采云间里面的任务迁移到DataWorks里面,需要用户提前确认采云间用到的odps项目在DataWorks中是否已经创建且可用;如果用户
迁移计划概述:

第一阶段:前期沟通&准备
1、 请先熟悉Dataworks的相关操作,比如节点的新增、执行、调度运维等相关操作;
2、 本次迁移只把用户在采云间里面的任务迁移到DataWorks里面,需要用户提前确认采云间用到的odps项目在DataWorks中是否已经创建且可用;如果用户在采云间有多个odps项目,且用这在odps项目上运行的节点存在依赖关系,需要确保这些odps项目是在一个租户空间中
3、 第二个DataWorks项目里面已经存在节点,需要把所有的节点备份一次(这个操作我们会帮忙处理);
4、 确定具体的操作时间,这个操作时间内用户不能有任何的增、删、改动作,操作完成之后的所有增、删、改需要自己去DataWorks同步,不会再有增量的迁移;

第二阶段:迁移方案
迁移时间计划:
【迁移前确定迁移时间】采云间迁移,迁移完成后会把根节点设置成暂停
【迁移完后提供一个星期的时间让用户验证】用户确认迁移效果,验证数据(建议用户在Base上通过补数据比对几天之前的数据来确认是否一致,然后随机采样的方式来验证)
效果确认完成之后通知到我们,我们这边会把所有采云间上的根节点暂停(迁移完成后预留1个月之后下线、删除)
DataWorks上面根节点需要用户设置成启动调度,提交到调度;
迁移内容:
IDE迁移
资源、函数会迁移到IDE中
采云间IDE中的file迁移至DataWorks的IDE脚本文件
已发布节点迁移至DataWorks的工作流节点 
不划分工作流Flow,按照节点关系一对一迁移,会根据设置的project把节点迁移到对应的project中;
调度迁移
-   任务类型:Virtual、ODPS SQL、CDP同步
数据源迁移
-  根据同步任务设置的链接方式生成数据源

验证注意事项:
鉴于同步任务比较多,数据导入和回流任务的验证要注意不能影响生产库。
生产验证时间为一周,拖的越久影响越大,最好在一周内完成系统割接。
 
第三阶段:验证
迁移后的验证分为2步:
迁移团队进行迁移后的告知客户;
客户介入验收工作,验收周期1周,请客户务必在1周内内完成验收工作(否则新增数据可能会导致问题);

采云间支持群钉钉群(钉钉群号11766922)

相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
目录
相关文章
|
2月前
|
人工智能 弹性计算 数据可视化
【零基础入门】阿里云OpenClaw一键部署攻略,新手小白也能轻松上手!
OpenClaw(“小龙虾”)是一款开源AI智能体,不仅能聊天,更能自动处理文件、运行代码、收发邮件、执行复杂工作流。阿里云官方提供一键部署方案,可视化操作,10分钟即可拥有专属AI数字员工!
710 10
|
2月前
|
人工智能 自然语言处理 JavaScript
5 分钟上手!阿里云 OpenClaw 一键部署,附免费 Token 获取
阿里云OpenClaw是开源AI代理平台,支持自然语言指令驱动的自动化任务(如文件处理、脚本执行),真正实现“能做会想”的数字员工。5分钟一键部署,免配置、免代码;新用户享100万免费Tokens,零成本上手,新手友好!
1389 2
|
2月前
|
人工智能 JavaScript 机器人
AI龙虾OpenClaw完整部署实操手册:云端/本地部署+钉钉/飞书/微信对接+API配置+问题排查
OpenClaw(曾用名Clawdbot、Moltbot)作为开源AI代理工具,核心价值在于能够24小时不间断运行,通过对接各类通讯应用,实现智能交互、任务执行与信息同步。其部署方式分为云端与本地两类,云端部署凭借安全、省电、无需持续占用本地设备的优势,成为多数用户的首选;本地部署则适合注重数据隐私、需离线使用的场景。本文将详细拆解2026年OpenClaw的全平台部署流程,包括阿里云轻量应用服务器部署、本地MacOS/Linux/Windows11部署,详解阿里云百炼Coding Plan免费大模型API配置方法,以及钉钉、飞书、微信、QQ等10+通讯工具的集成步骤,并整理常见问题解答,帮助
1272 1
|
7月前
|
人工智能 数据可视化 数据库连接
保姆级教程 | 0代码,用n8n一键打通微信、钉钉与数据库,效率提升500%
n8n是一款开源可视化自动化工具,无需编程即可连接微信、钉钉、数据库等400+服务。通过拖拽节点搭建工作流,实现数据同步、消息通知等自动化,效率提升500%。支持免费私有部署,安全可控,零成本开启高效办公新体验。
|
JavaScript
react+typescript通过window.xxx挂载属性报错的解决方案
react+typescript通过window.xxx挂载属性报错的解决方案
764 0
|
存储 NoSQL JavaScript
mongodb时间处理,时区处理
mongodb时间处理,时区处理
4463 2
|
传感器 机器学习/深度学习 自动驾驶
未来出行的智能革命:自动驾驶技术的进展与挑战
自动驾驶技术正逐步改变我们的交通方式,从辅助驾驶到完全自动化,每一次技术跃迁都带来了新的可能。本文将探讨自动驾驶的发展历程、关键技术里程碑及其面临的主要挑战和未来趋势。
956 4
|
算法 Java 数据处理
Java中MD5加密算法的实现
Java中MD5加密算法的实现
|
数据库 Python
【Python】已解决:Pandas requires version ‘1.4.0’ or newer of ‘sqlalchemy’ (version ‘0.7.10’ currently ins
【Python】已解决:Pandas requires version ‘1.4.0’ or newer of ‘sqlalchemy’ (version ‘0.7.10’ currently ins
914 0

热门文章

最新文章