DataWorks同Region不同云账号间的数据迁移,使用CLONE TABLE时报错提示源表和目标表不在一个集群,这个要怎么改?
使用CLONE TABLE时报错提示源表和目标表不在一个集群failed: Catalog Service Failed, ErrorCode: 105, Error Message: ODPS-0110061: Failed to run ddltask - Clone table failed because: Clone table fail, source table and target table not in same cluster. Please check your cluster replication configurations. Clusters of source table:["AY42A"]. Clusters of target table:["ODPS-CN-HANGZHOU-J"].DebugInfo: fromTable=bbcl_dw01_dev.mid_fin_jd_business_datail_1m_1d_di, toTable=bbcl_dev.mid_fin_jd_business_datail_1m_1d_di. DDLId = 9aeb39849dba8f1281553a2f2f369c36, plan = Type: CLONE_TABLE
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
根据您提供的错误信息和知识库资料,问题的核心是 源表和目标表不在同一个集群,而 CLONE TABLE
命令要求源表和目标表必须位于同一个集群中。以下是解决该问题的详细步骤和建议:
错误信息中明确指出: - 源表的集群为:["AY42A"]
- 目标表的集群为:["ODPS-CN-HANGZHOU-J"]
这表明源表和目标表确实位于不同的集群。您需要确认以下内容: - 源表所属项目和集群:通过 DESC PROJECT <src_project_name>;
查看源项目的集群信息。 - 目标表所属项目和集群:通过 DESC PROJECT <dest_project_name>;
查看目标项目的集群信息。
根据错误提示,Clone table failed because: Clone table fail, source table and target table not in same cluster. Please check your cluster replication configurations.
,您需要确保源表和目标表所在的集群支持跨集群数据复制。
如果无法修改集群复制配置,您可以尝试将目标表迁移到与源表相同的集群。具体操作如下:
在创建目标表时,可以通过 CREATE TABLE
命令显式指定目标表的集群。例如:
CREATE TABLE IF NOT EXISTS <dest_table_name>
LIKE <src_table_name>
[PARTITIONED BY (partition_col1, partition_col2, ...)]
CLUSTERED BY ("AY42A");
如果目标表已经存在,您可以通过以下步骤将其迁移到源表所在的集群: 1. 导出目标表的数据到 OSS 或其他存储介质。 2. 在源表所在集群重新创建目标表。 3. 将导出的数据重新导入到新创建的目标表中。
如果无法调整集群配置或迁移目标表,您可以考虑使用 DataWorks 数据同步 功能来完成数据迁移。以下是具体操作步骤:
CreateTable
和 Select
权限。CLONE TABLE
还是 DataWorks 数据同步,完成后都应执行数据验证,确保数据完整性和准确性。例如:
SELECT * FROM <dest_table_name> LIMIT 10;
要解决 CLONE TABLE
报错提示源表和目标表不在一个集群的问题,您可以: 1. 确认并调整源表和目标表的集群配置。 2. 开启跨集群复制功能。 3. 使用 DataWorks 数据同步作为替代方案。
如果问题仍未解决,建议联系阿里云技术支持,提供详细的错误日志和集群信息以获取进一步帮助。您可以复制页面截图提供更多信息,我可以进一步帮您分析问题原因。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。