mongoDB到odps样例:
写在前面举例:mongoDB的authDb库为admin库,那么业务同步其他库数据该怎么办?
请在数据源配置中库名填写业务库名,确保username权限正常,若数据源连通性报错auth failed可先忽略。
需要另在同步任务json配置中添加"adthDb":"admin"参数。
样例如下:
{
"type": "job",
"version": "2.0",
"steps": [
{
"stepType": "mongodb",
"parameter": {
"datasource": "wpw_test_mongo",
"authDb":"admin",
"envType": 0,
"column": [
{
"name": "col1",
"type": "string"
},
{
"name": "col2",
"type": "array",
"splitter": " "
},
{
"name": "col3",
"type": "string"
},
{
"name": "col4",
"type": "int"
},
{
"name": "col5",
"type": "bool"
},
{
"name": "col6",
"type": "double"
}
],
"collectionName": "wpw_test_collec"
},
"name": "Reader",
"category": "reader"
},
{
"stepType": "odps",
"parameter": {
"partition": "pt=unknown",
"truncate": true,
"datasource": "odps_first",
"envType": 0,
"column": [
"col1",
"col2",
"col3",
"col4",
"col5",
"col6"
],
"emptyAsNull": false,
"tableComment": "*",
"table": "wpw_test"
},
"name": "Writer",
"category": "writer"
}
],
"setting": {
"executeMode": null,
"errorLimit": {
"record": ""
},
"speed": {
"concurrent": 2,
"throttle": false
}
},
"order": {
"hops": [
{
"from": "Reader",
"to": "Writer"
}
]
}
},此回答整理自钉群“DataWorks交流群(答疑@机器人)”
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。