开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks中mongo文档同步到hive 能把多个内嵌文档字段同步到多个hive表吗?

DataWorks中mongo文档同步到hive 能把多个内嵌文档字段同步到多个hive表吗?/读 mongo集合中文档
{
"id": 100000,
"name" : "张三",
"age" : 18,
"address" : [
{
"id": 1,
"phone" : "123456",
"detail" : "南京市"
},
{
"id": 2,
"phone" : "54321",
"detail" : "北京"
}
]
}

//写 hive表
// user.txt
100000,"张三",18
// address.txt
1,"123456","南京市"
2,"54321","北京"这个能搞么?

展开
收起
cuicuicuic 2023-09-06 14:19:23 30 0
1 条回答
写回答
取消 提交回答
  • mongo array,Q1:MongoDB Reader数据类型:arrays、array、combine,写入ODPS预期结果 A1:MongoDB源端数据如下: image.png
    "type": "arrays",写入odps预期结果: image.png
    "type": "array", "splitter": " ,"写入odps预期结果:image.png
    "type": "combine",写入odps预期结果: {"_id":"60588dfe1cde2c1149776095","array_data": [{"iid":"11111","nname":"zzzzsan"},{"iid":"222","nname":"wwwww"}]} ---,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-09-06 15:16:09
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多