Doris不支持Routine Load导入json嵌套数组吗?

Doris不支持Routine Load导入json嵌套数组吗? 

展开
收起
wenti 2023-02-14 14:04:06 534 分享 版权
1 条回答
写回答
取消 提交回答
  • Doris 支持导入嵌套数组格式的 JSON 数据,但存在一些限制:

    嵌套数组的深度不能超过 2 层。
    嵌套数组中的元素必须是相同类型的数据。
    嵌套数组中的元素不能包含 NULL 值。
    嵌套数组中的元素不能包含其他嵌套数组或对象。
    如果你的 JSON 数据不满足这些限制,则 Doris 可能会无法正确导入数据。

    对于嵌套数组,Doris 会将其展开为单独的列,列名使用点号分隔。例如,对于以下 JSON 数据:

    {
    "name": "John Doe",
    "addresses": [
    {
    "street": "123 Main Street",
    "city": "Anytown",
    "state": "CA"
    },
    {
    "street": "456 Elm Street",
    "city": "Anytown",
    "state": "CA"
    }
    ]
    }
    Doris 会将其展开为以下列:

    name
    addresses.0.street
    addresses.0.city
    addresses.0.state
    addresses.1.street
    addresses.1.city
    addresses.1.state
    注意:Doris 目前不支持将嵌套数组导入到复合数据类型(如 Map 或 Array)中。

    如果你需要导入嵌套数组数据,并且不满足 Doris 的限制,你可以考虑以下方法:

    将嵌套数组展平成单独的记录。
    使用第三方工具或脚本将嵌套数组转换为 Doris 支持的格式。
    联系 Doris 团队以获取支持。

    2024-02-27 16:10:06
    赞同 展开评论

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

收录在圈子:
实时计算 Flink 版(Alibaba Cloud Realtime Compute for Apache Flink,Powered by Ververica)是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统,由 Apache Flink 创始团队官方出品,拥有全球统一商业化品牌,完全兼容开源 Flink API,提供丰富的企业级增值功能。
还有其他疑问?
咨询AI助理