AI 助理
备案控制台
开发者社区 大数据与机器学习 开源大数据平台 E-MapReduce 正文

flink StreamingFileSink parquet格式 写OSS报这个json字段的错误

同样的方式写hdfs是没有问题的image.png

展开
收起
雪哥哥 2022-10-17 00:37:38 892 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

2 条回答
写回答
取消 提交回答
  • 眼里的年华

    不太明白

    2023-07-26 17:28:01
    赞同 展开评论
  • 毛毛虫雨

    没遇到过，报错信息更完整些看看（此答案整理自JindoData 用户交流群）

    2022-10-17 13:42:18
    赞同 展开评论
问答分类：
JSON 对象存储 流计算 数据格式 对象存储 开源大数据平台 E-MapReduce 实时计算 Flink版
问答标签：
JSON格式 flink对象存储 实时计算 Flink版oss oss JSON 对象存储json
问答地址：
开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 问答
相关问答
dataworks可以读取oss中的文件中的多行json吗？
107
1
0
DataWorks中oss存的文件是.json尾缀的文件。 脚本模式如何使用？
104
1
0
在Flink 想拿到红框里面的数据，但是这个Debezium格式好像不支持 怎么解决？
69
1
0
在Flink CDC中生成的canal 格式的json里面怎么让添加库名和表名信息？
81
0
0
Flink的MYSQL 这个参数为啥不支持 yyyy-mm-dd hhmmss.sss格式啊？
92
1
0
大数据计算MaxCompute可以读 snappy压缩的json文件吗？文件在oss上
73
1
0
在Flink CDC中MYSQL cdc ds代码开发 通过正则的方式获取数据，这个正则格式怎么写？
82
0
0
DataWorks把oss的 多层目录下的json数据映射 oss外部表， 不知道能做成吗 ？
127
9
0
复杂类型数据（json，vector）存储方式是什么？
989
1
0
想问问大家clickhouse 怎么查嵌套了多重的json数据 ？
1086
0
0
大数据与机器学习

开源大数据平台 E-MapReduce

阿里云EMR是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎，计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

我要提问
收录在圈子:
阿里云E-MapReduce
2323
+ 订阅

相关文章

  • 京东商品评论接口技术实现：从接口分析到数据挖掘全方案
  • 用苏宁易购 API 实现苏宁易购店铺商品售后服务满意度提升
  • 存储过程与函数：MySQL中的程序化编程
  • MongoDB常用命令
  • MongoDB常用命令

    • 热门讨论

    热门文章

  • Mem usage has exceed the limit of BE - com.mysql.j
  • 核桃编程是什么？
  • Apache Spark 3.0 是什么？
  • NeuSoft是什么？
  • 升级完，现有spark起不来了
  • hdfs 文件块过多（1亿）每个datanode 占3000万块(分16G内),某时刻内存陡然增加？
  • 大佬，可以请教下，有没有遇到 com.aliyun.oss
  • 请教个问题，我想部署 1FE 节点 + 3BE节点的 StarRocks 集群， 在 EMR 控制台
  • 请问starrocks用smt工具，执行./starrocks-migrate-tool,自动构建f
  • 阿里云E-MapReduce中flinkui在哪看，入口是哪？
    • 展开全部
  • JindoFS: 云上大数据的高性能数据湖存储方案
  • JindoFS概述：云原生的大数据计算存储分离方案
  • 5W1H(六何分析法)全景洞察大数据
  • 在 Apache Spark 中利用 HyperLogLog 函数实现高级分析
  • Apache Spark 3.0 将内置支持 GPU 调度
  • Flume NG 简介及配置实战
  • EMR Spark Relational Cache的执行计划重写
  • 开源生态的新发展：Apache Spark 3.0、Koala和Delta Lake
  • HBase写性能优化
  • HBase ThriftServer Kerberos认证
    • 展开全部
    还有其他疑问?
    咨询AI助理