flink写hive表有什么好的建议?-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

flink写hive表有什么好的建议?

赵慧 2019-02-14 14:16:18 3928

转自钉钉群21789141:flink 写 hive 表 有什么好的建议?

SQL HIVE 流计算
分享到
取消 提交回答
全部回答(1)
  • 赵慧
    2019-07-17 23:28:08

    乔燃:目前还没有内置的flink 写hive表实现,需要自己开发。

    1. 实现一个 Output format, HiveTableOutputFormat, 与 CsvOutputFormat 类似,需要确认hive 表的outputformat class和相关的序列化的类
    2. 写入的时候如果使用dataStream可以用 boundedStream.writeUsingOutputFormat(HiveTableOutputFormat)这样来实现

    大概的思路是这样的

    0 0
大数据
使用钉钉扫一扫加入圈子
+ 订阅

大数据计算实践乐园,近距离学习前沿技术

推荐文章
相似问题
推荐课程