开发者社区> 问答> 正文

在实时入湖阶段,Flink如何与离线团队的账号体系打通?

在实时入湖阶段,Flink如何与离线团队的账号体系打通?

展开
收起
萝卜丝丸子 2024-08-07 19:10:48 12 0
1 条回答
写回答
取消 提交回答
  • 在实时入湖阶段,Flink需要访问HDFS和Hive Metastore,因此必须与离线团队的账号体系打通。我们通过修改Iceberg创建Hadoop Filesystem实例的代码,增加了账号代理机制,实现了使用自定义账号向Iceberg写入数据。同时,我们扩展了HiveMetaStoreClient,增加了代理机制来打通对Hive Metastore的访问。

    2024-08-07 19:56:18
    赞同 5 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载