开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink现在支持hive的acid了么?

Flink现在支持hive的acid了么?文档上也不写了

展开
收起
cuicuicuic 2023-09-13 17:12:30 52 0
1 条回答
写回答
取消 提交回答
  • 很抱歉,截至目前的最新版本的 Flink(1.14.0)还不支持直接对 Hive ACID(原子性、一致性、隔离性和持久性)表进行操作。在 Flink 的官方文档中,也没有明确提到对 Hive ACID 的支持。

    目前,Flink 对 Hive 的支持主要集中在读取和写入普通的 Hive 表(非 ACID 表)上。您可以使用 Flink 的 Hive Connector 来连接到 Hive,并读取、写入和操作非 ACID 表的数据。

    如果您需要对 Hive ACID 表进行操作,可以考虑以下几种方案:

    使用 Hive 本身:如果您需要对 Hive ACID 表进行复杂的事务处理,或者使用 Hive ACID 的特性(如乐观并发控制、回滚等),可以直接使用 Hive 的 API、SQL 或脚本来完成相关操作。

    结合外部工具:您可以将 Flink 与其他支持 Hive ACID 的工具结合使用,以实现对 Hive ACID 表的操作。例如,您可以使用 Apache Hudi 或 Delta Lake 等工具来处理 Hive ACID 表,并与 Flink 进行集成。

    需要注意的是,随着 Flink 和 Hive 生态系统的发展,未来可能会引入对 Hive ACID 表的原生支持。因此,建议定期关注 Flink 的更新和官方文档,以获得最新的支持信息。

    2023-09-20 15:57:56
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Hive Bucketing in Apache Spark 立即下载
    spark替代HIVE实现ETL作业 立即下载
    2019大数据技术公开课第五季—Hive迁移到MaxCompute最佳实践 立即下载