开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

flink sql怎么持久化?

flink sql怎么持久化?

展开
收起
游客3oewgrzrf6o5c 2022-07-18 16:51:26 447 0
1 条回答
写回答
取消 提交回答
  • 十分耕耘,一定会有一分收获!

    楼主你好,阿里云 Flink SQL 的持久化主要通过以下两种方式实现:

    1. 使用外部存储系统持久化数据:可以将结果写入到外部存储系统如 HDFS、OSS、MySQL 等,这样可以保证数据即使 Flink 集群挂掉,也能够恢复数据。

    2. 使用 Flink 的 Checkpoint 机制:可将 Flink 运行时的状态保存到分布式文件系统中,以实现容错和恢复功能。在 Flink 中,Checkpoint 是指将任务执行的状态保存到分布式存储系统中,以保证任务出现异常时能够快速恢复。

    一般情况下,建议将 Flink SQL 的结果写入到外部存储系统中,这样既可以保证数据的持久化,也可以降低数据的存储成本和查询延迟。

    2023-08-02 08:54:35
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    SQL Server 2017 立即下载
    GeoMesa on Spark SQL 立即下载
    原生SQL on Hadoop引擎- Apache HAWQ 2.x最新技术解密malili 立即下载