开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

大佬们,我的业务流处理前,会先连接一个广播流加载基础配置,但现在问题是,基础配置还没加载完,业务流就

大佬们,我的业务流处理前,会先连接一个广播流加载基础配置,但现在问题是,基础配置还没加载完,业务流就开始处理了,有什么办法吗?

展开
收起
游客3oewgrzrf6o5c 2022-07-22 12:08:41 267 0
1 条回答
写回答
取消 提交回答
  • 全栈JAVA领域创作者

    可以使用Flink的延迟任务功能来实现基础配置加载完再处理业务流的需求。具体步骤如下:

    创建延迟任务:使用Flink的Java API或命令行工具在业务流任务之前创建一个延迟任务。延迟任务可以使用TableFunction接口来实现。
    在延迟任务中加载基础配置:在延迟任务中使用TableFunction接口加载基础配置,并将配置存储在Flink集群中。
    在业务流任务中使用延迟任务:在业务流任务中使用延迟任务提供的函数来访问基础配置。
    需要注意的是,延迟任务需要在Flink集群中运行,因此需要考虑任务的并发度和任务的运行时消耗。此外,如果基础配置的加载过程比较耗时,需要考虑优化基础配置的加载方式。

    2023-07-24 08:04:28
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
“静态调用链路发现”应用场景分析及实践探索 立即下载
“静态调用链路发现“在APM中的应用场景分析及实践探索 立即下载
Flink中的两类新型状态存储 立即下载