问题一:Flink自动调优 是重启调整资源?
Flink自动调优 是重启调整资源? 昨天重启了下延迟了好久
参考答案:
智能调优:系统将在资源使用率比较低时,自动降低资源配置,在资源使用率提高到一定阈值时,再自动提高资源配置。这是配置调优文档:https://help.aliyun.com/zh/flink/user-guide/configure-autopilot-and-scheduled-tuning?spm=5176.28426678.J_HeJR_wZokYt378dwP-lLl.1.30f35181b8YT2J&scm=20140722.S_help@@%E6%96%87%E6%A1%A3@@173651.S_BB1@bl+RQW@ag0+BB2@ag0+os0.ID_173651-RL_%E8%87%AA%E5%8A%A8%E9%85%8D%E7%BD%AE%E8%B0%83%E4%BC%98-LOC_search~UND~helpdoc~UND~item-OR_ser-V_3-P0_0
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/610246
问题二:Flink这个问题怎么解决?
Flink这个问题怎么解决?binlog是mysql数据库实例级别的吧,有两个表,表1和表2,表1和表2的数据都会在一个binlog文件里,我flink-sql配置的是监听表1,但是由于表2进行了大量的删除数据,影响到了表1的任务,任务延迟很大。并且任务是无反压和负载的,只是source端延迟巨大。
参考答案:
目前Flink CDC不支持跳过指定的表,因此无法避免影响表1的这种情况。
一种可能的解决方法是在MySQL侧进行过滤,例如创建一个只包含表1相关事件的binlog流
另一种可能的解决方案是尝试优化您的Flink任务,比如增加并行度或者使用更强大的硬件资源来提高处理能力,从而减少任务延迟。
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/610245
问题三:在Flink有什么办法加速binlog的消费呢?
如果binlog中无关的日志过多,影响监听此实例binlog的任务数据延迟过大,在Flink有什么办法加速binlog的消费呢?
参考答案:
可以试一下存入binlog的时候过滤掉不需要的日志,或者加大并行度,提高读取速度 。读取的时候,可以加一个where条件,筛选掉除delete外的数据。
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/610243
问题四:Flink告警界面可以查询到是谁操作的吗?
Flink告警界面可以查询到是谁操作的吗?
参考答案:
根据文档来看,并不能查看是哪个用户创建了告警规则
https://help.aliyun.com/zh/flink/user-guide/configure-alert-rules?spm=a2c4g.11186623.0.i3
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/610241
问题五:在Flink这个demo本地能运行么?
在Flink这个demo本地能运行么?
参考答案:
有些类做了加密,本地运行不起来,需要到 VVP 上运行哈。
关于本问题的更多回答可点击进行查看: