游客52lwcashzudhu_个人页

个人头像照片 游客52lwcashzudhu
个人头像照片
0
50
0

个人介绍

暂无个人介绍

擅长的技术

获得更多能力
通用技术能力:

暂时未有相关通用技术能力~

云产品技术能力:

暂时未有相关云产品技术能力~

阿里云技能认证

详细说明
暂无更多信息

2021年12月

正在加载, 请稍后...
暂无更多信息
  • 回答了问题 2021-12-07

    Apache中任务调度时调度的过程有哪几步及对应的任务状态是什么样?

    1、初始过程 --->(对应的任务状态) created
    2、被调度,开始申请资源 ---> scheduled
    3、申请到资源,开始部署 ---> deploying
    4、TE通知JM部署成功 ---> running

    踩0 评论1
  • 回答了问题 2021-12-07

    Apache中Pipelined region based调度策略的好处是什么?

    1、节省调度花费的时间
    2、避免不必要资源的浪费
    3、知道同时运行的作业的资源量,以此进行更深度的优化

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中如果不在对齐过程中阻塞已收到barrier的数据管道,会发生什么?

    本次checkpoint中会包含一些属于下个checkpoint的数据,恢复后由于source会rewind,部分数据会有重复处理,从而变成at-least-once

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中Flink的分布式快照方法什么时候才结束快照?

    需要master节点端的checkpoint coordinator收到所有任务的确认

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中使用异步快照的目标是什么?

    1、尽量减少快照带来的数据处理停顿
    2、支持多个checkpoint同时进行

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中在Flink的分布式快照方法运行时每个节点传到barrier后,接下来做了什么?

    1、Source保存其输入数据的offsets
    2、算子保存其state
    3、事务型Sink节点对已有事务提交pre-commoit

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中Flink分布式场景的状态容错是怎么实现容错恢复呢?

    1、将数据源位置重新设定
    2、每一个算子从检查点恢复状态

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中实现端到端的exactly once的要求是什么?

    1、事务型的sink
    2、可以接受幂等的产出结果

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中Flink提供的At most once的一致性保证是什么意思?

    每条event会对state产生最多一次影响,注意:所有状态会在出错时丢失

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中Flink提供的At least once的一致性保证是什么意思?

    每条event会对state产生最少一次影响(存在重复处理)

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中Flink提供的Exactly once的一致性保证是什么意思?

    每条event会且只会对state产生一次影响,注意:并非端到端的严格一次

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中流计算容错的一致性保证有哪几种机制?

    1、Exactly once(严格一次)
    2、At least once(最少一次)
    3、At most once(最多一次)

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中Chandy-Lamport与Flink之间有什么区别?

    Chandy-Lamport支持强连通图,而Flink面向弱连通图

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中Chandy-Lamport与Flink之间有什么关系?

    Flink采用的是一种裁剪的Chandy-Lamport异步快照算法

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中Chandy-Lamport算法流程中的终止快照的流程是什么?

    1、所有进程都已经收到了marker并记录了本地快照
    2、所有进程都从N-1个input channel 里收到了marker并记录了这些input channel 的状态
    3、快照收集器可以开始收集每个部分的快照并形成全局一致性快照

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中Chandy-Lamport算法流程中的发起快照的流程是什么?

    1、记录本地状态(本地快照)
    2、向output channel发送marker消息
    3、开始记录所有input channel 的消息

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中Chandy-Lamport算法流程分为哪三步?

    1、发起快照
    2、分布式执行快照
    3、终止快照

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中异步全局一致性快照算法的启动前提条件是什么?

    1、消息有序且不重复
    2、消息可靠性可以保障

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中异步全局一致性快照算法的启动要求是什么?

    1、快照过程不影响应用运行
    2、每个进程可以记录自己的本地状态
    3、可以分布式的对记录的状态进行收集
    4、任意进程都可以发起快照

    踩0 评论0
  • 回答了问题 2021-12-07

    Apache中什么会破坏全局一致性?

    1、时钟偏差
    2、Stop-the-world,影响应用运行

    踩0 评论0
正在加载, 请稍后...
滑动查看更多
正在加载, 请稍后...
暂无更多信息