泊浮目
泊浮目_个人页
泊浮目
文章
23
问答
0
视频
0
个人介绍
暂无个人介绍
擅长的技术
- Java
- Kotlin
- 云计算
- 大数据
- Rust
-
发表了文章 2023-12-30
谈谈代码：降低复杂度，从放弃三层架构到DDD入门
最近我发现团队某项目的复杂度越来越高（典型的三层架构），具体表现为： - 代码可读性较差：各个服务之间调用复杂，流程不清晰 - 修改某服务业务代码导致大量无关服务的测试用例失败，单个功能开发者很难迅速定位相关问题 - 测试用例特别难编写，需要mock大量数据来拉起整块服务
-
发表了文章 2023-12-27
读Flink源码谈设计：有效管理内存之道
在最初接触到Flink时，是来自于业界里一些头部玩家的分享——大家会用其来处理海量数据。在这种场景下，`如何避免JVM GC带来StopTheWorld带来的副作用`这样的问题一直盘绕在我心头。直到用了Flink以后，阅读了相关的源码（以1.14.0为基准），终于有了一些答案。在这篇文章里也是会分享给大家。
-
发表了文章 2023-12-27
读Flink源码谈设计：流批一体的实现与现状
在Dataflow相关的论文发表前，大家都往往认为需要两套API来实现流计算和批计算，典型的实现便是Lambda架构。
-
发表了文章 2023-12-27
读Flink源码谈设计：Exactly Once
将Flink应用至生产已有一段时间，刚上生产的时候有幸排查过因数据倾斜引起的Checkpoint超时问题——当时简单的了解了相关机制，最近正好在读Flink源码，不如趁这个机会搞清楚。 在这里，我们首先要搞清楚两种Exactly-Once的区别： - Exactly Once：在计算引擎内部，数据不丢失不重复。本质是通过Flink开启检查点进行Barrier对齐，即可做到。 - End to End Exactly Once：这意味着从数据读取、引擎处理到写入外部存储的整个过程中，数据都是不丢失不重复的。这要求数据源可重放，写入端支持事务的恢复和回滚或幂等。
-
发表了文章 2023-12-25
深入浅出Zookeeper源码（六）：客户端的请求在服务器中经历了什么
当我们向zk发出一个数据更新请求时，这个请求的处理流程是什么样的？zk又是使用了什么共识算法来保证一致性呢？带着这些问题，我们进入今天的正文。
-
发表了文章 2023-12-25
深入浅出Zookeeper源码（四）：Watch实现剖析
用过zookeeper的同学都知道watch是一个非常好用的机制，今天我们就来看看它的实现原理。 在正文开始前，我们先来简单回忆一下watch是什么？ zk提供了分布式数据的发布/订阅功能——即典型的发布订阅模型，其定义了一种一对多的订阅关系，能够让多个订阅者同时监听某个主题对象，当这个主题对象自身状态变化时，则会通知所有订阅者。具体来说，则是zk允许一个客户端向服务端注册一个watch监听，当服务端的一些指定事件触发了这个watch，那么就会向该客户端发送事件通知。
-
发表了文章 2023-12-25
深入浅出Zookeeper源码（三）：会话管理
我们知道zookeeper是一个分布式协同系统。在一个大型的分布式系统中，必然会有大量的client来连接zookeeper。那么zookeeper是如何管理这些session的生命周期呢？带着这个问题，我们进入今天的正文。
-
发表了文章 2023-12-25
深入浅出Zookeeper源码（七）：Leader选举
对于一个分布式集群来说，保证数据写入一致性最简单的方式就是依靠一个节点来调度和管理其他节点。在分布式系统中我们一般称其为Leader。
-
发表了文章 2023-12-30
谈谈代码：DDD从入门到完全入门
之前的DDD文章——谈谈代码：降低复杂度，从放弃三层架构到DDD入门，通篇下来像 是简单的讲了一些概念，然后快速的实战一下——很多同学反馈感觉就是入门了，但没有完全入门，因此我们再加一篇。
-
发表了文章 2023-12-27
读Flink源码谈设计：图的抽象与分层
前阵子组里的小伙伴问我“为什么Flink从我们的代码到真正可执行的状态，要经过这么多个graph转换？这样做有什么好处嘛？”我早期看到这里的设计时的确有过相同的疑惑，当时由于手里还在看别的东西，查阅过一些资料后就翻页了。如今又碰到了这样的问题，不妨就在这篇文章中好好搞清楚。
-
发表了文章 2023-12-27
读Flink源码谈设计：Metric
前阵子笔者涉及了些许监控相关的开发工作，在开发过程中也碰到过些许问题，便翻读了Flink相关部分的代码，在读代码的过程中发现了一些好的设计，因此也是写成文章整理上来。
-
发表了文章 2023-12-25
深入浅出Zookeeper源码（六）：客户端的请求在服务器中经历了什么
当我们向zk发出一个数据更新请求时，这个请求的处理流程是什么样的？zk又是使用了什么共识算法来保证一致性呢？带着这些问题，我们进入今天的正文。
-
发表了文章 2023-12-25
深入浅出Zookeeper源码（五）：BadVersionException到底是怎么一回事
最近在开发时偶尔会观测到zk报出`BadVersionException`，后在搜索引起上得知了是乐观锁相关的问题，很快就解决了问题。不过学而不思则罔：无论是单体应用还是分布式系统，在运行过程中总要有一种**机制**来保证数据排他性。接下来，我们就来看看zk是如何实现这种**机制**的。
暂无更多信息
-
发表了文章
2024-05-15
技巧：ZStack如何做Integration Test
-
发表了文章
2024-05-15
技巧：遵循Clean Architecture写好白盒测试
-
发表了文章
2024-05-15
谈谈代码：降低复杂度，从放弃三层架构到DDD入门
-
发表了文章
2024-05-15
谈谈代码：如何避免写出糟糕if...else语句
-
发表了文章
2024-05-15
ZStack源码剖析之设计模式鉴赏——三驾马车
-
发表了文章
2024-05-15
读Flink源码谈设计：有效管理内存之道
-
发表了文章
2024-05-15
读Flink源码谈设计：流批一体的实现与现状
-
发表了文章
2024-05-15
读Flink源码谈设计：Exactly Once
-
发表了文章
2024-05-15
深入浅出Zookeeper源码（六）：客户端的请求在服务器中经历了什么
-
发表了文章
2024-05-15
深入浅出Zookeeper源码（四）：Watch实现剖析
-
发表了文章
2024-05-15
深入浅出Zookeeper源码（二）：存储技术
-
发表了文章
2024-05-15
深入浅出Zookeeper（一）：概览
-
发表了文章
2024-05-15
深入浅出Zookeeper源码（三）：会话管理
-
发表了文章
2024-05-15
深入浅出Zookeeper源码（七）：Leader选举
-
发表了文章
2024-05-15
谈谈代码：DDD从入门到完全入门
-
发表了文章
2024-05-15
谈谈代码：函数式编程
-
发表了文章
2024-05-15
技巧：我们在编写测试时，应该注意什么
-
发表了文章
2024-05-15
谈谈代码：Java IO业务代码优化之路
-
发表了文章
2024-05-15
谈谈代码：漫谈代理模式
-
发表了文章
2024-05-15
读Flink源码谈设计：图的抽象与分层
滑动查看更多
暂无更多信息
暂无更多信息