依然任逍遥_个人页

2023年12月

• 11.24 16:51:06
  发表了文章 2023-11-24 16:51:06

  FlinkSQL写入对象存储S3报错"Use persist() to create a persistent"

  FlinkSQL写入对象存储S3报错"java.util.concurrent.ExecutionException: java.lang.UnsupportedOperationException: S3RecoverableFsDataOutputStream cannot sync state to S3. Use persist() to create a persistent recoverable intermediate point."

2022年01月

• 01.07 10:41:45
  发表了文章 2022-01-07 10:41:45

  java8集合类聚合GroupingBy的妙用

  对于简单的一些list聚合操作，可以用java8的一些聚合工具，一行代码即可实现。

2021年12月

• 12.21 10:13:15
  发表了文章 2021-12-21 10:13:15

  Linux下日志文本筛选技巧

  Linux下采用正则、sed、awk工具筛选过滤日志，特别是日志文件较大，在windows下面文本编辑器基本打不开时，Linux的强大的功能就非常明显了。

2021年09月

• 09.16 19:00:19
  发表了文章 2021-09-16 19:00:19

  shaded jar中包冲突定位

  普通jar包冲突在maven依赖树中基本都可以定位到，shaded jar中不好直接定位，可通过class的url找出jar包名称，最终完成定位。
• 09.16 10:55:03
  发表了文章 2021-09-16 10:55:03

  k8s通过deployment创建pod失败排查

  deployment创建pod失败，通过describe deployment ${DEPLOY_NAME} 没能看到具体原因。最终在“edit deployment ${DEPLOY_NAME}”中看到错误原因。
• 09.13 14:59:03
  发表了文章 2021-09-13 14:59:03

  Elasticsearch的Snapshot and Restore（快照备份与恢复）

  Elasticsearch提供的Snapshot api就是从正在运行的集群中获取备份用的，可以根据情况选择整个集群，也可以指定index和data stream。Elasticsearch是以增量的方式获取Snapshot，节约了时间和空间，小开销意味着可以适当增加备份的频率。每一个Snapshot在逻辑上相互独立，所以删除某一个Snapshot不会影响到其他的Snapshot。

2021年08月

• 08.23 16:35:42
  发表了文章 2021-08-23 16:35:42

  4.安装 Logstash （本地及 docker)

  本章介绍 Logstash 的安装和部署，包括以下几个方面： - 1.环境准备 - 2.Logstash的下载和安装 - 3.启动Logstash - 4.收集数据 - 5.docker方式安装
• 08.23 16:31:34
  发表了文章 2021-08-23 16:31:34

  安装 Beats （本地及 docker)

  本章介绍 Beats 的安装和部署，包括以下几个方面： - 1.环境准备 - 2.Beats组件的下载和安装 - 3.基础配置 - 4.启动Beats - 5.检查收集到的数据 - 6.docker方式安装