依然任逍遥
依然任逍遥_个人页
依然任逍遥
文章
8
问答
0
视频
0
个人介绍
Talk is cheap, show me the code!
擅长的技术
- Java
- hdfs
- es
- 大数据
-
发表了文章 2023-11-24
FlinkSQL写入对象存储S3报错"Use persist() to create a persistent"
FlinkSQL写入对象存储S3报错"java.util.concurrent.ExecutionException: java.lang.UnsupportedOperationException: S3RecoverableFsDataOutputStream cannot sync state to S3. Use persist() to create a persistent recoverable intermediate point."
-
发表了文章 2022-01-07
java8集合类聚合GroupingBy的妙用
对于简单的一些list聚合操作，可以用java8的一些聚合工具，一行代码即可实现。
-
发表了文章 2021-12-21
Linux下日志文本筛选技巧
Linux下采用正则、sed、awk工具筛选过滤日志，特别是日志文件较大，在windows下面文本编辑器基本打不开时，Linux的强大的功能就非常明显了。
-
发表了文章 2021-09-16
shaded jar中包冲突定位
普通jar包冲突在maven依赖树中基本都可以定位到，shaded jar中不好直接定位，可通过class的url找出jar包名称，最终完成定位。
-
发表了文章 2021-09-16
k8s通过deployment创建pod失败排查
deployment创建pod失败，通过describe deployment ${DEPLOY_NAME} 没能看到具体原因。最终在“edit deployment ${DEPLOY_NAME}”中看到错误原因。
-
发表了文章 2021-09-13
Elasticsearch的Snapshot and Restore（快照备份与恢复）
Elasticsearch提供的Snapshot api就是从正在运行的集群中获取备份用的，可以根据情况选择整个集群，也可以指定index和data stream。Elasticsearch是以增量的方式获取Snapshot，节约了时间和空间，小开销意味着可以适当增加备份的频率。每一个Snapshot在逻辑上相互独立，所以删除某一个Snapshot不会影响到其他的Snapshot。
-
发表了文章 2021-08-23
4.安装 Logstash （本地及 docker)
本章介绍 Logstash 的安装和部署，包括以下几个方面： - 1.环境准备 - 2.Logstash的下载和安装 - 3.启动Logstash - 4.收集数据 - 5.docker方式安装
-
发表了文章 2021-08-23
安装 Beats （本地及 docker)
本章介绍 Beats 的安装和部署，包括以下几个方面： - 1.环境准备 - 2.Beats组件的下载和安装 - 3.基础配置 - 4.启动Beats - 5.检查收集到的数据 - 6.docker方式安装
暂无更多信息
-
发表了文章
2023-12-01
FlinkSQL写入对象存储S3报错"Use persist() to create a persistent"
-
发表了文章
2022-01-07
java8集合类聚合GroupingBy的妙用
-
发表了文章
2021-12-21
Linux下日志文本筛选技巧
-
发表了文章
2021-09-16
shaded jar中包冲突定位
-
发表了文章
2021-09-16
k8s通过deployment创建pod失败排查
-
发表了文章
2021-09-13
Elasticsearch的Snapshot and Restore（快照备份与恢复）
-
发表了文章
2021-08-23
4.安装 Logstash （本地及 docker)
-
发表了文章
2021-08-23
安装 Beats （本地及 docker)
滑动查看更多
暂无更多信息
暂无更多信息