【JAVA】-排查线程卡死问题

简介: 排查线程卡死问题

WX20220610-163441@2x.png

我们系统的二维码是通过jna调用dll文件生成的,最近碰到二维码使用几次过后就无法重新生成。在dump出线程资源后,发现调用dll的时候会卡死。

dump线程

jstack -l 线程pid > dump.txt
  • -l 长列表,打印关于锁的附加信息
  • -m 打印java和jni框架的所有栈信息

-m 打印的信息是这个样子

----------------- 1 -----------------
0x7713f8e1    ntdll!ZwWaitForSingleObject + 0x15
0x769b1194    kernel32!WaitForSingleObjectEx + 0x43
0x769b1148    kernel32!WaitForSingleObject + 0x12
0x710825b9    jvm!_JVM_FindSignal@4 + 0x2979
0x7101dfc1    jvm!JVM_GetThreadStateNames + 0x4f381
0x7101e356    jvm!JVM_GetThreadStateNames + 0x4f716
0x7103f3d1    jvm!JVM_GetThreadStateNames + 0x70791
0x70f9c505    jvm!JNI_GetCreatedJavaVMs + 0x59c5
0x01242165    java + 0x2165
0x0124b03f    java + 0xb03f
0x0124b0c9    java + 0xb0c9
0x769b336a    kernel32!BaseThreadInitThunk + 0x12
0x77159902    ntdll!RtlInitializeExceptionChain + 0x63
0x771598d5    ntdll!RtlInitializeExceptionChain + 0x36

-l 是这样子的

"Executor-3" #152 prio=5 os_prio=0 tid=0x16438000 nid=0xe08 runnable [0x2128f000]
   java.lang.Thread.State: RUNNABLE
 at com.sun.jna.Native.invokeLong(Native Method)
 at com.sun.jna.Function.invoke(Function.java:421)
 at com.sun.jna.Function.invoke(Function.java:354)
 at com.sun.jna.Library$Handler.invoke(Library.java:244)
 at com.sun.proxy.$Proxy120.WXSnsUpload(Unknown Source)
 at com.zhiplusyun.wxapi.xxx.xxx(FriendshipApi.java:146)
 at com.zhiplusyun.wxapi.xxx.xxx(FriendshipApi.java:117)
 at com.zhiplusyun.wxapi.xxx.xxx(FriendshipApi.java:86)
 at com.zhijiayun.zhituicenter.service.asyncTask.xxx.xxx(LoginSuccessAsyncTask.java:196)
 at com.zhijiayun.zhituicenter.service.asyncTask.xxx.xxx(LoginSuccessAsyncTask.java:73)
 at com.zhijiayun.zhituicenter.service.asyncTask.xxx.xxx(CheckQrcodeStatusAsyncTask.java:57)
 at com.zhijiayun.zhituicenter.service.xxx.xxx$$FastClassBySpringCGLIB$$c3165a3b.invoke(<generated>)
 at org.springframework.cglib.proxy.MethodProxy.invoke(MethodProxy.java:204)
 at org.springframework.aop.framework.CglibAopProxy$CglibMethodInvocation.invokeJoinpoint(CglibAopProxy.java:747)
 at org.springframework.aop.framework.ReflectiveMethodInvocation.proceed(ReflectiveMethodInvocation.java:163)
 at org.springframework.aop.interceptor.AsyncExecutionInterceptor.lambda$invoke$0(AsyncExecutionInterceptor.java:115)
 at org.springframework.aop.interceptor.AsyncExecutionInterceptor$$Lambda$465/27605255.call(Unknown Source)
 at java.util.concurrent.FutureTask.run(Unknown Source)
 at java.util.concurrent.ThreadPoolExecutor.runWorker(Unknown Source)
 at java.util.concurrent.ThreadPoolExecutor$Worker.run(Unknown Source)
 at java.lang.Thread.run(Unknown Source)
   Locked ownable synchronizers:
 - <0x0b523168> (a java.util.concurrent.ThreadPoolExecutor$Worker)

这一部分也是需要分析的部分,这个线程一直处于 java.lang.Thread.State: RUNNABLE状态,线程卡死在com.sun.jna.Native.invokeLong(Native Method)这里,这里就是调用了dll的WXSnsUpload函数,一个线程一直被占用,后面的线程再进来同样被卡住,直到沾满线程池。

在dump文件中,会看到这几个状态:

Deadlock 死锁

Runnable 执行中

Waiting on condition 等待资源

Waiting on monitor entry 等待获取监视器

Object.wait() 或 TIMED_WAITING 对象等待中

Suspended 暂停

Blocked 阻塞

文章参考:http://java.jr-jr.com/2015/12/09/jstack-state/

继续上面的分析,既然在调用dll的时候线程一直被占用,应该是这个dll里面发生了什么,一直在等待某个资源返回,而dll的函数里又没有写超时机制,那就自己在外面写个调用超时,我用了FutureTask来实现

以为这样就能解决了,然而下午又报二维码无法生成了,没办法,只能再dump线程分析,发现还是在调用dll的时候的问题,只不过换了一个dll的函数,这难道调用dll的不同函数都有卡住的可能,难道我要给没个方法加超时吗,这治标不治本啊。

聪明的我并没有这么去做,有个线程的状态Waiting on condition提醒了我,这个状态就说明线程一直等待某个资源,有可能是请求第三方,但第三方一直没返回。由于我们项目发起http请求,使用了http代理,怀疑是不是http代理出了问题。

那么网上找个http代理来试下,啊呀,果然如此,用了他们的代理就不会用问题,怎么点都行。

自己用ngrok搭的就不行吗,查看日志再调式,请求明明过去了,但ngrok要过一会才有日志,并且发出了警告

[09:45:05 CST 2019/04/14] [WARN] (ngrok/log.(*PrefixLogger).Warn:87) [pub:65f06d8f] [tcp://xxxx.com:8881] Copied 69719 bytes to pxy:60de645e before failing with error read tcp 888.16.204.4:8881->888.888.888.99:8888: read: connection reset by peer

ngrok在copy数据的时候发生了错误,那就应该是ngrok的锅了,但本人对ngrok不是非常了解,源码也是go,网上资料很少

最后换了一个使用frp来做内网穿透,正好之前就搭过frp服务器,马上跑起来测试了一下,效果不错,二维码再怎么点也不会有卡死的情况了。

frp项目地址

https://github.com/fatedier/frp/blob/master/README_zh.md

相关文章
|
8天前
|
Java
Java—多线程实现生产消费者
本文介绍了多线程实现生产消费者模式的三个版本。Version1包含四个类:`Producer`(生产者)、`Consumer`(消费者)、`Resource`(公共资源)和`TestMain`(测试类)。通过`synchronized`和`wait/notify`机制控制线程同步,但存在多个生产者或消费者时可能出现多次生产和消费的问题。 Version2将`if`改为`while`,解决了多次生产和消费的问题,但仍可能因`notify()`随机唤醒线程而导致死锁。因此,引入了`notifyAll()`来唤醒所有等待线程,但这会带来性能问题。
Java—多线程实现生产消费者
|
10天前
|
安全 Java Kotlin
Java多线程——synchronized、volatile 保障可见性
Java多线程中,`synchronized` 和 `volatile` 关键字用于保障可见性。`synchronized` 保证原子性、可见性和有序性,通过锁机制确保线程安全;`volatile` 仅保证可见性和有序性,不保证原子性。代码示例展示了如何使用 `synchronized` 和 `volatile` 解决主线程无法感知子线程修改共享变量的问题。总结:`volatile` 确保不同线程对共享变量操作的可见性,使一个线程修改后,其他线程能立即看到最新值。
|
10天前
|
消息中间件 缓存 安全
Java多线程是什么
Java多线程简介:本文介绍了Java中常见的线程池类型,包括`newCachedThreadPool`(适用于短期异步任务)、`newFixedThreadPool`(适用于固定数量的长期任务)、`newScheduledThreadPool`(支持定时和周期性任务)以及`newSingleThreadExecutor`(保证任务顺序执行)。同时,文章还讲解了Java中的锁机制,如`synchronized`关键字、CAS操作及其实现方式,并详细描述了可重入锁`ReentrantLock`和读写锁`ReadWriteLock`的工作原理与应用场景。
|
10天前
|
安全 Java 编译器
深入理解Java中synchronized三种使用方式:助您写出线程安全的代码
`synchronized` 是 Java 中的关键字,用于实现线程同步,确保多个线程互斥访问共享资源。它通过内置的监视器锁机制,防止多个线程同时执行被 `synchronized` 修饰的方法或代码块。`synchronized` 可以修饰非静态方法、静态方法和代码块,分别锁定实例对象、类对象或指定的对象。其底层原理基于 JVM 的指令和对象的监视器,JDK 1.6 后引入了偏向锁、轻量级锁等优化措施,提高了性能。
33 3
|
10天前
|
存储 安全 Java
Java多线程编程秘籍:各种方案一网打尽,不要错过!
Java 中实现多线程的方式主要有四种:继承 Thread 类、实现 Runnable 接口、实现 Callable 接口和使用线程池。每种方式各有优缺点,适用于不同的场景。继承 Thread 类最简单,实现 Runnable 接口更灵活,Callable 接口支持返回结果,线程池则便于管理和复用线程。实际应用中可根据需求选择合适的方式。此外,还介绍了多线程相关的常见面试问题及答案,涵盖线程概念、线程安全、线程池等知识点。
91 2
|
18天前
|
安全 Java API
java如何请求接口然后终止某个线程
通过本文的介绍,您应该能够理解如何在Java中请求接口并根据返回结果终止某个线程。合理使用标志位或 `interrupt`方法可以确保线程的安全终止,而处理好网络请求中的各种异常情况,可以提高程序的稳定性和可靠性。
46 6
|
27天前
|
安全 算法 Java
Java多线程编程中的陷阱与最佳实践####
本文探讨了Java多线程编程中常见的陷阱,并介绍了如何通过最佳实践来避免这些问题。我们将从基础概念入手,逐步深入到具体的代码示例,帮助开发者更好地理解和应用多线程技术。无论是初学者还是有经验的开发者,都能从中获得有价值的见解和建议。 ####
|
27天前
|
Java 调度
Java中的多线程编程与并发控制
本文深入探讨了Java编程语言中多线程编程的基础知识和并发控制机制。文章首先介绍了多线程的基本概念,包括线程的定义、生命周期以及在Java中创建和管理线程的方法。接着,详细讲解了Java提供的同步机制,如synchronized关键字、wait()和notify()方法等,以及如何通过这些机制实现线程间的协调与通信。最后,本文还讨论了一些常见的并发问题,例如死锁、竞态条件等,并提供了相应的解决策略。
50 3
|
28天前
|
监控 Java 开发者
深入理解Java中的线程池实现原理及其性能优化####
本文旨在揭示Java中线程池的核心工作机制,通过剖析其背后的设计思想与实现细节,为读者提供一份详尽的线程池性能优化指南。不同于传统的技术教程,本文将采用一种互动式探索的方式,带领大家从理论到实践,逐步揭开线程池高效管理线程资源的奥秘。无论你是Java并发编程的初学者,还是寻求性能调优技巧的资深开发者,都能在本文中找到有价值的内容。 ####
|
1月前
|
监控 Java 数据库连接
Java线程管理:守护线程与用户线程的区分与应用
在Java多线程编程中,线程可以分为守护线程(Daemon Thread)和用户线程(User Thread)。这两种线程在行为和用途上有着明显的区别,了解它们的差异对于编写高效、稳定的并发程序至关重要。
35 2