jstack分析線程快照的三步曲及CPU占用過高和死鎖問題的排查

jstack(Stack Trace For Java, 官方鏈接)用于生成java虛擬機某個進程在當前時刻的線程快照(一般稱為threaddump或javacore文件,由線程的調用堆棧組成),用來定位線程長時間停頓的原因,如死循環、死鎖等。

一般在用該工具時主要分為三步:

  1. 獲取進程id

    方法1: jps -l

    方法2: ps -ef|grep java

    方法3: lsof -i:<port>

    上述三個方法根據具體情況選擇使用,方法1最簡便(適合java進程少的情況),方法2信息更詳盡,方法3則適合有多個java進程,根據方法1可能分辨不出來想找的進程,而需要通過端口號進行定位。

  2. 獲取進程中的線程狀態

    top -Hp <pid>

    注意該命令只能在linux中使用,而在macOS上不能使用。因為linux將線程作為輕量級進程也分配了pid,而macOS并沒有這么處理。

    如果通過上述命令我們發現進程中的某個線程指標不正常,想重點關注,這時需要將線程的pid通過下面命令轉化為十六進進制,方便在線程快照信息中查找。

? echo 'obase=16; ibase=10; <pid>' | bc | tr '[A-Z]' '[a-z]'

  1. 查看并分析線程快照信息

    jstack <pid>命令可以在控制臺打印線程快照信息, jstack <pid> > <path>可以將線程快照信息輸出到文件。如下為打印出來的一條線程快照,由10個部分組成。

    image-20181111102804259
    1. 線程名稱,如果程序中沒有顯示給線程命名則顯示默認名稱
    2. 線程序號,相當于程序所有線程的一個編號
    3. 線程優先級,java中線程的默認優先級為5
    4. 線程系統優先級
    5. 線程id
    6. 線程native id,在linux中對應線程的輕量級進程id,十六進制,通過該字段都與top命令中的線程對應起來。
    7. 線程描述
    8. 線程棧的起始地址
    9. 線程狀態
    10. 線程執行堆棧,具體到代碼的行數

    需要注意的是執行該命令時當前用戶必須為啟動該進程的用戶,否則會失敗,即使是root用戶也不行。

接下來將通過兩個實例來對該工具的使用進行詳細說明:

實例1: 利用線程快照分析CPU占用過高的原因

用于演示CPU示例代碼如下: 啟動三個線程,且某個線程獲取唯一的鎖后一直沒有釋放,可想而知,另外兩個線程將處于阻塞狀態。

import java.util.UUID;

public class HighCPUCase {
    public static Object lock = new Object();

    public static void main(String[] args) {
        new Thread(new Task(), "task1").start();
        new Thread(new Task(), "task2").start();
        new Thread(new Task(), "task3").start();
    }

    static class Task implements Runnable{
        @Override
        public void run(){
            synchronized (lock){
                while (true){
                    System.out.println(UUID.randomUUID().toString());
                }
            }
        }
    }
}

現在用文章開始的三步曲來驗證我們的猜想。

  1. 首先獲取進程id

    image-20181110225814867
  2. 獲取進程中消耗CPU最高的線程

    image-20181110230019853

    將23068用如下命令轉化為16進制后為5a1c

    image-20181110230321690
  3. 查看并分析線程快照

    image-20181110231223530

    ? 上圖中藍色線框為我們需要重點關注的內容,可以看到5a1c(由第2步得到)對應的線程為task1,該線程處于RUNNABLE狀態,且下在執行HighCPUCase.java中的第17行,而線程task2和task3都因為等待鎖而處于BLOCKED狀態。仔細觀察可以發現task2和task3等待的鎖與task1獲得的鎖完全相同。

    ? 由此我們下結論,CPU高的原因是因為線程task1,而它正在執行HighCPUCase.java中的第17行,線程task2和task3處于阻塞狀態是因為task1獲得唯一一把鎖后一直沒有釋放。然后我們根據結論再去看代碼,分析得完全沒毛病。

實例2: 利用線程快照分析死鎖

下面為演示死鎖的代碼,模擬有兩個線程A,B, 兩把鎖1,2,當線程1成功拿到鎖1嘗試去拿鎖2發現拿不到,而此時線程2成功拿到鎖2嘗試去拿鎖1也拿不到,誰也不讓誰就只能干耗著了,導致程序一直不能結束。

public class DeadLockCase {
    public static void main(String[] args){
        Object o1 = new Object();
        Object o2 = new Object();
        new Thread(new SyncThread(o1, o2),  "t1").start();
        new Thread(new SyncThread(o2, o1),  "t2").start();
    }

    static class SyncThread implements Runnable {
        private Object lock1;
        private Object lock2;

        public SyncThread(Object o1, Object o2){
            this.lock1 = o1;
            this.lock2 = o2;
        }

        @Override
        public void run() {
            String name = Thread.currentThread().getName();
            System.out.println(name + " acquiring lock on " + lock1);
            synchronized (lock1) {
                System.out.println(name + " acquired lock on " + lock1);
                work();
                System.out.println(name + " acquiring lock on " + lock2);
                synchronized (lock2) {
                    System.out.println(name + " acquired lock on " + lock2);
                    work();
                }
                System.out.println(name + " released lock on " + lock2);
            }
            System.out.println(name + " released lock on " + lock1);
        }

        private void work() {
            try {
                //模擬死鎖的關鍵,保證線程1只能獲取一個鎖,而線程2能獲取到另一個鎖
                Thread.sleep(3000);
            } catch (InterruptedException e) {
                e.printStackTrace();
            }
        }
    }
}

運行上面代碼輸出如下,可以看到符合我們的預期:

image-20181110235104076

下面還是通過線程快照來反推:

  1. 首先拿到進程id

    image-20181110235201192
  2. 查看進程內的線程情況

    image-20181110235336030

    可以看到所有線程無異常指標,這一步還不知道哪一個線程有問題。

    23152對就的十六進制數為5a70, 23144對應的十六進制數為5a68,接下來就重點關注這兩個。

  3. 查看線程快照

    開始部分:細心觀察發現兩個線程處于BLOCKED狀態是因為在等相互之間的鎖。

    image-20181111000447280

    結尾部分:很明確的告訴了你發現了一個java級別死鎖,t2在待t1手上的鎖,t1在等t2手上的鎖。

在實際生產中肯定比這本文中涉及到的兩個例子復雜,但如果能先把基礎的學會,碰到問題也不會慌而是學會去分解復雜的問題,大而化小,最后方能解決問題。

參考文章:

如何使用jstack分析線程狀態

Java死鎖范例以及如何分析死鎖

?著作權歸作者所有,轉載或內容合作請聯系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 227,428評論 6 531
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,024評論 3 413
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事?!?“怎么了?”我有些...
    開封第一講書人閱讀 175,285評論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,548評論 1 307
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,328評論 6 404
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 54,878評論 1 321
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 42,971評論 3 439
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,098評論 0 286
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,616評論 1 331
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,554評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,725評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,243評論 5 355
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 43,971評論 3 345
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,361評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,613評論 1 280
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,339評論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,695評論 2 370

推薦閱讀更多精彩內容