0、配景
常常做后端处事开拓的同学,或多或少都碰着过 CPU 负载出格高的问题。尤其是在周末或泰半夜,溘然群里有人反馈线上呆板负载出格高,不熟悉定位流程和思路的同学大概登上处事器一通惊慌失措,劳务派遣管理系统,定位进程百转千回。
对此,也有不少同学曾经整理过相关流程或要领论,雷同把大象放进冰箱要几步,传统的方案一般是4步:
可是对付线上问题定位来说,争分夺秒,上面的 4 步照旧太繁琐耗时了,有没有大概封装成为一个东西,在有问题的时候一键定位,秒级找到有问题的代码行呢?
虽然可以!东西链的成熟与否不只浮现了一个开拓者的运维本领,也浮现了开拓者的效率意识。淘宝的oldratlee 同学就将上面的流程封装为了一个东西:show-busy-java-threads.sh(点击可直接下载,或参考文末链接下载),可以很利便的定位线上的这类问题,下面我会举两个例子来看实际的结果。
快速安装利用:
source <(curl -fsSL https://raw.githubusercontent.com/oldratlee/useful-scripts/master/test-cases/self-installer.sh)
1、java 正则表达式回溯造成 CPU 100%
import java.util.ArrayList; import java.util.List; import java.util.regex.Matcher; import java.util.regex.Pattern; public class RegexLoad { public static void main(String[] args) { String[] patternMatch = {"([\\w\\s]+)+([+\\-/*])+([\\w\\s]+)", "([\\w\\s]+)+([+\\-/*])+([\\w\\s]+)+([+\\-/*])+([\\w\\s]+)"}; List<String> patternList = new ArrayList<String>(); patternList.add("Avg Volume Units product A + Volume Units product A"); patternList.add("Avg Volume Units / Volume Units product A"); patternList.add("Avg retailer On Hand / Volume Units Plan / Store Count"); patternList.add("Avg Hand Volume Units Plan Store Count"); patternList.add("1 - Avg merchant Volume Units"); patternList.add("Total retailer shipment Count"); for (String s :patternList ){ for(int i=0;i<patternMatch.length;i++){ Pattern pattern = Pattern.compile(patternMatch[i]); Matcher matcher = pattern.matcher(s); System.out.println(s); if (matcher.matches()) { System.out.println("Passed"); }else System.out.println("Failed;"); } } } }
编译、运行上述代码之后,咱们就能调查随处事器多了一个 100% CPU 的 java 历程:
怎么利用呢?
show-busy-java-threads.sh
# 从 所有的 Java历程中找出最耗损CPU的线程(缺省5个),打印出其线程栈。show-busy-java-threads.sh -c <要显示的线程栈数>
show-busy-java-threads.sh -c <要显示的线程栈数> -p <指定的Java Process>
##############################
# 留意:
##############################
# 假如Java历程的用户 与 执行剧本的当前用户 差异,则jstack不了这个Java历程。
# 为了能切换到Java历程的用户,需要加sudo来执行,即可以办理:
sudo show-busy-java-threads.sh
示例:
work@dev_zz_Master 10.48.186.32 23:45:50 ~/demo > bash show-busy-java-threads.sh [1] Busy(96.2%) thread(8577/0x2181) stack of java process(8576) under user(work): "main" prio=10 tid=0x00007f0c64006800 nid=0x2181 runnable [0x00007f0c6a64a000] java.lang.Thread.State: RUNNABLE at java.util.regex.Pattern$GroupHead.match(Pattern.java:4168) at java.util.regex.Pattern$Loop.match(Pattern.java:4295) ... at java.util.regex.Matcher.match(Matcher.java:1127) at java.util.regex.Matcher.matches(Matcher.java:502) at RegexLoad.main(RegexLoad.java:27) [2] Busy(1.5%) thread(8591/0x218f) stack of java process(8576) under user(work): "C2 CompilerThread1" daemon prio=10 tid=0x00007f0c64095800 nid=0x218f waiting on condition [0x0000000000000000] java.lang.Thread.State: RUNNABLE [3] Busy(0.8%) thread(8590/0x218e) stack of java process(8576) under user(work): "C2 CompilerThread0" daemon prio=10 tid=0x00007f0c64093000 nid=0x218e waiting on condition [0x0000000000000000] java.lang.Thread.State: RUNNABLE [4] Busy(0.2%) thread(8593/0x2191) stack of java process(8576) under user(work): "VM Periodic Task Thread" prio=10 tid=0x00007f0c640a2800 nid=0x2191 waiting on condition [5] Busy(0.1%) thread(25159/0x6247) stack of java process(25137) under user(work): "VM Periodic Task Thread" prio=10 tid=0x00007f13340b4000 nid=0x6247 waiting on condition work@dev_zz_Master 10.48.186.32 23:46:04 ~/demo >
可以看到,一键直接定位异常代码行,是不是很利便?