解Bug之路-记一次线上请求偶尔变慢的排查
【转载声明】本文为转载文章,原作者「alchemystarlzy」,版权归原作者所有。 原文链接:https://mp.weixin.qq.com/s/1ET0CMRf10A5x8xRB4PvPg
公众号:杨建荣的学习笔记 · 作者:alchemystarlzy · 发布:2021-06-15 23:54:36 · 原文链接
解Bug之路-记一次线上请求偶尔变慢的排查
前言
最近解决了个比较棘手的问题,由于排查过程挺有意思,于是就以此为素材写出了本篇文章。
Bug现场
这是一个偶发的性能问题。在每天几百万比交易请求中,平均耗时大约为300ms,但总有那么100多笔会超过1s,让我们业务耗时监控的99.99线变得很尴尬。如下图所示:

为了精益求精,更为了消除这个尴尬的指标,笔者开始探寻起这100多慢请求笔的原因。
