1 問題源起
上游系統(tǒng)通過公司rpc框架調(diào)用我們系統(tǒng)接口超時(默認(rèn)超時時間為100ms)數(shù)量從50次/分突然上漲到2000次/分,在發(fā)生變化時間段里我們的系統(tǒng)也沒有做過代碼變更,但上游系統(tǒng)的調(diào)用確發(fā)生了變化。由于處于主要鏈路上,sre同學(xué)找過來詢問原因,所以開始了問題排查。
2 問題初步定位
排查rpc超時的基本思路是這樣的:
1) &nb
上游系統(tǒng)通過公司rpc框架調(diào)用我們系統(tǒng)接口超時(默認(rèn)超時時間為100ms)數(shù)量從50次/分突然上漲到2000次/分,在發(fā)生變化時間段里我們的系統(tǒng)也沒有做過代碼變更,但上游系統(tǒng)的調(diào)用確發(fā)生了變化。由于處于主要鏈路上,sre同學(xué)找過來詢問原因,所以開始了問題排查。
排查rpc超時的基本思路是這樣的:
1) &nb