首頁 > 軟體

MongoDb CPU利用率過高問題如何解決

2020-09-22 15:00:28

在公司的專案中,突然出現過一個情況,mongodb 的CPU利用率到達100%,導致伺服器這邊卡死了,請求了半天無響應,提示請求超時。

因為,當時APP使用者可能會在某一個時間段集中的使用,所以,請求量一下子就飆上去了,剛好APP開啟請求的時候,有一個mongodb的請求。

當時因為Mongodb的伺服器不在我們這邊,所以一下子沒反應過來,不過最後還是給排除出,並解決了。這裡就來記錄下排查和解決的全過程。

問題分析:

1.根據程式碼,定位到了是Mongodb的報錯。

2.進入Mongodb 伺服器的監控後臺,這裡是在阿里雲購買的雲快取。

3.知道是Mongodb出問題,就好辦了,阿里雲裡面有個索引推薦,很好用的,會給出查詢時間,執行次數,和推薦策略

OK,這裡準備工作就基本做完了。

解決策略:

1.根據這些給出的執行次數,和執行時間慢的,去看了下庫。從設計上,有問題,一個庫有900W的資料,然後集合邏輯看了下,這庫只往裡面存資料,從不清理

2.沒有建立過索引,包括單一索引和連線索引,這也是會導致慢的一個原因。優化後是這樣的,

db.getCollection('course_study_history').createIndex({'studentId':1,'contentStudyID':1,'courseWareID':1,'courseStudyId':1})

3.一個查詢總數的方法有問題,下面是修改後的JAVA方法:

MongoCollection<Document> collection = database.getCollection(pushMessageCollection);
 
long cNt = collection.count(Filters.and(Filters.eq("userId", userId),
                    Filters.eq("sendType", sendType),
                    Filters.eq("message_read", "0")));

最開始的寫法,大概就型別,Mysql 裡,查詢某個list,然後list.size(),得出總數,

修改後的方法:大概就相當於 count(id) 得出總數,

這樣的話,修改後的方法,肯定就會比修改前的快。

方案基本決定下來了,實施後開始壓力測試。

沒修改時的2000並行:

修改後的2000並行:

可以看到時間,也明顯的提高了。

並且測試4000 並行,雖然慢了,不過沒崩掉。

再檢視CPU資訊,沒有出現100%的情況了。

以上就是本文的全部內容,希望對大家的學習有所幫助,也希望大家多多支援it145.com。


IT145.com E-mail:sddin#qq.com