互聯(lián)網(wǎng)/程序員/技術(shù)/資料共享?
來自:http://u6v.cn/5MFrzY
目錄
開發(fā)應(yīng)用程序久了,總想刨根問底,尤其對一些有公共答案的問題。大家都能解釋,但是追根究底,都解釋不清。凡是都有為什么,而且用數(shù)字說明問題是最直觀的。 本文主要想探究一下連接數(shù)據(jù)庫的細節(jié),尤其是在 Web 應(yīng)用中要使用數(shù)據(jù)庫來連接池,以免每次發(fā)送一次請求就重新建立一次連接。 對于這個問題,答案都是一致的,建立數(shù)據(jù)庫連接很耗時,但是這個耗時是都多少呢,又是分別在哪些方面產(chǎn)生的耗時呢? 本文以連接 MySQL 數(shù)據(jù)庫為例,因為 MySQL 數(shù)據(jù)庫是開源的,其通信協(xié)議是公開的,所以我們能夠詳細分析建立連接的整個過程。 在本文中,消耗資源的分析主要集中在網(wǎng)絡(luò)上,當(dāng)然,資源也包括內(nèi)存、CPU 等計算資源,使用的編程語言是 Java,但是不排除編程語言也會有一定的影響。 首先先看一下連接數(shù)據(jù)庫的 Java 代碼,如下: Class.forName("com.mysql.jdbc.Driver" );String ?name?=?"shine_user" ;String ?password?=?"123" ;String ?url?=?"jdbc:mysql://172.16.100.131:3306/clever_mg_test" ; Connection?conn?=?DriverManager.getConnection(url,?name,?password);//?之后程序終止,連接被強制關(guān)閉 然后通過「Wireshark」分析整個連接的建立過程,如下: 在上圖中顯示的連接過程中,可以看出 MySQL 的通信協(xié)議是基于 TCP 傳輸協(xié)議的,而且該協(xié)議是二進制協(xié)議,不是類似于 HTTP 的文本協(xié)議。 第 1 步: 建立 TCP 連接,通過三次握手實現(xiàn)。
第 2 步: 服務(wù)器發(fā)送給客戶端「握手信息」,客戶端響應(yīng)該握手消息。
第 3 步: 客戶端「發(fā)送認證包」,用于用戶驗證,驗證成功后,服務(wù)器返回 OK 響應(yīng),之后開始執(zhí)行命令。
用戶驗證成功之后,會進行一些連接變量的設(shè)置,比如字符集、是否自動提交事務(wù)等,其間會有多次數(shù)據(jù)的交互。完成了這些步驟后,才會執(zhí)行真正的數(shù)據(jù)查詢和更新等操作。 在本文的測試中,只用了 5 行代碼來建立連接,但是并沒有通過該連接去執(zhí)行任何操作,所以在程序執(zhí)行完畢之后,連接不是通過 Connection.close() 關(guān)閉的, 而是由于程序執(zhí)行完畢,導(dǎo)致進程終止,造成與數(shù)據(jù)庫的連接異常關(guān)閉,所以最后會出現(xiàn)? TCP? 的? RST? 報文。 在這個最簡單的代碼中,沒有設(shè)置任何額外的連接屬性,所以在設(shè)置屬性上占用的時間可以認為是最少的(其實,雖然我們沒有設(shè)置任何屬性,但是驅(qū)動仍然設(shè)置了字符集、事務(wù)自動提交等,這取決于具體的驅(qū)動實現(xiàn)),所以整個連接所使用的時間可以認為是最少的。 但從統(tǒng)計信息中可以看出,在不包括最后? TCP? 的? RST ?報文時(因為該報文不需要服務(wù)器返回任何響應(yīng)),但是其中仍需在客戶端和服務(wù)器之間進行往返 「7」 次, 「也就是說完成一次連接,可以認為,數(shù)據(jù)在客戶端和服務(wù)器之間需要至少往返 7 次」。 從時間上來看,從開始 TCP 的三次握手,到最終連接強制斷開為止(不包括最后的? RST? 報文),總共花費了: 10.416042 ?-?10.190799 ?=?0.225243s ?=?225.243 ms這意味著,建立一次數(shù)據(jù)庫連接需要 225ms,而這還是還可以認為是最少的,當(dāng)然「花費的時間可能受到網(wǎng)絡(luò)狀況、數(shù)據(jù)庫服務(wù)器性能以及應(yīng)用代碼是否高效的影響」,但是這里只是一個最簡單的例子,已經(jīng)足夠說明問題了! 由于上面是程序異常終止了,但是在正常的應(yīng)用程序中,連接的關(guān)閉一般都是通過 Connection.close() 完成的。 Class .forName("com.mysql.jdbc.Driver" );String ?name?=?"shine_user" ;String ?password?=?"123" ;String ?url?=?"jdbc:mysql://172.16.100.131:3306/clever_mg_test" ; Connection?conn?=?DriverManager.getConnection(url,?name,?password); conn.close();這樣的話,情況發(fā)生了變化,主要體現(xiàn)在與數(shù)據(jù)庫連接的斷開,如上圖: 這里是完整地完成了從數(shù)據(jù)庫連接的建立到關(guān)閉,整個過程花費了: 747.284311 ?-?747.100954 ?=?0.183357s ?=?183.357 ms這里可能也有網(wǎng)絡(luò)狀況的影響,比上述的 225ms 少了,但是也幾乎達到了 200ms 的級別。 那么問題來了,想象一下這個場景,對于一個日活 2 萬的網(wǎng)站來說,假設(shè)每個用戶只會發(fā)送 5 個請求,那么一天就是 10 萬個請求。 對于建立數(shù)據(jù)庫連接,我們保守一點計算為 150ms 好了,那么一天當(dāng)中花費在建立數(shù)據(jù)庫連接的時間有(還不包括執(zhí)行查詢和更新操作): 100000 ?*?150 ms?=?15000000 ms?=?15000 s?=?250 min ?=?4.17 h也就說每天花費在建立數(shù)據(jù)庫連接上的時間已經(jīng)達到 「4 個小時」 ,所以說數(shù)據(jù)庫連接池是必須的嘛。 而且當(dāng)日活增加時,單單使用數(shù)據(jù)庫連接池也不能完全保證你的服務(wù)能夠正常運行,還需要考慮其他的解決方案。 當(dāng)然這不是本文的主要內(nèi)容,本文想要闡述的核心思想只有一個,數(shù)據(jù)庫連接真的很耗時,所以不要頻繁的建立連接。 推薦閱讀:
微軟再出手!這次要干翻 IDEA 了。。
ES+Redis+MySQL,這個高可用架構(gòu)設(shè)計太頂了!
互聯(lián)網(wǎng)初中高級大廠面試題(9個G) 內(nèi)容包含Java基礎(chǔ)、JavaWeb、MySQL性能優(yōu)化、JVM、鎖、百萬并發(fā)、消息隊列、高性能緩存、反射、Spring全家桶原理、微服務(wù)、Zookeeper......等技術(shù)棧!
? 戳閱讀原文領(lǐng)?。?/span>? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?? 朕已閱?