主頁 > 軟體設計 > 程式員必須練就的「性能調優」組合拳【2】

程式員必須練就的「性能調優」組合拳【2】

2020-09-13 03:39:56 軟體設計

性能調優系列前序文章索引:

  • 程式員必須掌握的性能調優:老兵哥結合個人經歷解釋了程式員往架構師方向發展時為什么要跨越性能調優這一關,以及介紹了從 X、Y、Z 三個維度優化性能的思路,
  • 從  X  維度優化系統的性能:老兵哥分享了從 X 維度優化系統性能的思路,包括讓客戶端分計算存盤任務、優化互動設計等,主要是作為引子拓寬我們性能調優的思路,

程式員在轉型架構師的程序中需要建立流程化、結構化、系統化的思維方式,而性能調優是非常難得的貧訓,它既給了我們壓力,也給了我們動力,跨越它就是突破自己的程序,

  • X 維度,即業務維度,技術始終是服務業務的,任何技術問題的原點就是業務需求,在啟動技術層面的性能優化之前,我們有必要先審視一下業務流程是否合理,互動設計上有沒有可以優化的空間等,
  • Y 維度,待業務維度優化完畢,接下來就是審視技術在實作當前業務流程或互動設計的全鏈路上有沒有可優化的地方,即 HTTP 請求處理全流程,從瀏覽器到應用容器,再到 Spring、Hibernate、資料庫等,
  • Z 維度,除了沿著 HTTP 請求的橫向鏈路,我們還要審視支持應用系統的縱向技術堆疊,從上到下包括 JVM、作業系統和硬體等,這是整套應用系統運行的環境,許多性能問題都跟運行環境存在關系,

Y 維度,就是從業務 HTTP 請求的橫向處理流程來看,HTTP 請求會穿越網路、計算機、應用容器(Tomcat)、Spring、ORM(Hibernate)、資料庫等節點,在這個流程中每個節點都有許多可以可優化的地方,今天老兵哥先談談如何通過優化應用容器(Tomcat)來優化系統性能,

建議在閱讀本文內容前,先參考下面這個系列的文章了解 Web 應用是怎樣處理 HTTP 請求的:

  • 圖解 Spring:HTTP 請求的處理流程與機制【1】
  • 圖解 Spring:HTTP 請求的處理流程與機制【2】
  • 圖解 Spring:HTTP 請求的處理流程與機制【3】
  • 圖解 Spring:HTTP 請求的處理流程與機制【4】
  • 圖解 Spring:HTTP 請求的處理流程與機制【5】

 

2. 應用容器 Tomcat

2.1 啟動引數

作業系統選型,盡可能選擇 64 位作業系統,在 64 位系統上 JVM 記憶體最高可以設定為 3800MB 左右,在 32 位系統上 JVM 記憶體最高可以設定為 1500MB 左右,另外,我們可以根據系統物理記憶體大小合理設定下列五個啟動引數(在檔案 catalina.sh、catalina.bat 中):

-server -Xms300m -Xmx300m -XX:PermSize=100m -XX:MaxPermSize=100m 

通常,引數取值符合規則:-Xms=-Xmx,-XX:PermSize=-XX:MaxPermSize,上述引數經過驗證,可以穩定運行在各種作業系統平臺和 JDK 版本上,通過調參盡可能地壓榨服務器性能,具體場景下的引數取值需要具體分析,基本原則就是不要超過空閑物理記憶體的 80% 即可,如果沒有特殊理由,不要設定上述五個引數之外的 JVM 引數,一者無法保證作業系統平臺的可移植性,二者過度干涉記憶體管理會導致無法預料的后果,

非服務方式啟動的 TOMCAT 調參方式如下:

  • 在 Linux/Unix 系統上,修改 tomcat_home/bin/catalina.sh,添加以下內容:
JAVA_HOME=/export/home/jdk1.6.0_16
JAVA_OPTS="-server -Xms300m -Xmx300m -XX:PermSize=100m -XX:MaxPermSize=100m -Dcom.sun.management.jmxremote"
  • 在 Windows 系統上,修改 tomcat_home/bin/catalina.bat,添加以下內容:
set JAVA_HOME=C:\Program Files\Java\jdk1.6.0_16
set JAVA_OPTS=-server -Xms300m -Xmx300m -XX:PermSize=100m -XX:MaxPermSize=100m -Dcom.sun.management.jmxremote

  兩者區別:Linux/Unix 不需要 set,但有”“;Windows 需要set,但不能有”“,服務方式啟動的 TOMCAT 調參方式如下,僅限于 Windows 系統:

 

  • 在 JAVA 選項卡中,設定 JAVA OPTIONS,添加以下三個引數,每行一個,不能并列:
-XX:PermSize=256m
-XX:MaxPermSize=256m
-Dcom.sun.management.jmxremote  
  • 設定 Initial memory pool 為 1000MB,
  • 設定 Maximum menory pool 為 1000MB,
  • 不要設定 thread stack size,


2.2 使用 NIO 的 http1.1 超文本傳輸協議

Java 的 IO 操作集中在 java.io 這個包當中,基于阻塞 API(即 BIO,Block IO),對許多應用來說,這樣的 API 使用很方便,但某些對性能要求較高的應用,尤其是服務器端應用,往往需要一個更高效的方式來處理 IO,從 JDK1.4 起,NIO API 作為一個基于緩沖區,并能提供非阻塞 IO 操作的 API(即 NIO,non-blocking IO)被引入,BIO 與 NIO 之間最為重要的不同,就是采用 BIO 往往要引入多執行緒,每個連接分配一個單獨的執行緒;NIO 是使用單執行緒或者只使用少量執行緒,所有連接共用一個執行緒,具體更改方法如下:

  • 打開 Tomcat 的組態檔:$TOMCAT_HOME/conf/server.xml
  • 找到:<Connector port="8080" protocol="http1.1" ...
  • 改為:<Connector port="8080" protocol="org.apache.coyote.http11.Http11NioProtocol"...

2.3 調整執行緒數

Tomcat 可以采用執行緒池來提升回應速度,默認創建 5 個執行緒,最大執行緒數是 200,如果業務并發量較大,則可以對下列幾個引數做些調整,最大執行緒數可以用“同時在線人數 * 用戶每秒操作次數 * 平均操作時間”公式計算:

  • maxThreads:Tomcat 可創建的最大執行緒數,
  • acceptCount:如果當前可用執行緒數為 0,則將請求放入處理佇列中,這個值限定了請求佇列的大小,超過這個數值的請求將不予處理,
  • connectionTimeout:網路連接超時時間,單位毫秒,
  • minSpareThreads:如果當前沒有空閑執行緒,且沒有超過 maxThreads,一次性創建的空閑執行緒數量,Tomcat 初始化時創建的執行緒數量也由此值設定,
  • maxSpareThreads:一旦創建的執行緒超過此數值,Tomcat會關閉不再需要的執行緒,

2.4 使用 APR 來增強性能

Tomcat 可以采用 APR(Apache Portable Runtime)提供超強的可伸縮性和性能,更好地集成本地服務器技術,APR 是一個高可移植庫,它是 Apache HTTP Server 2.x 的核心,APR 有很多用途,包括訪問高級 IO 功能(例如:sendfile、epoll、open SSL 等)、OS 級別的功能(亂數生成、系統狀態等)、本地行程管理(共享記憶體、NT 管道、UNIX socket 等),這些功能使 Tomcat 作為 WEB 應用服務器,能更好地與其它本地 Web 技術集成,讓 Tomcat 也可以擔當更高性能的前端 Web 應用服務器,而不是僅僅是后端 Java EE 應用服務器,APR 的具體安裝步驟如下(下載地址:http://apr.apache.org):

  • 安裝 apr 及 apr-util:
> tar zxvf apr-1.3.8.tar.gz
> cd apr-1.3.8
> ./configure —prefix=/usr/lib/apr
> make
> make install
> tar zxvf apr-util-1.3.9.tar.gz
> cd apr-util-1.3.9
> ./configure —with-apr=/usr/lib/apr
> make
> make install
  • 安裝 tomcat-native.tar.gz,此檔案在目錄 $TOMCAT_HOME/bin 下:
> tar zxvf tomcat-native.tar.gz
> cd tomcat-native-1.1.16-src/jni/native
> ./configure —with-apr=/usr/lib/apr
> make
> make install
  • 在 Tomcat 的啟動檔案($TOMCAt_HOME/bin/catalina.sh)中加入環境變數:
CATALINA_OPTS=-Djava.library.path=/usr/local/apr/lib
  • 或在作業系統的環境變數(/etc/profile)中添加:
export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:/usr/local/apr/lib

重新啟動計算機或使用命令 source /etc/profile 使其即時生效,
查看啟動日志($TOMCAT_HOME/logs/catalina…….log),如出現如下資訊表示APR啟動成功:

啟動時發現日志中有:

Sep 30, 2019 4:32:55 PM org.apache.coyote.http11.Http11AprProtocol start 
INFO: Starting Coyote HTTP/1.1 on http-8080 
Sep 30, 2019 4:32:55 PM org.apache.coyote.ajp.AjpAprProtocol start 
INFO: Starting Coyote AJP/1.3 on ajp-8009

 

停止時發現日志中有:

Sep 30, 2019 4:27:06 PM org.apache.coyote.http11.Http11AprProtocol destroy 
INFO: Stopping Coyote HTTP/1.1 on http-8080 
Sep 30, 2019 4:27:06 PM org.apache.coyote.ajp.AjpAprProtocol destroy 
INFO: Stopping Coyote AJP/1.3 on ajp-8009

 

 

2.5 集成Web服務器處理靜態內容

作為一個 Jsp/Servlet 容器,Tomcat 本身對靜態 HTML 檔案的處理速度要遠遜于 Apache 等 Web 服務器,通過與此類 Web 服務器集成,Tomcat 僅僅處理動態資源請求,靜態資源請求則交給 Web 服務器處理,這樣可以顯著地降低系統負載,從而提高整體回應的速度,

關注「 IT老兵哥 」,賦能程式人生!堅持原創不易,請小伙伴們不吝點個「 」哦!推薦軟技能文章,請點擊鏈接:程式員,怎樣打造個人影響力?

 

 

近期熱評系列《 程式員必須懂的架構師入門課 》:

  • 架構到底是什么,你知道嗎? (閱讀人數:1176)
  • 架構都有哪些,我該怎么選? (閱讀人數:877)
  • 架構師都干什么,你知道嗎? (閱讀人數:1163)
  • 練就哪些技能才勝任架構師? (閱讀人數:1127)
  • 怎樣才能搞定上下游的客戶? (閱讀人數:483)
  • 如何從開發崗轉型做架構師? (閱讀人數:1270)
  • 程式員必須懂的架構入門課    (閱讀人數:592)

轉載請註明出處,本文鏈接:https://www.uj5u.com/ruanti/19536.html

標籤:架構設計

上一篇:程式員必須練就的「性能調優」組合拳【1】

下一篇:程式員必須練就的「性能調優」組合拳【3】

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 面試突擊第一季,第二季,第三季

    第一季必考 https://www.bilibili.com/video/BV1FE411y79Y?from=search&seid=15921726601957489746 第二季分布式 https://www.bilibili.com/video/BV13f4y127ee/?spm_id_fro ......

    uj5u.com 2020-09-10 05:35:24 more
  • 第三單元作業總結

    1.前言 這應該是本學期最后一次寫作業總結了吧。總體來說,對作業的節奏也差不多掌握了,作業做起來的效率也更高了。雖然和之前的作業一樣,作業中都要用到新的知識,但是相比之前,更加懂得了如何利用工具以及資料。雖然之間卡過殼,但總體而言,這幾次作業還算完成的比較好。 2.作業程序總結 相比前兩個單元,此單 ......

    uj5u.com 2020-09-10 05:35:41 more
  • 北航OO(2020)第四單元博客作業暨課程總結博客

    北航OO(2020)第四單元博客作業暨課程總結博客 本單元作業的架構設計 在本單元中,由于UML圖具有比較清晰的樹形結構,因此我對其中需要進行查詢操作的元素進行了包裝,在樹的父節點中存盤所有孩子的參考。考慮到性能問題,我采用了快取機制,一次查詢后盡可能快取已經遍歷過的資訊,以減少遍歷次數。 本單元我 ......

    uj5u.com 2020-09-10 05:35:48 more
  • BUAA_OO_第四單元

    一、UML決議器設計 ? 先看下題目:第四單元實作一個基于JDK 8帶有效性檢查的UML(Unified Modeling Language)類圖,順序圖,狀態圖分析器 MyUmlInteraction,實際上我們要建立一個有向圖模型,UML中的物件(元素)可能與同級元素連接,也可與低級元素相連形成 ......

    uj5u.com 2020-09-10 05:35:54 more
  • 6.1邏輯運算子

    邏輯運算子 1. && 短路與 運算式1 && 運算式2 01.運算式1為true并且運算式2也為true 整體回傳為true 02.運算式1為false,將不會執行運算式2 整體回傳為false 03.只要有一個運算式為false 整體回傳為false 2. || 短路或 運算式1 || 運算式2 ......

    uj5u.com 2020-09-10 05:35:56 more
  • BUAAOO 第四單元 & 課程總結

    1. 第四單元:StarUml檔案決議 本單元采用了圖模型決議UML。 UML檔案可以抽象為圖、子圖、邊的邏輯結構。 在實作中,圖的節點包括類、介面、屬性,子圖包括狀態圖、順序圖等。 采用了三次遍歷UML元素的方法建圖,第一遍遍歷建點,第二、三次遍歷設定屬性、連邊,實作圖物件的初始化。這里借鑒了一些 ......

    uj5u.com 2020-09-10 05:36:06 more
  • 談談我對C# 多型的理解

    面向物件三要素:封裝、繼承、多型。 封裝和繼承,這兩個比較好理解,但要理解多型的話,可就稍微有點難度了。今天,我們就來講講多型的理解。 我們應該經常會看到面試題目:請談談對多型的理解。 其實呢,多型非常簡單,就一句話:呼叫同一種方法產生了不同的結果。 具體實作方式有三種。 一、多載 多載很簡單。 p ......

    uj5u.com 2020-09-10 05:36:09 more
  • Python 資料驅動工具:DDT

    背景 python 的unittest 沒有自帶資料驅動功能。 所以如果使用unittest,同時又想使用資料驅動,那么就可以使用DDT來完成。 DDT是 “Data-Driven Tests”的縮寫。 資料:http://ddt.readthedocs.io/en/latest/ 使用方法 dd. ......

    uj5u.com 2020-09-10 05:36:13 more
  • Python里面的xlrd模塊詳解

    那我就一下面積個問題對xlrd模塊進行學習一下: 1.什么是xlrd模塊? 2.為什么使用xlrd模塊? 3.怎樣使用xlrd模塊? 1.什么是xlrd模塊? ?python操作excel主要用到xlrd和xlwt這兩個庫,即xlrd是讀excel,xlwt是寫excel的庫。 今天就先來說一下xl ......

    uj5u.com 2020-09-10 05:36:28 more
  • 當我們創建HashMap時,底層到底做了什么?

    jdk1.7中的底層實作程序(底層基于陣列+鏈表) 在我們new HashMap()時,底層創建了默認長度為16的一維陣列Entry[ ] table。當我們呼叫map.put(key1,value1)方法向HashMap里添加資料的時候: 首先,呼叫key1所在類的hashCode()計算key1 ......

    uj5u.com 2020-09-10 05:36:38 more
最新发布
  • 【中介者設計模式詳解】C/Java/JS/Go/Python/TS不同語言實作

    * 中介者模式是一種行為型設計模式,它可以用來減少類之間的直接依賴關系,
    * 將物件之間的通信封裝到一個中介者物件中,從而使得各個物件之間的關系更加松散。
    * 在中介者模式中,物件之間不再直接相互互動,而是通過中介者來中轉訊息。 ......

    uj5u.com 2023-04-20 08:20:47 more
  • 露天煤礦現場調研和交流案例分享

    他們集團的資訊化公司及研究院在一個礦區正在做智能礦山的統一平臺的 試點,專案投資大概1億,包括了礦山的各方面的內容,顯示得我們這次交流有點多余。他們2年前開始做智能礦山的規劃,有很多煤礦行業專家的加持,他們的描述是非常完美,但是去年底應該上線的平臺,現在還沒有看到影子。他們確實有很多場景需求,但是被... ......

    uj5u.com 2023-04-20 08:20:25 more
  • 《社區人員管理》實戰案例設計&個人案例分享

    設計是一個讓人夢想成真程序,開始編碼、測驗、除錯之前進行需求分析和架構設計,才能保證關鍵方面都做正確 ......

    uj5u.com 2023-04-20 08:20:17 more
  • 軟體架構生態化-多角色交付的探索實踐

    作為一個技術架構師,不僅僅要緊跟行業技術趨勢,還要結合研發團隊現狀及痛點,探索新的交付方案。在日常中,你是否遇到如下問題 “ 業務需求排期長研發是瓶頸;非研發角色感受不到研發技改提效的變化;引入ISV 團隊又擔心質量和安全,培訓周期長“等等,基于此我們探索了一種新的技術體系及交付方案來解決如上問題。 ......

    uj5u.com 2023-04-20 08:20:10 more
  • 【中介者設計模式詳解】C/Java/JS/Go/Python/TS不同語言實作

    * 中介者模式是一種行為型設計模式,它可以用來減少類之間的直接依賴關系,
    * 將物件之間的通信封裝到一個中介者物件中,從而使得各個物件之間的關系更加松散。
    * 在中介者模式中,物件之間不再直接相互互動,而是通過中介者來中轉訊息。 ......

    uj5u.com 2023-04-20 08:19:44 more
  • 露天煤礦現場調研和交流案例分享

    他們集團的資訊化公司及研究院在一個礦區正在做智能礦山的統一平臺的 試點,專案投資大概1億,包括了礦山的各方面的內容,顯示得我們這次交流有點多余。他們2年前開始做智能礦山的規劃,有很多煤礦行業專家的加持,他們的描述是非常完美,但是去年底應該上線的平臺,現在還沒有看到影子。他們確實有很多場景需求,但是被... ......

    uj5u.com 2023-04-20 08:19:07 more
  • 《社區人員管理》實戰案例設計&個人案例分享

    設計是一個讓人夢想成真程序,開始編碼、測驗、除錯之前進行需求分析和架構設計,才能保證關鍵方面都做正確 ......

    uj5u.com 2023-04-20 08:18:57 more
  • 軟體架構生態化-多角色交付的探索實踐

    作為一個技術架構師,不僅僅要緊跟行業技術趨勢,還要結合研發團隊現狀及痛點,探索新的交付方案。在日常中,你是否遇到如下問題 “ 業務需求排期長研發是瓶頸;非研發角色感受不到研發技改提效的變化;引入ISV 團隊又擔心質量和安全,培訓周期長“等等,基于此我們探索了一種新的技術體系及交付方案來解決如上問題。 ......

    uj5u.com 2023-04-20 08:18:49 more
  • 05單件模式

    #經典的單件模式 public class Singleton { private static Singleton uniqueInstance; //一個靜態變數持有Singleton類的唯一實體。 // 其他有用的實體變數寫在這里 //構造器宣告為私有,只有Singleton可以實體化這個類! ......

    uj5u.com 2023-04-19 08:42:51 more
  • 【架構與設計】常見微服務分層架構的區別和落地實踐

    軟體工程的方方面面都遵循一個最基本的道理:沒有銀彈,架構分層模型更是如此,每一種都有各自優缺點,所以請根據不同的業務場景,并遵循簡單、可演進這兩個重要的架構原則選擇合適的架構分層模型即可。 ......

    uj5u.com 2023-04-19 08:42:41 more