1、引言

應(yīng)用程序的開(kāi)發(fā)測(cè)試過(guò)程中，對(duì)程序性能進(jìn)行分析和優(yōu)化是不可或缺的一部分。性能分析（performanceanalysis也稱為profiling），是以收集程序運(yùn)行時(shí)信息為手段研究程序行為的分析方法，是一種動(dòng)態(tài)程序分析的方法。性能分析的目的在于決定程序的哪個(gè)部分應(yīng)該被優(yōu)化，從而提高程序的速度或者內(nèi)存使用效率。根據(jù)帕累托法則（也叫二八定律），只有優(yōu)化處于性能瓶頸的那些少量代碼，才能用最小的成本獲得最大的收益。

本文首先介紹了衡量應(yīng)用程序性能的關(guān)鍵指標(biāo)，隨后介紹如何使用perf和vtune進(jìn)行性能分析，找到軟件性能的熱點(diǎn)部分。完成應(yīng)用程序的性能分析并找到性能瓶頸后，能夠快速精準(zhǔn)的定位到需要修改的源碼，縮短性能調(diào)優(yōu)的時(shí)間。

2、程序性能分析指標(biāo)

衡量應(yīng)用程序的性能高低，需要從多個(gè)方面進(jìn)行性能指標(biāo)的分析，主要包括業(yè)務(wù)指標(biāo)、資源指標(biāo)和可靠性指標(biāo)。

2.1業(yè)務(wù)指標(biāo)

（1）響應(yīng)時(shí)間

響應(yīng)時(shí)間是指系統(tǒng)對(duì)請(qǐng)求作出響應(yīng)的時(shí)間，可以理解為是指用戶從客戶端發(fā)起一個(gè)請(qǐng)求開(kāi)始，到客戶端接收到從服務(wù)器端返回的響應(yīng)結(jié)束的時(shí)間，這項(xiàng)指標(biāo)直接影響用戶的感官體驗(yàn)。在實(shí)時(shí)互動(dòng)的場(chǎng)景下，一般要求毫秒級(jí)的響應(yīng)速度。

（2）吞吐量

吞吐量是指單位時(shí)間內(nèi)處理的請(qǐng)求數(shù)，常用QPS（QueriesPerSecond）和TPS（TransactionsPerSecond）進(jìn)行衡量，是衡量多并發(fā)的應(yīng)用系統(tǒng)的重要指標(biāo)。

（3）并發(fā)數(shù)

并發(fā)數(shù)指系統(tǒng)可以同時(shí)承載的正常使用系統(tǒng)功能的用戶的數(shù)量。這個(gè)指標(biāo)比較直觀但是不是很準(zhǔn)確，因?yàn)橛脩舨煌氖褂媚Ｊ綍?huì)導(dǎo)致不同用戶在單位時(shí)間發(fā)出不同數(shù)量的請(qǐng)求。

2.2資源指標(biāo)

（1）CPU使用率

CPU使用率指的是程序在運(yùn)行期間實(shí)時(shí)占用的CPU百分比，這是對(duì)一個(gè)時(shí)間段內(nèi)CPU使用狀況的統(tǒng)計(jì)。通過(guò)這個(gè)指標(biāo)可以看出在某一個(gè)時(shí)間段內(nèi)CPU被占用的情況。

（2）內(nèi)存利用率

內(nèi)存是計(jì)算機(jī)中重要的部件之一，它是與CPU進(jìn)行溝通的橋梁。計(jì)算機(jī)中所有程序的運(yùn)行都是在內(nèi)存中進(jìn)行的，因此內(nèi)存的性能對(duì)計(jì)算機(jī)的影響非常大，內(nèi)存利用率不宜過(guò)高，否則會(huì)影響系統(tǒng)性能。

（3）磁盤吞吐量

磁盤指標(biāo)主要有每秒讀寫(xiě)多少兆，磁盤繁忙率，磁盤隊(duì)列數(shù)，平均服務(wù)時(shí)間，平均等待時(shí)間，空間利用率。其中磁盤繁忙率是直接反映磁盤是否有瓶頸的的重要依據(jù)。

（4）網(wǎng)絡(luò)吞吐量

網(wǎng)絡(luò)吞吐量是指在無(wú)網(wǎng)絡(luò)故障的情況下單位時(shí)間內(nèi)通過(guò)的網(wǎng)絡(luò)的數(shù)據(jù)數(shù)量，單位為Byte/s。網(wǎng)絡(luò)吞吐量指標(biāo)用于衡量系統(tǒng)對(duì)于網(wǎng)絡(luò)設(shè)備或鏈路傳輸能力的需求。

2.3可靠性指標(biāo)

可靠性指在使用條件和規(guī)定時(shí)間內(nèi)，產(chǎn)品完成規(guī)定功能的能力。常用的可靠性指標(biāo)包括：可靠度、失效概率、失效率、平均工作時(shí)間、平均維修時(shí)間、有效度等。

3、程序性能分析工具

3.1Linux系統(tǒng)工具

Linux系統(tǒng)上自帶了許多的性能監(jiān)控工具

（1）vmstat：實(shí)時(shí)動(dòng)態(tài)監(jiān)視操作系統(tǒng)的虛擬內(nèi)存、進(jìn)程、CPU活動(dòng)。

（2）iostat：動(dòng)態(tài)監(jiān)視系統(tǒng)的磁盤操作活動(dòng)。

（3）top：實(shí)時(shí)顯示系統(tǒng)中各個(gè)進(jìn)程的資源占用狀況。

（4）sar：Linux上最為全面的系統(tǒng)性能分析工具之一，可以從14個(gè)大方面對(duì)系統(tǒng)的活動(dòng)進(jìn)行報(bào)告。

（5）top：實(shí)時(shí)顯示系統(tǒng)中各個(gè)進(jìn)程的資源占用狀況。

3.2Perf

Perf是內(nèi)置于Linux內(nèi)核源碼樹(shù)中的性能剖析（profiling）工具。它基于事件采樣原理，使用了許多Linux跟蹤特性，可用于行函數(shù)級(jí)與指令級(jí)的性能瓶頸的查找與熱點(diǎn)代碼的定位，。

（1）Perftop：實(shí)時(shí)顯示系統(tǒng)/進(jìn)程的性能統(tǒng)計(jì)信息

常用參數(shù)

-e：指定性能事件

-a：顯示在所有CPU上的性能統(tǒng)計(jì)信息

-C：顯示在指定CPU上的性能統(tǒng)計(jì)信息

-p：指定進(jìn)程PID

-t：指定線程TID

-K：隱藏內(nèi)核統(tǒng)計(jì)信息

-U：隱藏用戶空間的統(tǒng)計(jì)信息

-s：指定待解析的符號(hào)信息

（2）Perfstat：分析系統(tǒng)/進(jìn)程的整體性能概況。

常用參數(shù)：

-e：選擇性能事件

-i：禁止子任務(wù)繼承父任務(wù)的性能計(jì)數(shù)器。

-r：重復(fù)執(zhí)行n次目標(biāo)程序，并給出性能指標(biāo)在n次執(zhí)行中的變化范圍。

-n：僅輸出目標(biāo)程序的執(zhí)行時(shí)間，而不開(kāi)啟任何性能計(jì)數(shù)器。

-a：指定全部cpu

-C：指定某個(gè)cpu

-A：將給出每個(gè)處理器上相應(yīng)的信息。

-p：指定待分析的進(jìn)程id

-t：指定待分析的線程id

（3）Perfrecord：記錄一段時(shí)間內(nèi)系統(tǒng)/進(jìn)程的性能時(shí)間。

常用參數(shù)：

-e：選擇性能事件

-p：待分析進(jìn)程的id

-t：待分析線程的id

-a：分析整個(gè)系統(tǒng)的性能

-C：只采集指定CPU數(shù)據(jù)

-c：事件的采樣周期

-o：指定輸出文件，默認(rèn)為perf.data

-A：以append的方式寫(xiě)輸出文件

-f：以O(shè)verWrite的方式寫(xiě)輸出文件

-g：記錄函數(shù)間的調(diào)用關(guān)系

（4）PerfReport：讀取perfrecord生成的數(shù)據(jù)文件，并顯示分析數(shù)據(jù)。

常用參數(shù)：

-i：輸入的數(shù)據(jù)文件

-v：顯示每個(gè)符號(hào)的地址

-d：只顯示指定dos的符號(hào)

-C：只顯示指定comm的信息（Comm.觸發(fā)事件的進(jìn)程名）

-S：只考慮指定符號(hào)

-U：只顯示已解析的符號(hào)

-g［type，min，order］：顯示調(diào)用關(guān)系，具體等同于perftop命令中的-g

-c：只顯示指定cpu采樣信息

-M：以指定匯編指令風(fēng)格顯示

–source：以匯編和source的形式進(jìn)行顯示

使用perf對(duì)程序進(jìn)行函數(shù)調(diào)用的關(guān)系分析后，統(tǒng)計(jì)函數(shù)的調(diào)用次數(shù)，算出百分比，可以得到進(jìn)程運(yùn)行的可信數(shù)據(jù)（圖1）。

圖1perf的函數(shù)調(diào)用分析結(jié)果

圖中第一列表示函數(shù)的子函數(shù)執(zhí)行占用的CPU比例，第二列表示函數(shù)執(zhí)行占用的CPU比例，第三列表示函數(shù)所在的DSO，第四列表示函數(shù)名。通過(guò)使用perf工具，可以方便地得到定位程序的熱點(diǎn)代碼，以指導(dǎo)程序性能瓶頸的優(yōu)化。

但是這種結(jié)果查看函數(shù)之間的調(diào)用關(guān)系十分不方便，可以使用一些腳本生成火焰圖（FlameGraph）來(lái)直觀地表示函數(shù)調(diào)用關(guān)系。

圖2火焰圖

火焰圖使用SVG的圖像格式進(jìn)行存儲(chǔ)，方便用戶與圖像進(jìn)行交互。火焰圖中的函數(shù)方塊的長(zhǎng)度越長(zhǎng)，那么表示執(zhí)行該函數(shù)的CPU時(shí)間越長(zhǎng)?；鹧鎴D的底部為父函數(shù)，上方為它的子函數(shù)。通過(guò)火焰圖的形式，函數(shù)調(diào)用的關(guān)系以及CPU占用比都更加直觀地呈現(xiàn)出來(lái)。

3.3VTune

VTune是Intel公司開(kāi)發(fā)的的一個(gè)功能十分強(qiáng)大的應(yīng)用程序性能分析軟件，包括尋找軟件性能熱點(diǎn)、線程性能檢測(cè)、CPU利用率、IO負(fù)載監(jiān)測(cè)等功能，還提供豐富的UI界面供用戶操作，簡(jiǎn)單易上手。

VTune提供了本地連接、遠(yuǎn)程連接、安卓設(shè)備連接等多種方式來(lái)對(duì)不同的應(yīng)用程序進(jìn)行測(cè)試，還提供PerformanceSnapshot、Hotpots、MicroarchitectureExploration、Threading和IO等不同方面的性能分析模塊（圖3）。

圖3VTune性能分析模塊

用戶使用VTune進(jìn)行模塊分析后，可以通過(guò)Summary、Bottom-up、Caller/Callee、Top-downTreehePlatfom5個(gè)選項(xiàng)框查看性能分析結(jié)果（圖4）。

圖4Hotspots分析結(jié)果

Summary：顯示有關(guān)整個(gè)應(yīng)用程序執(zhí)行的統(tǒng)計(jì)信息，以分析CPU時(shí)間和處理器利用率。

Bottom-up：在自下而上的樹(shù)中顯示熱點(diǎn)函數(shù)，每個(gè)函數(shù)的CPU時(shí)間和CPU利用率。

Top-downTree：顯示調(diào)用樹(shù)中的熱點(diǎn)函數(shù)，僅函數(shù)的性能指標(biāo)（不包括子函數(shù)）以及函數(shù)及其子函數(shù)的總性能指標(biāo)。

Caller/Callee：顯示所選函數(shù)的父函數(shù)和子函數(shù)。

Platform：提供有關(guān)CPU和GPU利用率，幀速率，內(nèi)存帶寬和用戶任務(wù)的詳細(xì)信息。

（1）PerformanceSnapshot

該功能模塊能夠?qū)?yīng)用程序進(jìn)行總體的分析（圖4），包括IPC、GFLOPS、CPU頻率、CPU核心利用率、微架構(gòu)使用率、內(nèi)存使用率等指標(biāo)等，但只能給出一個(gè)總體的數(shù)值，要分析各個(gè)函數(shù)對(duì)CPU的占用時(shí)間等詳細(xì)數(shù)值要進(jìn)行更加詳細(xì)的分析，一般進(jìn)行性能分析時(shí)，首先進(jìn)行這個(gè)模塊的分析。

圖5PerformanceSnapshot分析結(jié)果示意圖

（2）Hotpots

Hotspots分析可以了解應(yīng)用程序流程，并確定獲得大量執(zhí)行時(shí)間的代碼段（熱點(diǎn)），這是用戶進(jìn)行算法分析的起點(diǎn)。熱點(diǎn)分析有兩種基于采樣的收集模式：用戶模式采樣會(huì)產(chǎn)生更高的開(kāi)銷，但不需要采樣驅(qū)動(dòng)程序即可進(jìn)行收集；基于硬件事件的采樣，可以提供最小的收集開(kāi)銷，但需要安裝采樣驅(qū)動(dòng)程序或Perf。在用戶模式采樣中，收集器不會(huì)收集系統(tǒng)范圍內(nèi)的性能數(shù)據(jù)，而是只關(guān)注您的應(yīng)用程序。硬件基于事件的采樣模式是基于硬件基于事件的采樣收集，分析當(dāng)前系統(tǒng)上運(yùn)行的所有進(jìn)程，提供關(guān)于整個(gè)系統(tǒng)性能的CPU時(shí)間數(shù)據(jù)。

在進(jìn)行Hotspots分析后，可以查看Bottom-up視圖下的熱點(diǎn)函數(shù)，雙擊函數(shù)即可對(duì)源碼以及匯編代碼進(jìn)行分析。

圖6源碼和匯編代碼分析圖

（3）Threading

Threading分析可以用于探索CPU利用率低下的原因，相較于其他模塊，它顯示了全部的線程數(shù)量，以及各個(gè)線程的等待時(shí)間以及使用時(shí)間（圖7），使用戶能夠更好地把握各個(gè)線程之間的切換情況。通過(guò)這些信息，用戶可以清晰地觀察工作線程的實(shí)際執(zhí)行過(guò)程，了解程序的實(shí)際執(zhí)行邏輯，明確各個(gè)線程的工作狀態(tài)與預(yù)期是否有出入。

圖7Summary視圖下的CPU利用率分析圖

（4）I/O

I/O模塊能夠分析設(shè)備的PCIeI/O帶寬消耗，DirectorI/O技術(shù)和內(nèi)存映射I/O流量、內(nèi)存帶寬消耗Intel?UPI帶寬消耗以及軟件數(shù)據(jù)平面利用率，以在硬件和軟件級(jí)別上定位I/O密集型應(yīng)用程序的性能瓶頸。

4、結(jié)束語(yǔ)

隨著業(yè)務(wù)的日漸復(fù)雜，程序性能優(yōu)化儼然成為了每一位技術(shù)人的必修課，而程序的性能調(diào)優(yōu)工作又是一個(gè)十分復(fù)雜的工作。而掌握一些常用的系統(tǒng)性能調(diào)優(yōu)工具的使用，能更好地剖析程序，迅速而準(zhǔn)確的找到性能熱點(diǎn)，以指導(dǎo)性能瓶頸問(wèn)題的解決方案設(shè)計(jì)。
責(zé)任編輯人：CC