色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

如何避免內存泄漏的方法和原則

Q4MP_gh_c472c21 ? 來源:搜狐網 ? 作者:搜狐網 ? 2020-10-21 14:30 ? 次閱讀

本文向讀者介紹了如何避免內存泄漏的方法和原則,在細節和大體方向上均給出一些可行性方案。讀者可以嘗試文中提出的方法,改進自己的代碼,大大減少內存泄漏的可能性。

前言

近年來,討論 C++ 的人越來越少了,一方面是由于像 Python,Go 等優秀的語言的流行,另一方面,大家也越來越明白一個道理,并不是所有的場景都必須使用 C++ 進行開發。Python 可以應付大部分對性能要求不高的場景,Go 可以應付大部分對并發要求較高的場景,而由于 C++ 的復雜性,只有在對性能極其苛刻的場景下,才會考慮使用。

那么到底多苛刻算是苛刻呢?Go 自帶內存管理,也就是 GC 功能,經過多年的優化,在 Go 中每次 GC 可能會引入 500us 的 STW 延遲。


也就是說,如果你的應用場景可以容忍不定期的 500us 的延遲,那么用 Go 都是沒有問題的。如果你無法容忍 500us 的延遲,那么帶 GC 功能的語言就基本無法使用了,只能選擇自己管理內存的語言,例如 C++。那么由手動管理內存而帶來的編程復雜度也就隨之而來了。
作為 C++ 程序員,內存泄露始終是懸在頭上的一顆炸彈。在過去幾年的 C++ 開發過程中,由于我們采用了一些技術,我們的程序發生內存泄露的情況屈指可數。今天就在這里向大家做一個簡單的介紹。

內存是如何泄露的

在 C++ 程序中,主要涉及到的內存就是『棧』和『堆』(其他部分不在本文中介紹了)。

通常來說,一個線程的棧內存是有限的,通常來說是 8M 左右(取決于運行的環境)。棧上的內存通常是由編譯器來自動管理的。當在棧上分配一個新的變量時,或進入一個函數時,棧的指針會下移,相當于在棧上分配了一塊內存。我們把一個變量分配在棧上,也就是利用了棧上的內存空間。當這個變量的生命周期結束時,棧的指針會上移,相同于回收了內存。

由于棧上的內存的分配和回收都是由編譯器控制的,所以在棧上是不會發生內存泄露的,只會發生棧溢出(Stack Overflow),也就是分配的空間超過了規定的棧大小。

而堆上的內存是由程序直接控制的,程序可以通過 malloc/free 或 new/delete 來分配和回收內存,如果程序中通過 malloc/new 分配了一塊內存,但忘記使用 free/delete 來回收內存,就發生了內存泄露。

經驗 #1:盡量避免在堆上分配內存

既然只有堆上會發生內存泄露,那第一原則肯定是避免在堆上面進行內存分配,盡可能的使用棧上的內存,由編譯器進行分配和回收,這樣當然就不會有內存泄露了。

然而,只在棧上分配內存,在有 IO 的情況下是存在一定局限性的。 舉個例子,為了完成一個請求,我們通常會為這個請求構造一個 Context 對象,用于描述和這個請求有關的一些上下文。例如下面一段代碼:

void Foo(Reuqest* req) { RequestContext ctx(req); HandleRequest(&ctx);}

如果 HandleRequest 是一個同步函數,當這個函數返回時,請求就可以被處理完成,那么顯然 ctx 是可以被分配在棧上的。

但如果 HandleRequest 是一個異步函數,例如:

void HandleRequest(RequestContext* ctx, Callback cb);

那么顯然,ctx 是不能被分配在棧上的,因為如果 ctx 被分配在棧上,那么當 Foo 函數推出后,ctx 對象的生命周期也就結束了。而 FooCB 中顯然會使用到 ctx 對象。

void HandleRequest(RequestContext* ctx, Callback cb); void Foo(Reuqest* req) { auto ctx = new RequestContext(req); HandleRequest(ctx, FooCB);} void FooCB(RequestContext* ctx) { FinishRequest(ctx); delete ctx;} 在這種情況下,如果忘記在 FooCB 中調用 delete ctx,則就會觸發內存泄露。盡管我們可以借助一些靜態檢查工具對代碼進行檢查,但往往異步程序的邏輯是極其復雜的,一個請求的生命周期中,也需要進行大量的內存分配操作,靜態檢查工具往往無法發現所有的內存泄露情況。

那么怎么才能避免這種情況的產生呢?引入智能指針顯然是一種可行的方法,但引入 shared_ptr 往往引入了額外的性能開銷,并不十分理想。 在 SmartX,我們通常采用兩種方法來應對這種情況。

經驗 #2:使用 Arena

Arena 是一種統一化管理內存生命周期的方法。所有需要在堆上分配的內存,不通過 malloc/new,而是通過 Arena 的 CreateObject 接口。同時,不需要手動的執行 free/delete,而是在 Arena 被銷毀的時候,統一釋放所有通過 Arena 對象申請的內存。所以,只需要確保 Arena 對象一定被銷毀就可以了,而不用再關心其他對象是否有漏掉的 free/delete。這樣顯然降低了內存管理的復雜度。

此外,我們還可以將 Arena 的生命周期與 Request 的生命周期綁定,一個 Request 生命周期內的所有內存分配都通過 Arena 完成。這樣的好處是,我們可以在構造 Arena 的時候,大概預估出處理完成這個 Request 會消耗多少內存,并提前將會使用到的內存一次性的申請完成,從而減少了在處理一個請求的過程中,分配和回收內存的次數,從而優化了性能。

我們最早看到 Arena 的思想,是在 LevelDB 的代碼中。這段代碼相當簡單,建議大家直接閱讀。

經驗 #3:使用 Coroutine

Coroutine 相信大家并不陌生,那 Coroutine 的本質是什么?我認為 Coroutine 的本質,是使得一個線程中可以存在多個上下文,并可以由用戶控制在多個上下文之間進行切換。而在上下文中,一個重要的組成部分,就是棧指針。使用 Coroutine,意味著我們在一個線程中,可以創造(或模擬)多個棧。

有了多個棧,意味著當我們要做一個異步處理時,不需要釋放當前棧上的內存,而只需要切換到另一個棧上,就可以繼續做其他的事情了,當異步處理完成時,可以再切換回到這個棧上,將這個請求處理完成。 還是以剛才的代碼為示例:

void Foo(Reuqest* req) { RequestContext ctx(req); HandleRequest(&ctx);} void HandleRequest(RequestCtx* ctx) { SubmitAsync(ctx); Coroutine::Self()-》Yield(); CompleteRequest(ctx);} 這里的精髓在于,盡管 Coroutine::Self()-》Yield() 被調用時,程序可以跳出 HandleRequest 函數去執行其他代碼邏輯,但當前的棧卻被保存了下來,所以 ctx 對象是安全的,并沒有被釋放。

這樣一來,我們就可以完全拋棄在堆上申請內存,只是用棧上的內存,就可以完成請求的處理,完全不用考慮內存泄露的問題。然而這種假設過于理想,由于在棧上申請內存存在一定的限制,例如棧大小的限制,以及需要在編譯是知道分配內存的大小,所以在實際場景中,我們通常會結合使用 Arena 和 Coroutine 兩種技術一起使用。

有人可能會提到,想要多個棧用多個線程不就可以了?然而用多線程實現多個棧的問題在于,線程的創建和銷毀的開銷極大,且線程間切塊,也就是在棧之間進行切換的代銷需要經過操作系統,這個開銷也是極大的。所以想用線程模擬多個棧的想法在實際場景中是走不通的。

關于 Coroutine 有很多開源的實現方式,大家可以在 github 上找到很多,C++20 標準也會包含 Coroutine 的支持。在 SmartX 內部,我們很早就實現了 Coroutine,并對所有異步 IO 操作進行了封裝,示例可參考我們之前的一篇文章 smartx:基于 Coroutine 的異步 RPC 框架示例(C++)

這里需要強調一下,Coroutine 確實會帶來一定的性能開銷,通常 Coroutine 切換的開銷在 20ns 以內,然而我們依然在對性能要求很苛刻的場景使用 Coroutine,一方面是因為 20ns 的性能開銷是相對很小的,另一方面是因為 Coroutine 極大的降低了異步編程的復雜度,降低了內存泄露的可能性,使得編寫異步程序像編寫同步程序一樣簡單,降低了程序員心智的開銷。

boost 實現的 coroutine 的性能測試結果

經驗 #4:善用 RAII

盡管在有些場景使用了 Coroutine,但還是可能會有在堆上申請內存的需要,而此時有可能 Arena 也并不適用。在這種情況下,善用 RAII(Resource Acquisition Is Initialization)思想會幫助我們解決很多問題。

簡單來說,RAII 可以幫助我們將管理堆上的內存,簡化為管理棧上的內存,從而達到利用編譯器自動解決內存回收問題的效果。此外,RAII 可以簡化的還不僅僅是內存管理,還可以簡化對資源的管理,例如 fd,鎖,引用計數等等。

當我們需要在堆上分配內存時,我們可以同時在棧上面分配一個對象,讓棧上面的對象對堆上面的對象進行封裝,用時通過在棧對象的析構函數中釋放堆內存的方式,將棧對象的生命周期和堆內存進行綁定。

unique_ptr 就是一種很典型的例子。然而 unique_ptr 管理的對象類型只能是指針,對于其他的資源,例如 fd,我們可以通過將 fd 封裝成另外一個 FileHandle 對象的方式管理,也可以采用一些更通用的方式。例如,在我們內部的 C++ 基礎庫中實現了 Defer 類,想法類似于 Go 中 defer。

void Foo() { int fd = open(); Defer d = [=]() { close(fd); } // do something with fd}

經驗 #5:便于 Debug

在特定的情況下,我們難免還是要手動管理堆上的內存。然而當我們面臨一個正在發生內存泄露線上程序時,我們應該怎么處理呢?

當然不是簡單的『重啟大法好』,畢竟重啟后還是可能會產生泄露,而且最寶貴的現場也被破壞了。最佳的方式,還是利用現場進行 Debug,這就要求程序具有便于 Debug 的能力。

這里不得不提到一個經典而強大的工具 gperftools。gperftools 是 google 開源的一個工具集,包含了 tcmalloc,heap profiler,heap checker,cpu profiler 等等。gperftools 的作者之一,就是大名鼎鼎的 Sanjay Ghemawat,沒錯,就是與 Jeff Dean 齊名,并和他一起寫 MapReduce 的那個 Sanjay。

gperftools 的一些經典用法,我們就不在這里進行介紹了,大家可以自行查看文檔。而使用 gperftools 可以在不重啟程序的情況下,進行內存泄露檢查,這個恐怕是很少有人了解。

實際上我們 Release 版本的 C++ 程序可執行文件在編譯時全部都鏈接了 gperftools。在 gperftools 的 heap profiler 中,提供了 HeapProfilerStart 和 HeapProfilerStop 的接口,使得我們可以在運行時啟動和停止 heap profiler。同時,我們每個程序都暴露了 RPC 接口,用于接收控制命令和調試命令。在調試命令中,我們就增加了調用 HeapProfilerStart 和 HeapProfilerStop 的命令。由于鏈接了 tcmalloc,所以 tcmalloc 可以獲取所有內存分配和回收的信息。當 heap profiler 啟動后,就會定期的將程序內存分配和回收的行為 dump 到一個臨時文件中。

當程序運行一段時間后,你將得到一組 heap profile 文件

profile.0001.heap profile.0002.heap 。。. profile.0100.heap每個 profile 文件中都包含了一段時間內,程序中內存分配和回收的記錄。如果想要找到內存泄露的線索,可以通過使用pprof --base=profile.0001.heap /usr/bin/xxx profile.0100.heap --text 來進行查看,也可以生成 pdf 文件,會更直觀一些。

這樣一來,我們就可以很方便的對線上程序的內存泄露進行 Debug 了。

寫在最后

C++ 可謂是最復雜、最靈活的語言,也最容易給大家帶來困擾。如果想要用好 C++,團隊必須保持比較成熟的心態,團隊成員必須愿意按照一定的規則來使用 C++,而不是任性的隨意發揮。這樣大家才能把更多精力放在業務本身,而不是編程語言的特性上。
責任編輯人:CC

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 內存
    +關注

    關注

    8

    文章

    3048

    瀏覽量

    74209
  • 內存泄漏
    +關注

    關注

    0

    文章

    39

    瀏覽量

    9231

原文標題:C++ 如何避免內存泄露

文章出處:【微信號:gh_c472c2199c88,微信公眾號:嵌入式微處理器】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    C++內存泄漏分析方法

    C++是一種非常流行的計算機編程語言,在使用的過程中容易出現內存泄漏問題,而該問題往往難以識別。給出了一種對C++內存泄漏問題進行分析的方法
    發表于 11-23 11:19 ?5次下載
    C++<b class='flag-5'>內存</b><b class='flag-5'>泄漏</b>分析<b class='flag-5'>方法</b>

    內存泄漏的特點和類型

    在計算機科學中,內存泄漏(memory leak)指由于疏忽或錯誤使程序未能釋放而造成不能再使用的內存的情況。內存泄漏并非指
    的頭像 發表于 06-20 10:58 ?2855次閱讀

    內存泄漏的檢測方法

    內存泄露(Memory leak)指的是,在程序中動態申請的內存,在使用完后既沒有釋放,又無法被程序的其他部分訪問。內存泄露是在開發大型程序中最令人頭疼的問題,以至于有人說,內存泄露是
    的頭像 發表于 06-20 11:01 ?3179次閱讀

    內存泄漏問題原理及檢視方法

    內存泄漏問題很可能導致單板運行固定時間以后就復位,只能通過批量升級才能解決,實際影響不佳。本文通過介紹內存泄漏問題原理及檢視方法,希望后續能
    的頭像 發表于 10-10 10:42 ?2590次閱讀

    簡述C語言中的內存泄漏的原理及解決方法

    內存泄漏的原理 只有在堆內存里面才會發生內存泄漏的問題,在棧內存中不會發生
    的頭像 發表于 06-29 14:58 ?7330次閱讀
    簡述C語言中的<b class='flag-5'>內存</b><b class='flag-5'>泄漏</b>的原理及解決<b class='flag-5'>方法</b>

    如何使用ThreadLocal來避免內存泄漏

    本次給大家介紹重要的工具ThreadLocal。講解內容如下,同時介紹什么場景下發生內存泄漏,如何復現內存泄漏,如何正確使用它來避免
    的頭像 發表于 08-20 09:29 ?4261次閱讀
    如何使用ThreadLocal來<b class='flag-5'>避免</b><b class='flag-5'>內存</b><b class='flag-5'>泄漏</b>

    什么是內存泄漏內存泄漏有哪些現象

    內存泄漏幾乎是很難避免的,不管是老手還是新手,都存在這個問題,甚至 Windows 與 Linux 這類系統軟件也或多或少存在著內存泄漏
    的頭像 發表于 09-05 17:24 ?9766次閱讀

    什么是內存泄漏?如何避免JavaScript內存泄漏

    JavaScript 代碼中常見的內存泄漏的常見來源: 研究內存泄漏問題就相當于尋找符合垃圾回收機制的編程方式,有效避免對象引用的問題。
    發表于 10-27 11:30 ?440次閱讀
    什么是<b class='flag-5'>內存</b><b class='flag-5'>泄漏</b>?如何<b class='flag-5'>避免</b>JavaScript<b class='flag-5'>內存</b><b class='flag-5'>泄漏</b>

    內存泄漏如何避免

    的數,那就是內存溢出。 2. 內存泄漏 內存泄露 memory leak,是指程序在申請內存后,無法釋放已申請的
    的頭像 發表于 11-10 11:04 ?775次閱讀
    <b class='flag-5'>內存</b><b class='flag-5'>泄漏</b>如何<b class='flag-5'>避免</b>

    內存泄漏會產生哪些后果

    內存泄漏原因 內存泄漏在C/C++這種不帶GC(Garbage Collection)的語言里,是一個經常發生的問題。因為沒有GC,所以分配的內存
    的頭像 發表于 11-10 15:06 ?831次閱讀
    <b class='flag-5'>內存</b><b class='flag-5'>泄漏</b>會產生哪些后果

    線程內存泄漏問題的定位

    記錄一個關于線程內存泄漏問題的定位過程,以及過程中的收獲。 1. 初步定位 是否存在內存泄漏:想到內存
    的頭像 發表于 11-13 11:38 ?644次閱讀
    線程<b class='flag-5'>內存</b><b class='flag-5'>泄漏</b>問題的定位

    如何發現內存泄漏

    檢測兩個角度介紹在 Linux 環境進行內存泄漏檢測的方法,并重點介紹靜態分析工具 BEAM、動態監測工具 Valgrind 和 rational purify 的使用方法。相信通過本
    的頭像 發表于 11-13 15:41 ?647次閱讀

    內存溢出與內存泄漏:定義、區別與解決方案

    內存溢出與內存泄漏:定義、區別與解決方案? 內存溢出和內存泄漏是計算機科學中常見的問題,在開發和
    的頭像 發表于 12-19 14:10 ?2959次閱讀

    C語言內存泄漏問題原理

    內存泄漏問題只有在使用堆內存的時候才會出現,棧內存不存在內存泄漏問題,因為棧
    發表于 03-19 11:38 ?567次閱讀
    C語言<b class='flag-5'>內存</b><b class='flag-5'>泄漏</b>問題原理

    如何檢測內存泄漏

    檢測內存泄漏是軟件開發過程中一項至關重要的任務,它有助于識別和解決那些導致程序占用過多內存資源,從而影響程序性能甚至導致程序崩潰的問題。以下將詳細闡述幾種常見的內存
    的頭像 發表于 07-30 11:50 ?2186次閱讀
    主站蜘蛛池模板: 萝莉御姐被吸奶| 少妇高潮久久久久7777| 久久热免费视频| 久久久欧美国产精品人妻噜噜| 九九热视频 这里有精品| 久久婷五月综合色啪首页| 老师系列高H文| 暖暖视频 免费 高清 日本8| 青青草原伊人网| 无码毛片内射白浆视频| 亚洲精品视频在线免费| 在线观看国产小视频| 99精品中文字幕在线观看| 成年性生交大片免费看| 国产精品久久久久久久久LI无码| 狠狠色狠狠色综合日日32| 伦理片午夜在线视频| 秋霞伦理电影在2017韩国在线伦| 无码专区久久综合久综合字幕| 一边啪啪的一边呻吟声口述| 97碰成视频免费| 东京热无码中文字幕av专区| 国外经典三级| 免费精品国产日韩热久久| 日韩高清毛片| 亚洲精品乱码电影在线观看| 最新国产av.在线视频| 冰山高冷受被c到哭np双性| 国产无遮挡色视频免费观看性色| 浪潮AV色综合久久天堂| 日韩精品一区二区中文 | 国产精品无码亚洲网| 久久观看视频| 日本内射精品一区二区视频| 亚洲免费无l码中文在线视频| 98久久人妻少妇激情啪啪| 国产成人无码WWW免费视频在线| 久久九九精品国产自在现线拍| 日本电影小姐| 一个人免费观看在线视频播放 | 人善交XUANWEN200喷水|