99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線(xiàn)實(shí)戰(zhàn)洞察。

C/C++跨平臺(tái)進(jìn)程內(nèi)存監(jiān)控:從概念到實(shí)戰(zhàn),精準(zhǔn)定位內(nèi)存泄漏

C/C++跨平臺(tái)進(jìn)程內(nèi)存監(jiān)控:從概念到實(shí)戰(zhàn),精準(zhǔn)定位內(nèi)存泄漏 1. 項(xiàng)目概述與核心價(jià)值最近在調(diào)試一個(gè)長(zhǎng)時(shí)間運(yùn)行的后臺(tái)服務(wù)時(shí)遇到了一個(gè)典型問(wèn)題程序運(yùn)行幾天后響應(yīng)速度明顯變慢但通過(guò)任務(wù)管理器或top命令查看CPU使用率并不高。直覺(jué)告訴我這很可能是內(nèi)存使用在緩慢增長(zhǎng)也就是常說(shuō)的“疑似內(nèi)存泄漏”。然而無(wú)論是Windows的任務(wù)管理器還是Linux的top顯示的“內(nèi)存”指標(biāo)往往有好幾個(gè)比如“工作集內(nèi)存”、“專(zhuān)用工作集”、“提交大小”、“虛擬內(nèi)存大小”、“RSS”、“VSZ”等等看得人眼花繚亂。對(duì)于一個(gè)C/C開(kāi)發(fā)者來(lái)說(shuō)我們需要的不是一個(gè)籠統(tǒng)的、可能被操作系統(tǒng)內(nèi)存管理策略影響的數(shù)字而是一個(gè)能準(zhǔn)確反映我們程序“真實(shí)”占用了多少物理內(nèi)存的指標(biāo)以便進(jìn)行精準(zhǔn)的性能分析和問(wèn)題定位。這個(gè)項(xiàng)目的核心目標(biāo)就是深入探討如何在C/C程序中以編程的方式、跨平臺(tái)地涵蓋Windows和Linux獲取當(dāng)前進(jìn)程精確的內(nèi)存占用信息。這不僅僅是調(diào)用一個(gè)API那么簡(jiǎn)單它涉及到對(duì)操作系統(tǒng)內(nèi)存管理機(jī)制的理解以及對(duì)不同內(nèi)存統(tǒng)計(jì)口徑的辨析。掌握這項(xiàng)技能對(duì)于開(kāi)發(fā)高性能服務(wù)、嵌入式系統(tǒng)、游戲引擎或任何對(duì)資源敏感的應(yīng)用都至關(guān)重要。它能幫助你構(gòu)建自己的監(jiān)控模塊、實(shí)現(xiàn)內(nèi)存預(yù)警、輔助排查內(nèi)存泄漏是進(jìn)階開(kāi)發(fā)者工具箱里的必備利器。2. 內(nèi)存概念辨析我們到底要統(tǒng)計(jì)什么在動(dòng)手寫(xiě)代碼之前我們必須先搞清楚目標(biāo)。操作系統(tǒng)報(bào)告的內(nèi)存使用情況有多重含義用錯(cuò)指標(biāo)會(huì)導(dǎo)致完全錯(cuò)誤的結(jié)論。2.1 物理內(nèi)存 vs 虛擬內(nèi)存這是最基本的區(qū)分。我們程序代碼中通過(guò)malloc或new申請(qǐng)的內(nèi)存首先獲得的是虛擬內(nèi)存地址。操作系統(tǒng)和CPU的MMU內(nèi)存管理單元負(fù)責(zé)將這些虛擬地址映射到物理內(nèi)存條上的真實(shí)地址。一個(gè)進(jìn)程的虛擬地址空間通常非常大在32位系統(tǒng)上是4GB64位系統(tǒng)更是天文數(shù)字但實(shí)際使用的物理內(nèi)存卻有限。當(dāng)我們說(shuō)“內(nèi)存占用高”通常指的是物理內(nèi)存RAM的占用高因?yàn)檫@直接關(guān)系到系統(tǒng)是否會(huì)開(kāi)始使用緩慢的交換分區(qū)Swap從而導(dǎo)致性能驟降。2.2 關(guān)鍵內(nèi)存指標(biāo)詳解不同的工具和API會(huì)返回不同的內(nèi)存值以下是幾個(gè)最常見(jiàn)的工作集Working Set 這是進(jìn)程當(dāng)前在物理內(nèi)存中的那部分內(nèi)存頁(yè)的集合。操作系統(tǒng)會(huì)根據(jù)訪(fǎng)問(wèn)頻率動(dòng)態(tài)地將一些不常用的頁(yè)面移出工作集可能寫(xiě)入交換文件。這個(gè)值波動(dòng)很大但最能反映“此刻”對(duì)物理內(nèi)存的壓力。專(zhuān)用工作集Private Working Set 工作集中僅屬于該進(jìn)程自身、無(wú)法與其他進(jìn)程共享的內(nèi)存部分。這更接近我們通常理解的“這個(gè)進(jìn)程自己用了多少物理內(nèi)存”。共享庫(kù)DLL, .so的代碼段雖然在工作集中但因?yàn)槭枪蚕淼牟挥?jì)入此項(xiàng)。提交大小Commit Size 進(jìn)程向系統(tǒng)承諾保留的虛擬內(nèi)存總量。這包括了已在物理內(nèi)存中的部分也包括在磁盤(pán)頁(yè)面文件交換分區(qū)中預(yù)留的空間。這個(gè)值反映了進(jìn)程對(duì)系統(tǒng)虛擬內(nèi)存資源的總體需求。RSSResident Set Size Linux/Unix下的概念類(lèi)似于“工作集”指進(jìn)程在物理內(nèi)存中的總頁(yè)數(shù)。但它包括了共享庫(kù)所以多個(gè)進(jìn)程的RSS之和可能大于系統(tǒng)總物理內(nèi)存。VSZVirtual Memory Size Linux/Unix下的概念指進(jìn)程可訪(fǎng)問(wèn)的虛擬內(nèi)存總量類(lèi)似于“提交大小”。私有字節(jié)Private Bytes Windows下的性能計(jì)數(shù)器概念指進(jìn)程分配的、無(wú)法與其他進(jìn)程共享的虛擬內(nèi)存大小。這是診斷內(nèi)存泄漏最常用的指標(biāo)之一因?yàn)樗皇芪锢韮?nèi)存換入換出的影響只增不減除非釋放。對(duì)于我們這個(gè)項(xiàng)目如果目標(biāo)是監(jiān)控程序自身的內(nèi)存消耗趨勢(shì)尤其是排查泄漏私有字節(jié)Windows和進(jìn)程獨(dú)占的物理內(nèi)存Linux下需從RSS中估算是更可靠的指標(biāo)。如果目標(biāo)是評(píng)估程序?qū)Ξ?dāng)前系統(tǒng)物理內(nèi)存的實(shí)時(shí)壓力專(zhuān)用工作集Windows或PSSProportional Set Size Linux下更準(zhǔn)則更有參考價(jià)值。注意 沒(méi)有一個(gè)“絕對(duì)正確”的答案。選擇哪個(gè)指標(biāo)取決于你的目的。監(jiān)控泄漏看“私有字節(jié)”看實(shí)時(shí)影響看“專(zhuān)用工作集”或“PSS”。3. Windows平臺(tái)實(shí)現(xiàn)詳解Windows提供了多個(gè)API來(lái)獲取進(jìn)程內(nèi)存信息這里我們聚焦于最常用和準(zhǔn)確的兩種方式。3.1 使用GetProcessMemoryInfoAPI推薦這是最直接、信息最全的方式。它通過(guò)Psapi.h頭文件和Psapi.lib庫(kù)或Kernel32.lib提供。#include windows.h #include psapi.h #include stdio.h #include tchar.h // 確保鏈接 Psapi.lib #pragma comment(lib, Psapi.lib) // 對(duì)于高版本VS也可能是 Kernel32.lib // #pragma comment(lib, Kernel32.lib) void PrintMemoryInfoWindows() { HANDLE hProcess GetCurrentProcess(); PROCESS_MEMORY_COUNTERS pmc; ZeroMemory(pmc, sizeof(pmc)); pmc.cb sizeof(pmc); if (GetProcessMemoryInfo(hProcess, pmc, sizeof(pmc))) { _tprintf(_T( Windows 進(jìn)程內(nèi)存信息 \n)); _tprintf(_T(PageFaultCount頁(yè)面錯(cuò)誤次數(shù): %u\n), pmc.PageFaultCount); _tprintf(_T(PeakWorkingSetSize峰值工作集: %llu KB\n), pmc.PeakWorkingSetSize / 1024); _tprintf(_T(WorkingSetSize工作集: %llu KB\n), pmc.WorkingSetSize / 1024); // 這是我們最關(guān)心的指標(biāo)之一專(zhuān)用工作集物理內(nèi)存 _tprintf(_T(QuotaPeakPagedPoolUsage分頁(yè)池峰值: %llu KB\n), pmc.QuotaPeakPagedPoolUsage / 1024); _tprintf(_T(QuotaPagedPoolUsage分頁(yè)池: %llu KB\n), pmc.QuotaPagedPoolUsage / 1024); _tprintf(_T(QuotaPeakNonPagedPoolUsage非分頁(yè)池峰值: %llu KB\n), pmc.QuotaPeakNonPagedPoolUsage / 1024); _tprintf(_T(QuotaNonPagedPoolUsage非分頁(yè)池: %llu KB\n), pmc.QuotaNonPagedPoolUsage / 1024); _tprintf(_T(PagefileUsage頁(yè)面文件使用量: %llu KB\n), pmc.PagefileUsage / 1024); // 這是診斷內(nèi)存泄漏最關(guān)鍵的指標(biāo)私有字節(jié)虛擬內(nèi)存 _tprintf(_T(PeakPagefileUsage峰值頁(yè)面文件: %llu KB\n), pmc.PeakPagefileUsage / 1024); _tprintf(_T(PrivateUsage私有字節(jié): %llu KB\n), pmc.PrivateUsage / 1024); } else { _tprintf(_T(GetProcessMemoryInfo 失敗! 錯(cuò)誤碼: %d\n), GetLastError()); } CloseHandle(hProcess); // 雖然GetCurrentProcess不需要關(guān)閉但保持好習(xí)慣 }關(guān)鍵指標(biāo)解讀WorkingSetSize 當(dāng)前工作集大小即進(jìn)程在物理內(nèi)存中的總占用。PrivateUsage私有字節(jié)數(shù)。這是進(jìn)程通過(guò)malloc/new等分配的、不與其他進(jìn)程共享的虛擬內(nèi)存總量。內(nèi)存泄漏時(shí)這個(gè)值會(huì)持續(xù)增長(zhǎng)是監(jiān)控的重點(diǎn)。PagefileUsage 進(jìn)程在頁(yè)面文件中占用的空間量。PrivateUsage通常略大于或等于PagefileUsage因?yàn)榍罢甙烟峤坏形幢环猪?yè)到磁盤(pán)的內(nèi)存。實(shí)操心得在調(diào)試內(nèi)存泄漏時(shí)我通常會(huì)周期性地例如每分鐘記錄PrivateUsage的值到日志文件觀(guān)察其增長(zhǎng)趨勢(shì)。如果在一個(gè)負(fù)載穩(wěn)定的階段該值仍持續(xù)線(xiàn)性增長(zhǎng)基本可以斷定存在泄漏。GetProcessMemoryInfo需要PROCESS_QUERY_INFORMATION或PROCESS_QUERY_LIMITED_INFORMATION權(quán)限。對(duì)于當(dāng)前進(jìn)程GetCurrentProcess()這沒(méi)問(wèn)題如果你想查詢(xún)其他進(jìn)程的內(nèi)存需要先以相應(yīng)權(quán)限打開(kāi)進(jìn)程句柄。3.2 使用GlobalMemoryStatusEx和GetProcessWorkingSetSize這兩個(gè)API提供不同角度的信息。#include windows.h #include stdio.h void PrintSystemAndProcessMemory() { // 1. 獲取系統(tǒng)全局內(nèi)存狀態(tài) MEMORYSTATUSEX memStatus; memStatus.dwLength sizeof(memStatus); if (GlobalMemoryStatusEx(memStatus)) { _tprintf(_T(------ 系統(tǒng)全局內(nèi)存 ------\n)); _tprintf(_T(物理內(nèi)存總量: %llu MB\n), memStatus.ullTotalPhys / (1024 * 1024)); _tprintf(_T(可用物理內(nèi)存: %llu MB\n), memStatus.ullAvailPhys / (1024 * 1024)); _tprintf(_T(系統(tǒng)提交上限: %llu MB\n), memStatus.ullTotalPageFile / (1024 * 1024)); _tprintf(_T(當(dāng)前提交用量: %llu MB\n), memStatus.ullTotalPageFile - memStatus.ullAvailPageFile) / (1024 * 1024)); } // 2. 獲取當(dāng)前進(jìn)程的工作集大小范圍這是一個(gè)軟限制 SIZE_T minWs, maxWs; if (GetProcessWorkingSetSize(GetCurrentProcess(), minWs, maxWs)) { _tprintf(_T(------ 進(jìn)程工作集限制 ------\n)); _tprintf(_T(最小工作集: %llu KB\n), minWs / 1024); _tprintf(_T(最大工作集: %llu KB\n), maxWs / 1024); } }注意事項(xiàng)GlobalMemoryStatusEx獲取的是整個(gè)系統(tǒng)的內(nèi)存情況有助于判斷你的程序是否處于一個(gè)內(nèi)存緊張的環(huán)境中。GetProcessWorkingSetSize獲取的是工作集大小的軟限制操作系統(tǒng)會(huì)嘗試將進(jìn)程的工作集維持在這個(gè)范圍內(nèi)但并非強(qiáng)制。你可以使用SetProcessWorkingSetSize來(lái)嘗試設(shè)置它但強(qiáng)制縮小可能導(dǎo)致性能問(wèn)題因?yàn)轫?yè)面錯(cuò)誤會(huì)急劇增加。4. Linux平臺(tái)實(shí)現(xiàn)詳解Linux下獲取進(jìn)程內(nèi)存信息主要依賴(lài)于讀取虛擬文件系統(tǒng)/proc中的文件。/proc/[pid]/status和/proc/[pid]/statm是兩個(gè)關(guān)鍵文件。4.1 解析/proc/self/status文件信息全面/proc/self是一個(gè)指向當(dāng)前進(jìn)程/proc/[pid]目錄的符號(hào)鏈接使用起來(lái)很方便。#include stdio.h #include stdlib.h #include string.h void PrintMemoryInfoLinuxFromStatus() { FILE* f fopen(/proc/self/status, r); if (!f) { perror(Failed to open /proc/self/status); return; } char line[256]; long vmSizeKb 0, vmRSSKb 0, vmDataKb 0, vmStkKb 0, vmExeKb 0, vmLibKb 0; printf( Linux 進(jìn)程內(nèi)存信息 (/proc/self/status) \n); while (fgets(line, sizeof(line), f)) { // 查找關(guān)鍵字段 if (strncmp(line, VmSize:, 7) 0) { sscanf(line 7, %ld, vmSizeKb); printf(VmSize (虛擬內(nèi)存總量類(lèi)似VSZ): %ld KB\n, vmSizeKb); } else if (strncmp(line, VmRSS:, 6) 0) { sscanf(line 6, %ld, vmRSSKb); printf(VmRSS (常駐物理內(nèi)存類(lèi)似RSS): %ld KB\n, vmRSSKb); } else if (strncmp(line, VmData:, 7) 0) { sscanf(line 7, %ld, vmDataKb); printf(VmData (數(shù)據(jù)段堆內(nèi)存): %ld KB\n, vmDataKb); } else if (strncmp(line, VmStk:, 6) 0) { sscanf(line 6, %ld, vmStkKb); printf(VmStk (棧內(nèi)存): %ld KB\n, vmStkKb); } else if (strncmp(line, VmExe:, 6) 0) { sscanf(line 6, %ld, vmExeKb); printf(VmExe (代碼段): %ld KB\n, vmExeKb); } else if (strncmp(line, VmLib:, 6) 0) { sscanf(line 6, %ld, vmLibKb); printf(VmLib (共享庫(kù)代碼): %ld KB\n, vmLibKb); } // 還可以解析 VmSwap, VmPTE, VmPeak 等 } fclose(f); // 估算近似“私有內(nèi)存”RSS - 共享庫(kù)部分這是一個(gè)粗略估算 // 注意更準(zhǔn)確的“私有內(nèi)存”需要計(jì)算PSS但解析/proc/self/smaps更復(fù)雜 printf(\n[估算] 近似私有物理內(nèi)存 (VmRSS - VmLib): %ld KB\n, vmRSSKb - vmLibKb); printf([估算] 程序自身虛擬內(nèi)存 (VmDataVmStkVmExe): %ld KB\n, vmDataKb vmStkKb vmExeKb); }關(guān)鍵指標(biāo)解讀VmSize 相當(dāng)于VSZ進(jìn)程總的虛擬內(nèi)存空間。VmRSS 相當(dāng)于RSS進(jìn)程占用的物理內(nèi)存總和包含共享庫(kù)。VmData 這是堆heap和已初始化數(shù)據(jù)段的大小。程序運(yùn)行時(shí)通過(guò)malloc/new分配的內(nèi)存主要反映在這里的增長(zhǎng)上。監(jiān)控這個(gè)值的變化對(duì)發(fā)現(xiàn)內(nèi)存泄漏很有幫助。VmStk 棧內(nèi)存大小。VmLib 共享庫(kù)代碼占用的物理內(nèi)存。注意/proc/self/status中的值單位是KB。VmData的增長(zhǎng)是發(fā)現(xiàn)內(nèi)存泄漏的強(qiáng)信號(hào)但它屬于虛擬內(nèi)存范疇。要估算“私有物理內(nèi)存”用VmRSS - VmLib非常粗略因?yàn)楣蚕韼?kù)的數(shù)據(jù)部分也可能被共享。更準(zhǔn)確的方法是解析/proc/self/smaps計(jì)算PSS。4.2 解析/proc/self/statm文件快速輕量如果你只需要最核心的RSS和VSZ信息statm文件更快它只包含7個(gè)以頁(yè)為單位的數(shù)字。#include stdio.h #include unistd.h // for sysconf void PrintMemoryInfoLinuxFromStatm() { FILE* f fopen(/proc/self/statm, r); if (!f) { perror(Failed to open /proc/self/statm); return; } long size, resident, share, text, lib, data, dt; // 格式: size resident share text lib data dt if (fscanf(f, %ld %ld %ld %ld %ld %ld %ld, size, resident, share, text, lib, data, dt) ! 7) { printf(Failed to parse /proc/self/statm\n); fclose(f); return; } fclose(f); long pageSizeKb sysconf(_SC_PAGESIZE) / 1024; // 獲取系統(tǒng)頁(yè)大小并轉(zhuǎn)換為KB printf( Linux 進(jìn)程內(nèi)存信息 (/proc/self/statm) \n); printf(虛擬內(nèi)存大小 (VSZ): %ld pages - %ld KB\n, size, size * pageSizeKb); printf(常駐物理內(nèi)存 (RSS): %ld pages - %ld KB\n, resident, resident * pageSizeKb); printf(共享內(nèi)存頁(yè): %ld pages - %ld KB\n, share, share * pageSizeKb); printf(代碼段: %ld pages - %ld KB\n, text, text * pageSizeKb); printf(數(shù)據(jù)段堆棧: %ld pages - %ld KB\n, data, data * pageSizeKb); // 估算私有RSS (近似) printf(\n[估算] 近似私有RSS (resident - share): %ld pages - %ld KB\n, resident - share, (resident - share) * pageSizeKb); }實(shí)操心得/proc/self/statm讀取和解析速度極快適合需要高頻采樣內(nèi)存使用的場(chǎng)景比如每秒鐘記錄一次。它的“share”字段表示共享內(nèi)存頁(yè)數(shù)用RSS - share來(lái)估算私有物理內(nèi)存比用status的VmRSS - VmLib稍好一點(diǎn)但依然不完美。對(duì)于嚴(yán)謹(jǐn)?shù)膬?nèi)存分析特別是容器如Docker環(huán)境PSS Proportional Set Size才是黃金標(biāo)準(zhǔn)它按比例分?jǐn)偣蚕韮?nèi)存。獲取PSS需要解析更復(fù)雜的/proc/self/smaps或/proc/[pid]/smaps_rollup文件。5. 跨平臺(tái)封裝與實(shí)踐在實(shí)際項(xiàng)目中我們通常需要一套統(tǒng)一的接口來(lái)獲取內(nèi)存信息以便代碼能在Windows和Linux上編譯運(yùn)行。5.1 設(shè)計(jì)統(tǒng)一的數(shù)據(jù)結(jié)構(gòu)首先我們定義一個(gè)結(jié)構(gòu)體來(lái)存放我們關(guān)心的核心內(nèi)存指標(biāo)。// memory_info.h #ifndef MEMORY_INFO_H #define MEMORY_INFO_H typedef struct { unsigned long long virtualMemoryKb; // 虛擬內(nèi)存大小 (VSZ/PrivateUsage) unsigned long long physicalMemoryKb; // 物理內(nèi)存占用 (RSS/WorkingSet) unsigned long long privateMemoryKb; // 私有內(nèi)存關(guān)鍵泄漏指標(biāo) unsigned long long peakPhysicalMemoryKb; // 峰值物理內(nèi)存占用 } ProcessMemoryInfo; #ifdef _WIN32 #include windows.h #include psapi.h #elif defined(__linux__) #include unistd.h #include stdio.h #include string.h #endif // 聲明統(tǒng)一的獲取函數(shù) int GetCurrentProcessMemoryInfo(ProcessMemoryInfo* info); #endif // MEMORY_INFO_H5.2 實(shí)現(xiàn)平臺(tái)相關(guān)代碼接下來(lái)在.c或.cpp文件中實(shí)現(xiàn)平臺(tái)特定的邏輯。// memory_info.c #include memory_info.h #include stdio.h // for perror on Linux int GetCurrentProcessMemoryInfo(ProcessMemoryInfo* info) { if (!info) return -1; #ifdef _WIN32 HANDLE hProcess GetCurrentProcess(); PROCESS_MEMORY_COUNTERS pmc; pmc.cb sizeof(pmc); if (!GetProcessMemoryInfo(hProcess, pmc, sizeof(pmc))) { fprintf(stderr, GetProcessMemoryInfo failed. Error: %lu\n, GetLastError()); return -1; } info-virtualMemoryKb pmc.PrivateUsage / 1024; // 使用私有字節(jié)作為虛擬內(nèi)存指標(biāo) info-physicalMemoryKb pmc.WorkingSetSize / 1024; info-privateMemoryKb pmc.PrivateUsage / 1024; // Windows下私有字節(jié)是最佳泄漏指標(biāo) info-peakPhysicalMemoryKb pmc.PeakWorkingSetSize / 1024; CloseHandle(hProcess); return 0; #elif defined(__linux__) // 使用 /proc/self/statm 獲取快速信息 FILE* f fopen(/proc/self/statm, r); if (!f) { perror(Failed to open /proc/self/statm); return -1; } long size, resident, share, text, lib, data, dt; if (fscanf(f, %ld %ld %ld %ld %ld %ld %ld, size, resident, share, text, lib, data, dt) ! 7) { fclose(f); fprintf(stderr, Failed to parse /proc/self/statm\n); return -1; } fclose(f); long pageSizeKb sysconf(_SC_PAGESIZE) / 1024; info-virtualMemoryKb size * pageSizeKb; // VSZ info-physicalMemoryKb resident * pageSizeKb; // RSS // Linux下沒(méi)有直接的“私有字節(jié)”概念用 (RSS - 共享) 近似或從status取VmData info-privateMemoryKb (resident - share) * pageSizeKb; // 近似私有物理內(nèi)存 // 峰值物理內(nèi)存需要從 /proc/self/status 的 VmPeak 獲取這里簡(jiǎn)化處理 // 實(shí)際項(xiàng)目中建議解析 /proc/self/status 獲取 VmPeak info-peakPhysicalMemoryKb 0; // 需要額外解析 // 為了更準(zhǔn)確的私有虛擬內(nèi)存類(lèi)似Windows PrivateUsage可以嘗試獲取VmData // 這里作為示例我們簡(jiǎn)單地將 data*pageSizeKb 作為私有虛擬內(nèi)存的另一種表示 // 注意這只是一個(gè)示例實(shí)際含義不同 // info-privateMemoryKb data * pageSizeKb; // 另一種近似 return 0; #else #error Platform not supported (Windows or Linux required) return -1; #endif }5.3 使用示例與監(jiān)控循環(huán)下面是一個(gè)簡(jiǎn)單的示例展示如何周期性地監(jiān)控內(nèi)存使用情況。// main.c #include memory_info.h #include stdio.h #include unistd.h // for sleep int main() { ProcessMemoryInfo memInfo; int sampleCount 10; int intervalSeconds 2; printf(開(kāi)始內(nèi)存監(jiān)控每 %d 秒采樣一次共 %d 次...\n\n, intervalSeconds, sampleCount); for (int i 0; i sampleCount; i) { if (GetCurrentProcessMemoryInfo(memInfo) 0) { printf([采樣 %d]\n, i 1); printf( 虛擬內(nèi)存: %llu KB\n, memInfo.virtualMemoryKb); printf( 物理內(nèi)存: %llu KB\n, memInfo.physicalMemoryKb); printf( 私有內(nèi)存: %llu KB\n, memInfo.privateMemoryKb); printf( 峰值物理內(nèi)存: %llu KB\n, memInfo.peakPhysicalMemoryKb); printf( --------------------\n); } else { printf(獲取內(nèi)存信息失敗。\n); } // 模擬一些內(nèi)存分配觀(guān)察變化 if (i 3) { void* leakBlock malloc(10 * 1024 * 1024); // 分配10MB但不釋放 printf( 模擬分配了 10MB 內(nèi)存未釋放\n); } sleep(intervalSeconds); // Windows下需替換為 Sleep(intervalSeconds * 1000) } printf(\n監(jiān)控結(jié)束。如果‘私有內(nèi)存’在模擬分配后持續(xù)高位可能指示問(wèn)題。\n); return 0; }編譯與運(yùn)行Windows (MSVC):cl main.c memory_info.c Psapi.libLinux (GCC):gcc -o mem_monitor main.c memory_info.c6. 高級(jí)話(huà)題與疑難排查掌握了基礎(chǔ)方法后我們來(lái)看看更深入的問(wèn)題和實(shí)踐中常見(jiàn)的坑。6.1 容器Docker環(huán)境下的內(nèi)存統(tǒng)計(jì)在Docker容器內(nèi)直接從/proc/self/讀取的信息反映的是整個(gè)宿主機(jī)的視角默認(rèn)情況下。/proc文件系統(tǒng)通常是從宿主機(jī)掛載的。這會(huì)導(dǎo)致你在容器內(nèi)看到的VmRSS可能包含其他容器或宿主機(jī)進(jìn)程的共享緩存造成誤判。解決方案使用cgroup內(nèi)存統(tǒng)計(jì) Docker使用cgroup限制和統(tǒng)計(jì)資源。容器的真實(shí)內(nèi)存使用應(yīng)查看cgroup文件。# 查看當(dāng)前容器的內(nèi)存使用和限制 cat /sys/fs/cgroup/memory/memory.usage_in_bytes cat /sys/fs/cgroup/memory/memory.limit_in_bytes cat /sys/fs/cgroup/memory/memory.stat # 詳細(xì)統(tǒng)計(jì)在C程序中你可以讀取這些文件來(lái)獲取更準(zhǔn)確的內(nèi)存使用量特別是memory.usage_in_bytes減去total_cache來(lái)自memory.stat可以估算出更接近“私有工作集”的值。使用/proc/self/smaps_rollup(Linux 4.14): 這個(gè)文件提供了當(dāng)前進(jìn)程內(nèi)存映射的匯總信息計(jì)算PSS更準(zhǔn)確且在容器內(nèi)相對(duì)更可靠。解析它比/proc/self/smaps簡(jiǎn)單一些。6.2 內(nèi)存碎片與分配器的影響你可能會(huì)發(fā)現(xiàn)即使頻繁分配和釋放等量?jī)?nèi)存進(jìn)程的“私有字節(jié)”或VmData也不會(huì)降回原來(lái)的水平。這不一定就是泄漏更可能是內(nèi)存碎片或glibc的malloc實(shí)現(xiàn)行為所致。glibc的malloc 為了性能它不會(huì)輕易將釋放的內(nèi)存歸還給操作系統(tǒng)通過(guò)brk/sbrk或mmap而是留在進(jìn)程的堆空間內(nèi)以備后續(xù)分配。只有堆頂?shù)倪B續(xù)空閑內(nèi)存達(dá)到一定閾值M_TRIM_THRESHOLD默認(rèn)128KB時(shí)才會(huì)進(jìn)行裁剪trim。你可以通過(guò)mallopt(M_TRIM_THRESHOLD, ...)來(lái)調(diào)整這個(gè)行為但需謹(jǐn)慎。內(nèi)存碎片 頻繁分配不同大小的對(duì)象會(huì)導(dǎo)致堆空間出現(xiàn)許多“空洞”即使總空閑內(nèi)存很多也可能無(wú)法滿(mǎn)足一個(gè)新的較大分配請(qǐng)求從而導(dǎo)致堆擴(kuò)張。排查技巧 使用工具如valgrind --toolmemcheck、AddressSanitizer(-fsanitizeaddress) 來(lái)檢測(cè)真正的內(nèi)存泄漏未釋放的分配。對(duì)于碎片問(wèn)題可以考慮使用jemalloc或tcmalloc等替代的內(nèi)存分配器它們通常在多線(xiàn)程環(huán)境和特定分配模式下降碎片化方面表現(xiàn)更好。6.3 共享內(nèi)存Shared Memory的統(tǒng)計(jì)如果進(jìn)程使用了shmget、mmapwithMAP_SHARED等方式創(chuàng)建了共享內(nèi)存這部分內(nèi)存在統(tǒng)計(jì)上需要特別注意在/proc/self/statm的share字段中會(huì)被計(jì)入。在/proc/self/smaps中共享內(nèi)存映射的Shared_Clean、Shared_Dirty屬性會(huì)有值。在Windows中由CreateFileMapping創(chuàng)建的共享內(nèi)存其占用會(huì)計(jì)入系統(tǒng)的頁(yè)面文件但具體歸屬哪個(gè)進(jìn)程的“私有字節(jié)”可能不直觀(guān)需要結(jié)合MapViewOfFile的視圖大小來(lái)分析。6.4 常見(jiàn)問(wèn)題速查表問(wèn)題現(xiàn)象可能原因排查手段PrivateUsage/VmData持續(xù)線(xiàn)性增長(zhǎng)經(jīng)典內(nèi)存泄漏1. 使用Valgrind或AddressSanitizer。2. 檢查new/delete, malloc/free是否成對(duì)。3. 檢查容器、智能指針的循環(huán)引用。WorkingSet/VmRSS高但Private不高大量使用共享庫(kù)或文件緩存正?,F(xiàn)象。使用PSS指標(biāo)評(píng)估更公平。內(nèi)存使用量階梯式下降glibc malloc的trim機(jī)制觸發(fā)觀(guān)察VmData在大量釋放后可能不會(huì)立即下降直到堆頂空閑足夠大。容器內(nèi)看到的內(nèi)存遠(yuǎn)高于預(yù)期使用了宿主機(jī)的/proc視圖改用/sys/fs/cgroup/memory/memory.usage_in_bytes并參考memory.stat。程序退出后內(nèi)存不釋放子進(jìn)程未終止或資源未清理檢查是否有僵尸進(jìn)程或未關(guān)閉的文件描述符、網(wǎng)絡(luò)連接。PeakWorkingSetSize異常高程序歷史中曾有過(guò)巨大內(nèi)存需求可能是正常的峰值但如果持續(xù)很高檢查是否有一次性加載大文件到內(nèi)存的操作。7. 集成到實(shí)際項(xiàng)目與擴(kuò)展思路將內(nèi)存監(jiān)控模塊集成到你的C/C服務(wù)中可以極大提升運(yùn)維和調(diào)試效率。集成建議獨(dú)立監(jiān)控線(xiàn)程 創(chuàng)建一個(gè)低優(yōu)先級(jí)的后臺(tái)線(xiàn)程每隔一段時(shí)間如30秒采集一次內(nèi)存信息。日志記錄 將采集到的ProcessMemoryInfo結(jié)構(gòu)體數(shù)據(jù)以JSON或CSV格式寫(xiě)入日志文件。記錄時(shí)間戳、關(guān)鍵指標(biāo)。閾值告警 設(shè)定閾值如私有內(nèi)存超過(guò)500MB一旦觸發(fā)除了記錄日志還可以通過(guò)郵件、即時(shí)通訊工具機(jī)器人等方式告警。與性能剖析結(jié)合 在記錄內(nèi)存的同時(shí)可以一并記錄CPU使用率、線(xiàn)程數(shù)、打開(kāi)文件描述符數(shù)量等形成完整的性能快照。擴(kuò)展思路更細(xì)粒度監(jiān)控 除了進(jìn)程級(jí)還可以監(jiān)控線(xiàn)程級(jí)的內(nèi)存使用盡管操作系統(tǒng)通常不直接提供但可以通過(guò)定期檢查所有線(xiàn)程棧指針來(lái)估算。內(nèi)存池監(jiān)控 如果你在項(xiàng)目中使用自定義內(nèi)存池可以在池的分配/釋放接口中增加計(jì)數(shù)器直接輸出池的內(nèi)部分配情況這與系統(tǒng)級(jí)監(jiān)控形成互補(bǔ)。圖形化展示 將日志文件解析用Python的Matplotlib或Grafana等工具繪制內(nèi)存使用曲線(xiàn)圖直觀(guān)展示趨勢(shì)和異常點(diǎn)。與調(diào)試器結(jié)合 在開(kāi)發(fā)階段可以在內(nèi)存分配/釋放函數(shù)上掛鉤子hook記錄每次操作的調(diào)用棧和大小在泄漏發(fā)生時(shí)輸出報(bào)告。這類(lèi)似于mtrace或自定義的分配器跟蹤。最后我想分享一個(gè)我自己的深刻體會(huì)內(nèi)存問(wèn)題尤其是泄漏很多時(shí)候不是技術(shù)問(wèn)題而是習(xí)慣和紀(jì)律問(wèn)題。在C/C項(xiàng)目中堅(jiān)持以下原則能避免絕大多數(shù)麻煩誰(shuí)分配誰(shuí)釋放 明確所有權(quán)。使用RAII 在C中充分利用智能指針std::unique_ptr,std::shared_ptr和容器std::vector,std::string。邊界檢查 數(shù)組越界、指針溢出可能破壞堆管理結(jié)構(gòu)導(dǎo)致詭異的“內(nèi)存問(wèn)題”。善用工具 在開(kāi)發(fā)周期中定期尤其是集成測(cè)試階段用Valgrind或AddressSanitizer跑一遍測(cè)試用例。持續(xù)監(jiān)控 在生產(chǎn)環(huán)境部署像本文實(shí)現(xiàn)的內(nèi)存監(jiān)控模塊它能幫你發(fā)現(xiàn)那些在測(cè)試環(huán)境中因數(shù)據(jù)量小或運(yùn)行時(shí)間短而無(wú)法暴露的緩慢泄漏。掌握進(jìn)程內(nèi)存統(tǒng)計(jì)就像給你的程序裝上了“血壓計(jì)”和“心電圖”能讓它運(yùn)行得更加健康、穩(wěn)定。希望這篇長(zhǎng)文能為你提供從理論到實(shí)踐的完整路徑。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
天天舔天天摸| 五月丁香啪啪网| 婷婷五月天激情电影| 欧洲免费视频色| 91精品又长又大又粗又爽又猛| 五月天丁香婷婷社区| 激情五月天在线观看婷婷| 欧美日韩中文国产一区发布| 一起草Av| 婷婷五月天美女21p| 2020日日干| 色婷婷狠狠18| 思思w99| 久9热插入| 五月天婷婷激情小说电影| 五月婷婷丁香啪啪| 亚州色综合| 免费亚洲婷婷| 欧美色五月| 激情五月六月婷婷综合啪啪| 色噜噜狠狠色综合日日| 婷婷九月在线| 人人干人人操外国| 99热在线精品观看| 9久久精品| 婷婷五月天综合小说网| 天天撸夜夜爽| 亚洲激情高潮| 婷婷五月天AV网| 婷婷桃色网| 99视频在线| 久色中文| 五月丁香六月情亚洲| 伊人大香蕉在线视频| 69精品人人人人| 久草A片| 婷婷日日夜夜| 99热这里只有精品最新网址| 色婷婷狠狠干| 影音先锋四区| WWW.天天日| 停停综合色色| 激情丁香婷婷| 婷婷5月九九| 99热香港| 婷婷五月天综合蜜桃| 91日本在线| 日韩有码一区| 色原狠狠综合| 婷婷丁香成人五月天| 99热超碰在线| 久久综合无| 99超碰欧美| 五月婷婷激情网| 色色婷婷丁香| 欧美丁香五月夫妻天| 这里只有精品在线播放| 情欲综合网| 玖玖在线视频| 中文字幕丰满乱孑伦无码专区| 91主播在线| www.com久久久久久久久久久久久久久久久| 亚洲午夜AV| 99热这里只| 久久人妻视步| 五月丁香啪综合| 天天操天天日天天操| 天天做天天爱天天日| 久er免费视频| 六月婷婷AV| 91丁香色五月| 97人人操人人插| 激情色五月天| 激情五月婷婷啪啪| 色频玖玖五月天| 色爽九九| www.91在线观看| 色婷婷啪啪啪啪啪啪| 91婷婷在线观看| 九九久久偷拍| 丁香六月久久| 久久人妻情侣| 99爱在线视频观看| 色综合久久综合中文综合网| 99性爱视频| 91九九九九| 碰99在线| 97碰碰在线看视频免费| 天天爽在线视频| 97五月天婷婷午夜| 九月婷婷丁香| 婷婷五月色情| 九九热只有精品| 婷婷操逼| 久草x色在线观看99| 大大香蕉综合在线| 久热伊人| 天天激情视频| 色五月成人| 九九热精品视频在线观看| 激情五月丁香六月综合AVXXXX| 91精品国产99久久久久久天美| 五月婷婷六月丁香综合| 成人五月丁香花| 成人短视频免费| 婷婷综合97| 久久婷婷六月| 五月开心久久| 免费看欧美成人A片无码| 色综合99无码| 99热观看| 丁香桃色综合网| 色婷婷五月天激情久久| 九九热这里只有国产精品| 色久五月天| 色综合久久天天综合网| 男女啪啪做爰高潮无遮挡| 丁香五月天亚洲综合| 99热国内精品| 婷婷五月天第三页| 色婷婷久久| 九九九九国产| 午夜婷婷| 97精品欧美91久久久久久久| 天天色综合网吨吧| 综合婷婷| 超碰AV成人| 超碰日日操| 五月婷视频久久| 五月婷婷网站| 婷婷久久五月天| 激情综合网之激情五月| 五月丁香久久网| 天天舔天天操| 深爱五月天婷综合| 五月婷婷激情色情网| 五月婷婷丁香瑟瑟视频| 97色色视频| 性爱久久| 99熟女啪啪视频| 综合激情网| 九九免费在线视频| 久久激情网| 五月婷久久久| 天天色天天爱天天爱天天爱y| 依人大香蕉| 这里只有精品96| 日韩性视频| 国产精品视频久久99| 五月香婷婷| 婷婷五月花.97| 操碰91| 欧美综合激情五月丁香| 九九亚洲| 久草婷婷| 天天天天天天操| 在线观看亚洲AV| 婷婷综合网伊人| 色综合婷婷| 91窝窝| 五月婷婷香蕉| AⅤ网站在线看| 九九热a| cc精品国产性传播| 激情五月天.色网| 激情精品久久| 99热这里有精品| AA丁香综合激情| 99性爱视频| 亚洲天堂久久| 日韩婷婷五月天| 丁香五月性| 五月婷婷啪啪啪| 激情五月少妇| 五月天婷婷涩涩| 久久这里99| 丁香婷婷综合激情五月色| 色婷婷五月影视| 五月丁香婷婷基地| 五月婷丁香花| AA丁香综合激情| 色色无码日韩| 午夜天堂一区人妻| 99热精品在线播放观看| AA片在线观看视频在线播放| 婷婷五月色综合| 久久九九热38| 开心激情网五月天| 久久婷丁香五月| 婷婷色正月| 婷婷五月天AV| 激情综合色| 五月久久综合| 五月婷婷免费在线视频| 99视频综合网| 日韩一级网站| 欧美色图45678| 91在线日| 久久99久久99精品免视看婷| 五月婷婷激情四月| 婷婷五月色丁香在线看| 99视频在线| 99视频精品在线| 国产精产国品一二三在观看| 亚洲超碰在线| 丁香五月婷中字在线| 久久久天天啊| 婷婷久久色| 91窝窝| av性爱网站| 99热免费18| 六月婷婷七月丁香| 九九热在线视频观看免费10| 激情五月综合| 日本激情ⅩXX免费视频| AV操一操| 啪啪婷婷五月天激情| av九九| 97精品综合久久| 免费99情趣网视频| 91久久国产综合久久| 很很干夜夜干| WWW,五月天| 岛国AV网| 五月停停激情网| 欧洲精品爱爱| 在线18av | 久久久久久人妻久久久久久久久久人妻久久久| 青青草原亚洲天堂| 五月婷婷综合在线亚洲视频| 久久免费操| 五月香蕉综合| 久久婷中文字幕| 深爱五月激情| 婷婷伊人网| 99这里有精品视频| 婷婷.com| 99色在线| 五月 丁香 欧美| 成人在线视频男人的天堂4399| 欧美影院婷婷| 婷婷激情社区| 婷婷5月天av| 午夜福利成人AV91| 97五月天| 激情中文在线| 中文字幕丁香五月| 九九色欲网| 无码成人AAAAA毛片AI换脸| 亚洲久久激情| www.lingjunshare.com| 开心婷婷五月激情网小说| 精品香蕉99久久久久网站| 开心五月深爱五月| 九九久久视频| 激情综合青草| 另类A片| 熟妇高潮一区av| 狠狠综合| 天天操综合网站| 九九人人操| 国产jd1024基地手机看国产| 这里只有精品视频| 人妻久久久久久久| 伊人久久大香网| 五月天激情视频五月天| 夜夜www| 丁香五月六月综合激情| 日韩无码性爱| 区啪精品| 97操在线| 五月婷视频| 天天玩夜夜操| 色激情五月天| 五月婷婷色播| 天天日 天天草| 八戒青柠影视剧在线观看| 欧美大道不卡| 99这里只有精彩视频| 性色欲情 网站| 91精品人妻少妇无码影院| 色婷婷中文| 99热18| 91久久1118| 开心五月婷婷六月丁香| 久久这里只有精彩| 亚洲婷婷在线播放十月| 秋霞日本免费毛片A片| 激情综合网激情五月丁香五月俺也去| 熟妇人妻中文字幕无码老熟妇| 亚洲综合婷婷五月天| 六月婷婷视频| 久热久69| 天天色亚洲| 天天日狠狠| 丁香六月丁香婷婷激情| 69色婷婷| 五月激情啪啪| 久9热| 成人电影在线免费试看| 成人做爰黄A片免费看直播室男男 久草热8精品视频在线观看 | 97人人干| 中文字幕高清av| 开心激情婷婷| 国产这里只有精品| 99在线精品视频| 开心婷婷五月| 少妇人妻丰满做爰XXX| 99热这里是精品| 日亚二欧美| www.色五月| 99爱精品| 五月丁香在线观看| 北京熟妇搡BBBB搡BBBB| 五月丁香婷婷伊人| 9九九久久精品无码专区| 狠狠爱成人综合网| 欧美操综合| 狠狠色色色| 亚洲狠狠丁香婷婷香蕉| 人人操 色| 丁香五月天天| 色婷婷丁香五月天| 五月丁香婷中文| 不卡影院午夜理论片| 可以直接看的AV网站| 五月天激情视频网站| 666555。COm毛片| 99热这里只有精品4| 日韩无码专区| 亚洲AV无码电影| 综合日本婷婷| 嫩草视频在线观看| 色情五月丁香婷婷网| 婷婷五月天激情综合婷婷五月天激情综合| 婷婷激情五月天亚洲综合| 丁香色情五月综合网站| 激情五月天色色| 538在线| 五月丁香怕啪啪| 丁香五月aV| 色综合网综合| 伊人碰碰碰| 激情六月天| 六月婷婷色色网| 97luluse| 9久视频| 草美女在线观看视频在线播放| 综合性视频99| 激情久久肏屄视频| 国产婷伊人| 色婷婷91| 婷婷激情五月天色| 成人电影在线免费试看| 影音先锋91在线资源站| 久久久香| 狠狠狠狠狠狠狠狠草| 亚洲五月婷婷在线| 久久天堂| 天海翼中文字幕高| 亚洲99综合| 日操五月婷| 五月丁香婷婷AV| 狠狠操综合| 五月婷婷香蕉| 亚洲无码yw| 色五月婷婷大香蕉| 亚洲色色色色| 天天干天天做| www.sebowuyue| 99热国产国产| 色五月婷婷中文字幕| 99热午夜精品| 五月天激情综合网站| 自拍盗摄 另类| 色婷婷久久| 91精品国产综合久久久不卡电影| 丁香五月自拍| 激情二色月| 天天射综合网天天插| 9月色婷婷| 鲁鲁色五月| 婷婷五月电影院| 亚洲激情97五月天| 思思热视频| 超级碰 久久9| WWW激情五月天| 激情综合网五月丁香| 日本综合九九| 先锋男人99资源| 色玖玖导航| WWW五月天| 九九精品网| 这里只有精品视频在线| 人操综合| 色综合久久88色综合中文字幕| 亚洲综合成人网| 丁香婷婷激情网站| 97色五月天| 中文字幕AV在线| 亚洲无码色| 91九色熟女| 五月天婷婷激情综合| 天天搞天天爽| 涩涩婷婷五月| 天天日夜夜爽。| 久久久com| 久久激情视频| 激情五月天激情小说| 精品久久艹| 黄色片精品| 日韩操逼小电影| 99热这里只有精品8| 日韩无码乱轮| 色99综合视频| www.金莲av| site:picc-up.com| 成人综合网站| 六月丁香婷婷天堂| 天天操婷婷| 婷婷综合在线网| 97婷婷丁香五月| 99视频在线| 久久精品色| 五月丁香婷婷色| 久99久热| 九九爱看亚洲| 五月婷婷 激情按摩| 婷婷五月天色综合翘| 97综合在线| 中文字幕综合网| 99久热在线精品| 9热久久| 99热在线只有精品| 综合久久综合五月天婷婷| 色色99色色| 色情综合| 六月色色综合| 日日夜夜天天爽| 草综合14| 国产AV一区二区三区最新精品| 一起草无码视频| 国产亚洲99久久精品| 在线另类视频| 五月激情站| 成人av播放| 另类视频一区| 午夜大香蕉| 日本99热| 淫荡综合网| 91干婷婷| 99热色精品| 国产综合久久久777777| 五月婷婷综合丁香视频| 五月婷中文娱乐综合| 五月婷婷免费在线视频| 99日本黄站| 91九色精品| 国产69久久久欧美黑人A片| 特级片神马电影| 97碰操| 亚洲旡码| 啪啪五月天啪啪| 国产又粗又大又爽又黄| 久久六月综合| 色婷婷五月天中文字幕| 五月婷精品| 综合激情五月丁香9999久久精| 五月天综合在线网| 婷婷五月综合激情免费| 免费人人操| 久久婷婷色综合| 色色色色热热| 99在线看视频| 超碰在线99| 26uuu国产精品| 潘金莲AAAAAAAAAA| 91午夜激情| 日本久久性| 五月婷婷丁香六月| 婷婷色正月| 婷婷五月天激情网| 亚洲成人在线观看网址| 天天操天天操天天操天天操天天操 | 超碰人人99| 五月激情婷婷在线| 97涩涩丁香五月天| www.色五月.com| 黑人巨粗进入警花疼哭A片| 大香蕉娱乐| 操97| 这里只有视频精品| 丁香五月婷婷亚洲色图| 激情五月黄色| 激情五月六月婷婷| 日本在线va| 久久色情| 婷婷成人在线| 1024操逼视频| 深爱激情69热| www.精品99| 五月丁香少妇| 欧美日韩成人综合9| 婷婷色在线观看| 免费成人va| 激情五月婷| 五月四色婷婷| 丁香五月亚洲激情婷婷射| 久久精品日| 伊人网碰碰| 久久精品亚洲一级牲爱综合| 99热国内| 激情碰碰碰| 精品乱码久久久久| 99热这里只有精品8| 伊人六月丁香婷婷| 26uuu国自产精品| 五月婷婷丁香六月 | 婷婷丁香综合在线| 色婷婷六月| 五月丁香婷婷欧美| 五月激情偷拍| 少妇久久诱惑视频| 99热99思午夜精品| 久久女人九九| 久久综合最新网址| 99∨VTV| 97久久草草超级碰碰碰| 中文字幕婷婷五月天在线观看| 久久婷婷丁香五月一二三| 手机在线日韩视频中文字幕| 99热这里只有在线| 天天夜夜六月丁香五月婷婷老师| 六月丁香婷婷网| 性色欲情 网站| 亚洲综合婷婷五月| 色99自拍| 青青草婷婷久久| 超碰色热| 99精品偷自拍| 青柠影视免费高清电视剧| 亚洲精品视频在线| 五月天综合在线观看| 丁香五月婷婷AV在线| 欧美日韩成人在线| 日韩AV在线免费观看| 91丨九色丨高潮丰满日本| 九九九成人在线视频| 五月婷网| 五月天婷婷婷| 国产午夜精品一区二区| 婷婷综合在线| 中文字幕av在线| 99热精品一区| 亚洲a色| 激情五月天之五月婷婷| 激情五月天啪啪| 久久成人性爱| 激情五月天影院| 五月激情综合网婷婷| 色99自拍| 天天操天天操| 小泽玛利亚视频一区二区| 亚洲一区二区 成人网站戴套| 丁香激情五月天| 99这里有精品视频| 夜夜夜叫天天天做| 99狠狠色| 天天狠狠婷婷在线| 五月婷婷丁香五月亚洲色| 99热久只有| 日韩五月天婷婷| 成年人99热| 吉澤明步Av一區二區| 色综合天天综合成人网| 久久9视频欧美| 久久丁香| 一级AV片| 91视频综合网| 久99视频在线观看| 亚洲色色在线| 激情播丁香| 婷婷五月天亚洲精品| 春色激情第四色| 韩国婷婷丁香五月| 婷婷五月天亚洲| 99视频在线精品| 99热这里只有在线| 九九这里是免费的视频5| 日日杆天天| www.99婷婷| 久久美女五月天| 美女激情综合| 欧美怡红院黄站| 色玖玖玖| 亚洲精品99| 99热首页在线30| 亚洲精品乱码久久久久久按摩观| 婷婷五月丁香久久| 亚洲激情五月天| 色婷婷基地| 日韩成人综合网| 丁香花五月天激情| 99色视频| 伊人玖玖婷婷| 五月六月激情婷婷| 亚城区在线| 欧美日韩一区二区三区四区| 专区无日本视频高清8| 能看的AV| 五月天丁香啪啪啪啪| 看逼中文字幕| 成人久久天天x资源站| 五月婷婷久久开心网| 色播播五月| http://www.sd-xiangsu.com/| 久久曰曰| www.99久久久久99| 超碰无码318604| 久色中文| 九九色精品| 99精品成人无码A片观看金桔| av不卡网站| 色色婷婷五月天| 第四色五月激情网| 日本系列_4页_777FP| 婷婷五月天天| 色五月丁香五月五月婷婷| 五月丁香六月在线| 日本一级淫| 五月婷婷色色| 国产精品色婷婷99久久精品| 亚洲成人在线电影网站| 婷婷丁香五月天影院| 丁香五月天色| 性爱久久| 香蕉色色网| 欧美性爱五月天| 婷婷丁香五月色| 丁香六月婷婷缴情欧美| 五月天婷婷久久日| 五月婷视频| 国产内射婷婷| 久久婷五月综合色| 色五月亚洲| 久久婷婷五月天激情四射| 亚洲综合色棒| 丁香五月婷婷国产av| 月月AV| 亚洲操精品| 99热99思午夜精品| 婷婷丁香五月综合激情小说| 亚洲午夜在线视频| 五月色情婷婷开心五月色情| 日日干日日| 牛牛色av| 激情綜合W W W,激情五月天| 人五月天婷婷喷水| 久热这里只有精品66| 九九综合| 色狠狠999综合网| 狠狠综合| 大香蕉婷婷| 六月婷婷激情| 99热丁香五月| 久久99激情| 97欧美在线| 天天干天天干天天操| 五月丁香六月停停停| www,五月天激情| 丁香六月婷婷久久综合| 怡红院99| 激情第四色| 久久这有这里精品| 国产肥白大熟妇BBBB视频| 激情五月天婷婷免费观看| 五月天婷婷丁香基地在线观看| 九九中文色色| 99热这里只有精品在线观看| 97碰人人操| 操逼巨乳91| 97热超碰| 亚洲天堂大香蕉| 久久午夜丁香| 激情久久久久久久久久久| 亭亭色网| 天天插天天射| 丁香五月激情综合网激情五月| 激情五月天色色| 久久久.COM| 婷婷娌伦网| 亚洲综合1024| 久/久精品99看9| 五月丁香WWW| 不卡的AV网站| 国产在这里只有精品| 涩九九九九| 99色精品| 婷婷五月免费在线| 最新久久99视频网站| 97碰碰在线观看视频| WWW久久久| 桃色五月天| 五月丁香六月婷婷在线小说视频| 天堂久久久久天堂网| 色五月丁香五月婷婷五月成人网| 成人短视频在线免费观看| www.久久久.com| 中日韩狠狠色| 久久久久婷婷| 婷婷开心久久| 久久99久久99精品免视看婷| 久久人妻熟女一区二区| 99热在线只有精品| 久久这里都是精品免费| seav天堂| 香蕉操亚洲| VA国产在线综合网站| 色婷婷四虎| 99久久99九九99九九九| 夜夜骑日日夜夜| 碰人人操| 精品成人无码A片观看香草视频| 99热这里只有免费精品| 操操碰| 九九99偷拍视频| 二色av| 最新激情五月天| 97超喷视频在线观看| 伊人五月天| 综合五月草| 色吊操色妞| 国产精品久久久海的味道| 九九自拍网| 国产精品第一国产精品| 久久婷婷啪啪视频| 婷婷五月天激情综合网| 亚洲成人综合在线| 激情婷婷丁香色五月| 香蕉久久国产AV一区二区| 丁香五月婷婷色情综合| 丁香五月色综合色播五月| 色综合偷拍| 玖玖资源在线视频| 天天摸天天做天天爱天天爽| 色在线五月天免费| 久久婷中文字幕| 亚洲乱码日产精品BD| 色婷婷五月综合| 少妇激情五月婷婷| 成人国产综合| 99热999| 99热个人在线| 天堂在线9| 狠狠狠狠狠狠草| 97精品欧美91久久久久久久| 色婷婷啪啪| 成人亚洲精品久久久久| 91碰碰碰| 婷婷五月天激情网站| 日韩无码专区| 色九月欧美| 影音先锋91网站在线观看| 婷婷午夜天| 婷婷五月天在线观看| 色五月天天| 色婷婷女优有码五月亭| 日韩精品AV一区二区三区| 1024国产| 久久人妻伦理| 色五月天堂| 色八月婷婷| 任你操精品免费| 综合色婷婷| 超碰京东热av男人的天堂| 99视频| 在线观看国产高清视频免费网站| 久久色五月| 日日干天天爽| 婷婷狠狠操| 五月婷婷免费看| www好屌操| 丁香五月天激情小说| 亚洲激情无码久久| www.狠狠干| 丁香五月婷婷动漫| 成人久久天天x资源站| 天天操夜夜夜夜爽| 五月婷婷深深爱爱| 婷婷,五月天,丁香,第一| 人人爱干人人爱草| WWW·天天操·视频?| 天天噜天天插| 青青草蜜臀| 9久热这里只有精品视频| 亚洲五月婷婷在线| 第四色婷婷色五月| 婷婷涩五月天综合| 婷婷五月天在线观看免费| 中文字幕婷婷五月天在线观看| 少妇激情五月婷婷| 激情亚洲婷婷六月| 国产精品久久久久9999小说| 欧美性爱五月天| 99热久久这里只有精品| 五月婷婷久久大片| 久久婷婷网址| 激情综合在线播放| 人妻久热| 777色婷婷爱五月| 99这里有精品免费| 天天成人综合视频| 九热视频| 婷婷综合爱| 99久视频| 五月天com| 五月天综合网| 色婷婷狠狠禁18久久| 婷婷五月综合中文字幕| 成人综合视频在线| 97人妻碰碰中文无码久热丝袜| 久久人妻爱爱| 丁香五月婷婷在线视频| 成人性爱精品视频| 性生活视频98791| 丁香九月婷婷| 99操碰| 欧美性生交XXXXX无码小说| www.久操| 武则天精品久久| 99re这里只有精品国产99| 99热99这里有免费的精品| 26UUU精品一区二区| 97操操| 久久五月婷天天干| 国产亚洲99久久| 另类小说五月天| 99热大片| 日韩九区| AV 3P| 五月激情五月婷婷五月天在线| 久久天堂| 1000部毛片A片免费观看| 色狠狠色综合久久久绯色aⅴ影视| 婷婷五月天丁香久久| 91人碰| 丁香丁婷五月激情| 色99自拍| 99热精品9| 天堂综合久久 | 精品在线网站| 日日夜夜狠狠操| 五六月丁香激情视频| 久久精品99国产精品日本| 99操逼| 99热人人操人人操| 99热 这里只有精品 国产 日韩| 26uuu激情五月天| 丁香激情五月| 色婷婷丁香五月天在线视频| 五月天婷婷丁香社区| 成片免费播放| 日韩三及成人AV片| 思思网站| 五月天婷婷乱论小说| 99爱在线视频| 亚洲综合婷婷| 亚洲欧洲一二| 国产美女精品| 五月丁香无码| 五月婷婷性爱网| 五月丁香六月久久| 999久久久国产精品| 风流少妇A片一区二区蜜桃| 日本久热| 九九性视频| 婷婷精品| 99久在线观看| 99热亚洲只有色| 欧美精品99| 天天操电影院色狼性av| 深爱五月天| 色域五月婷婷丁香| 久久综合激情婷婷激情| 国产精品天天狠天天看| 婷婷天堂综合| 影音先锋天天日| 五月婷婷黄色网址| 五月香蕉婷婷| 亚洲精品大片| 亲子乱AV一区二区三区下载| 操操操AV| 婷婷狠狠青青| 五月天婷婷激情干干| 色啪网| 99热99| 99热无码首页| 激情98色婷婷五| 九九成人高清视频| 久久九色| 99精品自拍| 综合婷婷五月天| 五月伊人婷婷999| 婷婷五月天色综合| 人妻第九页| 97五月天婷婷午夜| 激情四射五月天| 综合色色婷婷| 久久久久久性爱视频| 日本一級黃色一級片| 婷婷伊人激情婷婷| 婷婷五月天av| 久久九九综合| 91丨九色丨熟女|新版| 五月丁香大相交| 99视频只有精品| 97人人操com| 五月天婷网| 亚洲AV无码电影| 99热这里有精品2| 91碰碰视频在线观看| 日韩无码人妻一区二区三区综合| 天天爽天天干| 婷婷五月深深的爱| 成人视频网| 五月丁六月香av| 丰满少妇猛烈A片免费看观看| 激情婷婷内射| 亚洲综合激情五月久久| 激情五月综合免费| 亚洲国产精品VA在线看黑人| 天天操,天天插| 丁香五月婷婷五月基地| 丁香六月婷婷综合在线| 亚洲精级| 精品成人a v无码内射| 99啪在线| 亚洲无码11| 亚洲午夜视频| 大香蕉AV在线| 激情婷婷人妻| 97爱艹婷婷开心丁香激情综合| 婷婷丁香视频| av操B网站| 天天爽天天| www亚洲无码| 激情五月天啪啪| 九月丁香亭亭| 26uuu欧美| 爱射综合| 亚洲精品国产A久久久久久| 看国产探花操逼三级片| 99日在线观看视频| 欧美日比视频| 99小视频| 九九爱激情| 丁香久久| 五月天丁香综合| 99色热| 五月婷婷无码专区| 狠狠色九月| 九九热AV| 热99久久这里只有精品| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 青草网在线观看| 97热这里只有精品| 婷婷深爱色五月| 久操人| 99热免费观看| 五月激情黄色小说| 久热婷婷在线视频| av大香蕉| 色五月成人在线| 五月天停停日日| 久久婷婷热| 26uuu亚洲欧美日本| 丁香五月 性爱| 婷婷在线精品| 开心激情久久久久久久| 中文字幕97超级碰| 天天日,天天干,天天操| 久久性爱视频这里只有精品| 丁香九月激情| 亚洲六月综合激情久久下卡| 成人在线综合| 狠狠干五月丁香| 久久久久久97| 9色91视频| 婷婷午夜精品久久久| 色婷婷色五月丁香| 五月婷婷色综图片| 欧美A A A A A| 99热最新| 激情五月婷婷老师| 久热大香蕉| 一起操 91N.com| 99热18| 色色色99| 五月丁激情| 97人人干人人操| 九九九九成人| 午夜不卡久久精品无码免费| 开心五月激情网| 激情五月天无码| 成人片在线播放| 97超喷视频在线观看| 激情五月综合亚洲另类| 91视频精品99| 操射国产日本| 99热20| 在线资源av-超碰中文在线-成人AV| 91夫妻视频| 五月婷婷色色| 欧美在线视频免费播放| 五月婷婷丁香综合| www色婷婷久久综合久色| 九色91视频| 色九九九综合| 97在线观视频免费观看| 成人AV在线电影| 婷婷玖玖五月天| 色婷婷色五月天| 另类图片激情五月天| 欧美久人人| 色五月天在线观看| 类似婷婷激情综合网站| 女人天堂 AV| 激情婷婷五月色| site:hcxsz888.com| 婷婷丁香激情综合色情| 婷婷九色| 99热在线观看99| 这里只有精品久久| 色色色综合网| 久久婷五月婷| 婷婷五月天堂| 亚洲激情久久| 天天插AV丝袜中| 热99精品视频| 9这里只有精品| 人妻乱码久久久| 丁香六月 婷婷六月| 99操逼视频| 九热精品| 日本WWW九九九| 五月天婷综合| 欧美熟妇一区二区三区| 日本在线观看91| 九九色video| 五月丁香婷婷狠狠操| avh片在线观看| 丁香伍月婷电影全集| 免费视频WWW在线观看网站| 八戒青柠影视剧在线观看| 丁香五月天激情综合| 国产VA亚洲VA96| 九色色| 开心激情播播五月天| 丁香五月婷婷色偷偷| 久久婷婷成人综合色怡春院| 国产六月婷婷| 色青青五月| 五月丁香久久久| 丁香五月激情综合啪啪| 可似看的AV| 五月婷六月婷婷| 婷婷激情小说| 久久66精品| 婷婷丁香在线播放| 激情小说五月天中文字幕| 婷婷激情鹿城五月天| 五月丁香色婷婷熟女| 婷婷六月中文字幕| 婷婷五月色网| 亚洲亚洲亚洲AAAAAA| 激情五月深爱婷婷| 亚洲精品无码久久| 五月丁香大相交| 综合久| 色色色综合| 五月丁香网中文字幕| 婷婷五月丁香青青草在线| 五月婷婷之美女图片| 六月色婷婷| tingting五月天亚洲| 超碰在线50| 99re8在这里只有精品| 九九久久99精品免费观看www| 婷婷丁香五月综合| 亚洲综合九九| 欧美A级成人婬片免费看理论| 五月丁香啪综合| 99热亚洲综合| 99精品久久| 五月天成人网婷婷| 国产激情久久| 中文久久久人妻| 国产免费性爱| 丁香九月婷婷综合| 综合色影院| 久久久久人妻网址| 天天做天天摸| 丁香色成人| 欧美激情综合| 激情AV综合| 色色五月天网站| 丁香婷婷免费| 五月婷在线视频免费看| 色色吧综合| 99综合视频| 最新国产AV| 久久婷婷伊人| www,婷婷五月天777me,com| 亚洲色色色| 五月丁香五月婷婷| 日韩青青| 婷婷色在线观看| 亭亭五月激情亚洲在线| 97碰碰视频| 激情四射五月天| 91在线97视频| 婷婷九月色| 六月丁香婷婷六月激情综合| 五月丁香花视频| 丁香五月影院| 久婷婷五月综合欧美| 婷婷五月亚洲激情| 爱婷婷都市激情| 九九综合九九| 五月综合久久| 丁香久久综合| 亚洲五月丁| 婷婷五月AV| 无码字幕中文| 伊人久久艹| 3www激情| 色婷婷综合网| www.久久爱.c n| 色五月五月丁香| 五月综合激情网| 偷偷与邻居做爰完整视频| 中文字幕日韩成人| 操逼123网| 五月丁香大香蕉| 婷婷五月丁香色播| 草AV9999| 伊人婷婷五月天| 久久婷婷激情久久| 中文不卡一二三区| 狠狠综合| 欧美日韩五月婷婷| 五月综亚洲| 五月天另类视频| 九九精品亚洲| 国产99视频永久免费| 思思99热| 日日干天天射| 激情六月综合| 色五天综合| 婷婷五月天777| 五月婷婷影| 先锋男人91资源| 亚洲艹网| 99热综合在线| 免费超碰在线| 日日狠狠久久偷偷四色综合免费| 俺去也综合| 色五月综合在线| 五月丁香六月激情视频| 日本无码专区| 亚洲激情无码久久| 五月天播播| 啪啪丁香五月| 亚洲第一综合| 超碰2021| 丁香五月天婷婷久久| 激情六月婷婷| 久久五月婷婷电影| 久久久.COM| www.9操| 狠狠色丁香五月婷巨| 色爽九九| 色色色色色色色色色色色色色97| 成人丁香五月| 蒲京久久无码视频| 激情美女五月天| 日日操日日撸| 操久久网| 日韩久久视频| 亚洲婷婷91丁香| 六月婷婷综合| 97操操| 五月花综合| 99在线观看| 99热91| 天天综合色| 9 1超碰九色| 第四色五月天| 色婷亚洲五月丁香| 五月天亭亭俺也| 男人天堂 久久| 超碰熟女拍拍| 婷婷婷久久| 99热最新| 欧美色色干| 五月天啪啪| 久久精品系列| AV在线观看网站| 异能之下短剧免费观看全集| 日本久久高清| 永久的网站AAAA | 日本操B视频| 激情五月亚洲综合网| AA片在线观看视频在线播放| 激情五月丁香在线观看直播| 五月丁小婷婷激情四射| 蜜臀嫩草| 综合超碰熟| 99精品热视频| 久操大| 五月婷婷片| 这里只有精品在线视频精品| 国产肥白大熟妇BBBB视频| 人人人人人人人人人草| 九九草草逼| 美女五月天| A级毛片高清免费不卡播放谢谢谢谢| 久久婷丁香五月| 99狠狠| 久久免片| 91激情五月开心| 色五月婷婷在线| 久久99婷婷| 99色在线| 狠狠干五月丁香综合网| 久久久精品99| 97超碰在线免费观看| 五月丁香成人网| 婷婷99热| www久久99com| 91干婷婷| 国产成人AV在线播放| 大香蕉九九操| 婷婷五月天黄色| 丁香婷婷六月激情| 色天使色综合| 五月婷婷久久综合| 97色伦另类图片小说视频 | 色五月丁香六月资源站| 亚洲综合网在线| 婷婷丁香人妻天天爽| 91婷婷五月丁香碰| 丁香五月婷婷五月| 欧美婷婷色五月| 中文字幕无码成人电影| 欧美天堂久久| 狠色狠色狠色狠色狠色网| 五月天婷婷涩涩| 欧美精品999| 婷婷丁香五月激情中文字幕版| 久碰久| 大香蕉五月丁香| 五月婷婷色吧!| 激情99热| 高潮毛片又色又爽免费| 66色在线日韩|