色五月色开心色婷婷色丁香,五月婷婷丁香花综合网,婷婷丁香五月激情综合在线,五月婷婷六月丁香动漫,婷婷丁香五月激情综合在线,丁香花中文字幕在线观看,播五月色五月开心五月网,开心激情综合网,狠狠色丁香婷婷综合最新地址,丁香视频在线观看,狠狠做六月爱婷婷综合av,久久激情五月丁香伊人

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網運營的一線實戰(zhàn)洞察。

從fork地址相同到寫時拷貝:吃透進程地址空間與頁表機制

從fork地址相同到寫時拷貝:吃透進程地址空間與頁表機制 在調試一個多進程程序的時候我碰到過一個讓新手極其困惑的現象父進程里打印某個全局變量的地址是0x601040fork 出來的子進程里打印同一個變量地址還是0x601040。兩個進程明明是兩個獨立的執(zhí)行體為什么變量地址會一模一樣更讓人想不通的是子進程改了這個變量的值父進程那邊紋絲不動既然地址一樣改的不應該是同一塊內存嗎這兩個問題指向的都是進程地址空間這套機制。它解決了操作系統(tǒng)里最核心的矛盾之一多個進程如何在一個物理內存有限的機器上互不干擾地運行。理解進程地址空間、頁表、寫時拷貝和虛擬地址這幾件事你才能真正看懂 fork 的代價、內存映射文件的共享語義、以及為什么一個野指針有時候崩有時候不崩。這篇內容偏向操作系統(tǒng)底層與系統(tǒng)編程適合寫過一點 C、用過 fork 和 malloc但對背后機制還停留在“知道有這么回事”階段的讀者。我會從“為什么要設計它”講起一路拆到頁表項里的每一個標志位和寫時拷貝觸發(fā)的那一刻中間配上可以直接跑起來的驗證代碼。1. 從一次段錯誤說起進程地址空間到底解決了什么問題1.1 虛擬地址不是障眼法是精心設計的隔離層很多人第一次接觸虛擬地址會覺得這就是操作系統(tǒng)玩的障眼法應用程序看到的是假的地址硬件在背后偷偷換算成真的。這個理解沒錯但只說對了表象真正值得琢磨的是為什么非要做這層換算。設想一個沒有虛擬地址的世界程序編譯出來直接操作物理地址。那么你在寫代碼時就得操心我這次 malloc 拿到的地址會不會和隔壁進程要用的地址撞上操作系統(tǒng)加載第二個程序時得先掃描物理內存找到一塊足夠大且連續(xù)的空洞把程序搬進去還要把程序里所有寫死的地址重新改一遍才能跑。物理內存一旦碎片化一個需要 100MB 連續(xù)空間的程序哪怕總空閑有 200MB 也起不來。更要命的是任何一個進程的野指針都可以直接踩到別的進程的數據一個 bug 能連帶毀掉整臺機器上所有在跑的東西。虛擬地址機制把“程序看到的地址”和“內存條上的實際位置”徹底解耦。每個進程拿到一張獨立的映射表表里寫著“我的 0x601040 對應物理內存的某一塊”。編譯器生成的地址是虛擬地址鏈接器算的也是虛擬地址CPU 執(zhí)行時先查表再訪存。物理內存怎么擺放是內核的事程序完全不用管。這就是解耦帶來的最直接的價值程序不再需要關心自己被加載到哪也不需要關心別人在哪。1.2 為什么每個進程都以為自己獨占整臺機器的內存虛擬地址帶來的第二個紅利是“獨占”的錯覺。在 64 位系統(tǒng)上每個用戶進程都擁有一套從 0 到某個上限的地址范圍看起來整臺機器的地址空間都是它的。所有進程的地址空間布局幾乎是相同的代碼段在上方數據段、堆、共享庫、棧按固定的相對位置排布。這種一致性有個巨大的好處就是可預測性。棧地址的起始位置、堆的起始位置、共享庫的加載區(qū)域內核會做一定的隨機化處理但整體格局不變。調試器看到某個地址立刻能判斷它大概率落在哪個區(qū)程序里errno或者線程局部存儲的偏移也是基于這套布局設計的。如果地址空間不統(tǒng)一每次加載都要重新規(guī)劃調試信息和 core dump 的分析會變得極其痛苦。注意所謂“進程看到的是連續(xù)地址空間”指的是虛擬地址連續(xù)背后的物理頁幾乎一定不連續(xù)。一個 10MB 的數組映射到物理內存上可能是散落在幾十個頁里。把虛擬地址連續(xù)等同于物理連續(xù)是初學階段最容易帶偏后續(xù)理解的誤區(qū)。1.3 地址空間的布局不是隨機排的每一塊都有講究拿一個典型的 64 位 Linux 進程來說用戶空間布局大致是這樣的最低地址往后是代碼段text只讀可執(zhí)行接著是已經初始化的數據段和未初始化的 BSS 段可讀寫再往上是堆用 brk 或 mmap 向上生長中間一大片留空然后是動態(tài)鏈接庫的映射區(qū)mmap 出來的匿名頁和文件映射也落在這一帶棧從高地址往低地址生長環(huán)境變量和命令行參數就在棧頂。內核空間和用戶空間之間有一道分界線x86-64 上這條線大約在地址的高半部分用戶空間占低 128TB內核空間占高半部分。每個進程的頁表里都包含內核空間的映射但頁表項上標記了只有特權級 0 才能訪問所以用戶代碼跑過去立刻觸發(fā)保護異常。這種設計的巧思在于發(fā)生系統(tǒng)調用或者進程從用戶態(tài)切換到內核態(tài)時不需要切換頁表基址寄存器內核代碼可以直接沿用當前進程的頁表訪問內核空間省掉一次代價很高的地址空間切換。2. 地址空間存在的深層原因隔離、共享與按需分配2.1 進程隔離是底線但不能只靠邊界檢查有人會問操作系統(tǒng)不是有特權級嗎為什么不能讓用戶進程直接用物理地址靠硬件在每個訪存指令上做邊界檢查來隔離答案在于性能和靈活性邊界檢查只能保證不越界保證不了兩個進程不重疊。每個進程的合法區(qū)間是動態(tài)變化的堆會漲棧會擴mmap 會新增映射。如果靠“給每個進程登記一個物理區(qū)間”來管理一旦堆和棧之間的空檔被別的進程占了這個進程就再也長不大了。物理內存的連續(xù)性和進程需求的不連續(xù)性天然沖突。虛擬地址把“需求”和“供給”拆開。進程要向內核申請內存內核只需要在它的地址空間里找一段空閑的虛擬區(qū)間分配幾個物理頁掛上去就行物理頁在哪完全無所謂。進程之間的虛擬區(qū)間可以重疊只要映射到不同的物理頁即可。隔離從“物理上不碰撞”變成了“映射表上不指向同一塊”這個轉換是整套機制能成立的關鍵。2.2 共享內存和寫時拷貝都建立在地址空間之上隔離不是目的可控的共享才是。兩個進程想共享一塊數據有了地址空間之后變得很自然把各自的虛擬區(qū)間映射到相同的物理頁就行。共享庫的代碼段就是這么處理的同一個libc.so的代碼頁在物理內存里只有一份幾百個進程都映射到它只讀不寫內存利用率直線上升。寫時拷貝也建立在同一套機制上。fork 的時候子進程的地址空間和父進程的地址空間內容完全一樣但并不是把物理頁復制一遍。內核把父子進程的頁表都指向同一批物理頁然后把這些頁在雙方的頁表項里都標記成只讀。任何一方要寫觸發(fā)頁保護異常內核才真正復制出一份新的頁給寫入方。這套機制把 fork 的代價從“復制整個地址空間”降低到了“復制頁表”進程創(chuàng)建的語義沒變開銷卻小了一個數量級。沒有虛擬地址這套間接層寫時拷貝根本無從談起。2.3 按需分配與缺頁異常內存可以“看著有實際沒有”地址空間還有一個容易被低估的作用它讓內存分配可以做到承諾與兌現分離。malloc 申請 1GB 內存內核可以立刻返回一個虛擬地址但一個物理頁都不給只在這段虛擬區(qū)間上做標記。等你真正去讀或者寫某個地址時MMU 查表發(fā)現頁表項是空的觸發(fā)缺頁異常內核這時候才分配物理頁、建立映射。這個動作叫按需調頁。這個設計在現實里的價值極高。程序習慣性地預留大塊地址空間但只用其中很小一部分或者進程啟動時先 mmap 一大塊當內存池這些場景下按需分配能省下大量物理內存。也正因為如此你才會看到進程的虛擬內存大小VSZ可能有幾個 G而實際駐留內存RSS只有幾十兆。這兩者的差距不是虛胖是地址空間機制允許的“延遲兌現”。2.4 地址空間與安全頁表項上的權限位是最后一道閘門頁表項里除了物理頁號還有一組權限標志位它們才是運行時安全真正落地的地方。常見的標志包括存在位頁面是否在物理內存里、讀寫位、用戶/超級用戶位、可執(zhí)行位、臟位、訪問位。代碼段被標記為只讀且可執(zhí)行你往函數體里寫數據會直接觸發(fā)段錯誤棧和堆標記為不可執(zhí)行這是緩解緩沖區(qū)溢出攻擊的常規(guī)手段。這些標志不是建議性的是 MMU 在每次地址轉換時強制性檢查的。用戶態(tài)代碼試圖訪問標記為超級用戶的頁MMU 直接拒絕連內核代碼路徑都不會走到。理解這一點之后你就能明白為什么緩沖區(qū)溢出攻擊過去那么容易得手而現在要先想方設法繞過不可執(zhí)行棧也能明白為什么某些嵌入式和實時系統(tǒng)為了性能會放松這些保護代價是什么。3. 頁表虛擬地址到物理地址的翻譯官3.1 頁表的最基本形態(tài)與地址拆分方式頁表的核心作用只有一個給定虛擬地址查出對應的物理頁號然后拼上頁內偏移得到物理地址。這個過程由 MMU 硬件完成內核負責維護頁表內容。地址被拆成“頁號”和“頁內偏移”兩部分拆分位置由頁大小決定。假設頁大小是 4KB也就是 2 的 12 次方那么虛擬地址的低 12 位就是頁內偏移高位是虛擬頁號。32 位地址下虛擬頁號有 20 位能索引 100 萬個頁面64 位地址下虛擬頁號有 52 位理論上有 400 多萬億個頁。如果直接用一張單級大表每個進程一張每個條目哪怕只占 8 字節(jié)64 位下一個進程的頁表本身就要占用幾十 TB 的空間顯然不現實。所以現實中的頁表都是多級的。32 位系統(tǒng)常用兩級頁表把 20 位虛擬頁號再拆成 10 位 10 位第一級 1024 個條目每個條目指向一張第二級頁表第二級 1024 個條目。64 位系統(tǒng)常用四級把 52 位拆成 9999剩下 16 位留給高半部分的內核空間劃分每一級指向下一級的表。這套結構本質上是一棵多叉樹只有實際用到的分支才會被分配內存。3.2 多級頁表省內存的原理只分配用到的分支多級頁表省內存的關鍵在于稀疏分配的天然適配。一個進程真正用到的地址空間往往只占理論范圍的極小一部分代碼幾兆、數據幾兆、棧幾兆、堆看需求共享庫幾十兆。這些區(qū)域在 64 位地址空間里是極其稀疏地散落的。用一棵四級樹去索引大部分分支根本不存在對應的中間層頁表壓根不用創(chuàng)建。算一筆賬就清楚了。假設一個進程實際占用了 100MB 內存按 4KB 一頁算有 25600 個頁。這些頁如果分布在一個完全不連續(xù)的區(qū)域里最壞情況下需要 25600 個葉子頁表條目分散在若干個葉子頁表里。每個葉子頁表能裝 512 個條目最壞需要 50 個葉子頁表。每一層向上需要的表數量繼續(xù)收縮。整個頁表占用的內存大概是葉子層 50 張、中間層可能十幾張、再上層幾張每張 4KB總共不到 1MB。如果換成單級表64 位下要占幾十 TB差了七個數量級。這就是“用層級換空間”的經典權衡。維度單級頁表四級頁表頁表體積與地址空間總大小成正比64 位下不可接受與實際使用量成正比稀疏場景下極小查表次數1 次訪存4 次訪存未命中緩存時分配粒度全有或全無按需逐層分配缺頁處理簡單需要逐層檢查路徑3.3 頁表項里的標志位與訪存過程的完整鏈條一個頁表項不是只有物理頁號它是一堆字段的集合。存在位告訴你這個頁當前是否在內存里如果不在訪問時會觸發(fā)缺頁異常讀寫位決定這個頁是可寫還是只讀用戶位決定用戶態(tài)能不能訪問可執(zhí)行位配合硬件提供的執(zhí)行保護決定這個頁能不能當指令執(zhí)行訪問位和臟位由 MMU 自動維護供頁面置換算法參考此外還有緩存控制位、全局位等等。一次完整的訪存長這樣CPU 發(fā)出虛擬地址MMU 先查 TLB轉換后備緩沖區(qū)本質是頁表項的緩存命中就直接拿到物理地址沒命中就按頁表基址寄存器指向的根表逐級往下查。每一級查表都是一次內存訪問四級頁表意味著最多四次訪存才能完成一次地址轉換。查完之后把結果塞回 TLB后續(xù)再訪問同一頁就能直接命中。這也是為什么頁表結構的變化對性能影響很大多一級就多一次可能的訪存。提示TLB 的存在使得頁表查詢的開銷在大多數情況下被隱藏。但進程切換時 TLB 需要刷新或者打上地址空間標識來區(qū)分這是上下文切換成本的重要來源之一。理解這一點才能理解為什么大量的線程同進程運行比大量獨立進程切換要便宜。3.4 頁表基址寄存器與進程切換時發(fā)生了什么每個進程都有自己的頁表樹根表的物理地址存在一個專門的寄存器里。x86-64 上是 CR3ARM64 上是 TTBR0/TTBR1。進程切換時內核要做的關鍵動作之一就是把這個寄存器換成新進程的根表地址。這個動作叫切換地址空間。換完之后TLB 里緩存的老進程的頁表項就全部失效了如果不做處理新的地址會被錯誤翻譯。所以切換時要清 TLB或者用地址空間標識ASID給 TLB 條目打標簽讓不同進程的條目可以共存而不互相污染。現代處理器一般支持 ASID這樣切換進程時不必整體刷 TLB只需要切換當前的 ASID開銷小很多。這也解釋了為什么在支持 ASID 的平臺上進程創(chuàng)建和切換的實測性能會更好。4. 寫時拷貝fork 之后到底發(fā)生了幾次內存復制4.1 fork 的直覺實現與它不可接受的開銷教科書上講 fork 會創(chuàng)建一個和父進程幾乎一模一樣的子進程包括地址空間內容的完整副本。如果嚴格按字面實現fork 的代價就是復制整個地址空間代碼段不用復制只讀可以共享但數據段、堆、棧全都要復制一份。一個占用了 500MB 內存的進程 fork 一次就要再消耗 500MB 物理內存還要花時間做復制?,F實中的使用模式卻往往是 fork 之后立刻 exec 別的程序。也就是說剛復制完的 500MB 馬上就會被 exec 整個丟掉這次復制純屬浪費。即使不 exec子進程往往也只改動其中很小一部分數據其余部分父子完全一致。這兩種場景都說明全量復制是極其低效的。寫時拷貝就是為了消掉這筆開銷而設計的。4.2 寫時拷貝的完整實現思路fork 時內核做的是這樣幾件事子進程獲得一份父進程頁表的副本注意是頁表副本不是物理頁副本頁表項里指向的物理頁還是父進程原來那些同時內核把所有可寫的頁表項在父子雙方的頁表里都改成只讀并在頁表項里打上一個“寫時拷貝”的內部標記頁面本身的引用計數加一。接下來任何一方對這些頁發(fā)起寫操作MMU 會先檢查讀寫位發(fā)現是只讀頁觸發(fā)頁保護異常。內核進入缺頁處理路徑發(fā)現地址所在的頁帶著寫時拷貝標記就明白這不是真的非法訪問而是需要兌現復制。此時內核分配一個新的物理頁把老頁的內容復制過去更新觸發(fā)寫入那一方的頁表項指向新頁并恢復可寫減少老頁的引用計數。如果老頁的引用計數已經降到只剩另一方在用那也可以直接把老頁的只讀屬性改回可寫省掉一次復制。這套機制的妙處在于它讓“復制整個地址空間”這個語義保持不變但實際搬運只發(fā)生在真正被寫到的頁上。父子進程共享不變的部分只在分歧處各自持有副本。從程序員的視角看fork 之后兩個進程的內存是完全隔離的改誰都不影響誰這個保證一點沒丟。4.3 一次寫操作觸發(fā)寫時拷貝的微觀過程把觸發(fā)過程走一遍會理解得更扎實。假設父進程有一個全局數組arrfork 之前它是可寫的對應某個物理頁 P。fork 之后這個頁在父和子雙方的頁表項里都變成只讀標記寫時拷貝P 的引用計數變成 2。子進程執(zhí)行arr[0] 1。CPU 發(fā)出寫請求MMU 查頁表發(fā)現頁是只讀的硬件拋出一個頁錯誤異常把出錯的虛擬地址和錯誤碼塞進特定寄存器跳到內核的缺頁處理函數。內核根據錯誤碼判斷這是一次寫保護錯誤而不是頁不存在錯誤。接著它去找對應的虛擬內存區(qū)域描述符確認這個地址本來應該是可寫的再檢查頁表項上的寫時拷貝標記。確認無誤后內核分配新頁 Q把 P 的內容復制到 Q更新子進程的頁表項讓它指向 Q 并設為可寫P 的引用計數減到 1。對于父進程既然現在只有它自己在用 P把 P 的頁表項改回可寫寫時拷貝標記清掉。整個處理結束重新執(zhí)行剛才那條寫指令這次 MMU 看到的是可寫頁寫入成功。這一整套下來只有真正被寫的那一頁被復制了其他頁原封不動依然共享。4.4 寫時拷貝的幾個實戰(zhàn)陷阱寫時拷貝聽起來很美用的時候有幾個坑很容易踩。第一個是引用計數的維護成本。每一頁的引用計數都要在 fork 時增加、寫時拷貝時減少、進程退出時清理內核在頁結構上維護這個計數鎖競爭在高并發(fā) fork 場景下會成為瓶頸。有些老版本的內核在這方面有過比較明顯的性能問題。第二個是寫時拷貝會放大內存峰值。fork 一個占內存很大的進程如果父子都開始大量寫物理內存可能瞬間翻倍觸發(fā)內存回收甚至 OOM。容器場景下內存限額卡得緊這種突發(fā)很容易被誤判為內存泄漏。第三個是大頁與寫時拷貝的互動。透明大頁讓一次寫時拷貝的復制粒度從 4KB 變成 2MB單次復制的開銷明顯變大延遲毛刺更容易出現。注意不要假設 fork 之后子進程立刻擁有獨立內存。如果你的邏輯依賴“fork 后父子內存已經隔離”這個事實那是對的但如果你的邏輯依賴“fork 后內存已經復制完成”那就是錯的。物理復制是延遲到寫入那一刻的。這個區(qū)別在分析內存占用和性能曲線時非常關鍵。5. 動手驗證親手看清虛擬地址、頁表與寫時拷貝5.1 打印變量地址看清虛擬地址的一致性與獨立性先寫一段最直接的代碼驗證“父子進程同一變量地址相同但值互不影響”。#include stdio.h #include unistd.h #include sys/wait.h int shared_var 100; int main(void) { printf(before fork: shared_var %p, value %d\n, (void*)shared_var, shared_var); pid_t pid fork(); if (pid 0) { printf(child : shared_var %p, value %d\n, (void*)shared_var, shared_var); shared_var 200; printf(child after write: shared_var %p, value %d\n, (void*)shared_var, shared_var); _exit(0); } waitpid(pid, NULL, 0); printf(parent: shared_var %p, value %d\n, (void*)shared_var, shared_var); return 0; }編譯運行之后你會看到子進程打印的地址和父進程完全一致都是同一個虛擬地址子進程把它改成 200 之后父進程讀到的仍然是 100。這正是寫時拷貝在起作用。地址一致是因為子進程復制了父進程的頁表虛擬地址到物理頁的映射關系被復制了值隔離是因為寫入觸發(fā)了復制子進程寫到一張新頁上父進程那張頁仍保持原值。值得多說一句的是地址為什么能一致。因為 fork 復制的是地址空間的結構子進程的地址空間布局和父進程一模一樣同一變量自然占據同一個虛擬地址。如果這里看到的地址不一樣那才是出了問題。5.2 用引用計數和內存統(tǒng)計觀察寫時拷貝的實際開銷光看值變化還不夠我們想量化寫時拷貝??梢栽?fork 前后讀取/proc/self/status里的 VmRSS駐留物理內存和/proc/self/smaps里的共享內存字段。寫一段對照實驗先 fork 一個吃掉幾百兆內存的子進程讓父子都只讀觀察 RSS再讓父子都大量寫觀察 RSS 變化。# 簡化示意查看當前進程的駐留內存與共享內存 grep -E VmRSS|VmSize|RssAnon|RssFile|RssShmem /proc/self/status實測下來會發(fā)現一個典型現象fork 之后、寫入之前父子的 {RssShmem} 都會包含同一批頁總和并不等于兩者之和因為物理頁只有一份一旦雙方開始寫同一批頁RSS 總量會上升上升的幅度大致等于被寫的頁數乘以頁大小。這個測量方法是判斷“寫時拷貝有沒有真正生效”最直接的手段比看代碼推測靠譜得多。提示觀察時要注意頁緩存和匿名頁的區(qū)別。文件映射的頁在寫時拷貝里走的是另一條路徑復制到匿名頁只盯著 VmRSS 會漏掉部分信息把 RssAnon 和 RssShmem 一起看才完整。5.3 用頁錯誤計數器確認寫時拷貝的觸發(fā)時機如果內核支持 perf可以直接統(tǒng)計缺頁事件把寫時拷貝的觸發(fā)點抓出來。perf stat -e page-faults,minor-faults,major-faults ./cow_demominor fault 是頁已經在內存里但頁表項需要更新的情況寫時拷貝觸發(fā)的正是這一類。跑一個只讀子進程minor fault 數量很低跑一個寫完整個數據區(qū)的子進程minor fault 數量會明顯上升大約和寫入的頁數同量級。這個對應關系非常直觀是做性能分析時的常用佐證。另一個手段是/proc/pid/pagemap和/proc/pid/smaps能拿到每個虛擬頁對應的物理頁幀號需要相應權限把父子進程同一虛擬地址的物理幀號對比就能看到寫入前相同、寫入后不同。這個驗證比任何文字說明都有說服力強烈建議自己動手做一遍做過之后對寫時拷貝的理解會從“背下來的概念”變成“親眼見過的事實”。5.4 觀察棧、堆、共享庫的地址分布理解地址空間布局最后再補一個小實驗把各區(qū)域的地址打印出來驗證地址空間的布局。#include stdio.h #include stdlib.h int g_init 1; int g_bss; int main(void) { int local 2; int *heap malloc(sizeof(int)); printf(text approx : %p\n, (void*)main); printf(data : %p\n, (void*)g_init); printf(bss : %p\n, (void*)g_bss); printf(heap : %p\n, (void*)heap); printf(stack : %p\n, (void*)local); printf(libc printf : %p\n, (void*)printf); free(heap); return 0; }跑出來通常是代碼段地址最低數據段緊隨其后堆在數據段上方并且向上增長棧地址明顯偏高共享庫落在中間偏上的映射區(qū)。每次運行的具體數值因為隨機化會略有差異但相對次序穩(wěn)定。把這個次序和前面講的布局對上地址空間就不再是一個抽象名詞而是一張你能畫出來的圖。6. 常見問題與踩坑記錄6.1 寫時拷貝與虛擬地址相關問題速查現象可能原因排查與處理思路fork 后子進程改數據父進程也變了誤用了共享內存映射或全局可變狀態(tài)被其他路徑影響確認是否用了 MAP_SHARED 的 mmap檢查是否有信號處理函數或其他線程在改數據父子進程變量地址相同但值不同懷疑程序有 bug其實是寫時拷貝的正常表現這是預期行為虛擬地址相同不代表物理頁相同內存占用統(tǒng)計出現雙份懷疑泄漏寫時拷貝被大量觸發(fā)物理頁真的復制了關注 RssAnon 與 minor fault 數量確認是否大量寫入共享頁程序訪問某地址崩潰換一次運行卻不崩訪問落在未映射區(qū)間或落在依賴環(huán)境的內存布局上別依賴未定義行為用調試器看崩潰地址落在哪個區(qū)域頁表分析工具讀不到物理幀號權限不足或內核配置限制了 pagemap 訪問檢查權限容器環(huán)境里這類信息通常被屏蔽大頁開啟后延遲毛刺變多寫時拷貝按大頁粒度復制單次開銷變大對延遲敏感的進程可考慮關閉透明大頁或調整策略6.2 幾個我在實際排查中踩過的坑第一個坑是把虛擬地址當成唯一標識。做進程間通信時曾經想用變量地址當 key 去共享數據結果兩個進程地址一樣但根本指向不同的物理頁數據完全對不上。正確做法是用文件映射或者顯式的共享內存區(qū)并約定偏移量而不是拿虛擬地址當索引。第二個坑是忽略寫時拷貝導致的延遲抖動。某個服務 fork 出工作進程后工作進程第一筆請求的延遲總是偏高一開始以為是冷啟動。后來用 perf 看 minor fault發(fā)現是寫時拷貝在第一次寫大量頁時集中觸發(fā)復制開銷堆在了請求路徑上。處理方式是在 fork 之后、開始服務之前先主動預熱一遍要寫的數據區(qū)把復制成本前移。第三個坑是誤判內存泄漏。容器里看著內存一直在漲實際上是因為 fork 出來的子進程和父進程都在寫同一批頁寫時拷貝復制了物理頁父進程的 RSS 沒降子進程的 RSS 又漲上來總和翻倍。這不是泄漏是寫時拷貝的正常開銷進程退出后會釋放。區(qū)分這兩種情況的關鍵是看增長曲線是否收斂以及是否與 fork 事件強相關。第四個坑是頁表項的權限位理解不到位導致誤判。有同學寫了一段往只讀段寫數據的代碼看到崩潰就以為是段錯誤機制沒生效實際上是編譯器把那個“變量”優(yōu)化進了寄存器壓根沒發(fā)生內存寫。這類問題最好在編譯時關掉優(yōu)化-O0再觀察或者把變量聲明成volatile并實際取地址避免被優(yōu)化掉。6.3 關于頁表與地址空間幾個值得記住的經驗判斷遇到與內存相關的詭異問題時我一般按這個順序排查先確認崩潰地址落在哪個區(qū)域是代碼段、堆、棧還是未映射區(qū)再看/proc/pid/maps確認這個區(qū)域的權限是否符合預期接著看/proc/pid/smaps里的詳細字段確認是共享頁還是私有頁最后用 perf 或 strace 看系統(tǒng)調用路徑。這個順序能把大部分問題定位在一兩分鐘內。關于頁表有個判斷標準值得分享如果一個進程的 VSZ 很大但 RSS 很小別急著喊內存泄漏先看是不是按需分配的正常表現如果 RSS 持續(xù)增長且不收斂再看是不是寫時拷貝復制了物理頁。這兩個統(tǒng)計量配合 minor fault 計數一起看基本能覆蓋 90% 的內存困惑。最后一個經驗是關于寫時拷貝的使用邊界。它在“fork 后 exec”和“fork 后少量寫”這兩種模式下收益最大在“fork 后大量寫”的模式下反而會把開銷堆到后面甚至比直接復制更差。如果你的程序屬于第三種模式不要指望寫時拷貝來救場直接改成線程模型或者在 fork 前把共享數據整理成只讀可能才是更合適的做法。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
国产精品ww久久| 欧美日韩欧美| 96久久久精品| 久久婷婷视频| 国产精品点击进入在线影院| 0755午夜福利视频| 插入粉嫩少妇视频| 亚洲二区精品在线观看| 色妇综合网| 久久精品中文| 第二页中文字幕| 超碰国产精品无码| 久久精品国产72国产精品福利| 加勒比色99999| 亚洲中文字幕av| 激情五月天色色| 亚洲操操操| 91春色| 日本熟人妻中文字幕在线|...久久国产精品-国产精品_日本一区二区三区中文字幕 | 一级黄色视频网| ai欧美亚洲小说| 久久久久成人蜜桃精品| 操婷婷逼| 人妻献身系列第54部| 97爱啪| 大香蕉欧美国产日韩高潮| 天美精品av| 亚洲精品国产精品乱码不99| 超碰在线观看av不卡| 99人妻| 亚洲 中文 欧美 日韩 在线| 欧美日韩国产电影| 一二三四日本视频高清| 国产拍偷精品网站| 啊啊啊啊免费视频| 亚洲啪啪啪啪视香蕉| 亚洲,欧美,春色,另类| 逼逼逼逼操操操操操操操操操午夜剧场 | 日韩欧美操逼xxx| 九9热伊人| 午夜欧美神马久久久久| 啊啊啊啊二区好大| 毛片麻豆91糖心精品毛情片| 91天天美女| 丁香婷婷久久| 2020中文字幕在线| 97超碰色屌| 天天色综合图片| 97亚洲综合电影| 98一区二区精品| 欧洲欧美视频一区二区| 大JI巴好深好爽又大又粗视频| 欧美操逼录像国产黄色国产| 欧美爱三级日韩久久| 亚洲人妻久久| 日本午夜操逼| 国产一区二区三区影片| 国产福利精品最新在线| 日本欧美成人片AAAA| 四虎AV在线观看| 黑丝内射一区二区三区| 人人透人人操| 熟女啪啪视频| 9 7超碰在线免费观看| 精品国产99| 操逼网站地址| 混色激情av| 97香蕉人人乳| 色噜噜日韩精品| 日韩有码专区| 欧美性爱综合,免费| 96一区二区三区| 91精品丝袜久久久久久| 中文字幕久久婷婷丁香五月天| 日韩三级伦理中文字幕| 亚欧成人中文字幕一区| 91精品综合久久久久久五月丁香| 天天操女人| 91综合站| 玖玖久久久| 超碰调教97| 久久大精品乱码视频人妻熟女| 青娱乐手机日韩在线视频| 亚州高清av| 日日躁天天躁狠狠躁| 成年人免费观看网站| 色综合20p| 91老妇女| 中文字幕在线免费观看2| 亚洲无992tv| 美國A片| 成人婷婷丁香| 97玖玖人妻| 伊人国产视频| 亚洲 日本 不卡| 日韩免费在线观看不卡| 婷婷激情五月综合| 97硬碰| 麻豆区久久久久亚| 亚洲一区在线观看欧洲 | 久久九九视频九九视频| 天天色综合图片| 96国产污污污丝袜| 综合久久9| 中文字幕交换人妻| 桃色人妻在线视频| 麻豆熟妇乱妇熟色A片在线看 | 91原创在线观看| 男人天堂免费| 中文字幕国产| 人妻激情在线视频| 青青操在线视频| 最新国产精品久久精品| www被窝色com| 亚洲三区视频| 神马九九九| 精品人妻一区二区三区四区| 丰满的三级少妇欧美久久久| 国产视频第2页| 人人操,人人插| 91碰碰| 亚洲成人AB| 中文精品一区二去| 2020视频1区2区3区| 抽插一区二区视频| 亚洲国产第一页综合视频| 欧美亚洲特P| 亚洲国产尤物yw在线观看| 暖暖精品二区三区观看| 玖玖爱在线视频免费观看| 久久久无码精品人妻二区 | 日韩欧美经典在线观看| 久久久男人的天堂| 日韩国产成人自拍视频| 大香蕉欧美伊| 亚洲图片激情综合另类| 亚洲和欧美裸体美女双飞视频| 亚洲成人AB| 97中文字幕一区| 精彩久久中文| 91丨国产丨白浆| 欧美色亚洲色| 日日夜夜天天| 四虎国产精品永久在线囯在线| 日本不卡码黄色| 国产精品白丝| 六月丁香啪啪| 尤物视频视频官网| 亚洲区限制级| AV综合中文字幕干| 亚洲无码国产探花在线观看| av草草在线电影| 免费强奸av| 99热这里是精品| 人妻久热在线| 97在线精品观看视频| 国产精品网站www| 午夜亚洲国产理论秋霞| 囯产精品强| 偷窥自拍A片| 中文字幕乱妇免费视频| 欧中日成人免费影视| V A在线| 欧美久久九九| 国产高清免费不卡av| 嗯,啊。舔我逼| 狠狠色婷婷7777久| 久久这里只精品免费福利| 91红杏| 日韩欧美tv一区二区在线观看| 蜜桃视频啊啊啊啊| 小少妇| 强奸乱伦Av网| 国产一区二区二区按摩精品啪视频| 天天摸夜夜摸| 殴美大黄片| 亚洲情色欧美| 国产精品久久久久999| 婷婷五月色| 亚洲清纯综合| 五月丁香综合啪啪| 91天天综合日韩欧美| 欧美后进式| 手机在线A片| 91痴汉| 色老牛| 激情第四色| 国产丝袜欧美在线视频| 又大又大又大又粗爽高潮观看 | 国模精品娜娜一二三区| 黄色视频高清无码网站| 99久草| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师 | 熟女高潮精品一区二区| 亚洲棕合电彰| 殴美牲| 中日韩欧美精品无码AⅤ一区二区| 啊啊啊好舒服视频| 日日爽熟女| 亚洲欧美国产va在线| 亚洲色吧网| 无码国产精品久久久久| yw尤物av无码点击进入麻豆| 91n处女在线观看| 欧美色图下一页| 一区二区激情国产熟女 | 大香蕉伊人在线成人AV在线观看| 五月天激情小说| 乱色视频中文字幕| 激情色色| 操一区| 中文字幕在线高清男人的天堂| 精品日韩中文在线| 国产日韩区| 久久老女人| 天天热精品| 人妻天天爽夜夜爽2| 高潮内射在线| 久久精品72| 在线 亚洲 网爆 自拍| 一区二区三区在线资源| 台湾大香蕉99热| 99re6国产精品99re在线| 激情av| 99婷婷| 六月丁香五月婷婷| 青青操综合网| 国产精品久久久| 超碰九区| 日韩成人性日韩成人性爱视频在线免费观看 | 一区二区三区 丝袜 高跟 美腿| 99综合视频一体| 久久99综合| 围产精品一区二区三区视频播放| 人人操人人uiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiii | 欧美日韩精品国产91| 操B久久| 天天看人人操屄犊摸阴| 人人搡人人肉久久精品| 久久少妇视频| 熟女少妇一区二区三区| 97天天日| 久操凹凸视频| 91欧美| 91色黑人少妇| 18精品一二区| 在线中文字幕| 欧美婷婷| 国产 大胆 对白| 精品少妇人妻一区二区三区| 97美日韩视频| 性色av婷婷久久一区二区点复制| 91网站18在线观看| 欧美另类天堂| 亚洲成人久久一区二区| 久久精彩免费视频| 中日韩久久人妻一区二区| 天天看高清麻豆| 福利五区| 国产精品爆乳懂色蜜乳| 日韩国产在线观看av| 亚洲成人久久美女| 欧美日韩少妇色情| 男人的天堂com| 日韩免费簧片| av最新免费中文字幕| www.色婷婷.com| 9超碰免费| 亚洲交换| 盗摄女人妻在线| 色婷视频| 99日免费视频中文字幕| 91黑丝在线| 亚洲超碰在线| 国产丝袜高跟美女av免费观看| 国产久久久| 91久久精品中文字幕| 色999偷自拍拍| 9精品久久| 91美| 丁香五月天堂| 无码操逼天堂| 欧美日韩黄片精品在线| 神马久久久久眼| 九九九九九九九九九九九蜜桃| 日韩欧美中文字亚洲慕| 国产精品久久久久久高清无码免费看 | 少妇无码999| 亚洲国产麻豆一区二区三区| 黄色区免费观看中文字幕| 青青草大香蕉在线视频| 无码一区二区三区四区五区六区七区八区九区十区视频 | 伊人九九九| 亚洲欧美国产精品久久久久久久| 麻豆AV一区二区天美传媒| 五月丁香色婷婷| 婷婷99狠狠| 色婷婷aV一区二区三区麻豆综合| 国产福利电影| 亚洲欧美内射| 亚洲精品欧洲精品| 日本一区二区不卡| 欧美色图色综合| 色色色欧美| 99久久婷婷丁香| 亚洲91av| yaouchengrenav| 欧美性第1页| 超碰免费人妻人人| 久久久性爱| 日韩精品9999| 欧美操逼熟女| 欧美女同在线| 睡产熟女乱伦| 四虎精品永久在线观看| 国产自偷自拍一区| 大香蕉99re| 亚洲激情网| 精品视频久久| 熟女欧美日韩综合婷婷| 色色香蕉| 后入精品| 偷拍欧美激情| 精品成人动漫一区二区| 久久久少妇诱惑精品视频| 亚洲欧美在线观看2021| 久久成人精品| 超AV色女| 91人妻做a观看视频| 亚洲精品天天影视综合网| 影音先锋乱伦资源| 黄色av播放免不| 后X久久| 久操操AV电影| 人妻少妇久久中文| 蜜桃臀 后入 一区 二区 三区 在线| 97伊人| 人妻碰碰碰碰碰碰| www.夜夜| 欧美日本中字另类在线| 综合大香蕉美。| 天堂日本亚洲欧美| 成人熟女区| 1956日韩精品| 国产又大又粗又长视频在线| 揉揉揉夜夜| 色综合1991| 不卡超碰护士AV在线免费播放| 国产美女口爆吞精视频| 国产成人精品一区| 操人妻丝袜高跟| 999综合网| 黄色不卡视频| 白嫩嫩一区| 2019天天干天天操| 啪啪啪亚欧美视频| 91激情综合| 日韩亚洲美州欧洲综三区一品在线| 亚洲图片日本AⅤ欧美在线| 妇女乱色二区| 9长久久精品| 中文字幕精品一区二区精品| 欧美激情久操网| 国产诱惑| 精品无码久久久久| 日韩pv中文| 日韩成人精品视频自拍| 免费视频一二三区| 夜夜久久久| 欧美暴力猛交| 亚洲国产激情国产av| 久久性爱视频免费看| 99热欧美| 职场同事知名国产国产精品久久欧美日韩 | 99热这里都是精品| 91亚洲欧美综合高清在线| 久久天天摸| 亚洲啪啪性视频| 青椒国产97在线熟女| 免费成人自拍视频在线| 久久久久99精品成人片蜜臀| 蜜桃狠狠色伊人亚洲综合| 欧美色66| 中文字日本乱码| 亚洲男人的天堂V| 26uuu国产| 国内三级自拍小视频在线观看| 乱伦a片视频| 激情 欧美 亚洲 小说| 日韩三级伊人| 2023天天操夜夜操| 综合伊人激情| 很黄很色的视频在线观看| 人人操欧美风骚| 神马午夜久久| 国产伦精品| 日韩欧美大片免费高清啪啪| 亚洲三级。日韩三级| 大香蕉伊人75| 人人超碰在线观看黄| 亚洲一二三精品久久网 | 99老司机精品视频在线观看| 久久久国产亚洲精品系列| 亚洲精品人妻在线| 国产高清精品福利| 国产精品久久久久久久久AV大片| 精品一区二区人妖| 五月激情小说| 久久久999网站| 中文字幕精品丝袜| 97精品国产97久久久久久户外免费| 67914亚洲精品| 99热免费| 亚洲美女30b| 色偷综合| 综合色欧美| 亚洲精品97| 欧美一二三级精品在线| 操操操日本的逼| 国语av最新自产拍在线观看| 精品成人动漫一区二区| 久久婷婷色| 国产又粗又又黄又猛| 台欧久久精品视频| 久久色一区二区| 亚洲欧美综合网 | 欧美熟妇乱码在线一区| 久久久久久久六六| 久久精品电影在线| 欧美偷拍区| 在线观看成人性爱免费小视频| 免费观看的黄色的网站| 亚洲 日韩 欧美 国产综合体| 亚州精品一区二区三区香中文字幕在线| 欧洲天天在线| 中出91视频| 日韩av性爱在线播放| 久草国产在线视频| 殴美牲| 亚洲国内精品成人不卡| 91激情| 亚洲国产一级精品毛一级精品看免费视频| 五月激情影院| 精品无码久久久久| 国产色综合亚洲色综合吹潮| 国产精品成人在线| 中文字幕91综合| 亚洲性感丝袜诱惑在线观看| 亚洲精品国产拍免费91在线| 国产精品嫩草影院免费| 日韩国产品视频中文字| 国产精品粉嫩福利在线| 白丝被操91| 天天躁日日躁XXXXYY| 国产乱弄免费在线视频。| 日本欧美m v精品网站加| 探花精品 一区二区| 日本中文熟女视频| 日本三级大片| 国产欧美精选自拍一区| 亚洲欧美中文日韩视频中国语| 偷拍欧美激情| 东北女人高潮视频| 亚洲欧洲网站免费观看| 美女诱惑久久| 五月激情影院| 国产一区二区在线电影| 人妻 制服 日韩 中文 在线| 美女黄页网站| 3p国产欧美99热| 高树玛利亚无码流出| 97在线免费视频观看| 欧美日韩第一页| 成人天天爽| 欧美亚洲第一页| 欧州激情视频在线一区二区| 亚洲中文字幕熟女| 国产视频人人网| 久久αⅴ| 亚洲美女自拍偷拍视频| 激情文学 亚洲图片| 操迟操逼在巾线Fre看| 东京热精品97综合网| 不卡超碰护士AV在线免费播放| 久久精品亚洲东京热色播| 小电影欧美91| 人妻天堂综合网| 99黄页网站| www.yeyecao| 91久久午夜无码鲁丝片久久人妻| 99人妻碰碰碰久久久久禁片| 色女综合| 欧美一级久久久久久久大片动画| 一区二区三区四区久久视1| 欧美十八禁视频| 色噜噜人妻av 中文字幕| 97视频网站| 97爱免费插| 日本在线观看网址| 色偷综合| 免费观看啪视频| 舔足天天操天天射| 少妇同性| 色官网在线| 欧美综合网A| 青青欧美在线| 一级aaaaa欧美中文字幕录像片| 九九九九一级| 婷婷久久综合久| 精品视频一区二区| 精品9区| 国产激情视频在线观看| 人妻人久久精品中文字幕| 丁香六月激情综合| 国产熟女精品区| 操人91| 性色AV蜜色av色欲av| 日韩无码AB| 久久麻豆一区二区| 亚洲图片色图欧美另类| 五月丁香激情综合| 色哟哟511老熟女| 亚洲在线观看| 欧美性爱一区| 男人的天堂啪啪啪啪啪蜜桃不卡| 欧洲黄色网| 中文字幕精品久久久久人妻红杏ⅰ| 亚洲精品视频在线| 大香蕉乱级| 亚洲人精品午夜不卡| 鲁鲁色综合网| 亚洲偷拍自拍在线视频| 人人搞人人插人人操| 日日黄色三级网站| 久超碰在| 六月色色| 国产A v无码专区| 欧美综合亚洲综合| 淫穴高潮色图| 欧亚揄拍偷拍精品视频| 一色网男人的天堂| 强奸乱伦亚洲第一页| 久久久久久久| 99色在线| 日韩成人私密一级精品av| 久久久精品中文字幕爱豆| 久9爱精品| 综合欧美日韩在线观看| 人人看人人插| 亚欧免费观看视频| 99无码| 热G综合热G中文| 97超碰资源网| 国内精品久久国产,www香蕉久久五月丁香,亚洲欧美日韩精品永久在线,日本精品一 | 色噜噜综合在线| 播播亚洲小说亚洲| 中文人妻av高清一区| 2017亚洲天堂| 日韩三级伦理中文字幕| 欧美97色| 在线不欧美| 老熟女天天操| 少妇精品久久| 日韩三级av片| 黑人性欧美| 97视频在线观看免费高清| 伊人国产AV| 97精品全部| 亚洲精品第一| 99久久网站| 凹凸视频特色日本特黄| 日韩激情啪啪| 农村妇女一级二级三级视频| 国内毛片无码一级毛片| 国产激情在线观看| 一级黄色影片| 一区二区你上我| 大香蕉亚洲中文| 男人天堂一区二区| 97蜜桃综合| 少妇500双飞99| 91中文精品日韩欧美在线| 黄色成品网站| 久久人人爽av亚洲精品天堂桃色| 97精品在线| 区自美91| 亚洲图片欧美偷拍| 中文字幕久久婷婷丁香五月天| 人人摸人人入| 人妻夜夜爽天天爽三区麻豆AV网站| 男人天堂无码| 久久久久久久精| 最新国产精品| 日韩乱伦AⅤ| 国产亚州高清国产拍精| 97精品综合久久| 偷拍 精品另类 凸凹了四区| 九九久久国产精品| 亚洲天堂一区二区| 成人怡红院| 91色综合| 一个人免费HD91视频| 人人摸人人干| 天天日B狠狠操| 日韩少妇无吗| 97爱亚洲| 精品中文字幕一区二区| 99热99在线| 9超碰免费| 大香蕉92| 网站A V在线| 人人天天干干| 一区麻豆 高清中文字幕| 学生妹天天看| 操一操摸一摸| 夜夜草网站| 久久伊人网视频一区二区三区| 欧美亚洲清纯| 东京热视频网| 蜜臀av在线播放一区二区三区| 久久亚洲天天做| 日韩精品人妻中文字幕不卡乱码| a男人的天堂久久一级A毛片| 五月综合视频| 九九av| 东北女人操逼| 丁香六月激情综合| 高树玛利亚无码流出| 久久久免费高清中文视频| 欧美不卡在线一区二区| 色乱二区| 97在线青| 亚洲精品白浆高清久久久久久 | Blackedraw视频一区二区| 内射中出日韩在线观看视频| 99超碰网| 色色福利| 欧美亚洲成人在线一区二区三区| 中国人高清www色视频免费| 成人性爱全视频观看| 69精品人人人人| 上特色A在线| 精品超碰国产| 欧洲亚洲综合| 亚洲最大成人a毛毛片| 久久伊人网视频一区二区三区| 超碰视97中文| 人妻少妇被猛烈进入中| 国产人伦精品一区二区三区| 亚洲图片欧美| 一区二区视频在线播放| 欧美少妇性乱| 黄色激情电影在线观看| 综合 青草 伊久久 影院 综合| 96国产精品| 殴美大黄片| 超碰在线第一页| 精品亚洲国产成人精品| 激激五月| 欧美AAAA黄片| 国产综合久久久鬼色| 伊人国产成人av网站| 男人的天堂2018东京热啪啪啪| 久久久日本电影| 超碰久热| 国产激情视频一区区三区| 日本乱人伦片中文三区| 欧美专利1区2区3区4区5区免费| 熟女精品日韩一区二区三区| 九九热免费国产视频婷婷伊人| 99久久久无码国产精品性啊聊| 中文字幕国产精品1区| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 伊人影院在线理论播放| 中文字幕国产在线天堂| 少妇与黑人高潮在线| 九九热九九| 久久鲁夜| 亚洲古典另类欧美在线| 日韩本不卡视频在线观看 | 综合网 欧美| 九九九九88| 快灬快灬 一下爽蜜桃在线观看| 九久9热| 亚洲国产精品久久久男人的天堂| 在线中文字幕| 大乔未久88一区| 丁香五月av| 蜜臀无码视频在线观看| 神马影院午夜福利久久久| 國產尤物AV尤物在線觀看| 天天影视综合色| 精品人妻二区三区| 美女极品一区二区三区| 9999亚洲精品| 色色五月天激情| 在线视频 亚洲精品| 91/欧美| 天天操天天干一区二区| 亚洲熟女人妻中文字幕一区二区 | 大香蕉AV丝袜| 极品销魂美女一区二区| 欧美熟女妇同| 九月婷婷久久| 偷拍亚洲熟女视频播放| 人人操超碰在线| 国产自产91区13区| 人人考人人摸人人干| 97色碰| 精品无码产区一区二| 亚洲欧美精品一区天堂久久| 国产日逼视频| 精品国产乱子伦一区二区三区,精品一| 好爽,再快点啊哈嗯嗯嗯嗯| 亚洲精品成人动漫在线| 五月丁香六月激情| 熟妇艹鸡八| 综合欧美日本三级| 五月天我淫我色av| 人妻精品一区二区三区| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 亚洲精品一区二区三区新线路| 国产精品成人福利在线| 91精片| 日韩有码回春沙龙第一页| 青青草在线成人视频| 中文久久爆乳| 亚洲春色欧美激情自拍| 国产久久久久久| 欧美肥臀在线| 玖玖爱伊人玖玖爱| 中文字幕一区 二 区 三 四 五 区日 日 骚| 国产极品美女高潮无套在线观看| 立川理惠被中出无码| 亚洲图片小说欧洲| 在线电影亚洲色图| 超碰9 7女人| 蘋果手機免費看成人Av| 涩爱AV在线| 天天操天天舔| 性爱av在线免费观看| 日韩中文字幕精品一区在线| 在线午夜成人无码视频| 97综合久第一页| 婷婷10月天青娱乐| 国产精品动态一区二区三区四四| 97色涩| 黄呦呦在线| 亚洲熟女乱综合一区二区三区| 黄色小说亚洲| 色鬼在线综合| 天天综合,91综合永久| 强奸乱伦亚洲第一页| 影视综合无码少妇| 人妻丰满熟妇一区二区三| av一区二区三区不卡| 另类亚洲一区二区三区| 日韩精品一区二区高清| 亚洲国产精品成人综合| 亚洲国产91精品一区二区久久| 亚洲乱色熟女一区| 中文字幕,人妻,日韩| 日韩精品色呦呦| 日韩成人在线性爱视频| 乱伦一区二区三区‘| 日韩熟女乱伦中出| 午夜AV人气不卡| av一区二区三区四区| 久操网视频| 国产美女裸体秘 永久无遮挡| 亚瑟国产精品久久无码| 美女操逼A A| 日本操大逼| 天堂俺去俺来也www久久婷婷| 国产操操日韩三级黄| 日本乱人伦片中文三区| 国产日韩色综合| 人人操人人uiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiii | 国内精品久久人妻性色av| 国产67194| 超碰无码五月97| 欧美黄色大片在线观看 | 91久久青青草原精品| 99视频精品| 亚洲极品| 国模无码一区二区三区在线| 日韩电影天堂视频一区二区| se吧提供91精品国产91久久久久久 | 色偷偷男人的天堂麻豆| 97天天日| 人妻激情偷乱视频一区二区三区 | 色欧美天天| 国产白丝网站| 五月色综合| 亚洲日韩美女丝袜美腿人妻视频| 色狠狠色| 果冻传媒A片麻豆熟妇人妻| 麻豆这里只有精品| 青春草A| 国产精品点击进入在线影院| 国产SV一线| 久热影视| 久久久久久久久久黄色网| 偷拍盗拍亚洲色图图片| 日本一级性爱| 一本大道青青| 丁香五月偷拍| 亚洲情色欧美| 午夜成人福利影视| 老熟女搡BBBB搡BBBB视频| 国产青视频| 操b在线观看| 今日头条成人一区二区三区四虎精品| 国产精品亚洲色婷婷久久久| 男人的天堂VA在线| 18禁网站在线播放| 精品少妇一区二区三区| 日日干日日| 又大又大又大又粗爽高潮观看 | 日韩999| 人妻一区二区三区视频| 夜夜欢天天干| 天天综合网国产| 日本天堂网| 国产日韩色综合| 亚洲图片偷拍欧美| 久久丁香| 精品久久97| 中文字幕在在线观看网站| 午夜乱轮操逼视频免费看| 色亚州人久干视频在线观看免费版| 久久性爱网站| 日本黄色精品| 日日AV加勒比| 日韩AV一起草| 97综合久久| 熟女一区二区三区| 亚洲性爱乱操x| 激情文学亚洲| 春色校园综合网| 18禁的网站在线| 999综合网| 嗯嗯啊好大| 婷婷五月天福利| 91美女视频| 91精品人妻五十路| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 人妻人人澡人人爽人人| 精品人妻美妇91job| 操淫穴亚洲五月丁香 | 亚洲丝袜综合| 亚州性9| 日日骚精品视频| 一本道综合色图| av在线不卡一区二区三区| 亚洲交性| 国产视频小说| 人人操AV| 日本网色| 九色精品视频导航1| 天堂综合网| 超碰97最新人妻| 亚洲图片 91| 丁香六月东京热| 天天综合网~91| 欧美成人色| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 色狠狠一区二区三区香蕉| 欧美亚洲高清不卡| 97国产精品国| www.超碰| 亚洲色天| 操久久久久| 精品视频久久区| 1024亚洲中文字幕久在线看片你懂的| 黄片无码在线制服| 男女激烈网站最新| a级免费在线观看| 99热销国产这里有精品| 国产女主播视频在线观看| 艳尻美人妻| 久久久久久久人妻| 一区在线观看中文字幕| AV污污污污| 国产成人一级av88| 中文字幕,人妻,日韩| 99re6在线视频播放免费精品| 秋霞福利网| 日韩av色图| 九九久久首页| 久热伊人99re| 亚洲天堂中文字幕无码男同| 91伊人| 亚洲交换| julia ann久久| 日韩av电影网站| 亚洲色图欧美色图制服诱惑| 91AV天美在线视频| 久久99深爱久久99精品| 97频视在线| 色眯眯av| 欧美在线|亚洲| 欧美色爱综合| 日韩人妻精品| 女上位精品在线| 97精品人妻一二三四| 性生活性生大爱77AV国产| 欧美色图自拍| 五月天婷婷社区| 国产和美国毛片| 无码九九| 欧美性爱一区二区三区| 久热这里只有精品9| 激情露脸爱| 国产久久男人天堂| 久久原创中文| 亚洲少妇综合| 九九热九九| 香蕉国产精品麻豆亚洲欧美日韩| 国内毛片热久久思思热| 樱花蜜乳av| 久久精品店| 凸凹视频在线观看| 99激情视频| 91丝袜美腿网站| 91丝袜激情在线| 日日干夜夜欢| 男人综合网| 26uuu最新| 国产女乱淫真高清免费视频| 不卡一区二区日本视频| 日本肏逼视频在线观看| 日本三级韩国三级99| 五月丁香网站| 欧美激情超碰777| 中文字幕诱惑制服人妻丝袜美丝袜美| 国产精品久久久久999| 男人的天堂视频精品乱在线| 12一15性XXXX粉嫩国产| 性无码专区2020| 一区二区影院| 伊人久久88国产女| 嗯啊啊啊轻点视频| 91性感网站| 一起草视频在线| 黄色片一区二区三区四区五区| 久久日本熟妇熟色一区| 在线色导航| 色香蕉影院| 99热97| 成人久久久精品| 大香蕉中文在线| 视频国产精品未满十八禁止在线观看| 五月丁香啪啪网| 啊啊啊不要啊啊受不了了视频在线 | 日本免费一级AAA大片器| 天天操夜夜操狠很操| 2019久久久久久久久福利| 亚洲,日韩,欧美,成人播放 | 天天肏夜夜肏| 九九综合久久中文字幕| 精品超碰中文在线| 91青青在线视频| 黄色视频60分钟| 日本在线观看网址| 无码九九| www.91人妻.com| 欧美久久草熟女| 色97欧美| 思思热免费视频观看| 亚洲综合图文| 夜夜嗨一区二区三区三州加勒比| 亚洲风情综合网| 福利视频网站| 色综合久| 夜夜免费视频| 在线中文字幕| 一区二区偷拍拍视频| 一区二区三区四区久久视1| 国产精品夜夜| 亚洲AV免费在线| 伦理第一页| 久久久久久亚洲中文| 国产最新AV| 青青欧洲黑| 揉揉揉夜夜| 殴美日韩m| 欧美日韩制服| 蜜桃精品视频一区二区三区| yiqicaoav| 999久久久免费精品国产牛牛| 综合操逼| 男人的天堂色偷偷青青草视频婷婷网| 97这里有精品| 熟妇操花| 国产妇女精品视频青青草| 少妇久久久久久| 亚欧毛片基地国产毛片基地| 婷婷五月天社区| 久草毛片| 中文字幕,人妻,日韩| 欧美精品人妻视频| 亚洲国产天堂| 9l视频自拍9l九色成人| 国偷自 一区二区| а√天堂资源官网在线资源| 六月丁香啪啪| 午夜噜噜噜| 亚洲超碰在线| 久久99干一本高清| 成人性爱av| 欧美韩国你懂得在线| 中文字幕三四五区| 最新国内自拍av免费| 四虎视频在线观看| 中文字幕日韩精品久久| 吉川爱美98堂在线| 亚洲av噜噜噜噜噜噜| 老鸭窝亚洲毛片| 亚洲精品成人激情在线| 中文97国产| 永久免费av无码网站国产app | 男人的天堂无码| av强奸乱轮| 亚洲综合69| 黄片免费看黄片免费看| 東南亚性呦成人伦理资源在线视频| 中字乱伦AV| 中文字幕成人乱码熟女精品国50 | 岛国毛片手机在线观看| 九九九九一级| 国产成人精品亚洲日本| 成人久久久| 日韩精品黄片免费观看| 开心五月天激情网| 亚洲精品人体| 久久久久久亚洲精品不卡人乳| 色欲天天综合久久久无码网中文| 高清不卡视频| 免费久久一级毛片大黄| 鸥美极品| 久久婷婷伊人| 亚洲色图8| 青苹果影院男人的天堂| 久久青青草原免费视频| 骚逼一区二区| www.色99| 操一操摸一摸| 97超碰色屌| 精品少妇一区二区三区在线视频| 美欧色综合| 九七毛片九九毛片 | 久久久久久久91| 丁香婷婷激情五月天无毒不卡| 日韩午夜精品一区二区三区电影| 91欧美综合在线| 色青青久久影视| 日本精品999| a片亚洲一本通视频| 少妇 综合| 亚欧视频在线| 日韩精品-原创伙伴| 久久精品老司| 二色av| 亚洲欧洲自拍图片专区满春格| 人妻素股| 大香蕉综合| 欧美国产伊人久久久久| 9997se| 91熟女综合| 1024人妻| 乱伦av.com| 中文字幕一区二区视频在线观看 | 日韩性爱网址| www.亚洲成人一区| 9精品久久久久| 日本男人插女人的逼黄色| 婷婷丁香久久| 内射老妇BBWX0C0CK| 91色射| 嗯嗯啊啊好大好爽| 色穴精品| 久久久久13| 亚洲欧美日韩夜夜| 在线视频 亚洲精品| 欧美九九九九九| 最新9久久久9免费视频| 欧美精品久久96人妻无码| 九九av| 在线无码操| 91在线超高颜值国产| 91老熟女视频| 少妇内射www在线观看视频| 三级片大波波| 久久色人体| 日韩有码一区三区| 无码自拍SM| 欧美系列在线一区二区| 免费伦费视频在线观看| 中文字幕精品免费一区二区| 亚洲欧美另类激情小说| 久久久久久久久久久久色网| 亚洲丰满很很操| 久久久精品久久| 国产精品熟女九九九| 亚洲五区熟女| 亚洲情色1区| 91原创在线观看| 一区二区久久天天干狠狠| 欧美久热| 人妻少妇视频在线播放| 久久久久国产无av| 国产精选视频| 操b网站亚洲无码| 国产女人9999| 91丨九色丨东北熟女| 熟女人妻一区二区三区| 国产精品麻豆免费视频| 天天草天天日| 亚洲欧美综合| 亚洲精品一二牛牛| 久久性爱视频免费看| 欧美性生活男人的天堂| 亚洲日韩在线a不卡99精品| 亚洲精品久久久久毛片A片拉屎 | 开心五月深爱五月| 婷婷丁香成人| 欧美黄页在线| 狼天天狼天天大香蕉| 2010男人的天堂| 91大胆欧美| 丰满翘臀美女影院视频| 91精品老女人| 久99热| 99色在线观看| 骚逼高潮久久精品| 麻豆久久久久久久久丝袜 | 中文字幕在线免费观看 | 一本道综合色图| 北条麻妃99精品青青久久| 亚洲精品97在线| 熟女一区二区| 日韩精品电影| 亚洲色棕合| 超碰95| 国产精品午夜福利亚洲综合网| 大香蕉视频一二三区| 欧美日韩国产三级黄色| 欧美成va视频网站| 免费夜夜爱黄色视频毛片| 9999久久久久| 欧美黄色图片| 免费啊啊啊| 97鸡把在线视频| 热99这里有精品综合久久| 亚洲狠| 成人无码在线超碰网| 在线无码操| 91狠狠综合久久久久久| 91高跟美女在线播放|