色五月色开心色婷婷色丁香,五月婷婷丁香花综合网,婷婷丁香五月激情综合在线,五月婷婷六月丁香动漫,婷婷丁香五月激情综合在线,丁香花中文字幕在线观看,播五月色五月开心五月网,开心激情综合网,狠狠色丁香婷婷综合最新地址,丁香视频在线观看,狠狠做六月爱婷婷综合av,久久激情五月丁香伊人

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上 上個月幫同事排查一套 Zabbix 監(jiān)控 Nginx 數(shù)據(jù)一直為空的問題。一開始我們都把注意力放在 Zabbix Web 端反復(fù)檢查模板、主機(jī)、宏折騰了一上午。最后才發(fā)現(xiàn)真正斷掉的環(huán)節(jié)是 Nginx 的 stub_status 狀態(tài)頁根本沒有暴露出來agent 自然也就拿不到任何數(shù)據(jù)。更讓我意外的是同事的配置是從一篇兩三年前的教程里抄來的那篇教程里的模板名稱、agent 類型和現(xiàn)在的環(huán)境已經(jīng)對不上。這不是個案。Zabbix 監(jiān)控 Nginx 這件事最常見的坑不是 Zabbix 不會裝而是安裝配置流程里塞滿了舊資料。所以下面我不打算只給一個固定命令序列而是想把 Zabbix 監(jiān)控 Nginx 的鏈路重新拆一遍Nginx 怎么暴露狀態(tài)agent 怎么讀到數(shù)據(jù)模板怎么匹配以及當(dāng)你拿到一臺新機(jī)器時應(yīng)該按什么順序驗(yàn)證。核心判斷只有一句——真正決定這套監(jiān)控能不能跑通的往往不是 Zabbix 本身而是 Nginx 狀態(tài)頁、agent 采集和模板匹配這三個環(huán)節(jié)有沒有全部連上。1. 先想清楚Zabbix 監(jiān)控 Nginx 到底在監(jiān)控什么1.1 表面是進(jìn)程存活本質(zhì)是連接和請求很多入門教程會把 Zabbix 監(jiān)控 Nginx 簡單理解成“Nginx 掛了就報(bào)警”。這個理解不算錯但太單薄。Nginx 是應(yīng)用入口它的價值不在于進(jìn)程起沒起來而在于它當(dāng)前扛了多少連接、請求處理得是否順暢、有沒有異常堆積。Zabbix 之所以能監(jiān)控 Nginx核心不是直接讀進(jìn)程狀態(tài)而是通過 Nginx 自身的狀態(tài)接口或模塊拿到一組結(jié)構(gòu)化指標(biāo)。最常見的數(shù)據(jù)源是 Nginx 官方自帶的 stub_status 模塊。打開狀態(tài)頁后你會看到類似這樣的一小段文本Active connections: 3 server accepts handled requests 12 12 15 Reading: 0 Writing: 1 Waiting: 2這幾個數(shù)字的含義值得記住Active connections當(dāng)前活躍連接數(shù)。acceptsNginx 啟動以來成功接受的連接總數(shù)。handled成功處理的連接總數(shù)。正常情況下 accepts 和 handled 應(yīng)該接近。requests總請求數(shù)。Reading / Writing / Waiting分別表示正在讀請求頭、正在寫響應(yīng)、以及空閑 keep-alive 連接的數(shù)量。這些指標(biāo)能幫你看清什么比如 Reading 長時間很高說明請求堆積在讀取階段背后可能是客戶端沒有把請求發(fā)完整Waiting 大量存在不是壞事只能說明 keep-alive 連接占著資源accepts 和 handled 差距持續(xù)增大則可能說明有連接在中間環(huán)節(jié)被丟掉。1.2 為什么很多“監(jiān)控沒數(shù)據(jù)”其實(shí)和 Zabbix 無關(guān)排查過幾次就會發(fā)現(xiàn)Zabbix 監(jiān)控 Nginx 沒數(shù)據(jù)絕大多數(shù)原因不在 Zabbix要么是 Nginx 狀態(tài)頁沒開啟要么是狀態(tài)頁返回的是 HTML 而不是純文本要么是 agent 訪問不到狀態(tài)頁要么是模板里的宏路徑和實(shí)際路徑不一致。Zabbix 本身只是在按固定周期向 agent 要數(shù)據(jù)agent 再去請求 Nginx 狀態(tài)頁。這一條數(shù)據(jù)鏈上有任何一個環(huán)節(jié)斷了儀表盤就永遠(yuǎn)是空的。所以我建議把這條鏈路拆成三段來理解Nginx 負(fù)責(zé)提供數(shù)據(jù)agent 負(fù)責(zé)搬運(yùn)數(shù)據(jù)Zabbix 負(fù)責(zé)展示和告警。后兩段的問題通常都有日志可查反而是第一段最容易被人忽略。很多“監(jiān)控沒數(shù)據(jù)”的案例其實(shí)和你選的模板、版本的關(guān)聯(lián)沒有想象中那么大問題往往出在數(shù)據(jù)源這一層。2. Nginx 側(cè)的狀態(tài)頁配置先把數(shù)據(jù)源打開2.1 先確認(rèn)模塊再改配置順序不要反Nginx 狀態(tài)頁依賴 http_stub_status_module 這個模塊。問題在于不是所有 Nginx 環(huán)境都默認(rèn)包含它。源碼編譯安裝時如果沒有帶 --with-http_stub_status_module后面想加模塊就得重新編譯發(fā)行版?zhèn)}庫里的 nginx 通常已經(jīng)包含這個模塊但不同發(fā)行版、不同倉庫之間也可能有差異容器鏡像則更不一定一些精簡鏡像會把用不到的模塊裁掉。所以第一步是確認(rèn)模塊存在。常見做法是查看編譯參數(shù)nginx -V 21 | tr \n | grep stub_status如果輸出里能看到 http_stub_status_module說明模塊沒問題。如果什么都沒有就不要繼續(xù)往下配狀態(tài)頁了先解決模塊問題。否則你配置再正確curl 訪問時也只能看到 404。注意有些系統(tǒng)里 nginx 不在 PATH 中可能需要寫全路徑比如/usr/local/nginx/sbin/nginx -V或者先執(zhí)行which nginx確認(rèn)一下。2.2 一個穩(wěn)妥的 stub_status 配置示例確認(rèn)模塊存在后再修改 Nginx 配置。常見的做法是在一個 server 塊里加一個 location只讓狀態(tài)頁從指定路徑訪問server { listen 80; server_name _; location /nginx_status { stub_status; allow 127.0.0.1; allow 192.168.10.0/24; deny all; } }這里有幾個細(xì)節(jié)要說明。location /nginx_status是精確匹配避免掩蓋其他路徑規(guī)則stub_status;是常見寫法如果你看到的舊教程里寫的是stub_status on;通常也能兼容但更推薦按當(dāng)前版本的標(biāo)準(zhǔn)寫法來allow 和 deny 用來限制來源 IP避免狀態(tài)頁暴露到公網(wǎng)。雖然狀態(tài)頁內(nèi)容看起來不敏感但泄露給外界等于給攻擊者多一個信息采集入口沒有理由不做限制。寫完配置后先檢查配置再重載nginx -t nginx -s reload # 如果使用 systemd 管理也可以寫成 systemctl reload nginx然后用 curl 驗(yàn)證curl -s http://127.0.0.1/nginx_status如果能看到開頭那段純文本說明 Nginx 側(cè)已經(jīng)通了。注意curl 的來源 IP 要和 allow 規(guī)則匹配否則你會看到 403。2.3 容器化和非默認(rèn)端口環(huán)境的特殊點(diǎn)如果你的 Nginx 跑在容器里情況會稍微復(fù)雜一點(diǎn)。agent 要么和 Nginx 在同一個容器內(nèi)要么通過容器 IP 或映射端口訪問狀態(tài)頁。容器內(nèi)的 Nginx 如果只監(jiān)聽了容器內(nèi)部端口agent 在宿主機(jī)上直接 curl 127.0.0.1 是拿不到響應(yīng)的。這類問題用 curl 驗(yàn)證時最容易暴露但很多人會誤以為是自己配置寫錯了。另外狀態(tài)頁不一定只能放在 80 端口。有的環(huán)境為了安全和便于管理會把狀態(tài)頁放在 8080 或單獨(dú)一個 server 塊里。這樣的設(shè)計(jì)沒問題但模板里的宏就要跟著改。這里的重點(diǎn)是先想清楚 agent 要從哪個地址訪問 Nginx然后保證這個地址上的 TCP 連通性和 ACL 都允許。不要只在 Zabbix 里把宏改來改去主機(jī)上卻訪問不到。我在很多環(huán)境里見過一種最隱蔽的錯誤狀態(tài)頁本身配置正確但 allow 規(guī)則只放行了 127.0.0.1agent 卻通過內(nèi)網(wǎng) IP 去訪問狀態(tài)頁。agent 請求時Nginx 看到的來源 IP 是內(nèi)網(wǎng)地址命中 deny all于是返回 403監(jiān)控項(xiàng)自然拿不到數(shù)據(jù)。所以配置 allow 時要想著 agent 會從哪個 IP 過來而不是只寫 127.0.0.1。3. Zabbix agent 這一層不是安裝了就行3.1 配置 Server 地址和 Hostname一致性是第一原則Nginx 狀態(tài)頁通了之后才輪到 agent。agent 安裝本身不復(fù)雜麻煩的是配置。以最常見的 zabbix-agent 為例配置文件里幾個關(guān)鍵參數(shù)一定要理解Server192.168.10.20 ServerActive192.168.10.20 Hostnameweb01Server 和 ServerActive 不是一回事。Server 是被動模式下允許從 Zabbix Server 拉取 item 的地址白名單ServerActive 是主動模式下 agent 向哪個 Zabbix Server 或 Proxy 上報(bào)數(shù)據(jù)的地址。如果你只配置了 Serveragent 就會等 Server 來問如果你用了主動模式ServerActive 也要填。很多舊教程只寫一個值換到新環(huán)境就出問題。比這更容易出錯的是 Hostname。Zabbix Web 端添加主機(jī)時填的主機(jī)名必須和 agent 配置里的 Hostname 保持一致。如果 Web 端寫的是 web01agent 里配的是 nginx-web-1那么即使在 Zabbix 里能看到主機(jī)監(jiān)控項(xiàng)也始終是 no data。在新版本 agent 里你還會看到HostnameItemsystem.hostname這樣的配置意思是讓 agent 用系統(tǒng)本身的 hostname 作為上報(bào)名稱。這個機(jī)制可以避免手工維護(hù) Hostname但前提是系統(tǒng) hostname 必須和 Zabbix Web 里的主機(jī)名一致。所以不管用哪種方式原則都是同一個兩邊名字要對上。3.2 agent 與 agent2模板和 key 可能不一樣這里要說一個“和過去不一樣”比較明顯的點(diǎn)現(xiàn)在 Zabbix 官方推薦使用 Zabbix agent 2也就是 agent2。agent2 不僅在采集能力上更豐富還支持一些內(nèi)置插件但對應(yīng)的模板、監(jiān)控項(xiàng) key 和舊 agent 不完全一樣。在 Zabbix Web 里搜索 Nginx 時你可能會看到多個模板有些名字類似 Nginx by HTTP有些類似 Nginx by Zabbix agent 2。如果你在主機(jī)上裝的是 agent2卻鏈接了舊 agent 版本的模板可能會出現(xiàn) unsupported item。反過來也一樣。所以我的建議是在鏈接模板之前先打開模板里的監(jiān)控項(xiàng)預(yù)覽看它使用的采集類型是 Zabbix agent、HTTP agent還是依賴 agent2 插件。確認(rèn)它跟你實(shí)際安裝的 agent 類型對得上再鏈接。這一步只要花兩分鐘卻可以省掉后面一晚上的排查時間。agent 和 agent2 的服務(wù)名也不一樣常見的有 zabbix-agent、zabbix-agent2系統(tǒng)服務(wù)名可能是 zabbix-agentd.service 或 zabbix-agent2.service。啟動服務(wù)后用systemctl status看一下是否 active再看一眼日志路徑常見的是/var/log/zabbix/下面。出現(xiàn)問題時日志里通常直接會告訴你 key 不支持還是連接失敗。3.3 用 zabbix_get 快速驗(yàn)證采集鏈路在 Web 端排查前可以先在 Zabbix Server 上用 zabbix_get 做一次最直接的驗(yàn)證確認(rèn) agent 是否正常工作zabbix_get -s 192.168.10.11 -k agent.ping如果返回 1說明 Server 能連上 agent。如果返回值不是 1就別急著去 Web 端看模板先解決網(wǎng)絡(luò)、端口和 Hostname 問題。agent.ping 是通用探活 key驗(yàn)證通過后再去模板里找到你想測的監(jiān)控項(xiàng) key比如和 Nginx 狀態(tài)頁相關(guān)的 key繼續(xù)用 zabbix_get 測試。不同版本、不同模板的 key 名稱會有差異所以這里不列具體 key但思路是一樣的先用 curl 確認(rèn)狀態(tài)頁存在再用 zabbix_get 確認(rèn) agent 能取到值最后才去 Web 端看圖表。鏈路從底層往上逐層打通比在界面上猜效率高得多。4. 在 Zabbix Web 端鏈接模板別被舊截圖帶偏4.1 模板名稱已經(jīng)變過好幾輪Zabbix 的模板策略在過去幾年變化很大。這次部署里我在模板列表里搜索 nginx出來的已經(jīng)不是早期教程里那張截圖上的名字了。官方模板按采集方式做了拆分有的走 HTTP agent有的走 Zabbix agent有的專門適配 agent2。這本身是好事但如果你照著一個兩三年前的教程去選模板很可能選錯。我的建議是以當(dāng)前 Zabbix 版本實(shí)際加載的模板列表為準(zhǔn)不要憑記憶點(diǎn)。鏈接模板后立刻去“監(jiān)測 – 最新數(shù)據(jù)”里過濾這個主機(jī)等一到兩個更新周期看有沒有數(shù)據(jù)進(jìn)來。如果 Zabbix 的刷新周期是 30 秒或 1 分鐘通常幾分鐘內(nèi)就能看到。另外一個主機(jī)通常只需要鏈接一個對應(yīng)當(dāng)前采集方式的 Nginx 模板不需要把所有 Nginx 模板全鏈接上。鏈接多個模板并不會讓數(shù)據(jù)更豐富反而會讓監(jiān)控項(xiàng)沖突、重復(fù)告警排查起來也更亂。4.2 宏參數(shù)路徑、協(xié)議、端口都是變量模板鏈接后還有一層容易被忽略宏參數(shù)。官方 Nginx 模板里通常會定義一組宏用來告訴 agent 去哪個地址、哪個路徑、用什么協(xié)議獲取狀態(tài)頁。常見宏名可能包括{$NGINX.SCHEME}、{$NGINX.PORT}、{$NGINX.STUB_STATUS.PATH}具體名稱以你當(dāng)前模板為準(zhǔn)。它們的作用就是把狀態(tài)頁的訪問信息從監(jiān)控項(xiàng)中抽出來這樣同一套模板可以復(fù)用在不同的 Nginx 主機(jī)上。如果你的狀態(tài)頁地址不是默認(rèn)值就不用改監(jiān)控項(xiàng)直接在主機(jī)層級覆蓋宏就行。比如狀態(tài)頁路徑是 /nginx_status 而不是 /status就在主機(jī)的宏里把對應(yīng)宏改成實(shí)際路徑。改完后等下一次采集生效再看最新數(shù)據(jù)。要注意的是宏的生效范圍有層級全局宏、模板宏、主機(jī)宏。主機(jī)宏優(yōu)先級最高。如果模板里已經(jīng)定義了默認(rèn)值主機(jī)上沒改也沒關(guān)系但如果狀態(tài)頁地址做了修改一定要記得改對應(yīng)主機(jī)的宏而不是只在模板里改一個默認(rèn)值因?yàn)槟0迥J(rèn)值會影響所有鏈接該模板的主機(jī)。還有一個容易出錯的地方狀態(tài)頁地址如果是 https但宏里用的是 http監(jiān)控項(xiàng)會一直返回錯誤。這種問題在視覺上非常隱蔽因?yàn)?Nginx 和 agent 都正常只有協(xié)議不匹配。4.3 驗(yàn)證模板是否能出數(shù)據(jù)鏈接模板和配好宏之后不要直接離開頁面。花一分鐘做兩件事第一到主機(jī)監(jiān)控項(xiàng)列表里看有沒有出現(xiàn)紅色 error 狀態(tài)的監(jiān)控項(xiàng)第二到最新數(shù)據(jù)里過濾該主機(jī)確認(rèn)有非空數(shù)據(jù)。如果看到 error 狀態(tài)的監(jiān)控項(xiàng)先點(diǎn)擊進(jìn)去看錯誤信息。常見的有 unsupported item key、Cannot connect to [...]: 10060、Connection refused 這類。每一條錯誤信息其實(shí)都指向了數(shù)據(jù)鏈路的具體環(huán)節(jié)比你在外面猜模板要快得多。如果最新數(shù)據(jù)里有值但看起來不對比如 Reading 是 0、Writing 是 0也不要慌先用 curl 手動看一次狀態(tài)頁確認(rèn)源數(shù)據(jù)里就是這些值然后判斷是 Nginx 本身空閑還是采集路徑不對。如果源數(shù)據(jù)是對的Zabbix 只是如實(shí)展示不用改 Zabbix。5. 沒數(shù)據(jù)的排查鏈路按順序查別亂試5.1 四個環(huán)節(jié)從上到下檢查如果你最終面對的是一臺沒數(shù)據(jù)的 Nginx 主機(jī)不要先懷疑 Zabbix更不要反復(fù)重新鏈接模板。按下面的順序逐層排查通常能在十分鐘內(nèi)定位問題。第一層Nginx 狀態(tài)頁是否可訪問。curl -s http://127.0.0.1:80/nginx_status如果 curl 能返回純文本進(jìn)入下一層。如果返回 403、404 或 HTML 頁面問題在 Nginx 側(cè)。第二層agent 能否讀到狀態(tài)頁。注意 agent 的運(yùn)行身份和權(quán)限。你可以切換到 agent 運(yùn)行用戶或者用 sudo 模擬執(zhí)行同樣的 curl 命令確認(rèn) agent 視角下能訪問。如果 agent 在容器里還要確認(rèn)容器網(wǎng)絡(luò)。第三層Server 和 agent 之間是否連通且 Hostname 匹配。zabbix_get -s agent_ip -k agent.ping如果 zabbix_get 返回 1說明網(wǎng)絡(luò)層通。然后再確認(rèn) Web 端主機(jī)名和 agent Hostname 一致。第四層模板宏和監(jiān)控項(xiàng)是否匹配。打開監(jiān)控項(xiàng)列表查看具體監(jiān)控項(xiàng)的 key、宏替換后的實(shí)際地址用測試功能跑一次。如果返回錯誤根據(jù)錯誤信息調(diào)整宏。這個順序的核心思路是先確定是哪一層壞了再決定修哪里。不要在不知道哪一層出問題的時候改配置改來改去只會讓狀態(tài)更亂。5.2 高頻錯誤對照表下面這張表基本覆蓋了 Zabbix 監(jiān)控 Nginx 時最容易遇到的幾類現(xiàn)象現(xiàn)象常見原因處理思路狀態(tài)頁 curl 返回 404沒有配置 location 或模塊缺失先查 nginx -V 里的 stub_status 模塊狀態(tài)頁 curl 返回 403allow/deny 沒有放行 agent 來源 IP調(diào)整 allow 規(guī)則思考 agent 從哪個 IP 訪問監(jiān)控項(xiàng)顯示 unsupported itemagent 版本或模板類型不匹配確認(rèn)是 agent 還是 agent2換對應(yīng)模板或 key最新數(shù)據(jù)一直是空Hostname 不匹配、宏路徑不對、采集周期長檢查主機(jī)名一致性測試宏替換后的地址監(jiān)控項(xiàng)返回 Connection refusedagent 未啟動、端口不通、防火墻攔截systemctl status 看服務(wù)再用 zabbix_get 驗(yàn)證狀態(tài)頁返回的是 HTML 而非純文本location 配置被其他規(guī)則截獲檢查 server 塊順序確認(rèn)精確匹配位置這張表不是讓你背下來而是給你一個參考坐標(biāo)。遇到問題時先看現(xiàn)象再判斷屬于哪一層然后去對應(yīng)位置檢查。5.3 沉淀一個“四層驗(yàn)收清單”最后一個能長期復(fù)用的經(jīng)驗(yàn)把 Zabbix 監(jiān)控 Nginx 的鏈路固定成一張驗(yàn)收清單每次新接入一臺 Nginx 主機(jī)時按順序過一遍。Nginx 狀態(tài)層模塊存在、location 配置正確、curl 返回純文本、allow 已放行 agent 來源 IP。Agent 采集層服務(wù)已啟動、配置了正確的 Server/ServerActive、Hostname 與 Web 端一致、zabbix_get 驗(yàn)證 agent.ping 返回 1。Server 接入層Web 端主機(jī)存在、agent 接口可達(dá)、主機(jī)名匹配。模板匹配層鏈接了適配 agent 類型的 Nginx 模板、宏路徑/協(xié)議/端口正確、最新數(shù)據(jù)出現(xiàn)非空值。這個清單不是固定不變的但它能幫你把一次復(fù)雜的排查變成一次順序的確認(rèn)。以后不管是三臺機(jī)器還是三十臺機(jī)器先讓這種驗(yàn)證順序變成肌肉記憶再談自動化。6. 適用邊界這套方案不是所有 Nginx 環(huán)境都適合6.1 適合誰Zabbix 監(jiān)控 Nginx 這套方案適合的場景其實(shí)很清楚你已經(jīng)在用 Zabbix手里是一批長期存在的虛擬機(jī)或物理機(jī)核心關(guān)注的是連接數(shù)、請求數(shù)、握手狀態(tài)等基礎(chǔ)指標(biāo)。這種情況下引入一套新的監(jiān)控系統(tǒng)成本遠(yuǎn)大于收益直接在 Zabbix 里接 Nginx 模板是最順的路。從我個人經(jīng)驗(yàn)看當(dāng)一個團(tuán)隊(duì)已經(jīng)用 Zabbix 管了幾百臺機(jī)器再為了 Nginx 單獨(dú)部署一套 Prometheus、Grafana反而不劃算。不是因?yàn)?Prometheus 不好而是你的告警、權(quán)限、儀表盤、值班流程都已經(jīng)長在 Zabbix 上了新增一套系統(tǒng)意味著要同時維護(hù)兩套監(jiān)控體系的賬號、存儲和告警規(guī)則。6.2 不適合誰反過來如果你的環(huán)境是大量短生命周期容器Nginx 實(shí)例像 Pod 一樣隨時擴(kuò)縮容Zabbix 這種以主機(jī)為單位的管理模型就會變得很吃力。每來一個新實(shí)例都要創(chuàng)建主機(jī)、鏈接模板、維護(hù) Hostname規(guī)模一大這些動作本身就是運(yùn)維負(fù)擔(dān)。另外如果業(yè)務(wù)需要按 URL、按狀態(tài)碼、按 upstream 做細(xì)粒度 SLA 分析單靠 Zabbix 的 Nginx 狀態(tài)頁數(shù)據(jù)也不夠。狀態(tài)頁給的是連接數(shù)和請求總數(shù)拿不到每個接口的響應(yīng)時間分布。這種需求更適合讓 Nginx 輸出 access log 結(jié)構(gòu)化、再送進(jìn)時序數(shù)據(jù)庫或者日志系統(tǒng)或者直接采用具有服務(wù)發(fā)現(xiàn)能力的監(jiān)控方案。這不是說 Zabbix 不能做擴(kuò)展而是說你要先判斷值不值得。任何方案都有維護(hù)成本Zabbix Nginx 監(jiān)控的優(yōu)勢是簡單直接代價是深度有限。認(rèn)清這個邊界比盲目堆監(jiān)控項(xiàng)更重要。6.3 重要的不是某一個命令而是適應(yīng)變化的能力回到標(biāo)題里那半句“和過去有一點(diǎn)不同”。這句話其實(shí)很適合用來概括這類監(jiān)控方案的常態(tài)Nginx 的編譯參數(shù)在變agent 從舊版走向 agent2模板名稱和宏定義在變安裝方式從裸機(jī)走向容器。過兩年你再回頭看今天這篇文章里的具體配置很可能又有出入。但有一點(diǎn)不會變數(shù)據(jù)從 Nginx 到 agent 再到 Server 這條鏈路的邏輯是穩(wěn)定的。你只要掌握了“先 curl 狀態(tài)頁、再 zabbix_get 探活、最后看模板宏”的驗(yàn)證順序無論版本怎么升級你都能在最短時間內(nèi)判斷出問題出在哪一層。這才是比某一條命令更有價值的東西。所以我的長期建議是不要只收藏某個版本的配置片段而是順手把自己的環(huán)境、模板名稱、宏定義、驗(yàn)證命令寫成一個簡短文檔或腳本。下次再遇到 Nginx 監(jiān)控沒數(shù)據(jù)你不是回去翻舊教程而是打開自己的排查清單?;氐介_頭那個案例。我們最后做的事情其實(shí)很簡單把 stub_status 狀態(tài)頁配置好allow 規(guī)則放行 agent 來源 IP再把 Web 端主機(jī)名和 agent Hostname 改成一致。數(shù)據(jù)在第二個更新周期就出現(xiàn)了。整個過程沒有任何懸案只是之前分散在不同教程里的經(jīng)驗(yàn)沒有串成一條完整的鏈路。Nginx 側(cè)會變、Zabbix 會變、模板會變但驗(yàn)證順序不會變。下次再看到最新數(shù)據(jù)為空時不要急著在界面上反復(fù)點(diǎn)先打開一個終端curl 一下狀態(tài)頁很多時候答案早就寫在響應(yīng)里了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
啊啊啊在线观看免费视频| 亚洲综合色男人网| 亚洲国成人情色好看电影| 三级色影综合网| 欧美色图下一页| 久久久久熟女| 中文字幕精品探花视频| 97超碰美国| 日日夜夜精品视频| 亚洲综合影片| 91N综合在线| 国产精品久久久鸭无码的功能| 老女人老91妇女老热女| 色色色网站| 我爱大香蕉| 人妻91少妇| 久久久久96| 亚洲激情综合| 黄页网站免费高清在线观看| 99re在线| 九九九九免费视频| 色婷婷电影网| 久久精品人人做人人看| 婷婷人妻激情| 99啪啪| 91精品电影18| 欧美日韩岛国大片在线观看| 日韩一区二区精彩视频| 久九九九九九九九热| 2019午夜福利视频| 亚洲国产欧美日韩人妻日中文| 欧美麻豆成人同性GⅤ在线| 久久国产在线一区二区| 亚洲日韩少妇一道本视频| 99视频内射三四| 日欧亚洲二三区大片不卡| 无码精品久久久久久亚洲| 欧美国产有色电影| 色九九九九| 色婷婷丁香五月| 国产一级作爱毛片| 综合久久久久久久综合网| 五月天九九日国产精品一区二区三区| 大香蕉综合| 极品色www影院| 黑人精品久久97| 18一区二区三区| 国产成人bd在线观看| 97超碰超碰| 色妺妺AⅤ| 97在线青| 超碰性爱97| 免费一级视频特黄色大片| 熟女激情综合网| 天堂亚洲精品| 亚洲有薄码区久久在线一区| 青青草好吊色| 成人无码在线超碰网| 91超碰在线| 久久熟女嫩草成人片免费| 色香网| 一本色道久久综合精品婷婷| 欧美亚洲综合高清在线| 波多野结衣一级视频| a片自拍直播视频| 69久久| 91少妇| 亚洲av国产av综合av卡| 激情久久av一区av二区av| 亚洲 欧美 第一页| 天欧美在线| 亚洲大色堂| 97天天做| 99re这里只有精品2| 久草资源在线| 十八禁的黄污污免费网站| 97任你吞精| 人人操天天爽| 99RE在线视频精品,这里只有精品| 男人亚洲91首页在线| 综合激情97 | 超碰免费97| 操逼视频色| 操逼啊啊啊91| 欧美久久毛片基地| 春色综合网| 国产一区二区在线播放量| 日本久久女同性恋视频| 激情五月天丁香社区| 荡小穴在线观看| 久草精品一区 | 亚洲欧美视| 久久毛卡| 91麻豆天美国产欧美| 日本肏逼视频在线观看| 韩日精品福利视频一区不卡在线免| 国产精品一二三| www.成人无码| 精品无码久久久久久国产浪潮| 狠狠久久手机视频精品| 67194无码不卡| 激情视频一二三| 欧美日韩1234| 欧美性区| 99精品国产户外露出| 在线观看黄色电话| 91久久久久久久| 91天天美女| 盗摄女人妻在线| 国产熟女一区二区丰满| 欧洲久久一二线| 九九黄色网| 超碰欧美97资源| 无码人妻精品一区二区三区99不卡 | 久久天堂| 99re这里只有精品3| 亚洲男人在线观看天堂| 夜夜免费视频| 国产热RE99久久6国产精品首 | 91欧美亚洲| 1024日韩| 亚洲人成在线放东京热| 国产绿奴视频在线观看| 一区二区不卡| 日本午夜福利影院| 青青在线视频免费| 吻戏激情性巴克| 日韩懂色网| 欧美91精品国产自产| 大香蕉伊人久久| 男人天堂最新手机版在线青青草| 亚洲精品日日夜夜52| 亚洲极品| 婷婷综合视频| 九99久久| 国产中文大片资源中文字幕 | 91精品人妻偷情| 午夜情侣自拍网站| 大香蕉78| 91亚洲欧美色图| 妇女性内射冈站HDWWWCOM| 少妇与黑人高潮在线| 一区不卡在线观看av| 99国产精品久久久在线播放| 久久国内| 天久久久噜噜噜久久国产精品爽爽| 日韩簧片免费看| 久草色悠悠在线视频| 成年人性爱日韩| 国产精品久久发布| 91看黄片| 伦理日韩国产久久| www.夜夜| 加勒比久久综合网高清| 青青草视频这里只有精品| 91黄站| 九九九九九九九九九九九免费国产| 97啪啪| 亚洲激情 欧美色图| 在线免费观看日韩一区| 宗合情欲网| 亚洲蜜乳av| 干美女人妻| 天天射网| 亚州操逼网| 日本久久超碰| 精品人妻一二三四区视频| a级成人毛片免费视频高清| 国产精品白丝AV| 国产亚洲日本精品在线| 欧美国产精品久久九九| 日韩精品系列| 精品91摸| 91精品黄在线观看| 日欧亚洲二三区大片不卡| 欧中美三级一区二区三区| 91痴汉| 夜夜爽33333| 91爆操视频| 91人妻人人澡人人爽人人精品| 日本熟人妻中文字幕在线|...久久国产精品-国产精品_日本一区二区三区中文字幕 | 毛片视频白嫩| 欧美日韩第一页| av2014 日韩在线中文字幕| 久妇网| www色色色com| 九九色逼| 色色五月天婷婷| 3d成人精品一区二区| 日本一区二区亚洲综合| 成人三级片一区二区三区视频| 日本新免费二区三区| 黄页大片在线观看| 五月天婷婷综合网| 亚洲图片偷拍视频区| 欧洲综合无码| av爱爱爱| 亚洲久久久久| 日日夜夜精品视频| 久久夜夜| 欧美中文字幕男人天堂久久精品| 久热免费视频| 99自拍视频在线| 岛国网址国产 | 日韩一级二级三级免费看完整版国语版 | 快点操死我| 99亚洲精品| 性一交一乱一交A片久久四色| 97欧美性爱| 夜嗨影院| 欧美黄色大香蕉一区二区| 日韩亚洲中文有码视频| 亚洲 欧美 偷拍 唯美| 欧美日韩在线视频网站| 日韩av无码网站| 天天综合网在线91| 欧美精品二区视频在线| 久9re热视频这里只有精品| 日韩熟女三十乱伦| 亚州熟女乱伦| 国产av强奸美女| av无线看| 九九色逼| 内射白嫩美女| 一级性爱视频免费在线| 色噜噜精品一区二区三| 中文字幕在线免费观看视频| 人妻久久久久久久久久久久久久久| 亚洲AV免费在线| 蜜臀国产AV中文字幕| 性色一线| 极品久久久久久久久久久久久久| 毛片麻豆91糖心精品毛情片| 午夜福利 成人 91| 国产午夜在线观看| 日韩卡一卡二卡三在线| 99久久久久久亚洲精品不卡| 欧美黄色大片在线观看 | 欧美白嫩女HD| 蜜臀va69| 日韩成年人性爱视频| 五月天久久综合网| 99热色精品| 日本人妻一区二区| 青青草久久在线| 国产精品一区二区三| 久久久久少妇| 91丝袜美女国产| 国产精品久久久鸭无码的功能| 色综合色欲色综合色综合色综合| 欧美中文字幕男人天堂久久精品 | 国产精品久久久亚洲第一牛牛_在线观看 | 免费看国产曰批40分钟怎么下载| 五月婷丁香| 国产专区路线| 美女t无毒不卡不卡| 五月亭亭六月丁香| 欧美综合天堂| 岛国黄| 桃色五月天| 五月天综合网| 亚洲高清综合网| 高清国产精品无码| 性色avv| 精品久操| 牛黄色久午久| 天天操天天看| 国产高清无码一区三区二区| 69综合网| 亚洲天天综合| 嗯嗯嗯嗯啊啊啊好紧好大| 日本五区不卡| 亚洲导航深夜福利| 亚州乱码中文字幕综合久久久| 97se亚洲| 无码乱人伦中文视频| 开心六月色| 超碰99在线| 加勒比久久综合网高清| 麻豆精品三区视频| 日韩操逼HD| 嗯嗯嗯啊啊啊在线免费观看| 亚洲欧洲激情卡通另类文学四射小说网站| 天天色播亚洲综合网站| 91n.欧美| 五月天精品| 91无码人妻| 午夜乱轮操逼视频免费看| 99啪| 日韩性爱小视频| 久久综合九九| 国产精品日日摸天天碰| 欧美顶级黄片AAAAA在线免费看| 丰满岳乱妇一区二区三区| 超碰人人乐97| 欧美一级A一级a爱片久久| 五月天激情小说| 天天色综合影视网| 精品国产自在在线99| 精品一区二区三区丰满熟女-亚洲欧美一区| 再深点灬舒服灬太大了好硬好爽| 91欧美少妇| 日本精品第一视频在'| 九九九国产精品| 午夜男人一级A片7777| 久久久青草青青国产亚洲免观精品高清完整版_97久久综合区小说区图片区,国精品 | 日韩福利综合一区| 美女黄码视频午夜| 日本一区二区不卡精品| 久久久极品| 五月天综合| 九九九九精| 国产性爱在线视频一区二区| 国厂麻豆77q4| 国产69精品久久久久99尤物| 成人草草视频| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 中文字幕人妻色偷偷久久皮 | 久久99草| 欧美熟妇视频| 久久riav中文精品| 亚洲 欧美 日韩另类 麻豆| 成人一二三区| 国产精品九9| 人人人摸人人| 99久草| 国产精品老熟女一区二区| 翔田千里AV无码秘 三区| 国产久久一区二区三区野外在线| 狠狠色噜噜狠狠狠狠狠色综合久久| 久久久久久99999国产精品| 日韩黄色成人性爱| 国产日逼视频| 久草老司机| 男人天堂2019亚洲| 黄色AAAAA欧美| 日本三级精品| 99国产精品免费| 色999五月色| 日韩欧美操逼xxx| 综合性视频99| 色第一页| 亚洲免费精品一区| 一起草精品人妻| 亚洲人妻在线精品| 呻吟 欧美 日本 中出| 欧美日韩国产中文精品字幕自在自线, | 老鸭窝黄色视频网站| 任你干在线视频| 六月婷婷色综合| 亚洲日韩视频二区| 加勒比综合88| 亚州欧美总和| 亚洲国产剧情少妇激情| 日韩人妻一区二区精品| 乱理日韩中文| 日韩人妻大香蕉| 在线看片国产精品每日更新| 91操熟女| 精品欧美乱码久| 校园春色综合香蕉| 男人的天堂色偷偷青青草视频婷婷网| 精品女人999| 日本熟妇人妻中出视频| 樱花蜜乳av| 亚洲日韩天堂| 超碰在线免费一区二区三区| 亚洲熟妇白浆无码AV| 绯色AV粉色AV蜜臀AV| 嗯嗯啊中文字幕| 成人免费不卡在线视频| 国产 亚洲 丝袜 制服| 91av一区二区在线观看| 人人操欧美风骚| 午夜传煤十二区精品| 熟妇激情| 加勒比av网| 屁股久久久久久久久| 四虎884a| 五月天伊人| 日韩久久超碰色| 97九色人妻| 婷婷亚洲中文字幕在线| 日本不卡三级网在线播放| 久操九九九九| 69AV女优男人的天堂| 天美国产精品| 性色av一区二区| 日韩精品9999| 精品人妻一区春色| 欧美天堂第二区| 福利一级版子| 日本久久久久久久久久| 国产精品乱码久久久| 亚洲中文丝袜美腿诱惑字幕| 亚洲一二三四区| 大香蕉宗合网在线| 大香蕉在线86| 免费97视频| 久久成人午夜狠狠| 久久婷婷成人综合色怡春院| 五十路熟女人妻一区二区在线观看| 啊啊啊啊无码| 久久久99免费| 五月天黄色激情视频| 五月丁香激情综合网| 水澄无码AV| 色婷婷在线视频精品导航| 久久综合中文国产| com 首页 18岁 禁区 女优 免费 精选 同城| 91欧美综合在线| 欧美亚洲清纯| 在线综合网| 九九精品99| 操逼视频免费日韩无码| 97中文天堂| 欧美日韩亚洲五月天婷婷| 天操天操夜操夜月月年年操操| 97日韩欧美亚洲| 亚洲一二三四区| 九九热久久99精品re| 亚洲各类熟们中文字幕| 嗯阿好爽好紧| 嗯嗯,啊啊,国产精品| 久久精品老司| 欧美丝袜亚洲| 日本人妻中文字幕精品| 麻豆国产免费影片| 久草资源欧美在线视频| 久久亚洲av成人无码国产| 内射白嫩美女| 人妻素股| 免费成人在线观看91| 八人操人人摸人人看| 丝袜 亚洲 偷拍| 亚州日韩97| 天天cao在线| 曰本人妻人人澡人人夹| 亚洲综合网电影91| 97欧美久久久久久久| 精品无码秘 人妻一区二区| 色综合av男人天堂| 少妇毛片久久| 超碰色老头| h无码动漫在线观看| 日本三级人妻a人妻一在线| 欧美综合狠| 久久久久久久久久久免费精品| 欧美日综合| 狠综合网| 国产亚洲精品A在线观看下载| av中文在线| 欧美男人亚洲天堂| 可以免费看黄片的视频| 国产丝袜美女诱惑| 欧美综合另类| 吻戏激情性巴克| 国产精品一区在线播放| 久久久夜夜嗨免费视频| 日韩视频小说在线观看| 午夜视频黄| 日韩pv中文| 99久在线精品99re8蜜桃| 国产高清MV操逼视频| 国产丰满熟夫69mpp| 成人精品在线免费视频| 亚洲熟妇丝袜在线观看| www.操| 校园春色五月天| 大香蕉520| 亚洲熟女一区二区| 色色婷婷丁香| 久久欧美激情| 天天欧美欧美亚洲网| 超碰97亚洲| 激情综合97| 欧美懂色综合网| 精品国产一区二区三区av在线资源| 婷婷丁香人妻| 伊人激情| 欧美黑人熟妇精品91| 女人的久久久| 国产在线综合网| 少妇诱惑视频| 日韩欧美成人性爱在线| 久久AV色| 91久久99久久91熟女精品| 乱人乱色一区二区三区免费| 67914亚洲精品| 国产无码精品久久久久久| ss久久| 国产精品点击进入在线影院| 久久精品男人的天堂| 亚洲中文字幕av| 后入国产| 欧美色图成人网一区二区| 欧美国产精品| 精品高清牛人盗摄一区二区三区中文字幕A片免费在线观看 | 秋霞一级鲁丝片A片| 综合天天网| 亚洲最大的综合性av| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 夜夜爽77777| 欧美影院一区二区三区| 色天堂在线观看| 91色婷婷综合久久中文字幕二区| 国产高清午夜成人在线观看| 日日夜夜模| 五月天综合| 91视频伊人| 国产女主播视频在线观看| 狠狠干综合| 三级精品三级在线观看| 青青草视频在线观看一区二区| 成人无码在线超碰网| 男人的天堂视频精品乱在线| 91亚洲欧美| 热久久九九热| 九九99久久| 日小BB小视频| 亚洲狠| 天操老女人| 亚洲综合在线视频| 黄色在线网站| 亚洲av成人精品一区| 国模91| 久久伊人网视频一区二区三区| 欧美日韩性爱无码| 极品销魂美女一区二区| 精品女同一区二区三区| 啊灬快c我灬啊灬用力灬啊灬-国产精品性做久久久久久-成人AV | 国产91丝袜在线播放蜜月| 大香蕉伊人亚洲| 青青草丝袜在线视频| 国产美女口爆吞精视频| 91网站18| 蜜臀99久久国产| 蜜臀无码一区二区| 91成人国产综合久久精品蜜月| 啊…啊…操我用力操我| 欧美日韩青操| 美女淫穴| 日韩/97| 天天爽爽爽爽| 天天干天天干天天| 亚洲天堂热| 国产三区免费在线观看| 在线a v| 人人贴人人摸| 啪啪啪东京| 国语对白露脸XXXXXX| 日日夜夜免费| 色欲久久99国产精品久久久久久| 97亚洲综合在线| 欧美性五月| 天天操天天谢| 吊色| 精品二区久久| 国产农村妇女毛片精品久久| 欧美激情亚洲| 97美日韩视频| 97超碰欧美| 蜜臀久久99精品久久久电影| 97干在线| 爱妃国产亚洲视频中文字幕| 乱伦一二三区| 成人无码在线视频网站| 免费αV在线视频| 日韩AV无码网站| 黄色片A级一区二区三区| 国产精品内射婷婷一级二| 日本在线观看网址| 蜜臀AV秘一区翔田千里| 免费公开人人操| 国产 日韩 欧美 中文 另类,国产 欧美 另类 制服 变态,高清 日韩 欧美 中文,高 | 久久精品视频一区三区小泽玛利亚| 国产精品香蕉| 无码不卡亚洲成?人片| 九九九久久久| 亚洲AV成人无码一二三久久 | 自拍视频大全亚洲专媒视频/一区二区三区 | 亚洲精品91| 97干在线| 国产强奸乱伦xd| 久久亚洲AV成人精品无码| 亚洲乱码国产乱码精网站| 性爱乱伦网址| 人妻久久久久久久久久久久久久久| 午夜激情床戏激情| 亚洲成人色情五月天丁香花| 精品高清牛人盗摄一区二区三区中文字幕A片免费在线观看 | 日本肏逼视频在线观看| 爱爱60秒免费视频| 最新中文字幕av| 青青草好吊| 亚洲另类春色| blacked精品一区国产| 久久女婷| 超碰碰激情97+久| 日韩欧美久久婷婷网站| 国产中出内射一区二区| 97欧美性爱| 啊啊啊啊嗯嗯嗯用力好爽 | 99热这里是精品| 不卡二三区人妻少妇| 国产乱色国产精品免费视| 搡老女人老妇女AAA一VU麻豆| 一区在线国产播放| 天天综和| 久热这里只有精品9| 色综合V| 人成午夜免费大片| 91九九九逼| 国产区在线| 天天插夜夜操| 999日韩中文精品观看视频。| 校园春色宗合网| 啊啊啊好疼| 免费观看欧美日韩操逼视频| 男人久久精品| 天天伊人| 亚洲色图第四色| 国产精品久久| 国内毛片无码一级毛片| 啊啊啊好大好湿| 91另类| 欧美日韩性爱精品| 97超碰人操| 亚洲欧美国产中文视频| 人妻啊啊人妻啊啊| 大香蕉懂9| 亚洲色图殴美色图激情乱伦| 精品176精品2| 97精品一区二区视频| 亚洲天堂综合AV| 老色鬼成人精品视频下载大在线观看| 夜夜操青青草| 91中文精品日韩欧美在线| 性猛交| 五月婷婷激情| 蜜臀久久99精品久久久久久成人小说 | 亚洲 欧美 日韩另类 麻豆| 国产性爱乱伦AV| 99色骚| 国产视频一区二区三区在线免费观看| AV天堂电影网| 88xx成人精品视频| 99自拍B亚洲 | 亚洲综合在线91| 精品-91人妻子系列| 人人九九精| 亚洲精品aa久久伊人| 亚州Av天美传媒| 国产精品香蕉热久久新品| 久热大香蕉网站| 岛国艾薇凹凸视频天堂| 四虎精品一区| www超碰| 欧美色九九| 丁香六月天| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 日韩欧美大片免费高清啪啪| 国产AV人人 夜夜人人澡| 四虎国产精品永久入口| 国产亚洲精品激情| 亚洲日韩熟女人妻高清在线| 国产 日韩 欧美 中文 另类,国产 欧美 另类 制服 变态,高清 日韩 欧美 中文,高 | 很很操在线| 97视频7| 日韩av不卡在线看| 午夜久久久| 成片免费播放| 亚洲国产精品无码AV久久| 大香蕉欧美伊| 激情视屏国产乱伦强奸| 韩日欧亚a级| 天美av在线观看| 日日夜夜精品| 亚洲精品电影| 中文字幕在在线观看网站| 国产成人精品必看 | 最新日日夜夜天天干干| 99这里都是精品| 99无码| 一区二区三区免费视频入口| 色在线69堂| 高清国产av无码| 国产真实子伦对白| 少妇色综合| 伊人色综合网| 2020中文在线一区二区三区| 亚洲黄色电影| 99综合自拍| 不卡免费av在线播放| 午夜精品久久一区二区| 综合激情一一91| 嗯嗯啊在线视频| 人妻中文字幕精品无码| 国产精品噜噜噜日日日| 久久久久78| 五月丁香六月| 啪啪资源网| 婷婷久月| 国产精品动态一区二区三区四四| 日韩精品.久久精品.AV女优.天美传媒| 岛国毛片手机在线观看| 超碰97精品| 国内一区二区三区| 屌妞视频久久久久久久久久久久| 狠狠操狠狠爱| 国产精品久久久久中文字幕| 老熟妇乱轮| 欧中美三级一区二区三区| 亚洲综合图色在线| 91人人看| 农村妇女一级二级三级视频| 夜色AV无码手机在线影院| 国语av狠狠色丁香婷婷综合激情| 久久久999国产| 国产精品久久久九九九| 久久综合久久综合人久久夜精品| 另类天堂| 99精品成人免费看| 欧美天天综合站| 久久25| 色噜噜综合在线| 日本午夜久久电影| 把腿张开老子CAO烂你| 久综合国内精品自在自线| 3PAV乱伦视频| 中日韓欧美高清| 人妻少妇精品久久久久久| 色色香蕉| 麻豆一区二区三区在线看 | 亚洲超碰在线| 手机看片1024你懂的国产| 精品日韩中文在线| 日韩av性爱在线播放| 视频不卡中文字幕| 亚洲欧美999| 97av在线观看| 色汉综合| 水多多映视AV| 亚洲无码偷拍| 日本熟女不卡视频| 国产精品分类在线观看| 国产精品不卡一区二区三区av| 97视频免费在线观看| 国产精品视屏| 综合网天天| 亚洲天堂欧美| 秋霞网无码| 精品免费视频国产一区| 一区二区三区国产在线播放| 一二三啪啪专区| 综合欧美日本三级| 色99在线| 天天综合91在线| 97精品国产97久久久久久| 中文字幕日韩国产传媒欧美精品| 久久久久久久 九九九九九九九| 人妻精品综合中文字幕在线 | 亚洲丝袜少妇在线| 加勒比海色香蕉婷婷| 亚洲一区二区在线观看91| 日韩欧美性吧婷婷乱伦大香蕉| 97蜜桃综合| 三上制服丝AV| 国产后入清纯| 熟妇人妻精品一区二区| 在线a亚洲视频播放在线| 翔田千里Av在线| 男人a天堂手机在线版| 亚洲夜夜欢无码一区二区 | 色婷婷在线视频精品导航| 密臀在线免费观看| 亚洲成人AB| 久久精品无码专区| 91精品国产91久久福利| 国产精品亚洲无码| 中字乱伦AV| 天堂蜜桃无码视频一区二区| 欧美日韩大陆黑人少妇99| 怡红院网站在线视频| 不卡在线观看视频| 久操com| 综合啪啪| 欧洲亚洲人妻无码中字久久三区四区| 狠狠操狠狠燥| 亚洲av青草久久一区二区| 久久久亚洲高清不打码| 91人妻爽爽人人做人人澡| 久久精品国产99国产精品亚洲| 另类欧美| 偷拍偷窥与盗摄视频专区| 天天射,天天操,天天爽-国内精品一区二区三区-成人AV | 久久噜| 人妻天堂网| 日韩欧美国产一区二区三区四区| 69超碰综合| 性性久久| 国产精品 视频| 无套内射性感少妇视频| 欧美日韩国产电影| 97久久国产| 黄色视频特级毛片| 欧美老妇女内射网址| 亚洲欲色| 97国产成人精品免费视频| 精品人妻视频一区二区三区蜜桃视频| 蜜汁欧美| 成人美女av| 大香蕉色网| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 69av一区二区三区| 日韩在线76| 人妻人久久精品中文字幕| 白 大 人妻 区 在线| 丝袜制服字幕在线| 久久久久中出| 四虎在线免费视频| 男女做爰猛烈动高潮A片免费应用| 人人扣人人操| 日韩色欲久久一二三四区| 老女人爆菊| 人妻精品一区二区| 色婷婷综合网站| 风骚少妇视频中文字幕| 亚洲?V无码专区在线电影| 久热69九色熟妇97| 91精品91久久久中77777| 九九RE视频在线精品| 精品一区99999| 欧美精品xxxwww| 欧美色图成人网一区二区 | 无码久| 人妻干天天| 国产精品肉丝自拍| 中文字幕在线免费观看2| 久久a久久| 午夜舔阴达高潮视频免费看| 花野真衣| 超碰成人人人爽人人爽| 亚洲人在线成线成人| 亚洲熟伦熟妇AV无码春色| 久久9亚洲| 精品国模无码| 精品久久久久久久久久久久| 不卡av在线中文字幕| 欧美大片天天看| 日本午夜操逼| 丝袜视频网国产90| 久久婷婷亚洲| 五月天伊人网| 久久婷婷国产一区二区色| 综合久久97| 日韩99神马视频片| 亚洲成人日韩小说| 99福利社| 女优免费一区二区永久| 精品无码久久久久久久杏吧| 青青草在线视频欧美| 最新的亚洲无吗| 91高清日| 天美av在线观看| 一级人妻性爱视频| 99在线啪| 亚洲欧美精品一区天堂久久 | 性性欧美| 免费精品福利在线观看| 久久国产乱子伦精品免费女,网站| 亚州操操穴网| 思思热在线cao| 国产视频97| 啊啊啊com| 日本一级婬片试看三分钟| 久久超碰天天| 抽查国产福利主播| 欧美日韩一区二区三区四区蜜桃| 超碰97男女| 好吊色一区| 一级免费啪啪片| 久久精品国产亚洲5555| 国产偷人妻精品一区二区在线| 色约约一区=区三区| julia在线观看久久| 国精精品无码一二三区水多多| 熟妇视频一区二区三区在线| 国产少妇高潮| 日本三级久| 伊人激情五月天一区二区| 欧美性性性| 二三四区精品| 日本有码影片下载| A片 AV一级在线播放观看免费| 黑人猛交| 国产 日韩 另类 视频一区爱| 欧美草草高清日韩视频| 亚洲国产综合久久久性感熟妇| 伊人五月天激情| 久久久97| julia ann久久| 高树玛利亚无码流出| 久久老子无码午夜伦不卡| 夜夜草天天| 天天射天天色成人| 综合av影片| 素人美腿视频网站| 97久久视频| 亚洲 国产 精品一区| 日韩日本欧美在线观看| 欧美亚洲丝袜人妻制服中文99| 日韩精品电影| 密臀在线免费观看| 亚洲色宗合| 亚洲网自拍| 91丝袜美女国产| wwwcaobibi| 国产日韩精品人妻久久久久色欲网站 | 亚洲在高跟鞋自慰久久在色线| 91N欧美| 无码国产精品午夜不卡( | 精爱久久| 国产欧美精品日韩区二区麻豆天美| 亚洲精品中文字幕一区在线视频| 日韩激情毛片一级久久久| 欧洲久久一二线| 人人妻人人爽一区二区三区| 熟女91网| 操逼无毒无码免费视频| 久久久久78| 欧亚第一综合网| 国产农村妇女精品一| 久久久久久久久久久久久久9999| 26uuu欧美| www.99热| 天天干天天拍| Julia在线播放亚洲久久| 日本99久久| 中文字幕成人| 丁香色色网| 大香蕉人妻| AV大香蕉| 日韩三级一区| 中文字幕一区 二区三四五 区日 日骚| 欧美在线播放aaaa| 伊人婷婷五月天| 久久久com| 天天舔天天| 91女在线观看| 大香蕉欧美伊| 日韩欧美水蜜桃人妻| 亚洲熟女乱色一区二区三区久久久 | 超碰在线974| 射欧美综合| 好舒服视频| 日韩激情中文字幕有码| 日韩不卡毛片Av免费高清| 亚洲AV无码久久久国产精品 | 亚洲综合20p| 2024黄色视频| 国产对白刺激视频| 久久亚洲AV无码专区国产精品| 另类小色呦| 伊人99热| 九九玖玖精品| 丁香五月天久久精品视频一区二区三区| 60秒免费小视频| 激情文学亚洲| 日本精品五区| 国产一区自拍欧美日韩| 中文字幕亚韩| 午夜天堂精品久久久久91| 久久25| 欧美高潮| 99re免费| 又粗又长又爽在线观看| 不卡免费av在线播放| 深夜啪啪啪视频免费| 大香蕉色网| 久久精品无码熟妇一区二区三区视频导航| 久久免费9| 国产精品探花色| 日本亚洲熟女视频| 英伦大奶子熟妇吊带| 视频二区熟女人妻| 久久久久久久97| 熟女五十路一区二区三| 一区二区三区精品黑丝白丝酒店对鸡| 久操操| 天天综合青苹果| 亚洲图片日本AⅤ欧美在线| 国内精品久久久久影院亚洲| 97爱欧美| 蜜臀久久99精品久久久久久成人小说| 中文字幕人妻资源在线| 日本网色| 欧美日韩一干二干| 中文字幕在线免费观看 | 精品少妇999| 亚洲色图殴美色图激情乱伦| 九九九九88| 国产精品禁久久久精品| 被男人吃奶很爽的毛片| 五月天激情小说| 囯产精品强| 干我久操| 嗯啊不要在线观看嗯啊| 色臀aV| 人人贴人人摸| 精品大久久| JuliaAnnXXX888| 中国女人内射6XXXXX| 日韩在线人妻网站| 91天堂| 国产成人www免费人成看片| 麻豆性爱视频在线播放| 日韩大香蕉| 91狠狠综合久久| 亭亭在线资源| 人人做天天爱| 97 亚洲 日韩 欧美 在线| 精品少妇99| 天天色播亚洲综合网站| 97碰碰日本乱偷人妻中文的| 久久婷婷电影网| 大香蕉97久久| 中文 人妻 制服| 我要看免费韩日黄片| 蜜臀一二三区| 日本成人电影资源网| 91久久国产综合精品| 超碰日韩人妻| 蜜臀精品1区2区| 天天摸天天插天天日| 欧美性高潮| 五月婷婷性爱| 久久午夜神马| 丰满人妻一区二区三区| 91综合无码| www.狠狠| 九九草| 五月婷婷六月丁香| 亚洲动态色图| 台欧久久精品视频| 九九综合九九综合| 91色图片| 中文字幕国产| 97超碰中文| 在线性黄高清免费视频| 91久热| 五月婷婷六月丁香| 午夜爽爽爽| 800zy一区二区| 国内精品久久人妻性色av| 色天堂综合| 久操网线| 性欧美| 盗摄 精品 另类 一区| 97在线视频观看| 狠插 制服 自拍| 中文熟女五十乱码在线| 大香蕉乱级| 欧美91精彩| 天天日天天干天天整| 中文字幕青青草| 天堂九九九九九九九九九| 亚洲精品自拍| 久9久精品视频| 色色色色网站| 97爱| 欧美日韩天堂| 91一起操| 国产无码三级视频在线观看| 大香蕉男人的天堂| 亚洲AV无码成人精品久久| 精精品人妻一区二区三区| 91色五月俺来也| 国岛片视频| 伊人91| 久久日本熟女精品一区| 久久久国产三级黄色片| 一区在线精品中文字幕| 中文字幕文字幕无码一区二区三区电影99 | 人人爱操| 中文字幕高清精品一区| 亚洲精品久久久久久| 久热色情精品| 国产精品久久久久久久毛片1| 日韩一卡二卡三卡| 久久久∴| 这里有精品| 欧美成人四级在线播放| 欧美亚洲手机在线| 天天干人妻| 国语人妻精彩刺激| 91高清无码下载| 亚洲欧美首页| 伊人在线大香蕉视频久久| 天美国产精品| 欧美一级黄色18片免费看| 97精品久久| 超碰偷拍| 日日夜夜噜| 午夜精品一区二区三区三上悠亚| 欧美日本中字另类在线| 亚洲色图亚洲| 人人妻人人爽人人精品| 正在播放国产精品一区| rion磁力链接| 曰韩少妇无码| 嗯嗯啊啊用力视频免费| 丁香五月天堂| 91快色色色色色| 囯产精品久久久久久久久久梁医生| rivers-china.com| 诱惑人妻欧美一区在线播放| 校园春色 男人天堂| 俺去俺来也在线www| 欧美亚洲一级在线观看| 美女被啪到深处抽搐视频| 欧美亚洲首页| 中文字幕精品亚洲熟女| 99色日| 亚洲熟女综合| www鬼畜国产男人的天堂| 欧美日韩999| Blackedraw视频一区二区| 午夜超爽| 国产综合在线视频网站| 麻豆国产97在线| 亚洲欧美黄| 欧美精品庄| 亚洲欧美校园| 亚洲精品蜜桃久久久| 1.igao73.com 加入收藏 免费专区 国产精品 中文字幕 日韩精品 欧美精品 精彩 | 99999精品成人| 亚洲人成色9999精品久久| 水澄无码AV| 麻豆人妻精品一区二区| 9 9精品一区二区三区| 久草五月| 99性爱视频| 啊啊啊啊嗯嗯嗯用力好爽 | 中文字幕在线免费观看| 十八禁一区二区无码观看| 欧洲一区二区三区免费| 黑人天8A∨高清网站| 宅男午夜在线视频| 天堂资源欧美| 伊人青青一区成人视频在线观看区 | 青青草视频在线观看一区二区| 99999久久久久9国产精品| 97亚洲国产影视| 丰满少妇一区二区三区专区| 18一区二区三区| 国产专区路线| 久久鲁夜| 男人的天堂久久狠| 一本一道久久综合久久|