色五月色开心色婷婷色丁香,五月婷婷丁香花综合网,婷婷丁香五月激情综合在线,五月婷婷六月丁香动漫,婷婷丁香五月激情综合在线,丁香花中文字幕在线观看,播五月色五月开心五月网,开心激情综合网,狠狠色丁香婷婷综合最新地址,丁香视频在线观看,狠狠做六月爱婷婷综合av,久久激情五月丁香伊人

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上 上個月幫同事排查一套 Zabbix 監(jiān)控 Nginx 數(shù)據(jù)一直為空的問題。一開始我們都把注意力放在 Zabbix Web 端反復(fù)檢查模板、主機(jī)、宏折騰了一上午。最后才發(fā)現(xiàn)真正斷掉的環(huán)節(jié)是 Nginx 的 stub_status 狀態(tài)頁根本沒有暴露出來agent 自然也就拿不到任何數(shù)據(jù)。更讓我意外的是同事的配置是從一篇兩三年前的教程里抄來的那篇教程里的模板名稱、agent 類型和現(xiàn)在的環(huán)境已經(jīng)對不上。這不是個案。Zabbix 監(jiān)控 Nginx 這件事最常見的坑不是 Zabbix 不會裝而是安裝配置流程里塞滿了舊資料。所以下面我不打算只給一個固定命令序列而是想把 Zabbix 監(jiān)控 Nginx 的鏈路重新拆一遍Nginx 怎么暴露狀態(tài)agent 怎么讀到數(shù)據(jù)模板怎么匹配以及當(dāng)你拿到一臺新機(jī)器時應(yīng)該按什么順序驗(yàn)證。核心判斷只有一句——真正決定這套監(jiān)控能不能跑通的往往不是 Zabbix 本身而是 Nginx 狀態(tài)頁、agent 采集和模板匹配這三個環(huán)節(jié)有沒有全部連上。1. 先想清楚Zabbix 監(jiān)控 Nginx 到底在監(jiān)控什么1.1 表面是進(jìn)程存活本質(zhì)是連接和請求很多入門教程會把 Zabbix 監(jiān)控 Nginx 簡單理解成“Nginx 掛了就報(bào)警”。這個理解不算錯但太單薄。Nginx 是應(yīng)用入口它的價值不在于進(jìn)程起沒起來而在于它當(dāng)前扛了多少連接、請求處理得是否順暢、有沒有異常堆積。Zabbix 之所以能監(jiān)控 Nginx核心不是直接讀進(jìn)程狀態(tài)而是通過 Nginx 自身的狀態(tài)接口或模塊拿到一組結(jié)構(gòu)化指標(biāo)。最常見的數(shù)據(jù)源是 Nginx 官方自帶的 stub_status 模塊。打開狀態(tài)頁后你會看到類似這樣的一小段文本Active connections: 3 server accepts handled requests 12 12 15 Reading: 0 Writing: 1 Waiting: 2這幾個數(shù)字的含義值得記住Active connections當(dāng)前活躍連接數(shù)。acceptsNginx 啟動以來成功接受的連接總數(shù)。handled成功處理的連接總數(shù)。正常情況下 accepts 和 handled 應(yīng)該接近。requests總請求數(shù)。Reading / Writing / Waiting分別表示正在讀請求頭、正在寫響應(yīng)、以及空閑 keep-alive 連接的數(shù)量。這些指標(biāo)能幫你看清什么比如 Reading 長時間很高說明請求堆積在讀取階段背后可能是客戶端沒有把請求發(fā)完整Waiting 大量存在不是壞事只能說明 keep-alive 連接占著資源accepts 和 handled 差距持續(xù)增大則可能說明有連接在中間環(huán)節(jié)被丟掉。1.2 為什么很多“監(jiān)控沒數(shù)據(jù)”其實(shí)和 Zabbix 無關(guān)排查過幾次就會發(fā)現(xiàn)Zabbix 監(jiān)控 Nginx 沒數(shù)據(jù)絕大多數(shù)原因不在 Zabbix要么是 Nginx 狀態(tài)頁沒開啟要么是狀態(tài)頁返回的是 HTML 而不是純文本要么是 agent 訪問不到狀態(tài)頁要么是模板里的宏路徑和實(shí)際路徑不一致。Zabbix 本身只是在按固定周期向 agent 要數(shù)據(jù)agent 再去請求 Nginx 狀態(tài)頁。這一條數(shù)據(jù)鏈上有任何一個環(huán)節(jié)斷了儀表盤就永遠(yuǎn)是空的。所以我建議把這條鏈路拆成三段來理解Nginx 負(fù)責(zé)提供數(shù)據(jù)agent 負(fù)責(zé)搬運(yùn)數(shù)據(jù)Zabbix 負(fù)責(zé)展示和告警。后兩段的問題通常都有日志可查反而是第一段最容易被人忽略。很多“監(jiān)控沒數(shù)據(jù)”的案例其實(shí)和你選的模板、版本的關(guān)聯(lián)沒有想象中那么大問題往往出在數(shù)據(jù)源這一層。2. Nginx 側(cè)的狀態(tài)頁配置先把數(shù)據(jù)源打開2.1 先確認(rèn)模塊再改配置順序不要反Nginx 狀態(tài)頁依賴 http_stub_status_module 這個模塊。問題在于不是所有 Nginx 環(huán)境都默認(rèn)包含它。源碼編譯安裝時如果沒有帶 --with-http_stub_status_module后面想加模塊就得重新編譯發(fā)行版?zhèn)}庫里的 nginx 通常已經(jīng)包含這個模塊但不同發(fā)行版、不同倉庫之間也可能有差異容器鏡像則更不一定一些精簡鏡像會把用不到的模塊裁掉。所以第一步是確認(rèn)模塊存在。常見做法是查看編譯參數(shù)nginx -V 21 | tr \n | grep stub_status如果輸出里能看到 http_stub_status_module說明模塊沒問題。如果什么都沒有就不要繼續(xù)往下配狀態(tài)頁了先解決模塊問題。否則你配置再正確curl 訪問時也只能看到 404。注意有些系統(tǒng)里 nginx 不在 PATH 中可能需要寫全路徑比如/usr/local/nginx/sbin/nginx -V或者先執(zhí)行which nginx確認(rèn)一下。2.2 一個穩(wěn)妥的 stub_status 配置示例確認(rèn)模塊存在后再修改 Nginx 配置。常見的做法是在一個 server 塊里加一個 location只讓狀態(tài)頁從指定路徑訪問server { listen 80; server_name _; location /nginx_status { stub_status; allow 127.0.0.1; allow 192.168.10.0/24; deny all; } }這里有幾個細(xì)節(jié)要說明。location /nginx_status是精確匹配避免掩蓋其他路徑規(guī)則stub_status;是常見寫法如果你看到的舊教程里寫的是stub_status on;通常也能兼容但更推薦按當(dāng)前版本的標(biāo)準(zhǔn)寫法來allow 和 deny 用來限制來源 IP避免狀態(tài)頁暴露到公網(wǎng)。雖然狀態(tài)頁內(nèi)容看起來不敏感但泄露給外界等于給攻擊者多一個信息采集入口沒有理由不做限制。寫完配置后先檢查配置再重載nginx -t nginx -s reload # 如果使用 systemd 管理也可以寫成 systemctl reload nginx然后用 curl 驗(yàn)證curl -s http://127.0.0.1/nginx_status如果能看到開頭那段純文本說明 Nginx 側(cè)已經(jīng)通了。注意curl 的來源 IP 要和 allow 規(guī)則匹配否則你會看到 403。2.3 容器化和非默認(rèn)端口環(huán)境的特殊點(diǎn)如果你的 Nginx 跑在容器里情況會稍微復(fù)雜一點(diǎn)。agent 要么和 Nginx 在同一個容器內(nèi)要么通過容器 IP 或映射端口訪問狀態(tài)頁。容器內(nèi)的 Nginx 如果只監(jiān)聽了容器內(nèi)部端口agent 在宿主機(jī)上直接 curl 127.0.0.1 是拿不到響應(yīng)的。這類問題用 curl 驗(yàn)證時最容易暴露但很多人會誤以為是自己配置寫錯了。另外狀態(tài)頁不一定只能放在 80 端口。有的環(huán)境為了安全和便于管理會把狀態(tài)頁放在 8080 或單獨(dú)一個 server 塊里。這樣的設(shè)計(jì)沒問題但模板里的宏就要跟著改。這里的重點(diǎn)是先想清楚 agent 要從哪個地址訪問 Nginx然后保證這個地址上的 TCP 連通性和 ACL 都允許。不要只在 Zabbix 里把宏改來改去主機(jī)上卻訪問不到。我在很多環(huán)境里見過一種最隱蔽的錯誤狀態(tài)頁本身配置正確但 allow 規(guī)則只放行了 127.0.0.1agent 卻通過內(nèi)網(wǎng) IP 去訪問狀態(tài)頁。agent 請求時Nginx 看到的來源 IP 是內(nèi)網(wǎng)地址命中 deny all于是返回 403監(jiān)控項(xiàng)自然拿不到數(shù)據(jù)。所以配置 allow 時要想著 agent 會從哪個 IP 過來而不是只寫 127.0.0.1。3. Zabbix agent 這一層不是安裝了就行3.1 配置 Server 地址和 Hostname一致性是第一原則Nginx 狀態(tài)頁通了之后才輪到 agent。agent 安裝本身不復(fù)雜麻煩的是配置。以最常見的 zabbix-agent 為例配置文件里幾個關(guān)鍵參數(shù)一定要理解Server192.168.10.20 ServerActive192.168.10.20 Hostnameweb01Server 和 ServerActive 不是一回事。Server 是被動模式下允許從 Zabbix Server 拉取 item 的地址白名單ServerActive 是主動模式下 agent 向哪個 Zabbix Server 或 Proxy 上報(bào)數(shù)據(jù)的地址。如果你只配置了 Serveragent 就會等 Server 來問如果你用了主動模式ServerActive 也要填。很多舊教程只寫一個值換到新環(huán)境就出問題。比這更容易出錯的是 Hostname。Zabbix Web 端添加主機(jī)時填的主機(jī)名必須和 agent 配置里的 Hostname 保持一致。如果 Web 端寫的是 web01agent 里配的是 nginx-web-1那么即使在 Zabbix 里能看到主機(jī)監(jiān)控項(xiàng)也始終是 no data。在新版本 agent 里你還會看到HostnameItemsystem.hostname這樣的配置意思是讓 agent 用系統(tǒng)本身的 hostname 作為上報(bào)名稱。這個機(jī)制可以避免手工維護(hù) Hostname但前提是系統(tǒng) hostname 必須和 Zabbix Web 里的主機(jī)名一致。所以不管用哪種方式原則都是同一個兩邊名字要對上。3.2 agent 與 agent2模板和 key 可能不一樣這里要說一個“和過去不一樣”比較明顯的點(diǎn)現(xiàn)在 Zabbix 官方推薦使用 Zabbix agent 2也就是 agent2。agent2 不僅在采集能力上更豐富還支持一些內(nèi)置插件但對應(yīng)的模板、監(jiān)控項(xiàng) key 和舊 agent 不完全一樣。在 Zabbix Web 里搜索 Nginx 時你可能會看到多個模板有些名字類似 Nginx by HTTP有些類似 Nginx by Zabbix agent 2。如果你在主機(jī)上裝的是 agent2卻鏈接了舊 agent 版本的模板可能會出現(xiàn) unsupported item。反過來也一樣。所以我的建議是在鏈接模板之前先打開模板里的監(jiān)控項(xiàng)預(yù)覽看它使用的采集類型是 Zabbix agent、HTTP agent還是依賴 agent2 插件。確認(rèn)它跟你實(shí)際安裝的 agent 類型對得上再鏈接。這一步只要花兩分鐘卻可以省掉后面一晚上的排查時間。agent 和 agent2 的服務(wù)名也不一樣常見的有 zabbix-agent、zabbix-agent2系統(tǒng)服務(wù)名可能是 zabbix-agentd.service 或 zabbix-agent2.service。啟動服務(wù)后用systemctl status看一下是否 active再看一眼日志路徑常見的是/var/log/zabbix/下面。出現(xiàn)問題時日志里通常直接會告訴你 key 不支持還是連接失敗。3.3 用 zabbix_get 快速驗(yàn)證采集鏈路在 Web 端排查前可以先在 Zabbix Server 上用 zabbix_get 做一次最直接的驗(yàn)證確認(rèn) agent 是否正常工作zabbix_get -s 192.168.10.11 -k agent.ping如果返回 1說明 Server 能連上 agent。如果返回值不是 1就別急著去 Web 端看模板先解決網(wǎng)絡(luò)、端口和 Hostname 問題。agent.ping 是通用探活 key驗(yàn)證通過后再去模板里找到你想測的監(jiān)控項(xiàng) key比如和 Nginx 狀態(tài)頁相關(guān)的 key繼續(xù)用 zabbix_get 測試。不同版本、不同模板的 key 名稱會有差異所以這里不列具體 key但思路是一樣的先用 curl 確認(rèn)狀態(tài)頁存在再用 zabbix_get 確認(rèn) agent 能取到值最后才去 Web 端看圖表。鏈路從底層往上逐層打通比在界面上猜效率高得多。4. 在 Zabbix Web 端鏈接模板別被舊截圖帶偏4.1 模板名稱已經(jīng)變過好幾輪Zabbix 的模板策略在過去幾年變化很大。這次部署里我在模板列表里搜索 nginx出來的已經(jīng)不是早期教程里那張截圖上的名字了。官方模板按采集方式做了拆分有的走 HTTP agent有的走 Zabbix agent有的專門適配 agent2。這本身是好事但如果你照著一個兩三年前的教程去選模板很可能選錯。我的建議是以當(dāng)前 Zabbix 版本實(shí)際加載的模板列表為準(zhǔn)不要憑記憶點(diǎn)。鏈接模板后立刻去“監(jiān)測 – 最新數(shù)據(jù)”里過濾這個主機(jī)等一到兩個更新周期看有沒有數(shù)據(jù)進(jìn)來。如果 Zabbix 的刷新周期是 30 秒或 1 分鐘通常幾分鐘內(nèi)就能看到。另外一個主機(jī)通常只需要鏈接一個對應(yīng)當(dāng)前采集方式的 Nginx 模板不需要把所有 Nginx 模板全鏈接上。鏈接多個模板并不會讓數(shù)據(jù)更豐富反而會讓監(jiān)控項(xiàng)沖突、重復(fù)告警排查起來也更亂。4.2 宏參數(shù)路徑、協(xié)議、端口都是變量模板鏈接后還有一層容易被忽略宏參數(shù)。官方 Nginx 模板里通常會定義一組宏用來告訴 agent 去哪個地址、哪個路徑、用什么協(xié)議獲取狀態(tài)頁。常見宏名可能包括{$NGINX.SCHEME}、{$NGINX.PORT}、{$NGINX.STUB_STATUS.PATH}具體名稱以你當(dāng)前模板為準(zhǔn)。它們的作用就是把狀態(tài)頁的訪問信息從監(jiān)控項(xiàng)中抽出來這樣同一套模板可以復(fù)用在不同的 Nginx 主機(jī)上。如果你的狀態(tài)頁地址不是默認(rèn)值就不用改監(jiān)控項(xiàng)直接在主機(jī)層級覆蓋宏就行。比如狀態(tài)頁路徑是 /nginx_status 而不是 /status就在主機(jī)的宏里把對應(yīng)宏改成實(shí)際路徑。改完后等下一次采集生效再看最新數(shù)據(jù)。要注意的是宏的生效范圍有層級全局宏、模板宏、主機(jī)宏。主機(jī)宏優(yōu)先級最高。如果模板里已經(jīng)定義了默認(rèn)值主機(jī)上沒改也沒關(guān)系但如果狀態(tài)頁地址做了修改一定要記得改對應(yīng)主機(jī)的宏而不是只在模板里改一個默認(rèn)值因?yàn)槟0迥J(rèn)值會影響所有鏈接該模板的主機(jī)。還有一個容易出錯的地方狀態(tài)頁地址如果是 https但宏里用的是 http監(jiān)控項(xiàng)會一直返回錯誤。這種問題在視覺上非常隱蔽因?yàn)?Nginx 和 agent 都正常只有協(xié)議不匹配。4.3 驗(yàn)證模板是否能出數(shù)據(jù)鏈接模板和配好宏之后不要直接離開頁面。花一分鐘做兩件事第一到主機(jī)監(jiān)控項(xiàng)列表里看有沒有出現(xiàn)紅色 error 狀態(tài)的監(jiān)控項(xiàng)第二到最新數(shù)據(jù)里過濾該主機(jī)確認(rèn)有非空數(shù)據(jù)。如果看到 error 狀態(tài)的監(jiān)控項(xiàng)先點(diǎn)擊進(jìn)去看錯誤信息。常見的有 unsupported item key、Cannot connect to [...]: 10060、Connection refused 這類。每一條錯誤信息其實(shí)都指向了數(shù)據(jù)鏈路的具體環(huán)節(jié)比你在外面猜模板要快得多。如果最新數(shù)據(jù)里有值但看起來不對比如 Reading 是 0、Writing 是 0也不要慌先用 curl 手動看一次狀態(tài)頁確認(rèn)源數(shù)據(jù)里就是這些值然后判斷是 Nginx 本身空閑還是采集路徑不對。如果源數(shù)據(jù)是對的Zabbix 只是如實(shí)展示不用改 Zabbix。5. 沒數(shù)據(jù)的排查鏈路按順序查別亂試5.1 四個環(huán)節(jié)從上到下檢查如果你最終面對的是一臺沒數(shù)據(jù)的 Nginx 主機(jī)不要先懷疑 Zabbix更不要反復(fù)重新鏈接模板。按下面的順序逐層排查通常能在十分鐘內(nèi)定位問題。第一層Nginx 狀態(tài)頁是否可訪問。curl -s http://127.0.0.1:80/nginx_status如果 curl 能返回純文本進(jìn)入下一層。如果返回 403、404 或 HTML 頁面問題在 Nginx 側(cè)。第二層agent 能否讀到狀態(tài)頁。注意 agent 的運(yùn)行身份和權(quán)限。你可以切換到 agent 運(yùn)行用戶或者用 sudo 模擬執(zhí)行同樣的 curl 命令確認(rèn) agent 視角下能訪問。如果 agent 在容器里還要確認(rèn)容器網(wǎng)絡(luò)。第三層Server 和 agent 之間是否連通且 Hostname 匹配。zabbix_get -s agent_ip -k agent.ping如果 zabbix_get 返回 1說明網(wǎng)絡(luò)層通。然后再確認(rèn) Web 端主機(jī)名和 agent Hostname 一致。第四層模板宏和監(jiān)控項(xiàng)是否匹配。打開監(jiān)控項(xiàng)列表查看具體監(jiān)控項(xiàng)的 key、宏替換后的實(shí)際地址用測試功能跑一次。如果返回錯誤根據(jù)錯誤信息調(diào)整宏。這個順序的核心思路是先確定是哪一層壞了再決定修哪里。不要在不知道哪一層出問題的時候改配置改來改去只會讓狀態(tài)更亂。5.2 高頻錯誤對照表下面這張表基本覆蓋了 Zabbix 監(jiān)控 Nginx 時最容易遇到的幾類現(xiàn)象現(xiàn)象常見原因處理思路狀態(tài)頁 curl 返回 404沒有配置 location 或模塊缺失先查 nginx -V 里的 stub_status 模塊狀態(tài)頁 curl 返回 403allow/deny 沒有放行 agent 來源 IP調(diào)整 allow 規(guī)則思考 agent 從哪個 IP 訪問監(jiān)控項(xiàng)顯示 unsupported itemagent 版本或模板類型不匹配確認(rèn)是 agent 還是 agent2換對應(yīng)模板或 key最新數(shù)據(jù)一直是空Hostname 不匹配、宏路徑不對、采集周期長檢查主機(jī)名一致性測試宏替換后的地址監(jiān)控項(xiàng)返回 Connection refusedagent 未啟動、端口不通、防火墻攔截systemctl status 看服務(wù)再用 zabbix_get 驗(yàn)證狀態(tài)頁返回的是 HTML 而非純文本location 配置被其他規(guī)則截獲檢查 server 塊順序確認(rèn)精確匹配位置這張表不是讓你背下來而是給你一個參考坐標(biāo)。遇到問題時先看現(xiàn)象再判斷屬于哪一層然后去對應(yīng)位置檢查。5.3 沉淀一個“四層驗(yàn)收清單”最后一個能長期復(fù)用的經(jīng)驗(yàn)把 Zabbix 監(jiān)控 Nginx 的鏈路固定成一張驗(yàn)收清單每次新接入一臺 Nginx 主機(jī)時按順序過一遍。Nginx 狀態(tài)層模塊存在、location 配置正確、curl 返回純文本、allow 已放行 agent 來源 IP。Agent 采集層服務(wù)已啟動、配置了正確的 Server/ServerActive、Hostname 與 Web 端一致、zabbix_get 驗(yàn)證 agent.ping 返回 1。Server 接入層Web 端主機(jī)存在、agent 接口可達(dá)、主機(jī)名匹配。模板匹配層鏈接了適配 agent 類型的 Nginx 模板、宏路徑/協(xié)議/端口正確、最新數(shù)據(jù)出現(xiàn)非空值。這個清單不是固定不變的但它能幫你把一次復(fù)雜的排查變成一次順序的確認(rèn)。以后不管是三臺機(jī)器還是三十臺機(jī)器先讓這種驗(yàn)證順序變成肌肉記憶再談自動化。6. 適用邊界這套方案不是所有 Nginx 環(huán)境都適合6.1 適合誰Zabbix 監(jiān)控 Nginx 這套方案適合的場景其實(shí)很清楚你已經(jīng)在用 Zabbix手里是一批長期存在的虛擬機(jī)或物理機(jī)核心關(guān)注的是連接數(shù)、請求數(shù)、握手狀態(tài)等基礎(chǔ)指標(biāo)。這種情況下引入一套新的監(jiān)控系統(tǒng)成本遠(yuǎn)大于收益直接在 Zabbix 里接 Nginx 模板是最順的路。從我個人經(jīng)驗(yàn)看當(dāng)一個團(tuán)隊(duì)已經(jīng)用 Zabbix 管了幾百臺機(jī)器再為了 Nginx 單獨(dú)部署一套 Prometheus、Grafana反而不劃算。不是因?yàn)?Prometheus 不好而是你的告警、權(quán)限、儀表盤、值班流程都已經(jīng)長在 Zabbix 上了新增一套系統(tǒng)意味著要同時維護(hù)兩套監(jiān)控體系的賬號、存儲和告警規(guī)則。6.2 不適合誰反過來如果你的環(huán)境是大量短生命周期容器Nginx 實(shí)例像 Pod 一樣隨時擴(kuò)縮容Zabbix 這種以主機(jī)為單位的管理模型就會變得很吃力。每來一個新實(shí)例都要創(chuàng)建主機(jī)、鏈接模板、維護(hù) Hostname規(guī)模一大這些動作本身就是運(yùn)維負(fù)擔(dān)。另外如果業(yè)務(wù)需要按 URL、按狀態(tài)碼、按 upstream 做細(xì)粒度 SLA 分析單靠 Zabbix 的 Nginx 狀態(tài)頁數(shù)據(jù)也不夠。狀態(tài)頁給的是連接數(shù)和請求總數(shù)拿不到每個接口的響應(yīng)時間分布。這種需求更適合讓 Nginx 輸出 access log 結(jié)構(gòu)化、再送進(jìn)時序數(shù)據(jù)庫或者日志系統(tǒng)或者直接采用具有服務(wù)發(fā)現(xiàn)能力的監(jiān)控方案。這不是說 Zabbix 不能做擴(kuò)展而是說你要先判斷值不值得。任何方案都有維護(hù)成本Zabbix Nginx 監(jiān)控的優(yōu)勢是簡單直接代價是深度有限。認(rèn)清這個邊界比盲目堆監(jiān)控項(xiàng)更重要。6.3 重要的不是某一個命令而是適應(yīng)變化的能力回到標(biāo)題里那半句“和過去有一點(diǎn)不同”。這句話其實(shí)很適合用來概括這類監(jiān)控方案的常態(tài)Nginx 的編譯參數(shù)在變agent 從舊版走向 agent2模板名稱和宏定義在變安裝方式從裸機(jī)走向容器。過兩年你再回頭看今天這篇文章里的具體配置很可能又有出入。但有一點(diǎn)不會變數(shù)據(jù)從 Nginx 到 agent 再到 Server 這條鏈路的邏輯是穩(wěn)定的。你只要掌握了“先 curl 狀態(tài)頁、再 zabbix_get 探活、最后看模板宏”的驗(yàn)證順序無論版本怎么升級你都能在最短時間內(nèi)判斷出問題出在哪一層。這才是比某一條命令更有價值的東西。所以我的長期建議是不要只收藏某個版本的配置片段而是順手把自己的環(huán)境、模板名稱、宏定義、驗(yàn)證命令寫成一個簡短文檔或腳本。下次再遇到 Nginx 監(jiān)控沒數(shù)據(jù)你不是回去翻舊教程而是打開自己的排查清單?;氐介_頭那個案例。我們最后做的事情其實(shí)很簡單把 stub_status 狀態(tài)頁配置好allow 規(guī)則放行 agent 來源 IP再把 Web 端主機(jī)名和 agent Hostname 改成一致。數(shù)據(jù)在第二個更新周期就出現(xiàn)了。整個過程沒有任何懸案只是之前分散在不同教程里的經(jīng)驗(yàn)沒有串成一條完整的鏈路。Nginx 側(cè)會變、Zabbix 會變、模板會變但驗(yàn)證順序不會變。下次再看到最新數(shù)據(jù)為空時不要急著在界面上反復(fù)點(diǎn)先打開一個終端curl 一下狀態(tài)頁很多時候答案早就寫在響應(yīng)里了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
欧美图片偷拍| 91在线页| 神马久久网| 超碰九九| 日韩av不卡在线观看| 宅男91视频在线播放| 一本久久精品中文字| 亚洲做性| 日韩精品视频在线观看一卡二卡| 熟女高潮合集-永久久久-成人AV | 国产日韩精品suv| 这里只有精品视频在线| 97国产精选| 九九精品99| 亚洲 欧美 另类 综合 偷拍| 亚洲欧美首页| 1区2区3区在线视频| 欧色网址| 99久久99久久综合| 精品无码一区二区三区色欲| 人妻天天操天天爽视频免费| 偷拍三区| 亚洲一区制服诱惑| 长长久久免费视频| 收看日本人日bb| 伊人大香蕉在线| 大学生美女口爆| 久久精品国产精品亚洲艾通辽熟妇| 97超视频在线观看| 91精品国产高清久久久久久,亚洲成人| 91亚州欧美| av激情亚洲五月天| 精品成人女人久久| 日韩欧美中文日韩欧美色| 1024手机看片欧美日韩| 十八禁的黄污污免费网站| 九九九九九九九九九九九免费国产| 亚洲综合影院| 欧美丝袜中文字幕07在线| 波多野结衣之双飞调教在线播放 | 51久久夜色精品国产麻豆| 亚洲av影院在线观看| 色官网在线| 日本东京热大香蕉a片| 日韩免费av片高清无码| 少妇内射www在线观看视频| 国产日韩区| 国产亚洲精品美女| 亚洲超碰在线| 操逼操逼操| 欧美综合777| av在线免费一区二区| 97爱b| 三级日韩一区二区三区| 亚av顶级裸体一区二区三区四区五区| 国产精选三级在线观看| 亚洲欧美色图| 青青操97| 在线中文字幕极品av| 97久久综合网| 中文字幕 人妻不满 在线视频| 特色a在线上| 国产成人资源| 国产一区二区成人av在线播放| 草b在线| Blackedraw视频一区二区| 91高清欧美| 欧插网站| 欧美麻豆成人同性GⅤ在线| 大香蕉淫人网| 久久亚码| 青青草五月天| 韩国黄色片精品久久久| 国产91亚洲精品一区二区三区| 欧美熟妇亚洲版| 欧美人人AAA| 手机在线大香蕉| 日韩一级二级在线| 国产精品爽爽v| 欧美淫乱视频| 超碰欧美在线欧美| 超碰97资源中文字幕| 激情综合二| 国产美女91| 另类亚洲图色| 亚洲激情AV| 18啪啪手机免费性爱| 久久精品成人一区二区三区蜜臀 | 视频黄色国产一级| 18禁在线视频| 91被操| 青女偷拍网| 九九热这里只有在线精品视 伊人草 成人菠萝蜜视频在线观看 | 蜜臀网 一区| 成人热久久精品| 欧美操逼一二三区| 亚欧国产无码精品在线| 午夜操逼不卡| AV和黑人在线播放| 国语精品av| 亚洲涩涩| 久久超碰98| 天美av在线观看| 日韩AV一起草| 操逼啊啊啊91| 91av一区二区在线观看| 亚洲国产综合图区中文字幕| 中文字幕欧洲有码| 五十路人妻在线| 一区中文字幕二区日韩| 欧美制服另类丝袜| 26uuu国产| 人妻人人做人人澡人人爽欧美一区| 人妻夜夜爽天天爽三区麻豆AV网站| 激情婷婷丁香网| 伊人精品视频| 日韩二三区| 五月婷在线| 婷婷视频在线免费观看| 超97在线精品视频| 日韩欧美性爱电影在线观看| 欧美成人精品一区| 中文字幕一区二区无码成人| 精品少妇一区二区| 99ri精品| 思思热国产高清| 天天综合网~91| 97天天插| 亚洲欧美洲综合| 欧美一区二区福利在线| 日韩在线视频1234| 亚欧高清v| 成人一级性爱| 97欧美日韩精品| 99re在线视频| 五月天亚洲网| 变态综合色| 97超级久久| 夜夜嗨一区二区三区三州加勒比 | 99热在线不卡| 亚洲天堂人人妻| 婷婷另类小说| 视频二区熟女人妻| 97超碰伊人| 最新欧洲欧美日本激情网站| 超碰色综合| 97视频在线播放| 亚洲国产精品无码AV久久| 日本操逼视频免费| 亚洲va有码在线天堂| 激情五月天插| 99无码| ′ !γ}丶。。久久精品欧美一区二区三区| 囯产乱伦一区二区三女 | 日本不卡免费二区| 美女尤物福利视频| 校园激情狠狠四射| 亚洲男人天堂网久久| WWW4虎| 老熟女区| 亚洲欧美视| 超碰97伊人| 欧美性暴力猛交| 天天看天天日天天操| 国外91| 欧美色网络| AV和黑人在线播放| 人人综合| 久久99国产精品| 欧差乱伦二三| 一本色道综合久久欧美| α√在线| 欧美日韩黄色片一区二区三区四区人与兽做爱| 加勒比AV天堂| 综合少妇网| 精品午夜福利| 99久久婷婷丁香| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 九九热AV| 操一区| 丰满人妻-区二区三区免费看| 香蕉国产精品麻豆亚洲欧美日韩| 亚洲AV永久无码一区仙野| 91女网站| 亚州黄站| 唐山老熟妇露脸啪啪叫| 日韩欧美丝袜诱惑| 欧美天堂日韩三级国产传媒| 91情色在线| 午夜操逼不卡| 强奸少妇AV导航网| 日韩偷拍色图| 看大黄色大片原件| 操狠狠| 欧美91久久久久| 加勒比综合| AV不卡在线| 玖色AV| 后入人妻无码| av在线免费一区二区| 毛片视频白嫩| 亚洲熟女诱惑| www.zbzhongsen.com| 蜜臀AV成人精品蜜臀| 91观看 国产白丝| 999亚洲国产视频| 91人妻超碰| 亚洲欧美97√| 国产 日韩 另类 视频一区爱| 熟妇艹鸡八| 91亚洲欧洲| 色色色色电影网| 成人一级性爱| 欧美精品丝袜久久久中文字幕| 亚春色色| 成人午夜无码视频| 国产日韩怡红院| 亚洲四虎熟女精品| 久久精品高清无码一区| 一线黄色免费性爱片| 久久熟妇五十路一区| 熟女少妇视频| 精品久久久久,69国产成人精| 97操B| 91久久99久久91熟女精品| 午夜精品久久久久久久| 操比国产| 强乱老妇中文字幕| 97舔舔| 国产精品乱码久久久| 亚洲色图日韩精品| 97在线免费公开视频| 国产区性爱在线视频秋霞豆| 操死我了嗯嗯嗯| 久热在线精品免费观看| 精品人妻一区二区免费蜜桃| 人妻无一区二区三区| 色噜噜国产在线| 国产最火爆久久国产网站网站| 男女啪啪网站免费视频| 久久国产热视频97电影| 婷婷色婷婷| 91岛国动作片| 久久99热这里只频精品6学生| 好色美女九七第一页| 高跟丝袜AV专区国产| 精品一区二区三区四区女| 人人么人人操| 婷婷激情一区二区三区俺也去| 香蕉欧美| 75大香蕉| 一区操逼日比视频| 亚洲素人综合| 丁香九月激情啪| 日本久久999| 亚洲欧美天| 精品亚洲国产成人AV制服丝袜| A级在线视频| 99色热| 久久精品国产亚洲粉嫩| 超碰日本97美女人妻人人玩人人爱| 五月天伊人网| 亭亭丁香激情| 亚乱色| 国产999精品久久久| 综合色图,成人综合网| 永久免费观看的毛片的网站| 性色国产东北露脸精品视频| 日韩欧美tv一区二区在线观看| 精品妇操一区二区三区| 亚洲色图在线视频| 亚洲国产91精品一区二区久久| 欧美少妇性乱| 九色婷婷| 91AV入口| 欧美瑟综合| 天堂资源欧美| 欧美日韩国内不卡| 中文乱码字幕观看| 伦在线97| 婷婷久久综合| 免费一级a毛片久久久久久鸭绿欲| 啊啊啊在线看| 伊人97色天使| 性爱乱伦网址| 人妻9117c| 国产精品大屁股999| 69精品少妇一区二区三区蜜桃| 日韩免费中文字幕视频| 97久久国产精品| 午夜天堂精品久久久久91| TS人妖另类精品视频系列| 国产一区二区三区久久精品太古里| 天天综合网亚洲综合网| 伊人97色天使| 国产又操| 18禁在线视频| 伦理第一页| 日韩久久艹| 国产91美女高潮| 欧美一区二区三区四区综合| 97视频免费播放| 亚洲日韩熟女人妻高清在线| 亚洲欧美精品一区天堂久久| 东北丰满熟女国产一区| 日熟女| 鸥美中出| 久久久久极品| 日本熟妇一区二区三区| 精品一级毛片在线观看| 超碰97玖玖爱| 久久天天摸| 人妻精品视频一区二区| 亚洲中文日韩欧美大香蕉视频| 欧美啪啪色吧在线| 九热超碰| 伊人丝袜美腿高跟在线观看高清| 97超碰国产精品| 免费的黄片wwwwww| 午夜一区二区三区国产| 超碰色综合| 精品少妇一区二区| 亚洲性猛| 欧美性爱网97| 久草色悠悠在线视频| 日本三级中国三级99人妇网站| 国产大学生口爆吞精合集| 亚洲高清视频在线免费观看| 91高潮| 婷婷人妻激情| 玖玖爱伊人玖玖爱| 日本熟妇精品九九| 国产视频小说| 亚洲吊色| 91殴美大片| 亚洲妇色| 四虎视频在线观看| 欧美A√综合网| 精品无码一区二区| 粉嫩国产精品久久粉嫩| 天天欧美色| 日本精品五区| 国产三级片在线观看| 在线洲亚线| 综合网亚洲1| 97在线欧| 嗯嗯嗯啊啊在线观看| 国产精品午夜福利视频| 久草综合视频| 丝袜翘臀后入欧美校园亚洲自拍另类小说一区中文字幕少妇诱惑 | 99在线免费视频| 五月丁香六月激情| 麻豆天美国美国产| 台欧久久精品视频| 精品夜夜澡人妻无码| 天天操天天插| 99999精品视频| 色情亚洲日本成人| 天天天天天天天天综合| 亚洲男人的天堂在线看| 中文字幕久久亚州无码| chaopen97久久| 亚洲毛片久久| 狠狠婷婷亚洲中文综合久久| 操逼无码操逼| 综合五月婷婷亚洲一区| 717影院理论午夜伦八戒| www.zbzhongsen.com| 99色色网| 爽爽淫人网| 91丝袜美女| 在线观看A啊啊啊| 超碰久在线天天做| 夜夜夜夜久久久久| 一区二区三区美女超清| 中文字幕人成乱码熟女香港| 黄色小视频日本txt| 无码天天操| 激情四射五月天| 99这里有精品| 骚人妻少妇视频| 久久久女人| 国产精品网址| 国产精品人妻熟女aⅴ| 久久精品中文字幕无码l| 中文字幕狠狠玩| 色色色色综合网| 亚欧美天堂在线| 欧美激情精品久久久| 91精品丝袜久久久久久| 91大神精品长腿在线观看网站| 日本高清免费一本视频在线观看| AV不卡在线| 色哟哟的毛片| 69久久久久久久久久久久久| 熟妇人妻丰满久久久久久久无码| 亚洲av无码国产精品字幕| 亚洲国产精品无码AV在线| 久久一二三四五六七八九区区区 | 91AV入口| 秋霞视频一区二区| 九九九九九九亚洲| 蜜臀99久久国产| 欧美自拍偷拍综合图片| 亚洲女毛多水多21P| 日韩无码嘿咻黑热久| 日韩欧亚中文在线| 精品人妻一区二区三区在| 91c色| 性爱久久| 91碰碰| 中文字幕精品免费一区二区| 婷婷99狠狠| 欧美日韩大陆黑人少妇99| 亚洲综合色图欧美| 一类av片在线看| 超碰狠狠操| 后入式在线免费观看60秒| 淫穴高潮色图| 久久av一级av少妇av高潮| 大香蕉亚洲中文| 中文字幕一区二区三四五区日日骚| 青草精品视频日本久久久久网站在线| 日韩人妻中文视频| 男女91| 97资源亚洲| 免费亚洲黄色视频在线观看| 人妻一区久久二区三区色播| 久久久久9999| 女优免费一区二区永久| 久久久一二三四区| 日本东京热加勒比久久| 日韩熟女精品无码专区一区二区 | 91n欧美| 日韩久久激情精品| 久草久日| 激情五月天插| 麻豆人妻少妇在线免费观看| 久久这里只有精品9| 少妇人妻精品| 翔田千里爆乳巨臀无码| 久久久久九九九| 日韩福利电影网| 国内偷自视频区视频综合| 成人精品久久| 第一高清av中文字幕| 人人澡人人弄| 啪啪啪精品| 久草视频制服诱惑| 九七超碰| 伊人国产av| 啊啊啊爽爽| 99色综合| 妇女一区二区三区| 伊人亚洲国产一成人久久精品,久久| 欧美黑人168页欧美黑人167| 少妇3P性爱自拍| 在线黄色污污网站| 日熟女| 青青草字幕AV| 精品偷拍13p欧美dodk视频| 综合网欧| 国产一区在线观看无码AV| 亚洲天堂 视频你懂的| 色噜噜人妻av中文字幕| 日韩成人精品中文字幕| 欧美日韩色| 中文字幕成人| 欧美激情在线观看视频| 久久久九97| 92一区二区| 热久久精品| 狠狠爱综合网| 青青草大香蕉在线视频| 333kkkk·亚洲com久久| 99久在线精品99re8| 激情五月天社区| 人妻丝袜日本| 超碰性爱97| 亚洲色图尤物视频| 色综合 加勒比| 99久久网站| 偷拍盗拍亚洲色图图片| 欧美大码在线视频| 中国少妇XXXX做受| 亚洲自拍小说| 桃色六月天| 人妻啪| 九九九九97| 成人av免费观看| 2017天天拍大香蕉| 欧美老妇女内射网址| 日本操嫩b网| 日日躁狠狠躁天天躁精品| 日本三级中国三级99人妇网站| 欧洲性爱无码区| 极品后入免费视频| 91婷婷| 搡老熟女免费视频 | 久久精品视频28| 嗯啊抽插大香蕉网页| 亚洲97网站| 嗯嗯,啊啊,国产精品| 操逼免费视频无码国产| 久久风骚城市人| 青青草吊丝| 成人av影院在线观看| 欧美日本不卡在线| 天天享受天天看| 天天日天天干天天整| 天天肏天天干| asc国产精品| 欧美午夜精品久久久久久3D| 正在播放国产精品一区| 欧美日综合| 日韩78m视频| 九九亚洲视频| 亚洲人妻在线一区| 亚洲国产97| 亚洲A色| 97色干| 国产人妖的免费的视频| juliaann丝袜| 久久久91福利姬| 亚洲天堂第一页| 丁香五月久久| 免费在线黄片视频| 麻豆国产97在线| 97超碰9| 欧美与日韩97| 黄网站黄视频网站进入口| 日韩另类| 日本性爱少妇| 精品国产91内射久久| 日本大香蕉综合网| 国产又长又大又粗的视频| 日本A级视频| 男人的天堂亚洲| 日本成人电影资源网| 国产精品直播在线观看直播| 麻豆成人影音在线| 草B在线| 国产久久久久影院老熟女| 色av中文字| 五月激情小说| 综合色播| 睡产熟女乱伦| 日韩一性一交一A片俄罗斯| 中文字幕日韩人妻视频| 国产精品直播在线观看直播| 国产综合久| 久久久九九| 亚洲天堂电影网| 天天天天天天天天综合| 97欧美精品综合| 欧美色三级片91| 大香蕉免费中文| 91久久久久久| 亚洲国产成人高清在线| 无码在线亚洲| 黄色AAAAAAAAAAA大片| 国产无码精品高清| 少妇厨房愉情理伦片bd在线观看| 精品九九九九| 黄页av| 美欧色综合| 大香蕉视频啪啪啪啪| 97爱爱官网| 青青五月天| 好爽视频在线观看| 蜜臀一区二区三区亚洲最新章节在线观看 - 高清蜜臀一区二区三区亚洲全集播放 | 日本一本道A级黄色毛片试看60分钟| 2018天天日天天日| 国产青青综合伊人| 亚州少妇| 亚洲色图殴美色图激情乱伦| 欧美人人曰人人操人人射射| 在线播放成人高清免费视频 | 校园春色欧美| 97超视频在线观看| 白丝在线一区| 男人天堂网手机版婷婷| 另类图片五月天| 人人妻人人澡人人爽久久av| juliaann欧美丝袜办公室| 欧美日韩狠狠爱| 国产馆| 啊啊啊啊网站| 日本中文熟女视频| 1769国内精品视频| 欧美一区二区三区另类精品| 激情久久久| 日本久久精品| 天天影视综合网欧美精品| 久久大香蕉| 国产乱婷婷精品二区三区| 日欧美色| 大屁股国产在线视频| 91狠狠综合久久| 97亚洲综合影院| 欧美在线永久天堂| 久草网站免费在线观看| 99热婷婷| 97人亚洲综合字幕| 丝袜色综合| 资源新线在线天堂| 亚洲图片激情综合另类| 亚洲性爱无码乱伦av| 婷婷伊人綜合中文字幕| 91Chinese在线| www.夜夜| 久久久久久久久久黄色网| 中文字幕一区二区三区蜜桃视频| 99久久99久久免费精品蜜臀| 高潮的A片激情扒开一区| 女同性恋久久| 少妇99成人麻豆| 欧洲精品一二三在线| 麻豆一区二区AV天美| 国产精品美女久久久久久网站| 久久91视频| 欧洲色| 亚洲人成色9999精品久久| 试看福利| 高清无码人妻久久久一区二区三区aⅴ| 午夜乱轮操逼视频免费看| 在线v中文字幕一区二区三区| 国产成人网址| 天美国产精品| 狠狠爱夜夜干| 国产999精品久久久| 黄视频免费| 99热精品在线播放| 欧美97视频| 91精品丝袜久久久久久| 免费看A片毛毛片在线播| 啊啊啊啊嗯嗯嗯用力好爽| 九九九九九九九九九五码| 亚洲情色综合网| 超碰78| 亚洲一区日韩| juliaann丝袜大战黑鬼| 永久免费观看的毛片的网站| 久久久 国产精品| 啊啊啊啊啊好大好舒服想要| 超碰美国| 日韩人妻一区二区精品| 在线黄色污污网站| 日韩少妇无码| 正在播放:深夜激情大战,自带黑丝袜全力输出骚穴| 青青草成人视频在线观看二区| 男人天堂资源| 日本污ww视频网站| 久久久99999久网站| 亚洲中文字幕在现观看| 综合五月婷婷| 东京热大香焦| 免费超碰97在线观看| 青娱乐av在线| 日韩97P| 久久曰曰| 欧美淫乱视频| 色综合av男人天堂| 亚洲综合校园春色| 免费公开人人操| 78久久久| 国产无码精品成人| 青青青操| 婷婷久月| 98色网| 国产馆| 亚洲AV成人在线| 2019亚洲男人天堂| 国产AV无码AV| 亚洲综合99999| 亚洲av无码国产精品字幕| 国产精品电影| 深喉吞精| 婷婷综合五月| 91中出视频| 日韩啪啪网| 91碰碰| 日韩AC| 日韩精品大香蕉伊人在线| 爽极品影院| 婷婷丁香一区二区三区| 一区不卡在线观看av| 欧美熟女妇同| 色噜噜精品一区二区三| 老女人碰碰在线碰碰视频| 超碰色男人操熟女| 久久国色天香香蕉| 亚洲无码精品AV久久久| 九九九九88| 久久国产熟女影院| 日本五十路在线| www.久久最新地址| 欧美一品道| 九九99精品视频在线观看| 亚洲无套久久嗯嗯| 国产曰批免费观看久久久| AVE乱伦| 欧美有码亚洲中文字幕一区二区三区四区 | 91性色| 夜夜高潮夜夜爽高清视频一 | 午夜在线播放| 精品免费1| 日韩av免费一级电影| 屌妞视频久久久久久久| 成人性爱视频在线看| 91男同| 久久久久国产一区二| 中文三一区| 欧美午夜精品久久久久久超碰| 亚洲乱码精品一区二区| 亚码人妻| 99久久99九九99九九九| 亚洲风情在线观看| 天天综合有色网| xxx0国产在线播放| 美女黄页网站| av天堂影视中文在字幕在线中文 | 欧美白嫩在线放| 欧美视频一区二区在线| 国产熟女一区二区| 久久九九一区二区三区成人| 探花在线免费观看视频国产一区| 日韩欧美中文字幕搭讪巨乳美人妻视频| 99热这里只有精品99| 精品一区二区三区免费古装毛片香港三级日本三级人妇 | 在线无码操| 国产成人精品网站| 久久久国产精品人妻丝袜| 老司机天天操| 91艹| 亚州宗合另类| 国产AV无码AV| 97色操| 久日91在线| 丁香五月色| 久热精品在线国产| 亚洲欧美国产精品久久久久久久| 欧美爆操91| 国产精品亚洲免费| 国产成人自拍视频视频| 97中文热色| 69AV女优男人的天堂| 丰满人妻一区二区三区大胸懂色 | 国产 日韩 欧美一区| 色网综合网| 口爆综合网| 亚洲AV无码国产精品久久久久| 国产一级高清免费观看| 色五月第四色| 婷婷AV一区二区三区| 91免费看一区二区三区| 四季av一区二区凹凸精品小说| 日韩紧密久久| 99国产人成精品| 91成人久久 | 男插女青青影院| 校园春色美腿丝袜 | 伊人黄色片| 玖玖久久久| 330dv亚洲成年视频网| 亚州操逼网| 丰满人妻一区二区三区性色| 欧美线天码中字| 国产精品久久久九九九| 久久精品视频久久久| 国产白嫩漂亮KTV在线| 人妻另类 专区 欧美 制服| 国产农村妇女毛片精品久久| 狠狠操一区二区| 精品大久久| 中文字幕精品一区二区精品| 99综合视频| 亚洲精品中文字幕一区在线视频 | 久久久久久久久久久久久久久久9| 天天欧美色| 五月天丁香| 中文字幕av亚洲在线| 国产操逼视频在线观看| 国产在线播放成人免费| 蜜臀99久久国产| 人妻美腿丝袜日韩| 欧美精品久久| 97精品97| 91国产精品熟女| 99色色| 久久久555| 伊人国产视频| 日本一区二区不卡精品| 370p日韩欧美亚洲精品| 亚洲欧洲成人在线电影| 久久精品亚洲东京热色播| 日韩福利综合一区| 黄片www视频免费| 试看日韩黄片| 97精品97久久| 欧美玖玖爱免费玖玖| 成人AV素股で擦久久| 一区二区三区无卡视频在线观看| 欧美人与性动交a美精品| 成人精品久久久午夜福利| 欧美色网络| 99久久99九九99九九九| 狠久久| 97色综合中文网| 91精品导航| 麻豆成人AV| 狼人狠干| 97久久超碰| 欧美性天天| 国产a片操逼| 韩日性爱av| 国产无马视频| 黄色性爱网网| www.久久久久| 啊v视频在线观看| 性吧在线视频| 99这里有精品视频| 97超碰69| 亚洲国产精品久久久久婷婷青年| 亚洲另类久操网| 黄色成品网站| 欧美中字二区| 劲爆欧美人妖三区91| 91国产美女丝袜足交精品视频 | 国产91福利小视频在线观看| 天天拍天天操| 亚洲精品无码久久AV| 国产女人91精品嗷嗷嗷嗷| 日本污ww视频网站| 中文字幕欧洲有码| 高树玛利亚无码流出| 欧天美中出| 日本精品一区二区三| 亚洲天堂另类| 天天看夜夜看日日干| 国产日产精品久久快鸭的功能介绍| 91九色蝌蚪在线观看| 日本福利二区视频| 国产剧情一区在线观看| 91挑色欧美| 成人一区二区三区四区| 久久久久78| 国产9熟妇视频网站| 亚洲无 码A片在线观看麻豆| 精品无码一区二区三区| 激情综合网五月婷婷五月天| 91狠狠色丁香婷婷综合久久精品| 国产AV超爽| 又大又长又爽| 久久美国毛片| 老熟妇91| 乱伦图av| 久久久精品国产亚洲伊人| 99RE在线视频精品,这里只有精品| 狠狠爱夜夜干| 探花精品 一区二区| 人人摸人人摸人人干| 好吊妞转入那个网| 中国熟女91| 999精品女人| 再深点灬舒服灬太大了添视频 | 国产精品女同| 久操九九九九九九九九九九九九九九九九九九九九九九九九九九九九 | 免费观看欧美日韩操逼视频| 青青草色情网站视频| 伊人欧美大香蕉视频| 欧美亚洲一级在线观看| 99综合网| 碰人碰碰人人开房人肉| 91国产操逼视频| 色婷婷综合网站| 啊啊啊在线观看免费视频| 久草视频制服诱惑| 精品国产99| 蜜桃AV天堂| 丝袜亚洲综合| 人人考人人摸人人干| 国产一区二区三区不卡手机在线| 超碰97.com| 99亚洲精品| 久久草大香蕉| 日日摸日日碰| 日韩性爱一级片| 人妻AV 中文字幕的| 久久九操在线观看| 国产亚洲99久久精品熟| 五月天婷婷色色| 超碰欧美在线欧美| 国产精品久久天天干| 亚洲精品 大香蕉| 97天天插| 涩涩涩综合| 久久熟女人| 欧美大片一区二区三区 | 日日噜噜夜夜久久亚洲一区二区| 日韩免费在线观看不卡| 国产精品久久伊人| 日韩99神马视频播放| 91操操操操| 久久麻豆一区二区| 欧美色性情| 国产欧美一区激情交| 在线97在线| 天天看天天日天天操| 亚洲色啪| 天天影视综合色| 亚洲午夜福利在线影院| 东京热av男人的天堂| 婷婷伊人五月| 久操黄色视频| 伊人久久AV诱惑悠悠| 狼人久草| 天堂亚洲精品| 婷婷久久网| 大色网久久| 五月天综合在线| 九9热伊人| 天天摸夜夜添无码小视频| 亚洲熟妇丝袜在线观看| 久艹日日日| 国产激情综合五月久久| 9九九国产| 手机看av网站在线看| 婷婷久久五月天| 欧美激情片一区二区| 麻豆三极片| 色一射色一射| 久久久新亚洲AV| 亚州操操穴网| 青青操视频在线| 欧美一区二区福利在线| 97亚洲资源| 人人操人人摸人人看人人插| 激情啪啪视频| 人人玩人人添人人澡免费| 使劲用力艹少妇视频一区二区| 人人贴人人摸| 亚洲第91页| 久久久久久精品免费看A级| 国产精品久久久久久9999| 中文字幕 国产 精品| 婷婷丁香人妻| 国内精品久久国产,www香蕉久久五月丁香,亚洲欧美日韩精品永久在线,日本精品一 | 正在播放:深夜激情大战,自带黑丝袜全力输出骚穴 | 操屄日韩| 国产高清不卡视频| 日本在线观看网址| 婷婷伊人一区| 麻豆久久一区二区三区| 中文字幕 一区二区 亚洲无码| 国产精品国产亚洲区艳妇糸列| 久久免费精彩视频| 亚洲国产精品久久AV| 青青操在线亚洲视频观看欧美在线 | 91操操操操| 金典av| 激情久久av一区av二区av| 久久美国毛片| 性在久久久久久| 久久婷婷一区| 久久婷婷国产一区二区色| 国产成人91一区二区三区| 蜜臀av网址| 国产成人精品日本视频| 黑人性欧美| 蜜臀精品1区2区| 日本操逼视频导航| 另类专区加勒比| 蜜桃久久综合视频| www.yeyecao| 久久婷婷苹果| 婷婷国产精品九区| 逼操网站| 丰满人妻一区二区三区四区| 欧美亚洲国内自拍| 精品欧美А∨无码黑人大荫蒂 | 免费成人在线观看91| 内射中国少妇高清视频免费视频| 日本99久久| 日韩字幕一区| 97se亚洲| 黄色大片一区二区密桃丝袜| 免费一级特黄特色大片在线观看看| 少妇三p| 久久久久ab| 色色99| 911av网站免费观看| 加勒比海人人操超碰在线| 久操九九九九九九九九九九九九九九九九九九九九九九九九九九九九 | 日韩丝袜高跟制服在线观看| 色爱三区| 嗯啊视频免费在线观看| 欧美性夜| 日本性一区| 日欧美色| 超碰人人在线| 日逼视频日本| 色噜噜日韩精品| 四虎视频在线观看| 能看的av| 午夜福利免费福利视频| 日韩综合无码一区久久92| 欧美少妇色综合| 久久本道| 亚洲精品亚洲人成在线麻豆| 91精品人妻一品二品三品| www.四虎在线| 亚欧高清在线| 欧美成人免费在线观看| 黄页av| 性欧美第一页| 日日骚精品视频| 久久的网站啊啊啊啊啊| 操狠狠| 日本午夜久久电影| 超碰伊人在线| 国产九九久久久精品| 婷婷五月花| 狠狠激情综合狠狠操中文字幕| 1769一区| 综合久久9| 在线视频资源| 精品少妇高潮久久| 天堂涩涩| 欧美 亚洲 91| 午夜成人福利影视| 亚洲国产第一页综合视频| 亚洲第一成人影院色播| 少妇啪啪自拍| 国产婷婷综合在线观看| 亚洲色图日韩丝袜制服一区二区五月在线| 神马久久久久久久久久| 久久久一热在线播放| 激情深爱五月天| 日本人妻A片成人免费看片| 亚洲成?V人片在线观看福利| 国产精品久久久久久久AV大片| 久久伊人亚洲AV无码网站| 国产高清成人免费视频| 97干97色| 特色a在线上| 亚洲深夜福利| 婷婷10月天青娱乐| 97热视频在线观看| 老司机免费视频在线91| 中文字幕十五区| 亚洲国产青青| 91伊人大香蕉| 九九英色视频| 96爱综合| 日日日大屁股骚女人精品| 麻豆 亚洲 97| 91影视亚洲| 超碰97在线色男人??| 福利天堂| 久热大香蕉网站| 四虎精品亚洲| 天天天天天天天天综合| 欧美色图成人网一区二区| 一本一首道人妻少妇免费久久| 大香伊人在线一区| 久久人爽| 夜夜久久久| 欧美成人精品一区| 一起草在线视频| 激情婷婷综合久久| 国产传媒午夜理伦精品| 日本精品网站在线中文| 无码国产Av| 一区二区三区 日韩欧美| 久久久com| 久久伊人大香蕉| 欧美九9 9 9| 精品免费一区二区三区在线亚洲人成| av凤凰久久久| 日韩有码免费视频| 夜夜狼人妻| 亚洲色图欧美另类在线| 99re6国产精品99re| 99这里只有精品| 激情内射| 欧美第二页| 欧美精品成人在线播放| 天天干夜夜一操| 色情综合| 韩国轻伦国内自拍一区| 国产精品视频| 欧美日韩国产精品久久色婷婷| 97色综合中文网| 激情熟女12P| 免费操逼视频下载| 久久黄黄| 久久国产对白激情浪潮| 97少妇人妻中文字幕久久 | 先锋女优在线观看视频| 看免费的黄片| 国产激情在线| 日韩乱码Av| 啊灬快c我灬啊灬用力灬啊灬-国产精品性做久久久久久-成人AV | 国内毛片国产专区二| 人妻熟女午夜精品在线| 1024手机看片欧美日韩| 97K超碰在线| 香蕉久久AⅤ...| 日本色婷婷| 亚洲精品久久久久久久久豆丁网| 国产九区| 少妇久久久| 激情综合二| 四虎精品永久在线播放| 亚洲最新中文字幕免费| 成人婷婷丁香| 亚洲伊人久久精品狠狠在线| 四季av一区二区凹凸精品小说| 国产熟妇 码视频户外直播| 热99这里只有精品| 视频在线观看一二三区| 果冻传媒一区二区三区| 人妻少妇久久中文字幕一区二区 麻豆| 99久久久er直播网址| 日韩乱码Av| 情色图区| 综合伊人激情| 欧美日韩中文亚洲v在线综合| 人妻美腿丝袜制服诱惑综合天堂-| 97久久国产精品| 国产免费一区2区3区| 美国日韩黄色片| 97色涩| 我爱操| 97超碰色| 亚洲福利中文字幕在线| 动漫爆乳3D奶水一区在线观看| 欧美日本天堂| 青青草公开在线免费不卡视频| 久久中文字幕一区不卡| 狠狠狠一区二区三区| 男人的天堂2018.| 国产伊人精品在线| 乱伦一二三区| 午夜丁香| 亚洲日产专区婷婷| 欧美欧美啪啪视频| 小视频玖玖| 久久久久久亚洲精品中文字幕人妻| 东京热男人的天堂网| 国产中文字幕曰本毛片| 亚洲AO在线| 久艹99| 欧美一级在线观看成人| 激情小说五月天| 激情文学小说一区二区 | 蜜臀无码一区二区| 97资源亚洲| 韩日性爱av|