色五月色开心色婷婷色丁香,五月婷婷丁香花综合网,婷婷丁香五月激情综合在线,五月婷婷六月丁香动漫,婷婷丁香五月激情综合在线,丁香花中文字幕在线观看,播五月色五月开心五月网,开心激情综合网,狠狠色丁香婷婷综合最新地址,丁香视频在线观看,狠狠做六月爱婷婷综合av,久久激情五月丁香伊人

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

智慧IT運維平臺落地:從告警風暴到業(yè)務(wù)語義監(jiān)控

智慧IT運維平臺落地:從告警風暴到業(yè)務(wù)語義監(jiān)控 簡介本資源是一份面向IT運維工程師、智慧樓宇系統(tǒng)集成商及數(shù)字化轉(zhuǎn)型從業(yè)者的「智慧IT運維平臺解決方案」專業(yè)PPT聚焦智慧寫字樓、智慧大廈等場景的集約化、信息化與可視化管理需求。文檔以48頁結(jié)構(gòu)化幻燈片呈現(xiàn)完整覆蓋物聯(lián)網(wǎng)感知層、云平臺數(shù)據(jù)中臺、可視化駕駛艙、能耗優(yōu)化模型及智能告警機制等核心模塊特別強化了多系統(tǒng)融合架構(gòu)與實際落地路徑分析。資源為單文件PPTX格式大小11.96MB內(nèi)容精煉、圖表豐富適合作為方案匯報、客戶溝通或內(nèi)部培訓材料。目前已有45人學習下載讀者可直接獲取成熟可復(fù)用的平臺建設(shè)框架、典型功能界面示意圖、技術(shù)棧選型建議及運營數(shù)據(jù)分析邏輯助力快速構(gòu)建符合智慧城市標準的IT運維管理體系。1. 這不是又一個PPT模板48頁《智慧IT運維平臺解決方案》講的是“怎么讓監(jiān)控告警不變成半夜騷擾電話”你手頭這份標著“48頁PPT智慧IT運維平臺解決方案.pptx”的文件大概率不是HR發(fā)來的述職材料也不是售前同事塞給客戶的“概念圖冊”。它是一線運維團隊在經(jīng)歷3次核心數(shù)據(jù)庫凌晨2點雪崩、5次因配置漂移導致的灰度發(fā)布失敗、以及7次“告警風暴”后用血淚經(jīng)驗反向梳理出的可落地技術(shù)路徑圖譜——48頁里真正關(guān)鍵的是第12頁的告警收斂規(guī)則矩陣、第23頁的CMDB字段映射邏輯、第36頁的變更風險評分卡設(shè)計而不是首頁那張云朵齒輪閃電的矢量圖。這份方案不解決“要不要上AIOps”它直面的是“為什么Prometheus告警一響就是237條而真正要人處理的只有1條”它不談“數(shù)字化轉(zhuǎn)型愿景”只拆解“如何把Zabbix里散落的37個主機組、Ansible里混用的12套playbook變量、Jenkins里命名混亂的58個流水線統(tǒng)一成一張能自動更新的服務(wù)拓撲圖”。適合正在被“工具堆砌但協(xié)同失效”困住的SRE、正被業(yè)務(wù)方質(zhì)問“你們監(jiān)控系統(tǒng)到底管不管用”的運維負責人、以及剛接手遺留系統(tǒng)、發(fā)現(xiàn)CMDB里“生產(chǎn)環(huán)境”標簽下混著測試IP的救火隊員。接下來我們按這份PPT實際承載的技術(shù)脈絡(luò)把48頁壓縮成一條可執(zhí)行、可驗證、不玄學的落地鏈路。2. 從PPT目錄反推架構(gòu)48頁不是幻燈片是分層實施路線圖這份PPT的目錄結(jié)構(gòu)本身就是一份隱性的技術(shù)實施藍圖。它沒按“技術(shù)棧分層”如IaaS/PaaS/SaaS組織而是嚴格遵循問題域驅(qū)動的分層邏輯先定義“什么算智慧”第1–8頁再解決“數(shù)據(jù)從哪來、怎么對齊”第9–19頁接著構(gòu)建“怎么讓機器理解業(yè)務(wù)意圖”第20–32頁最后落地“人機協(xié)同的閉環(huán)動作”第33–48頁。這種結(jié)構(gòu)不是拍腦袋定的它對應(yīng)著真實項目中踩過的三道生死線第一道業(yè)務(wù)指標和系統(tǒng)指標永遠對不上比如業(yè)務(wù)說“支付成功率跌了5%”監(jiān)控顯示所有API延遲100ms第二道告警來了沒人敢點“已確認”因為不知道這個告警關(guān)聯(lián)的下游服務(wù)是否還在跑第三道自動化修復(fù)腳本一執(zhí)行就引發(fā)連鎖故障因為腳本根本不認識當前集群的拓撲狀態(tài)。所以我們不按PPT頁碼順序復(fù)現(xiàn)而是把它拆成四個技術(shù)錨點每個錨點都配可驗證的最小實現(xiàn)。2.1 錨點一用“業(yè)務(wù)語義層”重定義監(jiān)控指標對應(yīng)PPT第1–8頁PPT第3頁那個“交易成功率支付成功數(shù)/總支付請求”的公式看著簡單但背后藏著整個方案的起點。傳統(tǒng)監(jiān)控只認http_status_code200而業(yè)務(wù)語義層要求你識別出HTTP 200里有37%是“余額不足返回的成功響應(yīng)”業(yè)務(wù)認為失敗HTTP 500里有22%是“風控攔截返回的友好提示”業(yè)務(wù)認為成功。怎么做在Prometheus exporter里加一層業(yè)務(wù)邏輯過濾器# business_metrics_exporter.py from prometheus_client import Counter, Gauge, start_http_server import requests import json # 定義業(yè)務(wù)指標不是系統(tǒng)指標 PAYMENT_SUCCESS_COUNTER Counter(payment_success_total, Business payment success count) PAYMENT_FAILURE_COUNTER Counter(payment_failure_total, Business payment failure count) def fetch_and_parse_business_metrics(): # 調(diào)用業(yè)務(wù)網(wǎng)關(guān)的診斷API非監(jiān)控API resp requests.get(http://gateway-api:8080/diag/payment_summary?window1m) data resp.json() # 關(guān)鍵這里用業(yè)務(wù)規(guī)則重解釋原始數(shù)據(jù) for item in data[details]: if item[biz_result] SUCCESS and item[biz_code] not in [BALANCE_INSUFFICIENT, RISK_REJECTED]: PAYMENT_SUCCESS_COUNTER.inc() elif item[biz_result] FAILED or item[biz_code] in [BALANCE_INSUFFICIENT, RISK_REJECTED]: PAYMENT_FAILURE_COUNTER.inc() if __name__ __main__: start_http_server(8000) # 每15秒執(zhí)行一次業(yè)務(wù)指標解析 from threading import Timer def run_loop(): fetch_and_parse_business_metrics() Timer(15.0, run_loop).start() run_loop()參數(shù)說明biz_result和biz_code是業(yè)務(wù)網(wǎng)關(guān)暴露的標準化字段不是HTTP狀態(tài)碼window1m表示聚合窗口必須與業(yè)務(wù)SLA對齊如支付場景要求1分鐘粒度8000端口需在Prometheus scrape config中顯式配置且禁止與系統(tǒng)指標端口混用。2.2 錨點二CMDB不是資產(chǎn)清單是服務(wù)關(guān)系圖譜對應(yīng)PPT第9–19頁PPT第14頁的“服務(wù)依賴熱力圖”其數(shù)據(jù)源絕不是Excel導入的靜態(tài)表格。真正的CMDB必須能回答“當訂單服務(wù)A升級時哪些下游服務(wù)B/C/D會因緩存穿透受影響”這要求CMDB具備動態(tài)關(guān)系建模能力。常見誤區(qū)是把CMDB當成Zabbix主機列表的增強版結(jié)果填了2000臺服務(wù)器卻不知道其中哪17臺運行著庫存服務(wù)的Redis分片。最小可行實現(xiàn)用Neo4j構(gòu)建服務(wù)拓撲圖// 創(chuàng)建服務(wù)節(jié)點帶業(yè)務(wù)屬性 CREATE (s:Service {name: order-service, env: prod, owner: trade-team, version: v2.3.1}) // 創(chuàng)建中間件節(jié)點帶實例屬性 CREATE (r:Middleware {type: redis, host: 10.20.30.101, port: 6379, role: master}) // 建立動態(tài)關(guān)系關(guān)系類型業(yè)務(wù)語義 CREATE (s)-[r:USES_CACHE]-(r) // 關(guān)鍵關(guān)系必須帶權(quán)重和時效性 SET r.weight 0.85, r.last_verified_at timestamp()邏輯說明USES_CACHE不是固定關(guān)系而是通過APM鏈路追蹤數(shù)據(jù)自動發(fā)現(xiàn)并寫入如SkyWalking的Trace數(shù)據(jù)流weight字段表示該Redis實例在訂單服務(wù)緩存策略中的重要性0.85主緩存0.15降級緩存last_verified_at用于自動清理30天未驗證的關(guān)系避免拓撲圖腐化。PPT第17頁的“服務(wù)健康度計算公式”其分子分母正是從這類圖譜中實時查詢得出。2.3 錨點三告警不是通知是待辦任務(wù)工單對應(yīng)PPT第20–32頁PPT第25頁的“告警分級矩陣”本質(zhì)是把告警事件轉(zhuǎn)化為Jira工單的預(yù)填充模板。例如Critical級告警 → 自動創(chuàng)建Jira工單Assigneeoncall輪值表Summary[AUTO] order-service CPU 95% for 5min prod-cluster-01Description關(guān)聯(lián)服務(wù)payment-gateway(v2.1), inventory-service(v1.9); 最近變更2024-06-15T14:22 deploy order-service v2.3.1。實現(xiàn)關(guān)鍵告警富化Enrichment管道# alertmanager.yml 配置片段 route: receiver: jira-webhook continue: true # 關(guān)鍵在路由階段注入上下文 match_re: severity: ^(critical|warning)$ # 使用external_labels注入服務(wù)標識 group_by: [alertname, service_name, environment] receivers: - name: jira-webhook webhook_configs: - url: http://alert-enricher:8080/jira-create send_resolved: true http_config: bearer_token: your-jira-token# alert-enricher.py接收Alertmanager Webhook from flask import Flask, request, jsonify import requests app Flask(__name__) app.route(/jira-create, methods[POST]) def create_jira_ticket(): alert_data request.get_json() # 步驟1根據(jù)alert_data[labels][service_name]查CMDB獲取owner和SLA cmdb_resp requests.get(fhttp://cmdb-api/service/{alert_data[labels][service_name]}) service_info cmdb_resp.json() # 步驟2調(diào)用變更系統(tǒng)API查最近30分鐘該服務(wù)的部署記錄 change_resp requests.get( fhttp://change-api/changes?service{alert_data[labels][service_name]}since30m ) # 步驟3構(gòu)造Jira payloadPPT第28頁的“工單必填字段” jira_payload { fields: { project: {key: OPS}, summary: f[AUTO] {alert_data[alerts][0][labels][alertname]} {service_info[env]}, description: f關(guān)聯(lián)服務(wù){(diào), .join(service_info[upstreams])}\n f最近變更{change_resp.json()[0][commit_message] if change_resp.json() else 無}, assignee: {name: service_info[owner]}, priority: {name: Highest if alert_data[alerts][0][labels][severity] critical else High} } } requests.post(https://jira.example.com/rest/api/2/issue, jsonjira_payload, headers{Authorization: Bearer token}) return jsonify({status: ok})參數(shù)說明group_by必須包含service_name否則無法關(guān)聯(lián)CMDBsince30m是硬性要求PPT第30頁明確標注“變更窗口期≤30分鐘”priority映射規(guī)則必須與業(yè)務(wù)SLA文檔一致如P1故障必須15分鐘響應(yīng)對應(yīng)Jira Highest優(yōu)先級。3. 數(shù)據(jù)對齊讓Zabbix、Prometheus、ELK說話同一種語言PPT第11頁那個“多源數(shù)據(jù)融合視圖”常被誤解為“把三個監(jiān)控系統(tǒng)的圖表拼在一起”。真正的融合是讓Zabbix的host.cpu.utilization、Prometheus的node_cpu_seconds_total、ELK里的syslog.cpu_usage在同一個時間軸上指向同一臺物理機的同一CPU核。這需要一套輕量級但強約束的數(shù)據(jù)對齊協(xié)議而非ETL清洗。3.1 統(tǒng)一資源標識符URI規(guī)范讓每臺設(shè)備有唯一身份證PPT第12頁的“資源標識矩陣”其核心是定義urn:it:server:prod-us-west-1:web-001這樣的URI格式。這不是字符串拼接而是強制校驗規(guī)則prod-us-west-1必須匹配云廠商Region API返回的合法值web-001必須通過Ansible inventory的hostname字段生成且不能含下劃線避免Kubernetes DNS解析失敗整個URI長度≤64字符適配MySQL索引長度限制。Ansible Playbook中自動生成URI的實踐# roles/common/tasks/uri_generation.yml - name: Generate unified resource URI set_fact: resource_uri: - urn:it:{{ ansible_env.DEPLOY_ENV | default(dev) }}:{{ ansible_env.CLOUD_REGION | default(unknown) }}:{{ ansible_hostname | regex_replace(_, -) }} when: ansible_hostname is defined - name: Validate URI length assert: that: - resource_uri | length 64 fail_msg: Resource URI {{ resource_uri }} exceeds 64 chars limit - name: Register URI to CMDB uri: url: http://cmdb-api/resources/{{ resource_uri }} method: POST body: {{ {ip: ansible_all_ipv4_addresses[0], os: ansible_distribution} | to_json }} status_code: 201 body_format: json邏輯說明regex_replace(_, -)是血淚經(jīng)驗——某次因主機名含web_db_01生成URIurn:it:prod:web_db_01導致K8s Service DNS解析失敗_非法status_code: 201強制要求CMDB API返回創(chuàng)建成功否則Playbook中斷避免“假成功”。3.2 時間戳對齊解決監(jiān)控系統(tǒng)間的“時鐘戰(zhàn)爭”PPT第15頁的“時間線一致性保障”直指一個隱藏巨坑Zabbix默認用本地時區(qū)采集數(shù)據(jù)Prometheus用UTCELK日志時間戳來自應(yīng)用服務(wù)器時區(qū)。當三者在Grafana同屏展示時同一事件會顯示為相隔3小時的三條線。強制統(tǒng)一時間戳的Ansible Handler# handlers/main.yml - name: Sync time with NTP server community.general.ntp_time: server: ntp.internal.company.com state: synced become: true - name: Set timezone to UTC community.general.timezone: name: UTC become: true - name: Restart monitoring agents systemd: name: {{ item }} state: restarted loop: - zabbix-agent - node-exporter - filebeat參數(shù)說明ntp.internal.company.com必須是內(nèi)網(wǎng)NTP服務(wù)器禁用公網(wǎng)NTP避免網(wǎng)絡(luò)抖動導致時鐘跳變timezone: UTC是硬性要求PPT第16頁注明“所有采集端時區(qū)強制UTC展示層由Grafana轉(zhuǎn)換”restarted必須在時區(qū)設(shè)置后執(zhí)行否則agent仍用舊時區(qū)緩存數(shù)據(jù)。3.3 指標語義映射讓“CPU使用率”在不同系統(tǒng)里是同一個數(shù)學對象PPT第18頁的“指標字典”本質(zhì)是定義cpu_utilization_percent這個邏輯指標其計算公式在不同系統(tǒng)中必須等價Zabbix100 - system.cpu.idle[percpu,avg]Prometheus100 * (1 - avg by(instance) (rate(node_cpu_seconds_total{modeidle}[5m])))ELK100 * (1 - avg(cpu_idle_percent))來自應(yīng)用埋點日志Prometheus Recording Rule實現(xiàn)語義統(tǒng)一# recording-rules.yml groups: - name: cpu_unified rules: - record: cpu:utilization:percent expr: | 100 * ( 1 - avg by(instance) ( rate(node_cpu_seconds_total{modeidle}[5m]) ) ) labels: source: prometheus - record: cpu:utilization:percent expr: | 100 - avg by(instance) ( zabbix_agentd_value{metricsystem.cpu.idle[percpu,avg]} ) labels: source: zabbix邏輯說明兩個record規(guī)則輸出同一指標名cpu:utilization:percent但source標簽區(qū)分來源Grafana查詢時用sum by(instance)(cpu:utilization:percent)自動聚合多源數(shù)據(jù)[5m]窗口必須與Zabbix的采集間隔默認60秒和ELK日志聚合周期對齊否則出現(xiàn)階梯狀曲線。4. 告警收斂與根因定位把237條告警壓成1條可執(zhí)行指令PPT第22頁的“告警風暴抑制模型”不是簡單的“相同告警5分鐘內(nèi)只發(fā)1次”。它基于服務(wù)拓撲圖譜實現(xiàn)語義級收斂當order-service的CPU告警觸發(fā)時自動抑制其下游payment-gateway的HTTP 5xx告警因為根源在上游但放行inventory-service的獨立告警因其不依賴order-service。這需要將告警事件與CMDB圖譜實時關(guān)聯(lián)。4.1 基于服務(wù)拓撲的動態(tài)抑制規(guī)則對應(yīng)PPT第22–26頁傳統(tǒng)Alertmanager的inhibit_rules是靜態(tài)配置而本方案要求規(guī)則隨拓撲變化自動更新。實現(xiàn)方式是CMDB圖譜變更時觸發(fā)規(guī)則生成服務(wù)將order-service的告警ID映射到其上游服務(wù)列表寫入Alertmanager的動態(tài)配置。# topology_inhibitor.pyCMDB變更監(jiān)聽器 from neo4j import GraphDatabase import yaml import requests class TopologyInhibitor: def __init__(self): self.driver GraphDatabase.driver(bolt://neo4j:7687, auth(neo4j, password)) def generate_inhibit_rules(self, service_name): # 查詢service_name的所有上游依賴 with self.driver.session() as session: result session.run( MATCH (s:Service {name: $name})-[:DEPENDS_ON*1..3]-(up:Service) RETURN up.name as upstream_service , nameservice_name) upstreams [record[upstream_service] for record in result] # 生成Alertmanager抑制規(guī)則 rules [{ target_match_re: {alertname: HighCPU, service_name: service_name}, source_match_re: {alertname: HTTPError5xx, service_name: upstream} } for upstream in upstreams] # 寫入Alertmanager動態(tài)配置API需啟用--web.enable-admin-api requests.post(http://alertmanager:9093/api/v1/alerts/inhibit, json{rules: rules}) return rules # 當CMDB中order-service節(jié)點更新時觸發(fā) if __name__ __main__: inhibitor TopologyInhibitor() inhibitor.generate_inhibit_rules(order-service)參數(shù)說明DEPENDS_ON*1..3表示最多3跳依賴避免過度抑制PPT第24頁明確限定“抑制深度≤3”--web.enable-admin-api必須啟用否則無法動態(tài)寫入HTTPError5xx是業(yè)務(wù)定義的告警名不是Prometheus原生指標確保與PPT第21頁的“業(yè)務(wù)告警分類標準”一致。4.2 根因定位的“三階證據(jù)鏈”對應(yīng)PPT第27–32頁PPT第29頁的“根因定位流程圖”要求每個告警必須提供三層證據(jù)現(xiàn)象層order-serviceCPU 95%監(jiān)控數(shù)據(jù)關(guān)聯(lián)層該實例關(guān)聯(lián)的payment-gateway調(diào)用量突增300%APM鏈路數(shù)據(jù)變更層該實例10分鐘前部署了v2.3.1版本CI/CD日志。Grafana Dashboard中嵌入證據(jù)鏈的Panel配置{ panels: [ { title: Root Cause Evidence Chain, type: table, targets: [ { expr: topk(1, avg by(instance, job) (rate(http_request_duration_seconds_sum{job~order-service.*}[5m])) / avg by(instance, job) (rate(http_request_duration_seconds_count{job~order-service.*}[5m])) * 100), legendFormat: Avg Latency (ms) }, { expr: topk(1, sum by(instance) (rate(http_requests_total{job~payment-gateway.*, code~5..}[5m]))), legendFormat: 5xx Rate (req/s) }, { expr: count by(instance) (deploy_timestamp{joborder-service, versionv2.3.1}), legendFormat: Deployed v2.3.1 (count) } ] } ] }邏輯說明三個expr必須用同一instance標簽對齊確保數(shù)據(jù)來自同一臺服務(wù)器deploy_timestamp是CI/CD流水線在部署時寫入Prometheus的指標值1PPT第31頁強調(diào)“部署事件必須作為時序指標暴露”topk(1,)確保只顯示最異常的實例避免信息過載。5. 避坑指南48頁PPT里沒寫的5個血淚教訓這份方案在落地時有5個高頻翻車點PPT里不會明說但每個都足以讓項目延期3個月。以下是我在3個金融客戶現(xiàn)場踩過的坑按“現(xiàn)象→原因→解決”結(jié)構(gòu)整理5.1 現(xiàn)象CMDB服務(wù)關(guān)系圖譜每天凌晨自動清空原因Neo4j的apoc.periodic.repeat定時任務(wù)配置了CALL apoc.periodic.commit(MATCH (n) DETACH DELETE n, {batchSize:10000})但未加WHERE條件誤刪全庫。PPT第15頁的“自動拓撲發(fā)現(xiàn)”被理解為“自動清理”實則應(yīng)只刪除last_verified_at now() - 30d的過期關(guān)系。解決改用apoc.periodic.rock_n_roll并嚴格限定范圍CALL apoc.periodic.rock_n_roll( MATCH (n)-[r]-() WHERE r.last_verified_at $cutoff WITH r LIMIT 10000 DELETE r, {cutoff: timestamp() - 2592000000} // 30 days in ms )5.2 現(xiàn)象業(yè)務(wù)語義指標payment_success_total數(shù)值比實際交易少23%原因業(yè)務(wù)網(wǎng)關(guān)的/diag/payment_summary接口默認只返回最近1分鐘數(shù)據(jù)但business_metrics_exporter.py的window1m參數(shù)未同步更新。當Prometheus抓取間隔設(shè)為30秒時部分1分鐘窗口被截斷。解決強制接口返回完整窗口并在Exporter中做滑動窗口校驗# 在fetch_and_parse_business_metrics()中添加 if len(data[details]) 0: # 重試請求更寬窗口 resp requests.get(http://gateway-api:8080/diag/payment_summary?window2m) data resp.json() # 取最后1分鐘數(shù)據(jù) data[details] [d for d in data[details] if d[timestamp] time.time() - 60]5.3 現(xiàn)象告警抑制規(guī)則生效后inventory-service的獨立告警也被抑制原因CMDB圖譜中inventory-service錯誤地建立了DEPENDS_ON order-service關(guān)系因歷史配置殘留而抑制規(guī)則未加service_type ! cache條件。PPT第23頁的“依賴關(guān)系白名單”被忽略。解決在Neo4j查詢中增加業(yè)務(wù)類型過濾MATCH (s:Service {name: $name})-[:DEPENDS_ON]-(up:Service) WHERE up.service_type IN [database, message-queue] // 排除cache類 RETURN up.name5.4 現(xiàn)象Grafana中cpu:utilization:percent指標出現(xiàn)負值原因Prometheus的rate()函數(shù)在采樣點缺失時返回負值而Recording Rule未做max(0,)截斷。PPT第18頁的“指標字典”要求所有百分比指標≥0。解決修改Recording Rule表達式expr: max(0, 100 * (1 - avg by(instance) (rate(node_cpu_seconds_total{modeidle}[5m]))))5.5 現(xiàn)象Jira工單創(chuàng)建失敗錯誤日志顯示401 Unauthorized原因Alertmanager的Webhook配置中bearer_token硬編碼在YAML里而Jira Token每月輪換運維人員忘記更新。PPT第26頁的“憑證管理”要求Token必須從Vault讀取。解決改用Vault Agent注入# alertmanager.yml receivers: - name: jira-webhook webhook_configs: - url: http://alert-enricher:8080/jira-create http_config: bearer_token_file: /vault/secrets/jira-token # Vault Agent掛載路徑6. 進階技巧用PPT第42頁的“變更風險評分卡”做自動化決策PPT最后一章第42–48頁的“變更風險評分卡”不是給人看的打分表而是驅(qū)動自動化門禁的決策引擎。它把“本次發(fā)布是否允許自動上線”轉(zhuǎn)化為一個0–100分的量化結(jié)果分數(shù)≥85才觸發(fā)自動部署。這個分數(shù)不是拍腦袋而是由三組實時數(shù)據(jù)加權(quán)計算代碼質(zhì)量分權(quán)重40%SonarQube掃描的阻斷級漏洞數(shù)、單元測試覆蓋率環(huán)境穩(wěn)定性分權(quán)重35%目標集群過去24小時的Pod重啟率、節(jié)點NotReady時長變更影響分權(quán)重25%本次變更涉及的服務(wù)在CMDB圖譜中的中心度Centrality、下游服務(wù)數(shù)量。實現(xiàn)一個輕量級評分服務(wù)Python FastAPI# risk_scoring.py from fastapi import FastAPI, HTTPException from pydantic import BaseModel import requests app FastAPI() class ChangeRequest(BaseModel): service_name: str git_commit: str target_cluster: str app.post(/score) def calculate_risk_score(req: ChangeRequest): # 步驟1獲取代碼質(zhì)量分調(diào)用SonarQube API sq_resp requests.get( fhttps://sonarqube/api/measures/component?component{req.service_name}metricKeysblocker_violations,coverage, auth(token, sq-token) ) sq_data sq_resp.json() code_score max(0, 100 - int(sq_data[component][measures][0][value]) * 10) # 每個阻斷漏洞扣10分 # 步驟2獲取環(huán)境穩(wěn)定性分Prometheus查詢 prom_resp requests.get( http://prometheus/api/v1/query, params{ query: f100 - (avg by(instance) (rate(kube_pod_status_phase{phaseRunning}[24h])) * 100) } ) env_score float(prom_resp.json()[data][result][0][value][1]) # 直接取數(shù)值 # 步驟3獲取變更影響分Neo4j圖譜中心度 with app.state.neo4j_driver.session() as session: result session.run( MATCH (s:Service {name: $name}) WITH s, size((s)-[:DEPENDS_ON]-()) as downstream_count RETURN 100 - (downstream_count * 5) as impact_score , namereq.service_name) impact_score result.single()[impact_score] # 加權(quán)計算總分 total_score ( code_score * 0.4 env_score * 0.35 impact_score * 0.25 ) # 返回結(jié)構(gòu)化結(jié)果供CI/CD流水線消費 return { total_score: round(total_score, 1), decision: ALLOW if total_score 85 else BLOCK, breakdown: { code_quality: code_score, environment_stability: round(env_score, 1), impact: round(impact_score, 1) } } # 在CI/CD流水線中調(diào)用 # curl -X POST http://risk-scorer:8000/score -d {service_name:order-service,git_commit:abc123,target_cluster:prod-us-west-1}參數(shù)說明blocker_violations是SonarQube的阻斷級漏洞PPT第43頁定義“每1個扣10分”kube_pod_status_phase的Prometheus查詢必須用[24h]窗口與PPT第44頁的“環(huán)境穩(wěn)定性評估周期”一致downstream_count * 5中的5是經(jīng)驗值PPT第45頁注明“中心度每增加1風險分扣5分上限扣50分”。這個評分服務(wù)部署后我們把它的/score端點接入Jenkins Pipelinestage(Risk Assessment) { steps { script { def scoreResp sh(script: curl -s http://risk-scorer:8000/score -d {\service_name\:\${SERVICE_NAME}\,\git_commit\:\${GIT_COMMIT}\,\target_cluster\:\${CLUSTER}\}, returnStdout: true) def scoreJson readJSON text: scoreResp if (scoreJson.decision BLOCK) { error Risk score ${scoreJson.total_score} 85. Deployment blocked. } } } }血淚經(jīng)驗第一次上線時我們把total_score 85寫成了 85導致85.0分的變更被拒絕——浮點數(shù)精度問題。后來改成 84.95并加了日志記錄“Score: ${scoreJson.total_score} - Decision: ${scoreJson.decision}”。PPT第48頁的“決策審計日志”要求必須記錄原始分項值不能只記總分。希望幫到你。本文還有配套的精品資源點擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
操逼操操操91| juliaann丝袜| 婷婷成人五月天| 91人精品妻入口| 午夜福利在线合集| 2025亚洲男人天堂| 亚洲色图激情小说| 99热成人| 91成人久久| 久久久久97| 在线观看 99热| 中文字幕88av在线| 五月天婷婷激情| 国产亚洲精品农村妇女| 中文字幕一区二区三区视频播放| 中文字幕丰满子伦无码专区在线视频最新 | 欧美一二在线| 色呦呦、国产精品| 偷拍欧美激情| 免费农村成人少妇人妻Aa一区二区视频| 干日本人少妇午夜寂寞影院| 国产精品无码av在线| 秋霞怕怕片| 91亚洲网站| 91狠狠狠| 超碰97国产欧美| #NAME?| 久久免费看高潮毛片韩国| 任你爽视频| 国产精品自在自拍视频| 91人妻做a观看视频| 免费在线看黄片av| 丝袜AV一区二区三区| 97这里有精品| 清纯唯美亚洲综合| 97日韩欧美| 上特色A在线| 天天情欲宗合网| 爱爱久久| 91国产丝袜白虎| 青青伊人这里只有精品| 干美女人妻| 国产精品第一页国产大屁股视频免费区i| 超碰天天操你比| 超碰夫妻97| 蘋果手機免費看成人Av| 国产午夜视频| 中国小夫妻勾搭露脸淫荡对白| 美欧老女人97| 97亚洲综合在线| 国产精品乱码久久| 久操网线| 婷婷久久五月天| 国产精品国产拍高清AV| 91大学精品激情戏| 麻豆久久久久久久久丝袜 | 亚洲色图日韩精品| 日韩无码服务区| 四虎免费视频| 欧美精品三区| 亚欧韩av| 日本一区二区三区欧美日韩中文字幕| 99re95| 欧美熟妇操操视频| 日韩三级av片| 无码人妻一区二区三区色欲aⅴ| 少妇3P性爱自拍| 久久久久久精品免费看A级| 操比国产| 人妻天堂综合网| 亚洲免费日韩在线一区二区| 后入式五六区| 99人妻碰碰碰久久久久禁片| 人人操人人操草草| 中文高清一区二区的| 久久久久ab| 亚洲男人天堂视频 | 99性爱| 色第一页| 蜜臀va69| 亚洲色图尤物视频| 五月丁香激情综合网| 无码人妻丰满熟妇奶水区毛片| 日韩不卡网操逼中文字幕日韩| 欧美色图99| 国产精品亚洲无码| 久久精彩视频| 青青草久久| 日本在线一二| 日韩本不卡视频在线观看| 免费AV中文网在线观看| 免费观看的av| 97操97干| 玖玖玖玖精品国产剧情| 国产suv精品一区二六| A级片日韩欧美国产欧美视频精选观看| 中文字幕一区二区三区高清| 四虎AV影视国产精品亚洲精品| 伊人在线大香蕉视频久久| 熟妇乱伦一区二区| 丝袜性亚洲| 欧美激情视频一区二区| 无色无码| 裸体美女久久久| 91中文字幕制服丝袜免费视频| 十八禁av无码免费网站APP| 久久99精品视频| 熟妇人妻一区二区三在线| 97资源久久| 中文字幕av乱伦| 91国产美女丝袜足交精品视频 | 丰满人妻一区二区三区四区| 亚洲成av人片色午夜乱码| 久久99精品九九久久久婷婷| 亚洲黄色a级片| 啊好爽受不了无码| 国产乱伦亚洲| 国产日韩中文字幕欧美| 黑人嘿嘿嘿超爽免费视频| 欧美色日本| 免费看片黄| 超碰日本97美女人妻人人玩人人爱| 久久熟女精品不卡一区| 国产原创剧情在线丝袜| 深夜激情| 欧美成人都市人妻| 综合色91| 久久久一热在线播放| 91亚洲综合在线| www.婷婷| 骚女天天综合网| 91美女丝袜诱惑视频| 91日产桃蜜| 日韩不卡a级视频专区| 麻豆国产第一| 成人网站 免费观看| 久久精品国产久精国产| 很很热性爱视频| 精品无码一区二区三区| 夂久色| 九九碰九九爱97超碰| 无码99| 黄色片A级一区二区三区| 亚洲日韩青青草色月| 久久 国产 无码| 神马久久久久久久久久久久| 激情专区综合| 国产一级高清免费观看| 亚洲激情天堂网| 无色无码| 中文字幕天堂在线| 欧洲综合色| 97色在线观看| 91原创在线观看| 亚洲精品自拍| 夜夜爽夜夜操| 久久久性爱视频| 淫荡少妇免费| 中文字幕第2页| 不卡码视频| 乱伦Av网| 熟妇乱伦一区二区| 毛片麻豆91糖心精品毛情片| 嗯啊啊啊轻点视频 | 东北操逼| 午夜天堂精品久久久久91| 国产一区二区二区按摩精品啪视频| 欧美综合制服在线| 懂色综合久久久| 国产99精品一区二区三区免费| 久久人妻少妇| a人欧美综合天堂麻豆| 亚洲色诱惑| 強姦亂倫a| 精品十八在线观看| 午夜福利一区二区三区四区五区色婷婷| 激情综合色| www.色吧5.com| 后入式五六区| 国产视频大全| 欧美天天综| 91超碰人人操| 91午夜无码| 最近二区三区视频大全| 大香蕉草草| 久久夜夜夜| 97这里都是精品| 九九热在线精品视频| 新久久AV| 中文字幕交换人妻| 国产精品网址| 日本性交操一区二区不卡系列| 色与欲影视天天看综合网| 久久一二三四不卡| 熟女欧美日韩综合婷婷| 在线97在线| 日本一二区免费| 日韩一级片| 91人妻尻屄视频| 久久色一区二区| 九九无码久久精品视频| 大香蕉伊在线久草麻豆天堂故事| 男人的天堂2018.| 五月天激情四射| 亚洲AV无码国产精品久久久久| 色色香蕉| 久久久久国产精品片区无码直播| 国产成人无码啪| 欧美gv在线观看| 欧美成年人性爱视频免费观看| 久久久亚洲熟妇熟女| 亚洲精品乱码久久久久久蜜桃麻豆| 青青草日韩免费观看高清在线| 蜜桃在线观看一区二区三区| 欧美国产一区二区三区麻豆传媒| 蜜臀99999| 性老妇一区二区三区| 免费网色网站| 九九九精品一区二区无码| 97在线青| 我要色综合网| 亚州免费啪啪视频| 亚洲欧美国产其他二区| 久久精品国产精品亚洲艾通辽熟妇 | 久操婷婷| 精品国产乱码久久久久久久久1| 亚洲欧美精品91| 91 亚洲 欧洲| 玖玖超碰熟| 久久久涩| 国产91影院| 思思热在线视频免费| 97超碰人人操人人操| 高清无码久操视频| 日韩不卡在线一区二区| 日本韩欧美在线播放a| 国产无马av| 一二三四免费视频| 日日夜夜青青草母狗| av草草在线电影| 国产精品日日摸天天碰| 亚洲做性| 狠狠操夜夜| 操逼网免费无码视频| 欧美视频一区二区三区| 国产无码精品久久久久久| 国产超碰AV在线精品| 久久九九视频九九视频| 亚洲熟妇图片| 欧美精品三区| 国产91 丝袜在线播放00-百度| 69av一区二区三区| 九九精品热| 75大香蕉| 成人性交午夜免费片| 男人的午夜天堂| 精品一区二区在线针对华人免费观看这里只有精品免费观看 | 欧美精品三区| 亚洲成熟国产精品美女| 亚州色交| 少妇熟女视频一二三区| 国产精品九九九| 精品一区二区成人| 日韩欧亚太美不卡| 亚洲高清视频在线免费观看| 国产精品无码AV网站| 午夜天天碰综合视频| 日本熟妇色熟妇在线视频播放| 99久草| 777AV电影| 日韩一级二级| JuliaAnnXXX888| 日日操免费视频| 婷婷色在线| 人人爽人人精品乱人伦AV| 大香蕉久久| 免费看欧美美女黄色大片| 色爱综合网欧美| 天天干夜夜鈤| 美女黄频a美女大全免费皮| 日韩一区二区熟女| 国产一级内射高清视频| 97国产精品国| 欧美懂色综合网| 午夜高清成人在线视频| 欧美第一页| 久综合国内精品自在自线| 欧美在线官网| 91精品人妻一区二区三区蜜臀| 国产精点久久久成人| 欧美 日韩 另类 亚洲| 欧美激情激情xxxx欧美专区| 熟女在线视频| 搡老女人911熟妇老熟女| 欧美成人精品A片免费一区99| 九9精品| 日韩亚洲国产视频| 亚洲Av噜噜一区二区三区妖精| 国产精品九九九| 五月天啪啪| 偷偷人人精品女女久久| 久草成人福利导航| 国产强奸无码乱伦| 欧亚日韩三区| 操操操日本的逼| 偷拍综合亚洲| av一区二区三区 中文| 超碰 国产熟女精品一区| 色婷婷激一区二区三区| 九九九九九九九九九九九蜜桃| 黑人操一区二区| 青青操视频在线| 在线播放一级无码视频| 亚洲国产亚洲天堂| www狠狠| 天天天干977| 久久婷婷色| 97超碰超碰| 欧洲中文字幕| 国产精品色片一区二区| 东京热AV男人的天堂| 五月丁香网站| 伊人丁香五月婷婷| 成年人免费观看网站| 国产欧美一区激情交| 不卡视频一区蜜桃视频| 91女网站| 日本日皮视频逼| 亚洲 欧美 第一页 | 97看操| 久久久久久久亚洲Av无码| 日韩特一级久久| www.夜夜操| 岛国黄片网站| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 国产精品第一页国产大屁股视频免费区i| 中文字幕 国产区| 超碰九7| 香蕉免费一区二区三区不读| 亚洲国产成人高清在线| 天天射天天操天天干天天吃2018| 另类专区加勒比| 青青操青娱乐| 大色综合网| 91精片| 搡老女人老91妇女熟女| 中文字幕 av v| 日韩在线观看中文字幕视频| 国产野战露脸在线播放| 欧美日韩资源| 久久久青草青青国产亚洲免观精品高清完整版_97久久综合区小说区图片区,国精品 | 国产欧美伊人| 精品少妇一区二区三区在线视频| 无码 黑人一区二区三区| 青草伊人网| 影音先锋一区二区在线资源| 97久久精品亚洲| 屁屁影院一区二区三区国产| 国产成人精品必看| 亚洲巨爆乳一区二区三区四季网| 中文乱码字幕观看视频| 日韩特一级久久| 亚热日本熟女| 污污污8888| 日韩精品高清资源在线| 欧洲色色| 欧洲熟妇xxXx欧美老妇裸体| 少妇人妻太紧太深av| 久久久四区| 亚州国产成人精品女人久久| 99精品伊人| 用力操死我| 69精品少妇一区二区三区蜜桃| 大伊香蕉在线视频免费| 先锋色眉乱伦资源| 99这里只有精品国产| 97超碰超碰| 中文字幕AV中出| 熟女久久久| 青青草日韩免费观看高清在线| 亚洲码和欧洲精品激情系列| xxx亚洲午夜天堂| 乱精品一区字幕二区| 国产成人无码久久精品| 狠狠综合网| 国产成人精品亚洲日本| 色婷婷小说| 久热大香蕉| 色五月综合网| 人妻少妇精品一区二区三区| 国产丝袜美女诱惑| 亚洲情色婷婷五月天| 97人肏| 99热97| 97青青操视频| 欧亚第一综合网| 精品国产一区二区三区久久久蜜臀 | 亚洲国产午夜真人一级片中文字幕精品黄网站 | AV天黑人| 亚洲综合在线第一页| 我想要 啊 啊 啊| 精品福利| A片A5445444| 久久久久久久久久久免费精品| 日韩性爱一级片| 亚洲国产成人7777| 国产精品一区午夜福利| 国产中文字幕曰本毛片| 日日干夜夜干| 日本中文字幕高跟| 久草毛片| 无码人妻一区二区三区色欲aⅴ | 久久骚| 国际精品久久久| 欧美 亚洲精品首页| 97国产超碰| 牛牛操视频逼| 国产人妻天天干精品| 亚洲激情AV| 欧美色图私拍91| 视频黄站| 国产粉嫩蜜臀av一区二区三区| 日韩操p| 手机在线人成免费视频| 七久久久| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 五月天综合| 操逼精品视频| 亚欧美色| 免费看久久久性性| 色九月综合| 色哟哟av| 欧美一级国产一级| 久久久久久久久久久久久久久性生活视频| 熟女网站最新| 99999精品| 国产精品自在线发布| 嗯啊不要在线| 后入福利| 亚州一区二区成人片免费| 五月丁香狠狠爱| 嫩草影院永久在线制服丝袜| 九九九九9999| 婷婷天堂站| 大香蕉中文aV在线| 久久精品久| 日韩少妇一区二区三区| 欧美一二在线| 在线视频亚洲无码| 99国产人成精品| 91热色| 先锋色眉乱伦资源| 啊嗯好大视频在线观看| 天天综合网在线观看| 午夜福利免费精品视频| 性爱欧美五月| 日本αv| 婷婷在线视频| 亚洲清纯综合| 国产日本久久免费精品| 久噜噜| 欧美激情性久久久久久| 国产无遮挡| 好吊色综合| 九九亚洲视频| 欧美操逼录像国产黄色国产| 日韩无码专区| 亚洲第一页色网| 欧美中文狠| 高清国产无码av| 精品人妻二区三区| 97免费在线视频| 熟女人妻久久中文字幕一二区| 超碰在线日韩一区| 亚洲免费看片| 亚洲色宗合| 操狠狠| 亚洲国产精品无码AV久久| 激情开心五月天| 天天操天天舔| 色爽爽文学| 成年人黄色| 9久超碰| 中国一级αV| 人妻夜夜爽天天爽麻豆三区网站| 亚洲精品国语在线播放| 夜夜狠狠躁日日躁色视频| 日韩免费在线观看不卡| 欧美色图成人网一区二区| 亚洲国产一区二区日韩专区| 4虎在线视频| 婷婷深爱五月| 国产精品久久久久久久久久久久久久吹| 裸体美女免费看网站青草| 超碰在线一区二区| 97在线欧洲| 亚洲一欧洲中文字幕在线 | 日韩一区二区高清在线观看的| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 操逼日韩无码| 欧美色人| 日日噜噜夜夜久久亚洲一区二区 | 国产不卡精品91| 人妻干天天| 99精品久久久久久| 日本三级韩国三级99| 久久成年片色大黄全免费网站| 欧美一二在线| 极品白嫩美女白浆成人福利在线看| 午夜啊啊| 婷婷精品国产一区二区三区日韩| 欧美劲爆视频一区二区| 久操免费观看| 日韩少妇在线视频| 殴美,日韩国产伦精品| 少妇无码av专区线| 久久久日本电影| 国产精品午夜成人福利| 美女黄频a美女大全免费皮| 日韩欧美日韩| 国产高清在线自在拍69| 久久天天性久久伊人| av午夜影院在线播放| 99久在线精品99re8蜜桃| 日日日啊啊啊| 丝袜视频网国产90| 伊人97色天使| 99精品热| 五月综合婷婷久久网站| 欧美日韩国产一区二区小黄片大全| 久久伦理视频久久大香蕉视频| av天堂影视中文在字幕在线中文 | 巨爆乳肉感一区二区三区竹菊影视| 97无码视频在线播放| 蜜臀在线网站| 午夜后入| 干b在线性社区| 综合熟女| 国产在线精品偷| 一区二区三区亚洲| 九九九久久久| 91美女在线| 天天天操天天天爱| 男人把坤坤插入女人的下体| 嗯啊不要啊啊在线观看视频| 丁香久久| 免费视频a级毛片免费视频| wwwxxx日本爽| 激情熟女12P| 男人的天堂2018| 综合色欧美| 久久99干一本高清| 亚洲中文字幕一区| 亚州大图综合色图| 日韩大香蕉精品在线视频| 麻豆天美传媒在线视频天堂| 香蕉一区二区三区在线视频| 野狼激情网| 熟妇在线视频一区二区| 艹我哪美一区无码| 男人天堂婷婷五月天校园春色| 99操| 91neishe| 亚洲中文字幕有码视频一区二区三区| 亚洲有码 欧美精品| 亚洲精品一区中文字幕乱码| 啊啊啊啊一区| 99国产精品人妻人伦| 超91综合网| 欧美另类色| 高清不卡国产| se,,,亚洲欧美| 国产精品久久久久亚洲av| 国产极品精品美女视频| 美国aaaaa一级黄片| 最新中文字幕在线亚洲| 五月天久久久| 亚洲欧洲小说图片视频| 人人污日韩一区二区| 欧美色一二三| 丰满熟妇大乳做爰| 超碰91在线| 一本色道久久天天射天天干| 亚洲欧洲日韩天堂av| 国产51色综合久久免费| 青娱乐日韩无码| 五月婷在线| 欧美一二三区四五区| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 天天看夜夜看日日干| 日欧操屄| 极品色www影院| 可以看的av| 精品人妻夜夜草| m欧洲一级午老| 91亚洲黄色网| av爱爱爱| 婷婷综合五月| 男人的天堂色偷偷青青草视频婷婷网| 碰人碰碰人人开房人肉| 欧美性色网| 2017人人操,人人摸| 欧美色综合影院| 四虎影视在线| 一区二区播放| 欧美性爱精品七区| 亚洲精品日韩国产欧美| 打av高清| 欧洲精品二区| 超碰成人公开| 青青草日逼视频| 超碰欧美97资源| www.亚洲黄色| 免费视频无码| 欧美高潮| 91丨九色丨国产丨人妻在线 | 高清无码一区二区三区| 屌色在线97视频| 夜夜青青无码影院| 亚洲国产成人精品999| 丁香九月激情| 色踪合AV| 色综合久久av| 夜夜操91744565| 亚洲九九视频| 精品一区二区综合熟妇| ′ !γ}丶。。久久精品欧美一区二区三区| 人妻少妇精品久久久| 亚洲中文字幕在现观看| 天天拍天天操| 色九色久| 99精品成人免费看| 男人网站婷婷| 免费?级毛片无码?∨蜜芽试看| 正在播放:深夜激情大战,自带黑丝袜全力输出骚穴 | 日本激情免费大片| 久久中出在线| 操逼无码操逼| 爆乳免费黄网站| 九九热九九| 五月天激情小说| 一本色道久久综合亚洲二区三区| 黄在线| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 日本大香蕉| 91久久免费视频互動交流| 欧美人妻精品| 免费a v| 野狼激情网| 日韩超碰97| 大香蕉亚洲中文| 99re黄| 天天做天天爱天天高潮| 另类欧美色| 人人乐大香蕉| 欧美综合网| 无码heyzo高清一区| 免费a v| 78久久久| 亚洲综合另类小说色区亚洲成av人片在www | 日韩国产不卡在线视频| 久久国模av| 午夜精品五区| 亚洲欧美综合网| 综合婷婷| 午夜性刺激视频免费观看| 性九九九九九九| AV无码久久久精品| 大香蕉男女超碰精品在线| 97视频免费播放| 青青草色插素人| 欧美综合色综合| 日韩精品一二三四| 国产一区二区三区导航| 亚洲成人碰碰| 精品免费视频国产一区| 超碰99热中文字幕| 国产精品一区二区三区,亚洲综合| 日本精品九九九| 欧美性爱五月天| 亚洲av噜噜噜噜噜噜| 岛国人妻少妇av在线观看| 精品亚洲黄色片 国产精品导航一区二区 | 天美av在线观看| 另类TS人妖一区二区三区| 亚洲精品一区二区免费在线观看| 国产亚洲精品玖玖玖在线观看| 欧美九九九| 爽爽爽免费视频| ?亚洲伊人伊成久久人综合网| 四虎在线视频| 精品一区二区三区四区女 | 天天影视之亚洲综合网| 中文字幕一区av| 免费观看性欧美一级| 亚洲脚交| 九九九九日本| 91精品久久久久久77777| 亚洲乱码精品一区二区| 超碰欧美97资源| 夜夜操91744565| 亚洲熟女av日韩熟女| 日韩无码极品| 色综九九九一区| 欧美九九99久久精品| 国产女生在线| 九九精品99| 亚洲男人天堂AV| 天天综合网亚洲综合网| 欧美 传媒 麻豆 日韩 偷拍| 高清在线偷拍自拍视频| 秋霞成人一级在线观看| 超碰97亚洲| 蜜桃午夜视频一区二区| 日日AV加勒比| 午夜精品99久久久久传媒| 国产精品成人蜜臀AV在线| 1769一区| 久久人| 伊人午夜福利视频| 久久久久亚洲精品| 亚洲另类综合欧美| 91干熟女| 亚洲无吗在线视频| 自拍偷拍草一草| 99999re| 欧美日韩一二三| 青草视频人妻在线观看| 欧美97日韩| 少妇蜜汁| 97天天搞在线| 五月激情在线| 色五月网址| 偷窥自拍亚洲天堂网爆| 欧美性巨大╳╳╳╳╳高跟鞋| 日本中文字幕不卡视频| 夜夜嗨视频| 先锋女优在线观看视频| 精品玖九九久| 青青草公开在线免费不卡视频| 国产AB视频| 97精品网站| 熟女91网| 亚洲熟女乱综合一区二区在线-...亚洲国产日韩欧美一区二区三区,久久久久久精 | 久久精品男人的天堂| 日本中文字幕一区| 男人的天堂无码| 激情四射婷婷六月天| 91碰碰| 亚州国产成人精品女人久久 | 岛国黄片网站| 操操逼视频| 日本欧美一区二区三区视频麻豆| 级做a爱无码性色永久免费| 日本韩国国产精品一区| 亚洲电影中字一区二区| 翔田千里无码中出中文字幕| 老熟女搡BBBB搡BBBB视频| 特级特黄一级毛片免费| 做爱A级亚欧| 久久性爱大全| 婷婷色婷婷| 国产极品999| 欧美aⅴ99久久黑人专区| 欧洲亚洲天堂精品| 亚洲欧美天| 97亚洲在线| 欧美成人性爱视频在线播放| 无码操逼视频一下| 色呦呦呦在线观看视频| 91超级碰碰碰| 国产性刺激| 久久久男人的天堂| 日日夜夜骑| 乱伦熟女论坛| 久操视频资源站公开| 亚洲综合在线视频| 欧美色图亚洲特色| 蜜臀久久99'精品久久久| 清纯唯美综合| 精品国产91内射久久| 国产亚州精品美女久久久免费| 久9热| 激情图片亚洲色图| 91国产伊人大香蕉| 九九九色| 综合影视国产无码| 淫淫总合网| 日韩av色图| 夜夜欧美| 377p欧洲日本亚洲大胆| 久久9视频| 中文字幕55555| 福利五区| 中文字幕日韩精品久久| 亚洲操逼网| 日本人妻天堂网站在线播放| 天天欧美| 日韩亚洲国产视频| 翘臀vidoes| 无卡一区=区| 麻豆国产97在线| 欧美精品999| 1024手机看片欧美日韩| 伊人麻豆传媒| 人人操,操人人| 在线综合 亚洲 欧美中文字幕 | 久久精视频美日韩在线视频| 久久手机好看网站| 中文字幕熟女人妻丝袜丝| 亚洲97成人在线观看| 开心五月激情网| 亚精品无码毛片一区二区三区| 亚洲精品九九九| 日亚韩精品视频二区三| 九九夜精品九九在线| 丝袜美腿av女优在线| 日韩AV一起草| 91超碰碰在线| A级片日韩欧美国产欧美视频精选观看| www.yw尤物| 国产熟女高潮一区二区三区| 国产精品毛片?v一区二区三区| 美女尤物福利视频| 91亚洲网站| av天堂5| 日本一久是| 日本人妻中文字幕精品| 美女露胸露屁股| 偷拍盗拍亚洲色图图片| 激情丁香婷婷| 视频在线97| 精品一二三区久久AAA片| 91精品国久久久久久无码| 翔田千里无码一区| 亚洲丝袜色图| 爱妃国产亚洲视频中文字幕| 男人亚洲91首页在线| 人妻蜜桃臀| 在线国产探花| 欧美激情 一区| aaa一级黄片| 亚洲 欧美 日韩另类 麻豆| 欧美久久伊人| 麻豆区久久久久亚| 色综合尤物| 国产农村妇女毛片精品久久| 在线视频日韩欧美国产| 国内外激情在线| 婷婷五月天AV| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区 | 人妻天天爽夜夜爽爽| 在线综合网| 国产夜夜艹| 国产精品毛片?v一区二区三区 | 人妻喷水| 996热| 天操天操夜操夜月操月年年操操| 秋霞曰韩R级| 欧美色综合网| 东北黄色电影| 2017人人操,人人摸| 国产性爱欧美性爱在线| 久久美女福利是上海美女| 天天爱天天操| 国产13区| 久久精品国产亚洲AV无码做| 夜夜操夜夜高潮夜夜爽国产精品区| 日本肉体xxxx裸交| 夜色91| 麻豆一区二区三区精品| 亚洲av淫乱| 九九热re99re6在线精品| 五月黑AⅤ| 无码人妻精品一区二区中文| 国产精品色约约| 999在线电影香蕉| 国产精品无码成人精品| 国产精品乱码久久久、久久| 日韩精品一二三四| AV在线性爱| 亚洲狠狠入| 国产免费大片| 色乱二区| 日韩免费a级毛片无码a∨| 中文字幕加勒比海高清无码免费视频| 91伊人久| 极品少妇久久久久| 91在线免费观看处女| 吖在线不卡一区二区国产剧情| 久久9免费视频| 久九干| 色欲日韩欧美在线一区| 中英熟女操女| 中文字幕av一区二区三区人妻少妇| 亚洲综合97中文网| xxx0国产在线播放| 久操精品| 懂色av中文字幕一区二区三区天美| 日韩天美| 天天干天天操天天干天天操| 亚洲色人| 亚洲欧美内射| 精品一区二区三区四区女| 亚洲欧美大| 亚洲美女自拍偷拍视频| 亚洲性爱成人| 91色花堂| 久久9免费视频| 啊啊啊啊啊好大好舒服想要| 大香蕉亚洲中文| 人、人、摸,人、人、草| 18禁止看精品中文字幕| 国色综合天| 蜜桃臀一区二区aV| 麻豆国产第一| 麻豆区99999| 久操大香蕉手机视频在线看| 免费A V在线播放| 久久久亚洲Av| 国产一区二区成人av在线播放| 91精品导航| 天堂精品| 嗯嗯啊啊日韩精品| 熟女欧美日韩综合婷婷| 久久久久久大| 六六久久日韩不卡| 激情久久久| 亚洲超碰在线| 无套内射性感少妇视频| 中日韩熟女| 日本高清_区二区三区| 一级黄色视频网| 天天干天天舔| 无码人妻精品一区二区三区99不卡 | 国产成人拍国产亚洲精品| 久久精品店| 久久亚洲欧美一区二区三区-亚洲国产精品第一区二区 | 综合影院永久入口国产| 中文字幕一区二区无码成人| 超碰在线1234区| www. 男人天堂成人在线| 一个人在线看的黄色电影网站| 天天综合~91入口| 97久久精品亚洲| 精品一区二区啪啪啪| 五月综合久久| 理论久久婷婷网 8| 久久久久久性爱片| 亚洲乱色视频一区、二区在线| 在线天堂999| 久草精品国产蜜臀| 色麻豆AV| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 一级二级在线观看| 国内毛片欧美香蕉精品| 日韩 国产 欧美自拍| 久久精品国产99精品亚洲蜜...| 精品人妻1区| 夜夜影视四色| 国内三级自拍小视频在线观看 | 夜夜騷av、一區二區| 日日A∨| 天天插天天操天天摸天天射天天看| 久久伦理视频久久大香蕉视频| av线电影| 91n处女在线观看| 91骚熟女| 国产精品 久久久精品一牛| 日本欧美一区二区三区免费| 在线国产一区二区av| 91丨九色丨大屁股| 中文乱码99| 色爽——AV| 在线欧美亚洲| 国产精品一区二区亚洲人成毛片 | 久久香蕉超碰97国产精品 | 国产 热久久久久国产精品| 国产精品久久久久综合| 啊啊啊啊嗯嗯嗯用力好爽 | 亚洲欧洲无码97久久精品| 人妻内射一区二区在线视频| 久久这里只精品| 青娱乐福利99| www狠狠| 日本天天人人狠狠在线日美女| 嗯嗯嗯啊啊啊操的我好爽| 91五月天| 久久久999国产精品| 国产亚洲深夜激情| 综合激情婷婷| 97久久久精品| 久久婷婷成人综合色怡春院| 一级片视频啪啪| 黄片免费久久久久久久| 理论久久婷婷网 8| 久久久内射良家| 男人女人18禁片免费看网站| 色爱国产| 97在线青| 国产精品久久久| 国产精品免费视频人成| 91亚州欧美| 久久久不卡| 亚洲黄色a级片| 在线天堂999| 97超碰精品图片| 懂色av色欲av蜜臀av| 男人的天堂在线有码| 免费男人的天堂| 久操网视频| 亚洲人在线成线成人| 日韩97在线| 免费的黄片wwwwww| 亚洲91网站| AV乱伦专区| 久操B网| 干B网| 国产精品岛国片在线观看| 亚洲揄拍网| 欧美在线永久天堂| 人妻夜夜爽天天爽麻豆三区网站 | 久久发布国产伦子伦精品| 丝袜美腿91| 青娱乐亚洲自拍| 成人熟女视频一区二区三区| 色噜噜国产精品视频一区二区| www成人啪啪18秘 免费| 欧美大色交| 亚洲制服aⅴ中文字幕| 磁力99AV| 黑人精品XXX一区一二区| 日韩乱码Av| 天天日天天看| 五月婷婷激情| 风韵犹存大大大大香蕉| 亚洲五月婷| 欧美淫乱视频| 国产小黄片在线免费观看 | 亚洲无码免费看| 91久久堂| 亚洲 日本 国产 综合| 射丝袜高跟鞋99| 婷婷五月天激情四射| 精品人妻伦一二三区久久| 午夜欧美精品久久久| 五月丁香综合| 色臀av| 人妻久热在线| 亚洲最新Av| 日本啊啊啊啊啊视频| A 在线网址| 人妻激情在线视频| 国产情侣自拍在线播放| 大香蕉性欧美| 男人天堂婷婷五月天校园春色| 婷婷五月天激情四射| 午夜久久一区二区无码中出| 无码久久国产 | 91这里只有精品| 欧美综合色站| 大香蕉黄色一级片免费看| 亚洲精品 欧美精品| 欧美一级做a爰片免费视频| 农村少妇久久久久久久| 91狠婷| 可以免费看黄片的视频| 日韩不卡码| 日韩av不卡在线观看| 超碰吊日色| 很黄很污的免费网站| 97精品熟女少妇一区| 舔人妻中文免费视频| 69超碰综合| 亚洲精品国产无码高清| 中文字幕免费看| 亚洲少妇喷视频看| 久久 国产 无码| 亚州国产成人精品女人久久 | 欧成人精品一区二区三区| 夜夜狼人妻| 天天天天天天天天天天干美女| 亚洲色婷婷综合久久久久中文| 国产精品一区二区亚洲人成毛片| 中文字幕第2页| 中文字幕人妻丝袜| 性饥渴少妇av无码毛片| 97超碰人操| 久久久久人妻| 91影库| 97国产|免费| 亚洲不卡av在线| 五月丁香社区婷婷日韩欧美精品影院 | 夜夜骑天天燥| 国产刺激视频| 强奸乱伦大香蕉| 偷拍 亚洲 欧美| 天天影视网色欲色香| 97舔舔| A片三级无码| 人人弄人人摸| 91精品操美女| 熟女天天干| 九九热精品| 国产精品嫩草影院免费| 欧美双插| 亚州Av天美传媒| 激情亚洲天堂| julia高潮后不停追击中出| 亚洲AV秘 精品久久老牛影视| 亚洲图片激情小说| 亚洲风情综合网| 久久爽爽精品| 爱爱动态120秒| av国产无码| 亚洲天堂AV在线播放| 欧洲在线性爱视频| 亚洲欧美伦综合| 大干人妻| 亚洲日韩东京热一区| 国产乱婷婷精品二区三区| 熟女视频久久| 中文字幕一区电影在线观看| 亚洲av青草久久一区二区| 九九热只有精品| 97资源站久久| 日日摸日日碰| 色天堂综合| 吉田爱美AV在线| 99久久久无码| 亚洲色图91欧美日韩| 91chinese在线| 免费人成?大片在线播放| 亚洲h片在线免费观看| a片久久久久久久久久久久 | 好爽免费视频| 国产精品农村妇女| 深喉吞精| 亚洲做性| 日韩中文字幕精品一二三事国产精品| 欧美日韩国产男人| 91精品丝袜久久久久久无码人妻| 99久久无色码| 91人妻丝袜无码| 精品无码一区二区| 亚洲精品一区二区三区新线路| 九九久久九九久久| 日本三级中国三级99人妇网站| 婷婷九月| 乱精品一区字幕二区| 九九色精品| 99视频内射三四| 97精品综合| 嗯啊不要在线观看嗯啊| 日本欧美韩国日产片片在线看免| 亚洲激情网一二三四区| 一本一道人妻久久一区二区三区| 日韩免费人妻色情网站| 日产国产精品中文久久婷婷| 色九月综合|