99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

K8s集群架構(gòu)到Deployment滾動更新與Pod配額排障課件

K8s集群架構(gòu)到Deployment滾動更新與Pod配額排障課件 簡介面向 Kubernetes 初學者與云原生運維人員的這套課件圍繞集群架構(gòu)、核心對象和日常管理展開幫助建立系統(tǒng)化的 k8s 知識框架。資源包為 1 個 pptx 文件約 1.25MB篇幅集中便于按章節(jié)瀏覽和課堂演示。內(nèi)容先說明 apiserver、kubelet、kube-proxy 等組件職責再梳理 Pod、Controllers、Service、Label、Namespace 等對象。結(jié)合 kubectl 命令與 YAML 清單展示集群狀態(tài)查看、資源監(jiān)控、日志排查并串聯(lián) Deployment 的創(chuàng)建、發(fā)布、升級、擴縮容和回滾流程同時延伸調(diào)度、存儲與集群安全。目前已有 2191 人學習適合入門梳理與面試前復盤。1. 一份把 K8s 從概念講到配額邊界的課件適合誰啃剛拿到 kubeconfig 的人最常遇到的問題不是 YAML 縮進寫錯而是 Pod 起不來時只會反復kubectl get pods刷新說不清 apiserver、etcd、kubelet 各自卡在鏈路哪一段。這份 K8s 課件針對的正是這個薄弱點從集群架構(gòu)與組件職責入手接著是監(jiān)控與日志、應(yīng)用生命周期管理、調(diào)度、存儲、集群安全六塊內(nèi)容按「先知道誰在干活再知道怎么讓它干活」的順序排布。它不適合已經(jīng)能順手寫 Operator 的人但對剛接手集群、需要獨立把一個 Deployment 從創(chuàng)建推到升級再回滾的運維和后端更合適。下面我按自己復盤的順序拆開重心放在命令背后的參數(shù)含義和幾個容易出錯的邊界上。2. 集群架構(gòu)拆開看apiserver、etcd、kubelet 各自守哪一段2.1 控制面四個組件的職責邊界很多人把控制面當成一個整體其實它內(nèi)部的分工很明確邊界一旦搞混排查方向就會偏。kube-apiserver 是集群唯一入口所有組件彼此不直接通信只跟 apiserver 通信apiserver 也是唯一能讀寫 etcd 的進程。一個請求進來要過三道關(guān)認證證書、Token 或 ServiceAccount、鑒權(quán)RBAC 規(guī)則、準入控制各種 Admission 插件全過了才落盤。這套設(shè)計的好處是審計點集中壞處是 apiserver 一旦不可用kubectl全線報錯但已經(jīng)在跑的 Pod 不受影響因為 kubelet 還在按本地緩存的期望狀態(tài)干活。kube-controller-manager 是一堆控制器的集合體Deployment、ReplicaSet、Node、Endpoint、ServiceAccount 各有一個控制器在跑。每個控制器本質(zhì)是個死循環(huán)讀期望狀態(tài)spec讀實際狀態(tài)status算差值發(fā)指令。這里有個容易被忽略的嵌套關(guān)系Deployment 控制器并不直接管 Pod它管的是 ReplicaSetReplicaSet 再管 Pod。正因為老版本的 ReplicaSet 會被保留并縮到 0 而不是刪掉回滾才有歷史可退。kube-scheduler 只做一件事給新創(chuàng)建、還沒綁定節(jié)點的 Pod 選一個 Node然后寫一個 Binding 對象把spec.nodeName填上。它不負責把容器啟動起來啟動是 kubelet 的活。調(diào)度分兩階段Filter 先過濾掉不滿足條件的節(jié)點資源不夠、污點不匹配、端口沖突、親和性不符Score 再對剩下的節(jié)點打分。所以看到 Pod 處于 Pending 且 Events 里寫著FailedScheduling問題一定在調(diào)度器這一側(cè)不用去翻容器日志。etcd 是分布式鍵值存儲默認監(jiān)聽 2379/2380正常配置下只允許 apiserver 訪問。集群里所有對象狀態(tài)都在它里面某種意義上刪掉 etcd 數(shù)據(jù)目錄等于刪掉整個集群。組件位置核心職責掛掉后的典型表現(xiàn)kube-apiserver控制面唯一入口認證鑒權(quán)準入讀寫 etcdkubectl 全部報錯已運行 Pod 不受影響kube-controller-manager控制面控制器循環(huán)把實際狀態(tài)拉向期望狀態(tài)副本數(shù)不收斂Service 沒有 Endpointskube-scheduler控制面為新 Pod 選擇節(jié)點并綁定新 Pod 一直 Pendingetcd控制面保存全部集群狀態(tài)apiserver 起不來集群事實性丟失kubelet節(jié)點管理本機 Pod 生命周期該節(jié)點上的 Pod 狀態(tài)不再更新kube-proxy節(jié)點維護 Service 的四層轉(zhuǎn)發(fā)規(guī)則Service 通但后端訪問不到2.2 節(jié)點側(cè)kubelet 和 kube-proxy 不是一回事kubelet 是節(jié)點上的代理它做的是向 apiserver 注冊節(jié)點、watch 到綁定給自己的 Pod、通過 CRI 調(diào)用容器運行時創(chuàng)建容器、掛載數(shù)據(jù)卷、拉取 Secret 和 ConfigMap、執(zhí)行存活與就緒探針、定時上報節(jié)點和 Pod 狀態(tài)。kubelet 把每個 Pod 翻譯成一組容器操作這個翻譯過程出錯Pod 就卡在 ContainerCreating 或者一直重啟。kube-proxy 完全不參與容器創(chuàng)建它 watch Service 和 Endpoints 的變化在節(jié)點上寫 iptables 或 ipvs 規(guī)則實現(xiàn)四層負載均衡。區(qū)分方法很簡單Pod 起不來看 kubelet 和容器運行時Pod 起來了但 Service 訪問不通先看 Endpoints 有沒有后端再看 kube-proxy 的規(guī)則。2.3 用幾條命令把組件狀態(tài)驗證一遍課件里給了kubectl cluster-info但單靠這一條信息量太少。我一般按下面這個順序過一遍每條命令看什么、返回什么算正常心里要有數(shù)。# 集群入口信息apiserver 地址和集群 DNS 服務(wù)地址 kubectl cluster-info # 控制面組件是否都是 Running以及各自落在哪個節(jié)點 kubectl get pods -n kube-system -o wide # 直接打 apiserver 的健康端點返回 ok 說明 apiserver 自身活著 kubectl get --raw /healthz # 看單個節(jié)點的容量、已分配資源、污點和最近事件 kubectl describe node node-name第一條命令的返回值里如果 DNS 那行是10.96.0.10:53這類地址說明集群服務(wù)網(wǎng)段正常。第二條要重點看kube-controller-manager、kube-scheduler、etcd這幾個靜態(tài) Pod 的 RESTARTS 次數(shù)短時間反復重啟通常意味著證書過期或者磁盤壓力。第三條--raw是直接向 apiserver 發(fā)原始請求繞開 kubectl 的客戶端邏輯用來判斷「是 apiserver 掛了還是 kubectl 配置錯了」特別快。注意網(wǎng)上很多老教程會寫kubectl get componentstatuses這個接口在較新版本里已經(jīng)廢棄輸出的警告比內(nèi)容還長。用kubectl get --raw /healthz配合kubectl get pods -n kube-system替代更靠譜也不用記一堆縮寫。2.4 etcd 快照唯一的后悔藥集群層面最該養(yǎng)成的習慣是給 etcd 做快照。誤刪一個 Namespace 會連帶刪掉里面所有對象控制器不會幫你恢復因為對它來說那就是期望狀態(tài)變了。# 在控制面節(jié)點執(zhí)行證書路徑按實際安裝位置修改 ETCDCTL_API3 etcdctl \ --endpointshttps://127.0.0.1:2379 \ --cacert/etc/kubernetes/pki/etcd/ca.crt \ --cert/etc/kubernetes/pki/etcd/server.crt \ --key/etc/kubernetes/pki/etcd/server.key \ snapshot save /var/backups/etcd-$(date %F-%H%M).db # 校驗快照完整性輸出里 hash 和 revision 都要有值 etcdctl snapshot status /var/backups/etcd-20240101-1200.db --write-outtable--endpoints指向本機 etcd 客戶端端口三個證書分別對應(yīng) CA、客戶端證書和私鑰缺一個都會報context deadline exceeded這個報錯很有迷惑性看起來像網(wǎng)絡(luò)不通實際多數(shù)是證書路徑寫錯。snapshot save是熱備份不需要停 etcd但恢復時必須停掉 apiserver 和 etcd 再執(zhí)行snapshot restore恢復動作不要在業(yè)務(wù)時段做。備份文件放本地磁盤意義有限節(jié)點掛了就一起沒了我一般會再同步到集群外的存儲。3. 從 kubectl 到 YAML把一個 Deployment 推到回滾的完整閉環(huán)3.1 命令式創(chuàng)建先用兩條命令跑通初學階段別急著寫 YAML先用命令式把對象關(guān)系跑通看到 Deployment、ReplicaSet、Pod 三層是怎么長出來的比背字段有用得多。# 創(chuàng)建一個 Deployment鏡像用內(nèi)網(wǎng)倉庫地址 kubectl create deployment web --imageregistry.local/demo/java-web:1.0 # 查看 Deployment 和 Pod-o wide 能看到 Pod 落在哪個節(jié)點 kubectl get deploy,pods -o wide # 暴露服務(wù)Service 80 端口轉(zhuǎn)發(fā)到容器 8080 kubectl expose deployment web \ --port80 \ --target-port8080 \ --typeNodePort \ --nameweb kubectl get svc web--port是 Service 自身監(jiān)聽的端口集群內(nèi)其他 Pod 通過web:80訪問--target-port是容器實際監(jiān)聽的端口寫錯這個是最常見的 502 來源--typeNodePort會在 30000–32767 區(qū)間隨機分配一個節(jié)點端口--name不寫的話默認與 Deployment 同名。創(chuàng)建完立刻kubectl get rs會看到一個名字形如web-7d9f8c6b5的 ReplicaSetPod 名字再在后面加隨機后綴。這個三層結(jié)構(gòu)不是冗余設(shè)計Deployment 負責版本和滾動策略ReplicaSet 負責某一版本的副本數(shù)Pod 才是真正被調(diào)度的單元。理解了這一層后面rollout history為什么能列出多條記錄就順理成章了。3.2 YAML 逐字段拆apiVersion 到 containers命令式適合驗證生產(chǎn)必須落到 YAML否則改一個副本數(shù)都要記參數(shù)。下面這份是課件里 Deployment 的加厚版把滾動更新策略和資源配額一起帶上。apiVersion: apps/v1 kind: Deployment metadata: name: nginx-deployment namespace: default labels: app: nginx spec: replicas: 3 selector: matchLabels: app: nginx # 必須與 template.metadata.labels 完全匹配 strategy: type: RollingUpdate rollingUpdate: maxSurge: 1 # 滾動時最多超出期望副本數(shù) 1 個 maxUnavailable: 0 # 滾動時不允許有副本不可用 revisionHistoryLimit: 10 template: metadata: labels: app: nginx spec: containers: - name: nginx image: nginx:1.25 imagePullPolicy: IfNotPresent ports: - containerPort: 80 resources: requests: cpu: 250m memory: 64Mi limits: cpu: 500m memory: 128MiapiVersion和kind是配對的寫錯組合會直接報no matches for kind不確定時用kubectl api-resources | grep deployment查當前集群支持哪個版本。selector.matchLabels與template.metadata.labels不匹配時 apply 會被拒絕報錯信息是selector does not match template labels這條報錯很直白照著改就行。replicas是期望副本數(shù)但控制器實際收斂需要幾秒剛 apply 完立刻查可能只有 1 個 Pod屬于正?,F(xiàn)象。revisionHistoryLimit默認就是 10意味著最多保留 10 個歷史 ReplicaSet調(diào)小能省 etcd 空間但會讓可回滾的版本變少。3.3 升級、擴縮容與回滾的操作序列# 升級鏡像改的是 Pod 模板會觸發(fā)滾動更新 kubectl set image deployment/web nginxnginx:1.25 # 阻塞等待滾動完成超時退出碼非 0適合放進腳本 kubectl rollout status deployment/web --timeout120s # 查看歷史版本REVISION 列就是回滾時要用的編號 kubectl rollout history deployment/web # 回到指定版本 kubectl rollout undo deployment/web --to-revision2 # 手動擴縮容 kubectl scale deployment web --replicas10 # 配置自動擴縮容CPU 超過 80% 時最多擴到 15 個 kubectl autoscale deployment web --min10 --max15 --cpu-percent80rollout status是我最推薦放進 CI 的一條命令它比sleep 30靠譜得多滾動失敗時會立刻返回而不是傻等。--to-revision有一個容易踩的點回滾本身會產(chǎn)生一個新的 revision 編號比如當前是 3回滾到 2 之后歷史里會多出一個 4內(nèi)容與 2 一致。所以腳本里寫死 revision 號遲早出問題更穩(wěn)的做法是記鏡像 tag。scale和autoscale同時存在會打架。HPA 接管之后會周期性改寫spec.replicas手動 scale 上去的數(shù)字過一會兒就被覆蓋回來排查時看到副本數(shù)自己變先查kubectl get hpa有沒有對應(yīng)的規(guī)則。3.4 滾動更新參數(shù)maxSurge 與 maxUnavailable 的實際影響這兩個參數(shù)決定了滾動更新的節(jié)奏也是「升級時服務(wù)到底會不會抖」的直接原因。maxSurge: 1加maxUnavailable: 0是最保守的組合先起一個新 Pod等它就緒再停一個舊的全程副本數(shù)只多不少。代價是需要集群有富余資源如果節(jié)點資源剛好卡滿新 Pod 調(diào)度不上去滾動就會永遠停在中間狀態(tài)。maxSurge: 0加maxUnavailable: 1則相反先停舊的再起新的省資源但會短暫少一個副本對流量敏感的服務(wù)不要這么配。兩者不能同時為 0否則滾動無法推進apply 時會直接被拒。滾動卡住的排查路徑很固定先kubectl rollout status看卡在哪一步再kubectl describe rs 新 RS 名看 Events。如果是FailedScheduling就是資源或親和性問題如果是Readiness probe failed就是應(yīng)用起來了但沒準備好接收流量這時候要去查就緒探針的路徑和端口而不是懷疑鏡像。4. Pod 為什么不是容器的簡單包裝infra container、拉取策略與配額4.1 共享網(wǎng)絡(luò)是怎么做到的Pod 是 K8s 的最小調(diào)度單元但它本身是個邏輯概念節(jié)點上并沒有一個叫 Pod 的東西。實現(xiàn)方式是每個 Pod 先起一個極小的 infra container也叫 pause 容器由它持有網(wǎng)絡(luò)命名空間然后把業(yè)務(wù)容器 join 進這個命名空間。于是同一 Pod 內(nèi)的容器看到的網(wǎng)卡、IP、路由表完全一致可以直接用127.0.0.1通信。這解釋了幾個日?,F(xiàn)象同 Pod 內(nèi)容器不能監(jiān)聽同一個端口因為共享同一張網(wǎng)卡nginx 加 php-fpm 這種組合放同一個 Pod 里nginx 直接fastcgi_pass 127.0.0.1:9000就行不用配 ServicePod 重建后 IP 會變因為它拿到的是新的網(wǎng)絡(luò)命名空間。存儲共享走的是另一條路靠 volume 掛載而不是命名空間。多個容器把同一個 emptyDir 掛到各自路徑下就能看到同樣的文件。課件里那個 nginx 日志的例子就是這個思路把容器內(nèi)的日志目錄掛到宿主機方便采集。apiVersion: v1 kind: Pod metadata: name: my-pod spec: containers: - name: web image: registry.local/demo/nginx-php:1.0 volumeMounts: - name: logs mountPath: /usr/local/nginx/logs volumes: - name: logs hostPath: path: /tmp/logs type: DirectoryOrCreatetype: DirectoryOrCreate比Directory安全后者要求宿主機目錄必須已存在不存在時 Pod 會卡在 ContainerCreating 并報FailedMount。這一點在批量部署時格外明顯十臺節(jié)點里只要有一臺沒建目錄那臺機器上的 Pod 就永遠起不來。4.2 imagePullPolicy 三個值與 :latest 的隱式規(guī)則三個取值的含義分別是IfNotPresent本地沒有才拉Always每次創(chuàng)建都拉Never只用手動導入的鏡像。真正需要記住的是默認值規(guī)則它跟標簽有關(guān)而不是固定的當鏡像標簽是latest或者干脆不寫標簽時默認是Always寫了具體標簽時默認是IfNotPresent。所以生產(chǎn)環(huán)境用latest有兩個隱患一是每次 Pod 重建都要打倉庫倉庫抖動就直接ImagePullBackOff二是同一個標簽對應(yīng)的鏡像內(nèi)容可能已經(jīng)變了回滾時你以為回到了舊版本實際拉的是新內(nèi)容。我的做法是標簽寫死到小版本重要服務(wù)用 digest 固定形如nginxsha256:...這樣鏡像內(nèi)容不可變回滾才有確定性。4.3 requests 與 limitsCPU 單位、OOMKilled 與 QoS 分類這兩個字段經(jīng)常被混著寫其實職責完全不同。requests是調(diào)度依據(jù)調(diào)度器按它計算節(jié)點還剩多少可分配資源limits是運行時上限由容器運行時強制執(zhí)行。CPU 超過 limits 會被節(jié)流表現(xiàn)為響應(yīng)變慢但進程還在內(nèi)存超過 limits 會直接觸發(fā) OOMKilled容器被殺掉重啟。這個差異決定了排查方向CPU 問題看監(jiān)控里的 throttling 指標內(nèi)存問題看kubectl describe pod里的Last State: Terminated, Reason: OOMKilled。單位方面CPU 的m是千分之一核250m就是 0.25 核1000m等于 1。內(nèi)存的Mi、Gi是二進制單位1024 進制M、G是十進制兩者差 4.8% 左右配額算得緊的時候這點差異會變成事故。# 查看 Pod 的 QoS 等級 kubectl get pod web-7d9f8c6b5-abcde -o jsonpath{.status.qosClass} # 查看容器上次退出的原因OOMKilled 會在這里體現(xiàn) kubectl describe pod web-7d9f8c6b5-abcde | grep -A3 Last StateQoS 分三檔所有容器都設(shè)置了 requests 且等于 limits 是 Guaranteed部分設(shè)置是 Burstable一個都沒設(shè)是 BestEffort。節(jié)點資源緊張觸發(fā)驅(qū)逐時順序是 BestEffort 優(yōu)先被趕走Burstable 次之Guaranteed 最后。所以核心服務(wù)把 requests 和 limits 設(shè)成相等不只是為了穩(wěn)定也是為了在驅(qū)逐排序里靠后。不設(shè) requests 的后果比想象中嚴重。調(diào)度器會認為這個 Pod 不需要資源把它塞到已經(jīng)快滿的節(jié)點上實際跑起來內(nèi)存一漲節(jié)點整體進入壓力狀態(tài)最后被驅(qū)逐的可能是隔壁那個規(guī)規(guī)矩矩設(shè)了配額的服務(wù)。這就是為什么我堅持新服務(wù)上線前先把 requests 填上哪怕估值不準也比空著強。4.4 私有倉庫拉取imagePullSecrets 的創(chuàng)建與掛載內(nèi)網(wǎng)倉庫基本都要認證報錯表現(xiàn)為ErrImagePull或ImagePullBackOffdescribe的 Events 里會明確寫no basic auth credentials或者unauthorized。# 創(chuàng)建 docker-registry 類型的 Secret kubectl create secret docker-registry regcred \ --docker-serverregistry.local \ --docker-usernamedevops \ --docker-password密碼 \ --docker-emaildevexample.com # 掛到命名空間的默認 ServiceAccount 上該空間內(nèi) Pod 自動繼承 kubectl patch serviceaccount default \ -p {imagePullSecrets:[{name:regcred}]}掛載位置有兩種選擇。寫進 Pod 的spec.imagePullSecrets只對當前 Pod 生效適合跨團隊共享集群但倉庫權(quán)限不同的場景patch 到 ServiceAccount 上則整個命名空間生效省事但權(quán)限范圍大。密碼里有特殊字符時記得用單引號包住$和!在雙引號里會被 shell 展開這個坑我在不同環(huán)境里見過好幾次。5. 監(jiān)控與日志排查kubectl top 不出數(shù)、日志抓不到的五個坑5.1 metrics-server 的數(shù)據(jù)從哪來kubectl top背后依賴的是 metrics-server它本身不采集數(shù)據(jù)而是定期向每個節(jié)點的 kubelet 請求資源用量kubelet 再從 cAdvisor 拿容器級指標。metrics-server 把結(jié)果聚合成 Metrics API通過 APIService 注冊到 apiserver 上kubectl 和 HPA 都是從這條路讀數(shù)據(jù)。這個鏈路決定了排查順序先看 APIService 有沒有注冊成功再看 metrics-server Pod 是否健康最后看它能不能連通 kubelet 的 10250 端口。# APIService 的 AVAILABLE 必須是 True kubectl get apiservice v1beta1.metrics.k8s.io -o wide # 看節(jié)點和 Pod 的實時資源占用按內(nèi)存排序 kubectl top node kubectl top pod -A --sort-bymemory # metrics-server 自身日志證書和連接錯誤都在這里 kubectl logs -n kube-system deploy/metrics-server --tail50需要清楚一點metrics-server 只保留最近幾分鐘的數(shù)據(jù)不做長期存儲想看過往趨勢得另外上 Prometheus 之類的方案。它的定位就是給 HPA 和kubectl top供數(shù)不要指望它當監(jiān)控系統(tǒng)用。5.2 日志的三條路徑容器日志一般分三層看。第一層是應(yīng)用寫到標準輸出的內(nèi)容用kubectl logs讀這是最常用的。容器重啟過要看上次的日志加--previous多容器 Pod 要加-c指定容器名。第二層是節(jié)點上的日志文件。容器運行時會把標準輸出落到/var/log/pods/namespace_pod_uid/container/0.logPod 已經(jīng)被刪掉但節(jié)點上還有殘留時直接去這個路徑撈。第三層是組件自身的日志。kubelet 通常由 systemd 托管用journalctl -u kubelet看以靜態(tài) Pod 形式運行的控制面組件用kubectl logs -n kube-system pod看。# 持續(xù)跟蹤日志只顯示最后 100 行 kubectl logs -f deploy/web --tail100 # 看容器上一次崩潰前的日志 kubectl logs web-7d9f8c6b5-abcde -c nginx --previous # 跟蹤節(jié)點上 kubelet 的日志只看最近 10 分鐘 journalctl -u kubelet -f --since 10 min ago如果應(yīng)用是把日志寫文件而不是標準輸出kubectl logs什么都看不到這不是 bug。要么改成輸出到標準輸出要么用 emptyDir 或 hostPath 把日志目錄掛出來再接采集器。5.3 五條踩坑記錄現(xiàn)象一kubectl top node報error: Metrics API not available但 Pod 都正常。原因APIService 沒注冊成功或者 metrics-server 連不上 kubelet 的 10250 端口。自簽證書的集群上metrics-server 校驗 kubelet 證書失敗是高頻原因。解決先kubectl get apiservice v1beta1.metrics.k8s.io -o yaml看status.conditions里的 message再去翻 metrics-server 日志。確認是證書問題的話在它的啟動參數(shù)里加--kubelet-insecure-tls這是測試和生產(chǎn)自簽環(huán)境都常見的做法代價是放棄對 kubelet 證書的校驗。現(xiàn)象二Pod 一直 ContainerCreatingdescribe里 Events 顯示FailedMount。原因hostPath 寫了type: Directory但宿主機上目錄不存在或者掛載的 ConfigMap、Secret 還沒創(chuàng)建。解決type改成DirectoryOrCreate或者提前在節(jié)點上把目錄建好。用 DaemonSet 掛宿主機目錄時尤其要注意集群擴容進來的新節(jié)點不會自動帶上目錄得靠初始化腳本或 DaemonSet 自己創(chuàng)建?,F(xiàn)象三kubectl logs報previous terminated container xxx not found。原因容器已經(jīng)重啟過多次舊日志被運行時輪轉(zhuǎn)清理掉了--previous也拿不回來。解決短期靠及時抓長期靠把日志落盤到掛載卷或者接采集器。容器日志的輪轉(zhuǎn)策略是運行時管的默認單個文件到 10Mi 左右就會切業(yè)務(wù)日志寫得猛的話幾分鐘就沒?,F(xiàn)象四Service 訪問不通但后端 Pod 狀態(tài)是 Running。原因Endpoints 為空通常是 Service 的 selector 與 Pod 的 labels 不匹配或者targetPort寫成了 Service 端口。解決kubectl get endpoints svc-name先看有沒有后端地址空的話kubectl get svc svc-name -o yaml把 selector 抄出來跟 Pod 的 labels 逐字比對。大小寫和拼寫錯誤是主要來源app: nginx和app: Nginx在 YAML 里是兩個完全不同的選擇器?,F(xiàn)象五出問題想查事件kubectl get events是空的。原因事件默認只保留 1 小時apiserver 的--event-ttl參數(shù)排查拖久了就沒了。解決故障當下立刻執(zhí)行kubectl get events -A --sort-by.lastTimestamp把輸出重定向到文件留檔。超過保留期的只能靠提前部署的事件采集組件這個能力在事后復盤時價值很高。6. 調(diào)度、存儲與安全三個能當場跑通的驗證動作課件目錄里還有調(diào)度、存儲、集群安全三塊篇幅不多但都是容易「看著懂、上手懵」的部分。我的習慣是每塊至少跑一個最小驗證確認自己理解的和集群實際行為一致。調(diào)度這塊驗證方式是把 Pod 釘?shù)街付ü?jié)點再觀察結(jié)果。給 Pod 加nodeSelector或者直接用nodeName創(chuàng)建后kubectl get pod -o wide看 NODE 列是不是預(yù)期的那臺。用污點和容忍做反向驗證更直觀給節(jié)點打上kubectl taint node node envtest:NoSchedule不帶容忍的 Pod 會 Pendingdescribe里的FailedScheduling會明確寫出污點不匹配的原因。這比讀十遍文檔管用。# 給節(jié)點打污點再驗證不帶容忍的 Pod 是否被擋住 kubectl taint node node-01 envtest:NoSchedule kubectl run probe --imagenginx:1.25 kubectl describe pod probe | grep -A2 FailedScheduling # 驗證某個 ServiceAccount 在命名空間里有哪些權(quán)限 kubectl auth can-i --list \ --assystem:serviceaccount:default:deployer \ -n default存儲這塊PVC 一直 Pending 時按三步查kubectl get storageclass看有沒有可用的 StorageClasskubectl describe pvc name看 Events 里是no persistent volumes available還是waiting for a volume to be created再比對 PVC 的accessModes和 PV 支持的是不是一致。ReadWriteOnce和ReadOnlyMany寫混了不會報語法錯只會靜靜掛起。安全這塊RBAC 的驗證靠kubectl auth can-i上面那條命令會把這個身份能做的動作全列出來。我在給新同事分配 kubeconfig 之前一定會跑一次確認權(quán)限范圍跟預(yù)期一致避免出現(xiàn)「以為只給了只讀實際能刪 Deployment」這種事。有個習慣我改不掉任何環(huán)境做變更之前先跑一遍kubectl get --raw /healthz加一次 etcd 快照。這個動作花不到一分鐘但在我誤刪過一整個命名空間之后它就成了肌肉記憶。希望幫到你。本文還有配套的精品資源點擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
色五月天丁香婷婷色| 日本全黄一级999| 丁香六月天堂| 三级成人网站| 丁香蜜臀黄色婷婷五月天| 丁香五月天久久| 激情五月丁香六月综合AVXXXX| 婷婷五月色播网| 久久久久视剧HD| 色婷婷操逼| 五月色丁香婷婷中文字幕| 91九色超碰正在播放| 国产67194| 日韩色五月| 另类激情五月天。| 久久精品99| 亚洲传媒在线观看| 五月刺激丁香月综合| 色综合久| 婷婷色婷婷| 天天爽综合网| 99综合一区| 色天天综合天天综合频道。 | www99热| 人人人操97| 婷婷五月天色丁香| WWW色五月天| 粉嫩av蜜桃av蜜臀av| 中文字幕簧片| 精品久久久久久久人妻| 婷婷六月激情综合| 欧洲亚洲精品| 狠狠色成人影片| 婷婷五月天成人综合网| 天天操夜夜橾| 婷婷在线激情| 91肏| se99视频| 成人国产欧美大片一区| 99热国品| 综合在线观看99| 99热在线观看| 婷婷五月,综合伊人| 亚洲字幕AV一区二区三区四区| 五月天色色网站| 香蕉国产2013| 婷婷五月天小说| 日日夜夜狠狠| 久久久久久久久久久久久9| 疯狂做受XXXX高潮A片| 综合激情站| 99热官网精品在线| 欧美色综合天天久久综合精品 | 野战毛片三一3| 五月丁香激情婷婷综合| 丁香婷婷情色五月天| 五月天六月婷婷电影| 五月婷婷六月爱| 五月丁香综合久久| 九九在线精点品| 色色色色色色色色网站| 97操操操| 激情操逼婷婷| 日日操夜夜操无码免费| 深爱丁香网| 国产日批视频| 色五月在线观看| 激情婷婷丁香| 成AV人片一区二区三区久久| 亚洲色区17| 九九性视频| 亚洲激情免费视频| 狠狠丁香| 91fuliwang| 色婷婷影音| www.久久爱.c n| 国产婷婷五月天| 中文AV在线播放| 激情五月天色| 亚洲天天操| 久久久97| 成人 九九九九| 六月婷婷网| www.婷婷六月天| 久久久久久xxxxx| 天天插天天草人人玩| 天天爽综合| 五月天色丁香| 在线中文AV| 99资源人人| 五月丁香花视频| 青草性爱视频| 日本三久久| 久久久亚洲精品一区二区三区浴池 | 激情五月丁香婷婷| 久久久婷丁香五月| 97操视频| 97色操| 激情五月天黄色小说| 午夜婷婷五月天在线| 色综合九九| 婷婷丁香人妻天天爽| 久久久99精品免费观看| 久热伊人| 五月天婷综合| 五月天色欧美| 俺也高清无码高清视频| 日本欧美成人片AAAA| 久久丁香婷婷五月| 狠狠狠狠狠狠狠狠| http://www.com久久久精品一区| 久久黄A片| 五月婷天天搞视频| 免费色婷婷| 婷婷香香五月| 九九99免费视频| ztEJj| 色色婷婷丁香| 激情综合网五月丁香| aaaa久久| www,五月天激情| 色情综合网| 亚洲综合丁香五月天| 色婷婷综合网站| 98色花堂98t.R| 丁香涩涩五月天| 激情综合啪啪| 91碰碰碰| 天天爽天天干| 激情精品久久| 97天堂| 97操碰碰无码视频| 久久多色| 六月婷婷九月丁香| www.婷婷,com| 色九九九九| 99视频日韩| 日本五月婷婷久久久六月丁香| 综合婷婷久久| 五月色婷婷在线观看| 伊人碰碰碰| 五月丁香综合中文| 9久国产精品| 亚洲啪啪精品| 婷婷激情在线| AV中文在线| 亚洲AV综合在线观看| 奇米四色五月天| 色色六月| 婷婷五月天资源| 久久精品国产精品| 婷婷丁香激情| 少妇婷婷五月天| 人人爱国产| 亚洲操女| 内射综合网| 99色在线观看视频| 人人摸人人搞| 婷婷黄色五月天在线视频| 久热无码| www.思思99热| 色色婷婷婷丁香五月天| 五月丁香啪啪婷婷| 99热这是里只有精品| 久草五月| 天天综合网网欲色| 情色婷婷五月天| 婷婷五月亚洲综合| 久草五月天电影网| 激情婷婷九月| 激情五月天色播| 91艹人| 亚洲精品V天堂中文字幕| 婷婷伊人激情婷婷| 五月婷婷黄色毛片| ,99视频久久| 欧美激情五月天| 99热只有精品在线观看| 婷婷色中文| www,天天干| 丁香五月天激情婷婷丁香六月| 成人精品视频99在线观看免费| 婷婷夜夜夜夜| 色色操| 偷偷与邻居做爰完整视频| 婷婷综合激情五月综合| 97干网站| 九热av| 九九人人精品| 亚洲综合五月天综合| 丁香五月婷婷操逼| 天天插天天干| 狠狠色成人影片| 久热九九| 97超级碰碰碰| 另类少妇人与禽zOZZ0性伦| 婷婷五月开心中文字幕在线| 婷婷久久五月丁香| 日韩有码一区| 欧美在线| 午夜大香蕉| www.夜夜騎夜夜狠| 丁香六月色香蕉视频| 天天做 天天爱| 婷婷五月乱交换| 五月开心激情| 丁香 久久| 99热精在线九九久久保| 99精品在线观看视频| 国产AV一区二区三区最新精品| 5月婷婷激情网| 色9999日韩国产| 99婷五月| 91无码一区人妻A片蜜| 91热视频色网站| 99 色色吧| 九九久久精品國產| 婷婷综合久久综合| aV直接看| 亚洲成av人影院| 91九色在线视频| 天天爱天天做天天爽| 麻豆雪千夏| 午夜亚洲AV日韩无码| 激情五月天婷婷| 五月丁香综合在线| 色五月丁香六月欧美综合| 婷婷5月色| 亚韩在线视频| 成人丁香色| 新激情五月天| 国产精品久久久爽爽爽麻豆色哟哟 | 在线超碰免费| 日本美女97在线视频| 久色网| 五月婷婷啪啪| 婷婷五月情| www.操逼comm| 色婷婷五月天天天做| AV在线资源| 热久69| 天天干人人奸97| 国产超碰在线| 91 影音先锋| 五月香婷婷| 亚洲中文字幕网| 狠狠爱婷婷丁香| 99在热线免费视频| 99色综合| 五月天社区| 五月婷婷六月丁香综合| 人妻中文在线| 国产 码在线成人网站| 26uuu最新地址| 国产综合色婷婷精品久久| www.99热这里精品| 色噜噜狠狠色综合网| 色婷婷激情四射视频| 色偷偷色婷婷| 亚洲精品电影| 九九免费视频在线| 色婷婷丁香五月天在线视频 | 爱婷婷五月| 五月丁香AV、伊人业余、性色熟妇| 99热久久这里只有精品| 天天色天天噜| 婷婷五月综合亚洲| 99热亚洲| 国外亚洲成AV人片在线观看| 99热 日韩| 亚洲操女| 丁香六月婷| 五月婷婷亚洲| 久久人妻乱子伦| 天天色五月| 亚洲女婷婷五月基地综合久久久| 日韩视频99| www.射伊蕉婷婷| 大香蕉婷婷色| 婷婷色色综合| 色狠狠色综合久久久绯色AⅤ影视| 综合久久97| 精品九九在线观看视频| 婷婷五月天电影区小说区| 五月丁香婷婷激情视频| 五月天色丁香| 曰本aaaaaa丈片| 久久九九玖玖| 丁香激激情网| 天天日夜夜拍| 婷婷五月丁香基地| www.色五月| 噼里啪啦完整版中文在线观看| 久久久久久久久18久久| 五月婷婷色影院| 天天噜天天爱| 久久免费操| 婷婷五月天成人| 色婷婷狠狠禁18久久| 日韩在线一级| 六月丁香综合网| 这里只有精品在线观看视频| 九九久久99| 五月丁香久久激情综合| 五月天天天操天天爽夜夜操| 日韩AAAAA| 五月婷婷色五月| 99re资源在线视频导航| 99热免费网站| 五月婷婷开心网| 六月激情综合| 久久大香蕉同僚| 五月婷婷丁香伦理网| 橾逼网| 六月婷婷开心| 99久超碰| 久久久久久性爱视频| 色五月首页| 亚洲xx在线| 婷婷久久大香蕉| 五月丁香婷婷色播无码| caopeng超碰| 99热碰碰| 中文字幕亚洲-区久久99婷婷| 欧美狠狠草| 色99在线视频| 色婷小说| A色色| 99色免费观看全部| 99人人操人人操人人精| 亚洲99热| 日逼影音先锋AV男人资源站| 狠狠干五码| 97五月天| 亚洲艹网| 婷婷五月天激情小说| 99啪视频在线观看| 国产裸舞表演WWWW| 国产av网| 色五婷婷| 大香蕉视频99| 丁香五月综合在线观看| 色www99| 五月天综合缴情网网站0| 天天操婷婷| 九九精品碰| 综合五月天天天天天五月| 热99在线| 夜夜骑操AV| 日韩成人无码人妻| 大香蕉五月丁香| 婷婷五月丁香欧洲| 天天肏天天肏天天肏| 婷婷五月激情五月激情| 色五月大香蕉婷婷| 久热超碰91| 色原狠狠综合| 日韩在线视频中文字幕| 色婷婷综合网| 大香蕉综合网| 天天操天天日天天爽| 五月天成人综合| 欧美99| 狠狠色色| 梁铮版蜘蛛女在线观看| 日韩丰满少妇无码内射| SS丁香五月婷婷| 国产真实乱对白精彩| 婷婷五月欧美综合| 97碰碰叉| 五月天成人在线播放| 在线伦子99热| 狠狠色婷婷7777久| 99久久a线观| 色婷网| 热久久思思热思思| 婷婷丁香久久网| 欧美丁香婷婷五月天| 伊人久久大香线蕉亚洲五月天,| 啪啪六月婷婷| 全高清无码视頻| 成人看片网站| 久热这里只有精品66| 91久久久久| 五月天激情视频| 99A级片| 色婷婷狠狠爱| 99热精国产这里只有精品| 婷婷五月天桃花网| 99爱视频| 99在线观看视频精品| 国产乱人偷精品人妻A片| 婷婷五月天影视| 先锋影音男人的天堂AV| 色玖玖综合网| 亚洲色色精品| 亚洲av网站在线观看| 久久婷婷视频| 婷婷天天婷婷天天澡| 激情丁香九九五月综合网| www.99视频| 丁香激激情网| 一区色色色色网| yazhoujiqingav| 激情第四色| 色婷婷成人丁香| 人妻有码乱操| 久久99网站| 丁香五月亚综合图片| 九九99九九99偷拍视频免费看| 成人在线日韩| 婷婷久久精品| 婷婷瑟瑟五月天| 99操中文视频| 婷婷五月超碰| 久久精品一区二区三区四区| 久草大| 亭亭社区五月天| 久久婷婷五月综合伊人| 中文字幕人妻一区二区| 激情婷婷五月天| 五月天综合在线观看| 色香蕉影院| 久月久在线视频| www.99热| 日韩人妻无码精品| 99精吕视频在线观看了| 五月婷婷丁香伦理网| 欧美色九| 五月婷婷亚洲色图| 亚洲一区二区色图-亚洲精品国产精品乱码-成人AV| www夜夜| 久久免片| 综合五月天婷婷色| 另类综合激情| 玖玖在线视频| 99热最新| 欧美在线操| 万月丁香狠狠爱| 亚洲综合激情五月久久| www.婷婷,com| 99热热这里只精品996小说| 亚洲色色色色| 99热精这里只有精品| 久久综合丁香五月| 天天艹天天综合网| 丁香五月激情综合| 国产超碰在线| 久久婷婷五月国产色综合激情| 人人操女人| 九九热99精品| AV在线不卡网站| 男人的天堂婷婷色五月| 99re欧美精品| 99精品久久久久久| 九色激情| 五月婷婷丁香五月| 99热很操老逼| 婷婷五月天午夜激情影院| 婷婷六月成人| 色婷婷最新域名| 99久热在线精品99re6热| 国产五月视频| 精品一区久热| 久久九九一區| 91色吧网| 97碰久久| 丁香婷婷精品视频| 婷婷丁香五月视频| 久久精品66| 久久欧洲综合网| 五月婷六月丁香| 亚洲人妻一区二区 | 色噜噜狠噜噜视频| 色色色婷| 狠狠干在线| 天天狠狠夜夜狠狠2023| 国产AV一区二区三区最新精品| 久99999热视频在线观看免费| 98国产精品综合一区二区三区| 欧美叉叉叉BBB网站| 久久色大香蕉| 激情四射婷婷色色色| 99资源在线视频| 久久五月激情综合| 婷婷五月天日本国产| 婷婷四色五月| 色噜噜狠狠色综无码久久合欧美| 99在线视频精品| 婷婷金品综合视频| 亚洲亚洲人成综合网络| 色射7856五月天激情四射| www.99精品视频| 婷婷五月综合在线| 2w在线视频| 亚洲另类视频| 99热最新网址| ady狠狠入| 生活片五区| 久久国产性爱A V| 狠狠干 狠狠操| 99精在线| 丁香五月影院| 亚洲色图啪啪| 丁香六月婷婷综合色| 日日狠夜夜狠| 色色五月婷婷| 青青草99re| 欧美五月婷婷| 米奇影视五月天| 棕合影院色色| 91久久日日| 国产成人AV在线播放| 噜综合| 激情欧美五月丁香| 五月婷婷激情网| 激情AV中文| 五月天婷基地| 熟女网站久久| 九月色婷婷综合亚洲| 69精品人人人人| 婷婷五月天电影在线| 久久久婷婷婷| 丁香六月综合激| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 国产成人精品一区二三区熟女在线| 五月婷婷综合色啪首页 | av亚洲国产小电影| 99热有精品在线观看| 天天在线久久综合 | 六月激情久久| 琪琪色五月婷婷老师| 黄色三级日本| 久久五月天综合| 亚洲深喉aV| 婷婷在线免费| 99九九热在线观看| 麻豆精品| 夜夜夜夜撸夜夜操| 影音先锋91网站在线观看| 伊人色综合影院视频| 激情五月六月丁香| 五月丁香影院| 色丁香五月天射婷婷爱婷婷| 五月天婷婷AV| 九九99在线视频| 色五月综合网| 超碰成人黄色网| 婷婷 久综合| 原琪琪色影院| 日本一级一片免费视频| 丁香五月123| 久热这里只有精品99re| 美女被操一区二区| 成人丁香婷婷五月天| 成人无码髙潮喷水A片| 久热中文字幕| 婷婷五月天激情网| caop在线视频| 99热网站| 男人天堂伊人五月丁香| 久99热| 一级片sese片.COM| 99精品在线观看| 九月丁香| 激情综合五月丁香| 538久久| 色99色| 色八月婷婷| 天天日天天爽| 管管補管管紱| 一级视频网址| 丁香五月天堂网| 第五婷婷伊人丁香| 影音先锋四区| 26UUU| 超碰在线91| 久1色色| 亚洲综合成人网| 九九AV| 激情99。| 婷婷五月天久草在线| 激情五月婷婷色| 99九九免费精品| 七七色色综合| 五月丁香六月综合情在线观看| 丁香五月电影| a v色婷婷| 91日在线视频| 五月丁香六月色| 玖玖激情五月天| 亚洲黄色影视| 99视频在线观看欧| 狠狠色丁香婷婷五月| 99在线视频资源| 丁香婷婷久久| 丁香五月天大香蕉啪啪| 五月开心网| 高清无码.com| 91男人资源站| 欧美婷婷日本| 我爱婷婷五月天综合88| 欧美日韩成人高清在线| 日本九九九九| AV人人操| 怕怕av| 色婷婷激情视频| 亚洲av网站| 99色丁香婷婷综合网| 日韩AV一区二区三区| 亚洲人妻av| 99精品久久久久久久婷婷久久 | 欧美成人猛片AAAAAAA| 色综合色色| 精品久色| 婷婷综合另类| 国产精品人成A片一区二区| 激情婷婷色五月| 另类图片天天影视在线观看| 久久99人人| 在线看片av| 色婷婷五月亚洲| 99色综合网| 五月综合激情啪啪啪啪啪| 九九99精品视频| 天天爽天天透天天爱| 色噜噜五月天| 90色免费视频| 大香蕉九九| 丁香五月婷婷六月丁香| 亚洲综合婷婷| 天天干,天天舔| 综合网网欲色| 丁香六月成人| AA丁香综合激情| 超碰在线超碰| 夜夜爽天操| 亚洲综合激| 六月婷婷香蕉| 丁香五月久久社区| 国产91资源在线| 思思热精品在线| 五月天婷婷综合| 婷婷五月天激情综合深爱| 亚洲激情亚洲激情 | 久久99热精品a片在线观看| 久久婷丁香五月| 97操碰在线97| 婷婷五月天综合亚洲| 天天日天天操心| 九色91国产| 另类激情首页| 色丁香影院| 亚洲六月婷| 九九精品片一| 五月天激情站| 亚洲激情校园| 五月婷婷开心网| 国产美女视频久| 五月天另类图片| 国产Va视频| 激情综合五月激情XXXX| 91久久久久久| 大香蕉久久| 99精品热视频| 黄网在线播放| 丁香婷婷六月激情文学 | 天堂综合久久 | 啪啪一区| 99色6爱9热| 99色婷婷视频| www.粉嫩av.com| 丁香五月天在线视频| 亚洲性受XXXX五月丁香| 熟女色专区| 高潮毛片遮挡费高一百度| 九九日本视频| 色婷婷丁香五月天在线视频 | 香蕉婷婷| 久久久久久xxxxx| 天天做天天要天天爱| 久久婷婷五月天激情新地址| 婷婷五月在线免费| 五月婷婷六月丁香激情综合网| 婷久看人爽| 久久这里都是精品视频| 丁香六月亚洲综合| 99只有这里有精品在线视频| 日本视频99| 国产成人99久久亚洲综合精品| 91超级碰碰| 丁香激情五月| 99在线看视频| 婷婷成人AV| 婷婷99狠狠躁天天躁| 五月丁香啪啪啪免费看| 五月天狠狠干| 婷婷99狠狠| 色色五月丁香婷婷| 香蕉AV福利精品导航| 五月婷婷影视| 97干视频在线| 天天免费成年人视频| 六月色国内综合| 激情丁香五月婷婷| 丁香六月啪| 日本久久九| 天天插天天射天天干| 天天久久66xxx| 这里只有精品视频看看| 日本99在线| 九九AV| 婷婷五月天99| 婷婷色啪| 人人人操 超碰| 婷婷五月天丁香社区| 99在线观看视频精品| 色五月综合激情| 日韩成人av在线| 亚洲精品又粗又大又爽A片| 91传媒无码人妻精| 国产99美少妇| 天天色天天操天天射| 婷婷综合网| 婷婷狠狠狠爱| 天天爽,天天操。| 五月婷婷丁香五月| 91男同视频| 在线观看亚洲视频影院| 亚洲综合婷婷五月| 夜夜撸天天操| 91久久免费| AV 3P| 91色在线/日韩| 丁香五月激情图片婷婷| 九九精品热| 26uuu| 亚洲日韩一页精品发布| 久久久激情视频| 99热中文字幕久久| 538在线精品| 欧美五月婷婷| 日本在线va| 国产精品久久久爽爽爽麻豆色哟哟 | 丁香五月婷婷五月| www.五月天婷婷| 日韩乱玛久久| 免费无码毛片一区二区A片| 午夜爱插插| 亚洲色情在线| 老妇六区| 五月视频日本免费观看| 超碰人人草| 狠狠色丁香婷婷| 色婷婷先锋| 99无码精品| 大香蕉啪啪网| www.婷婷五月天| 久久99大全| 婷婷丁香激情五月天色色色| www.激情五月天.com| 99ri在线视频| www.婷婷亚洲基地| 九九re精品视频在线观看 | 丁香六月婷婷综合| 日韩成人AV在线| 波多野结衣AV无码Porn| 婷婷色正月| 久久婷鲁| 九九精品在线观看视频6| 一级片操逼视频| 婷婷色5月天在线。| 91丨九色丨大屁股| 亚洲激情淫网| 天天日天天插| 色另类五月天| 国产亚洲精品AAAAAAA片| 激情久久四色| 天天操夜夜操| 夜夜操少妇| 国产真实乱了老女人视频 | se婷97| 婷婷开心五月| 嫩草视频观看| 婷婷激情九月| 九九性视频| 婷婷午夜天| 五月丁香A片| 能看的av| 极品 少妇 内射| 色婷婷呢狠禁久禁| 丁香五月欧美激情| 色婷婷影音| 激情五月天开心| 欧美日韩成人一区二区| 色狠狠综合| 国产色丁香| 国外亚洲成AV人片在线观看| 天天爽天天透天天爱| 国产人人操| 色色色在线观看| 99精品久久久久久久婷婷| 久久丁香五月天| 丁香五月激情综合在线观看| 懂色av粉嫩AV蜜臀AV| 婷婷五月天无码| 任你爽免费视频| 天天做天天爱天天高潮| 大陆肏屄视频| 久久新地址| jiujiu热在线视频| 日本视频不卡123区| 五月天天爽| 婷婷久久网| A片试看120分钟做受图片| www色婷婷com| 丁香六月婷婷开心| 欧美成人在线观看| 91九色精品| 青青草a在线| 婷婷成人av| 午夜丁香| 丁香婷婷六月在线资源观看| 亚洲99在线| 91久久久久久久久18| 丁香网五月天激情| 在线视频另类| 99噜噜噜在线播放| 热久久这里只有精品| 五月婷婷丁香深深爱| 91趴趴| 色99色| 色婷婷婷婷五月天| 五月天婷婷日日爱| 久久一伦| 成人无码髙潮喷水A片| 丁香五月天激情免费在线观看AV777| 丁香五月91| 99视频热99| 色五月综合网| 五月叮香啪| se色99| 人人性久久| 成人无码精品1区2区3区免费看| 99激情视频| 亚洲丁香五月天在线视频| 99视频在线观看网址| 国产成人精品一区二区三区视频 | 婷婷视频在线碰| 九九Av| 久久婷婷成人综合色怡春院| 国产99精品免费视频| 亚洲无aV在线中文字幕| 97干干干丁香| 饮料下药迷倒漂亮女同事强干| 久久五月天色| 亚洲六月婷| 日韩色色小视频| 日本色色网站| 97操碰人免费| 欧美69久成人做爰视频| 超碰九色| 国产激情在线| 久操香蕉| 亚洲妇女熟BBW| www.夜夜操| 激情婷婷丁香五月天| 五月天开心激情综合网| 五月婷婷激情四月| 婷婷五月天伦理| 开心久久xxx色| 东京热伊人| 超碰免费大香蕉| 久久婷婷丁香视频网| 丁香五月婷婷香| 99ER热精品视频| 婷婷五月天在线观看| 青青草成人网| 色欲色香综合网| 99久在线精品| 成人一级片| 久热免费视频| 五月丁香成人小说| 色播五月婷婷| 最新va在线播放| 99热精品中文字幕| 无码人妻一区| 五月天六月婷婷| 六月婷婷开心| 色色色色热| www.五月丁香| 激情五月天网站| 五月天激情国产综合婷婷婷| jiZZdr| 激情綜合網址| 婷婷月综合| 婷婷99中文字幕| 99热大香蕉| 91无码视频| 狠狠综合久久| 性爱综合网| 色色无码| 国产精产国品一二三在观看 | Www.sesese丁香| 五月婷A V在线| 久久香视频| 五月激情射| 欧美丁香五月97色| 大香蕉久久伊人婷婷五月丁香| 久久ww| 婷久看人爽| 亚洲、热| 婷婷色五月婷| 婷婷激情四射| 性一交一乱一交A片久| 免费无码毛片一区二区A片| 久久91久久精品久久| 色99无码| 99碰超| 九月婷婷综合八月丁香在线观看 | 亚洲无码猫咪| 丁香婷婷九月| 久久久久久草黄色片AV在线观看| 久久A热| 婷婷久久色| 丁香五月自拍| 激情五月天婷婷| 色婷婷av综合网| 九九青草热| 26uuu四色| 美女妹子后射视频网站在线观看| 婷婷色在线视频| 五月天婷婷综合网| 婷婷丁香色女人| 人人97碰| 这里只有精品在线播放| 色五月综合在线| 日韩视频99| 97碰精品| 日本久久天堂| 我要射综合| 五月婷婷丁香| 色婷婷狠狠禁18久久| 欧美日比视频| 激情五月亚洲综合网| 色五月婷婷老师| 开心五月激情网| 亚洲AV无码成人精品电影| 就是色婷婷五月亚洲色| 5月丁香六月婷婷| 99人人干| www.1024久久| 色色色色热热| 婷婷五月激情丁香| 五月天精品| 丁香五月综合久久| 5月婷婷六月丁香| AV在线大香蕉| www色哟哟| 欧美美女国产日韩一区二区久| 五月婷婷成人| 国产免费性爱| 乱码操操| 九九热这里只有精品6| 国产一区二区三区影院| 九九av在线| 激情5月天天天| 五月丁香天堂网| 五月天色色色色色| 99热这里只有精品69| 色色色色综合网| 91窝窝| 激情五月婷婷综合网| 丁香九月婷婷| 二级黄色毛片| 情婷婷五月天| http:色情日本com| VA婷婷| 欧美综合五月丁香六月婷| 欧美精品狠狠色丁香婷婷| 九九热视频网站| 日韩成人电影AV| 大香蕉欧美在线| 日日狠狠久久偷偷四色综合免费 | 五月天婷婷在线AN| 黄色一级影片| 亚美欧色影院| 九月婷婷在线视频| 丁香婷婷射| 亚洲天堂色色| 日本99视频| 国产99久久久| 色天堂在线| 亚洲中文乱字字幕在线永久| 91久久久久| 蜜臀av在线成人电影| 强壮公让我夜夜高潮A片视频| www久久久| 99爱爱| 久久久久久激情| 五月丁香婷婷爱| 99re视频在线| 色五月婷婷五月天激情综合| 丁香狠狠色婷婷久久无码视频| yazhouzonghesese| 99精品视频在线观看| 五月丁香五月激情综合色综合| 97在线精品| 《战争与艾拉》完整版| 成功精品影院| 69堂午夜视频最新地址| 99热亚洲| 婷婷五月AA五月在线| 五月综合色| 色五月丁香激情视频| 无码免费人妻A片AAA毛片西瓜| 性婷婷| 亚州在线中文字幕| 久久 视频这里只有精总| 色域五月丁香| 人人草开心五月天| 久婷婷五月天影院| 天天操婷婷| 深夜男女福利刺激影院一区| 五月婷丁香| 深爱五月激情网| 欧美成人AAA片一区国产精品| 丁香五月天激情综合网| 狠狠爱丁香婷| 丁香五月婷婷亚洲色图| 另类视频综合| 99热99色| 欧美综合五月丁香六月婷| 国产激情一区| 亚洲激情另类| 超碰99在线观看| 色99在线| 丁香六月天之亚州热女 | 国产亚洲在线观看| 亚洲色欲欧美一区二区三区| 天天色2017| 天天影视天天爽天天草| 91viP在线看| 夜精品无码A片一区二区蜜桃| 久久五月婷天天干| 91日韩美女被插视频| 26uuu在线观看| 亚洲综合色丁香婷婷六月| 婷婷五月欧美| 色欲色香综合网| 五月丁香九九九综合| 色婷婷AⅤ| 综合色色网| 战争与艾拉电影免费观看| 婷婷色片| 99热成人| 99热官网精品在线| 色情性爱视频网址| 97婷婷五月| AV中文在线| www.99热. com这里只有精品| 91成人看片| 超碰v| 狼人婷婷综合| 99热精品一区| 亚洲啪啪网| 国产又色又爽又黄又免费| 五月丁香六月婷婷激情视频在线观看免费 | 欧美一区二区三区不卡影视| 69精品人妻不卡视频| 激情五月婷婷综合| 中文字幕 中文字幕明步| 综合97五月| 日韩三级视频一区二区| 99这里都是精品| 婷婷狠狠操| 丁香五月综合福利视频导航| 久久人人九| 久久五月婷综合| 婷婷色网| 噜噜国产| 深爱激情五月天婷婷网| 日日干天天射| 久久久.www| www.99色| 欧美色色色色色| 五月天六月婷婷电影| 丁香五月亚洲激情婷婷射| 91人人爽人人操| h在线看免费版在线看| 亚洲无码11| 99热这里只有精品2| 五月色婷婷影视在线电影| 91尤物九色在线| 99热 在线播放| 狠狠干.com| 五月开心网| 人人爱国产| 超碰93在线观看| 综合色色色色色色| 五月色导航| www久久99com| 亚洲中文字幕av| 五月丁香在线观看99| 欧美一级毛卡片无码| 最近中文字幕大全免费版在线 | 在线看的免费网站| 二色av| 五月花激情| 婷婷五月色色| 五月天桃色深爱网| 79色色色色| 丁香婷婷色五月合集| 深爱激情小说五月婷婷| 玖玖资源站国产| 色色婷婷五月| 丁香五月天网站| 丁香色综合| 色丁香五月| 91超级碰在线| 97干在线播放| 久久婷婷久久| 色婷婷久久综合久色综| 久婷婷五月综合欧美| 91好好热日本在线| 欧美日韩成人在线网| 午夜日韩久久久网站| 久久码久久无清| 欧美日韩中国| 夫妻超碰在线| 71在线精品视频一区| 色色色色色五月| 97婷婷在线| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 天天射综合网夜夜操| 婷婷五月天成人基地| 可以免费看的av网站| 开心五月深爱激情| 日本久久爱| 婷婷五月情| 婷婷五月天AV在线| 99在线69| 激情五月天色播| 婷婷久久五月天| 校花娇喘呻吟校长陈若雪视频| 少妇AB又爽又紧无码网站| 伊人在线视频| 午夜]香婷婷深深爱| 色婷九九九| 日本不卡中文字幕| 中海油常州环保涂料有限公司| 十月丁香婷婷| 五月天婷婷黄色| 五月丁香另类图片| 婷婷人人操| 九九色色| 91无码一区人妻A片蜜| 九九99偷拍视频| 97黑人精品区| 婷婷中文在线| 九九九九九无码| 99色在线观看视频| 日本婷婷| 这里只有精品免费视频| 欧美成人精品A片免费一区99| av操B网站| 黄色一级影片| 婷婷五月花免费视频在线| Jh7Uf088VHafNm| 99在线精品视频| 亚洲精品亚洲人成人网| 99视频热99| 天天操婷婷| 天天综合色综合| 97色色视频| 97色色网| 99精品久久久久久久久| 91丨九色丨熟女| 色综合色欲综合天天免费| 久久开心五月天激情| 99思思| 婷婷五月天综合久久日美女| www.色婷婷.com| 激情婷婷人妻| 婷婷五月激情图片| 色婷婷激情| 人妻Av在线| 五月婷婷六月丁香激情深爱| 久久99成人性爱高清视频| 久久六月天| 婷婷五月天桃花网| 深情六月婷婷综合久久| 天天干天天插| 影音先锋男士资源网一区| 日本久久婷| 婷婷六月天亚州| 午夜丁香婷婷| 在线不卡的视频| 五月婷婷激情四季| 婷婷永久在线| 色婷婷丁香网| 91成人性爱视频| 99久久97久久欧美综合网| 五月丁香直播| 日韩黄黄| 大香蕉伊然在亚洲90| 六月99天天婷婷激情综合| 五月丁香婷婷激情视频| 久久免费精彩视频| 综合色婷婷| 六月婷婷色宗合| 一本色道久久综合狠狠躁小说| 任你干嘛免费视频播放| 久久婷婷五月综合色播| 丁香午夜天| 亚洲性视频| 五月婷婷综合潮喷| 九九色逼| 亚洲不卡| 六月丁香啪啪啪| 久久久精品免费啪啪国| 玖玖色资源站| 操久久网| 人橾人| 夜丁香五月婷婷| 日本精品人妻无码77777| 日韩啪啪网| www.久久综合| 狠狠色综合久久久久| 欧美色六月婷婷| 大香蕉五月天| 91性高潮久久久久久久久| 亚洲男女激情| 九月婷婷综合在线| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 天堂草在线看www| 琪琪色网在线| 久久成人综合五月天| 丁香五月影院| 少妇丁香婷婷| 丁香五月色情| 91性高潮久久久久久久久| 五月丁香啪综合| 九月综合| 91九色国产熟女| 成人VAV视频在线观看| 99在这里有精品| 蜜乳av一级av| 人人综合五月人人婷婷| 人妻内射一区二区在线视频| 日韩 欧美 国产 一区 二区| 色色婷婷五月天| 婷婷五月花| 久操大香蕉| 九月丁香| 欧美日韩aaa| 五月天激情站| 欧洲色区| 丰满人妻一区三区三区| 激情婷婷丁香五月| 激情综合色| 色九月丁香婷婷蜜桃在线观看| 啄木鸟丝袜美女福利视频| www.com在线操视频免费观看| 婷婷丁香五月激情| 香蕉97碰碰碰超视精品|