99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線(xiàn)實(shí)戰(zhàn)洞察。

金山辦公運(yùn)維開(kāi)發(fā)筆試:腳本/數(shù)據(jù)庫(kù)/緩存/排查/容器全解析

金山辦公運(yùn)維開(kāi)發(fā)筆試:腳本/數(shù)據(jù)庫(kù)/緩存/排查/容器全解析 1. 題目拆解與考察方向分析1.1 這份第二部分到底在考什么先說(shuō)個(gè)整體印象。金山辦公的校招筆試尤其是運(yùn)維開(kāi)發(fā)這個(gè)崗和單純背命令、背配置的傳統(tǒng)運(yùn)維筆試有本質(zhì)區(qū)別。它叫運(yùn)維開(kāi)發(fā)不是系統(tǒng)運(yùn)維不是網(wǎng)絡(luò)運(yùn)維這個(gè)名字本身就是在告訴你你的核心價(jià)值是用開(kāi)發(fā)能力解決運(yùn)維問(wèn)題。我在一線(xiàn)做運(yùn)維開(kāi)發(fā)也有些年頭了帶過(guò)不少新人也幫朋友公司出過(guò)類(lèi)似的筆試題。我的整體感受是這類(lèi)第二部分的筆試通常是在第一輪基礎(chǔ)考核Linux命令、網(wǎng)絡(luò)基礎(chǔ)、SQL這類(lèi)之上做一次篩選式進(jìn)階。什么意思呢就是它不再問(wèn)某條命令怎么用而是問(wèn)在什么場(chǎng)景下你會(huì)選擇哪條命令、為什么給你一個(gè)具體問(wèn)題你如何設(shè)計(jì)一套自動(dòng)化解決方案。前者考記憶后者考工程思維。所以如果你打算裸考或者以為把《鳥(niǎo)哥的Linux私房菜》翻一遍就夠那大概率會(huì)在第二部分翻車(chē)。真正能拉開(kāi)差距的是這幾類(lèi)題目腳本編程與邏輯設(shè)計(jì)、數(shù)據(jù)庫(kù)與緩存的實(shí)際應(yīng)用、故障排查與性能分析、CI/CD與容器化思路。后面我會(huì)逐個(gè)拆開(kāi)講。1.2 考察重點(diǎn)與崗位需求的對(duì)應(yīng)關(guān)系金山辦公的產(chǎn)品線(xiàn)很重WPS、云文檔、協(xié)同辦公這些業(yè)務(wù)對(duì)服務(wù)的穩(wěn)定性、API的響應(yīng)速度、數(shù)據(jù)的一致性都有很高要求。運(yùn)維開(kāi)發(fā)崗在這樣一家公司里日常要做的事包括但不限于維護(hù)大規(guī)模服務(wù)器的穩(wěn)定運(yùn)行、推動(dòng)發(fā)布流程自動(dòng)化、設(shè)計(jì)監(jiān)控告警體系、處理線(xiàn)上故障、優(yōu)化中間件性能。這就決定了筆試題目會(huì)往這些方向傾斜。我總結(jié)下來(lái)第二部分的題目的核心考察點(diǎn)大概有四塊第一腳本和編程能力。也就是你能否自動(dòng)化地處理文件批量操作、日志分析、文本抽取這種真實(shí)場(chǎng)景。第二數(shù)據(jù)庫(kù)和緩存設(shè)計(jì)。你的MySQL慢查詢(xún)優(yōu)化、Redis緩存策略是不是真的有實(shí)際經(jīng)驗(yàn)支撐而不是只背了八股文。第三系統(tǒng)排查和性能分析。給你一臺(tái)高負(fù)載服務(wù)器你如何定位瓶頸、怎么處理。第四運(yùn)維開(kāi)發(fā)工具鏈和CI/CD。你對(duì)Git、Jenkins、Docker、K8s這些工具的理解深度是否停留在用過(guò)層面。整份卷子的邏輯其實(shí)是先考你會(huì)不會(huì)寫(xiě)代碼解決問(wèn)題再考你懂不懂系統(tǒng)底層最后考你有沒(méi)有全局工程化思維。我把這套邏輯反過(guò)來(lái)從應(yīng)試者的角度拆解一下每類(lèi)題目的準(zhǔn)備方法。2. 腳本編程與自動(dòng)化處理筆試題的重頭戲2.1 Shell與Python的典型考題形式先說(shuō)Shell。凡是考運(yùn)維開(kāi)發(fā)Shell腳本幾乎是必出的而且一般不會(huì)直接問(wèn)你echo是什么意思而是給你一段殘缺的腳本讓你補(bǔ)全或者讓你實(shí)現(xiàn)一個(gè)具體的功能。比如統(tǒng)計(jì)Nginx訪(fǎng)問(wèn)日志中IP出現(xiàn)的次數(shù)并按次數(shù)降序排列。找出某個(gè)目錄下7天前修改過(guò)、大于100MB的日志文件并清理。檢查一組服務(wù)器的端口連通性異常時(shí)輸出報(bào)警信息。這些題目表面上看是在考命令實(shí)際上考的是你懂不懂真實(shí)運(yùn)維場(chǎng)景下的自動(dòng)巡檢思路。執(zhí)行順序、退出碼處理、定時(shí)任務(wù)怎么對(duì)接這些才是題目想看的。再一個(gè)高頻考點(diǎn)是Python。注意這里考的不是語(yǔ)法而是腳本的健壯性。比如讓你寫(xiě)一個(gè)腳本讀取一個(gè)CSV文件過(guò)濾出特定條件的數(shù)據(jù)再寫(xiě)入另一個(gè)文件。這時(shí)候考官在意的點(diǎn)包括你有沒(méi)有處理文件不存在的情況、有沒(méi)有考慮內(nèi)存占用用流式逐行讀而不是一次性readlines、有沒(méi)有處理異常并輸出日志。如果你只是寫(xiě)出能跑的代碼分?jǐn)?shù)可能不會(huì)太高。如果你能多寫(xiě)一個(gè)裝飾器記錄運(yùn)行耗時(shí)或者加上參數(shù)解析支持命令行傳參這就能明顯拉開(kāi)差距。我在實(shí)際工作中寫(xiě)自動(dòng)化腳本的習(xí)慣是能復(fù)用函數(shù)就復(fù)用不寫(xiě)一坨到底的面條代碼所有可能拋異常的地方一定要有捕獲和錯(cuò)誤日志腳本執(zhí)行結(jié)束后必須有明確的輸出提示。這些習(xí)慣可以直接遷移到筆試答題里。2.2 一種更高效的答題思路先設(shè)計(jì)再動(dòng)手很多同學(xué)看到編程題第一反應(yīng)是直接打開(kāi)編輯器想到哪寫(xiě)到哪。這個(gè)習(xí)慣在筆試?yán)锾貏e吃虧因?yàn)楣P試題給的空格有限閱卷人看的是你的邏輯不是你敲代碼的速度。我建議的答題順序是先在草稿紙上把輸入、處理、輸出三個(gè)環(huán)節(jié)列出來(lái)明確每一步可能出現(xiàn)的異常情況再動(dòng)筆寫(xiě)代碼。舉個(gè)例子如果題目要求讀取某個(gè)配置文件解析出所有keyvalue的鍵值對(duì)并檢查有沒(méi)有重復(fù)key你在動(dòng)手前就要想清楚配置文件格式是統(tǒng)一的keyvalue嗎有沒(méi)有可能包含注釋行或者空行重復(fù)key怎么處理是報(bào)錯(cuò)、忽略還是保留最后一個(gè)如果value本身含有符號(hào)呢比如urlhttp://a.com/bc這種情況split()以后要不要限制分割次數(shù)想清楚這三件事你寫(xiě)出來(lái)的代碼結(jié)構(gòu)是完全不同的。第一種寫(xiě)法可能是config_dict {} with open(config.ini) as f: for line in f: key, value line.strip().split() if key in config_dict: raise ValueError(fduplicate key: {key}) config_dict[key] value但如果你考慮到了value中可能含就會(huì)寫(xiě)成config_dict {} with open(config.ini) as f: for line in f: line line.strip() if not line or line.startswith(#): continue key, _, value line.partition() key key.strip() if not key: continue if key in config_dict: raise ValueError(fduplicate key: {key}) config_dict[key] value.strip()兩種寫(xiě)法高下立判。后者我一眼看過(guò)去就知道這人的生產(chǎn)環(huán)境經(jīng)驗(yàn)豐富因?yàn)槲覍?shí)際處理配置文件時(shí)就踩過(guò)value里藏著等號(hào)的坑。你答題時(shí)能讓閱卷人產(chǎn)生這種這人是同行的感覺(jué)分?jǐn)?shù)一定低不了。2.3 文本處理的常用命令組合Shell筆試?yán)镂谋咎幚砣齽蚲rep、sed、awk屬于必考內(nèi)容建議你不光會(huì)用還得會(huì)組合。這里分享幾個(gè)我從實(shí)際工作里總結(jié)出來(lái)的高頻組合公式從日志中統(tǒng)計(jì)某個(gè)關(guān)鍵詞的分布grep ERROR app.log | awk {print $1} | sort | uniq -c | sort -rn按時(shí)間范圍拉取日志片段sed -n /2020-06-01 10:00:00/,/2020-06-01 10:30:00/p app.log替換配置文件的某個(gè)字段要求整行匹配才替換sed -i /^max_connections/c\max_connections2000 /etc/mysql/my.cnf考試時(shí)大概率會(huì)出現(xiàn)類(lèi)似的組合場(chǎng)景建議你別只背單條命令要理解管道符串聯(lián)之后的每一步作用。面試的時(shí)候考官如果追問(wèn)中間這步輸出什么格式能準(zhǔn)確答上來(lái)的人不到三成。3. 數(shù)據(jù)庫(kù)與緩存從基礎(chǔ)語(yǔ)法到性能思維3.1 MySQL考點(diǎn)索引與慢查詢(xún)校招筆試考數(shù)據(jù)庫(kù)幾乎繞不開(kāi)MySQL。但我發(fā)現(xiàn)一個(gè)現(xiàn)象很多同學(xué)對(duì)SQL語(yǔ)法背得滾瓜爛熟什么left join、子查詢(xún)、group by都用得很溜但一遇到為什么這個(gè)查詢(xún)慢就答不上來(lái)。這說(shuō)明什么說(shuō)明他們?nèi)鄙傩阅芤暯?。針?duì)金山這類(lèi)互聯(lián)網(wǎng)辦公產(chǎn)品數(shù)據(jù)庫(kù)題目大概率會(huì)圍繞如何優(yōu)化一條慢SQL和如何設(shè)計(jì)表結(jié)構(gòu)支撐某業(yè)務(wù)場(chǎng)景來(lái)出。我強(qiáng)烈建議你在復(fù)習(xí)時(shí)每一道SQL題都追問(wèn)自己三個(gè)問(wèn)題這張表的字段長(zhǎng)度合理嗎有沒(méi)有為所有where條件里的字段建立索引這條查詢(xún)會(huì)不會(huì)產(chǎn)生全表掃描explain的結(jié)果是什么樣的如果數(shù)據(jù)量到100萬(wàn)、1000萬(wàn)級(jí)這條SQL還能扛住嗎能問(wèn)出這三個(gè)問(wèn)題說(shuō)明你是真的在生產(chǎn)環(huán)境里見(jiàn)過(guò)數(shù)據(jù)量級(jí)而不是只在本地練習(xí)庫(kù)里跑過(guò)幾千行數(shù)據(jù)。舉個(gè)典型的考題例子有一個(gè)訂單表orders字段包括order_id、user_id、status、created_at查詢(xún)某用戶(hù)最近10筆訂單的SQL請(qǐng)優(yōu)化。最差的答案就是直接select * from orders where user_id 123 order by created_at desc limit 10;因?yàn)楫?dāng)數(shù)據(jù)量大時(shí)MySQL需要先篩出該用戶(hù)所有訂單再排序。更好的思路是創(chuàng)建(user_id, created_at)的聯(lián)合索引讓索引直接按用戶(hù)和時(shí)間排序避免額外排序操作。加上索引之后這條SQL基本可以走索引覆蓋掃描性能提升往往是幾十倍級(jí)別。這不是憑空說(shuō)的是實(shí)際線(xiàn)上優(yōu)化過(guò)的經(jīng)驗(yàn)。3.2 Redis考點(diǎn)緩存穿透、擊穿與雪崩數(shù)據(jù)庫(kù)之外的第二個(gè)高頻考點(diǎn)就是Redis。字節(jié)也好、金山也好互聯(lián)網(wǎng)公司基本都重度依賴(lài)Redis做緩存。校招題里最常見(jiàn)的三種極端情況這里先給你說(shuō)清楚緩存穿透查詢(xún)一個(gè)根本不存在的數(shù)據(jù)Redis里沒(méi)有DB里也沒(méi)有惡意請(qǐng)求直接打到DB上。解法一般是布隆過(guò)濾器或者緩存空值并設(shè)置短過(guò)期時(shí)間。緩存擊穿某個(gè)熱點(diǎn)key在過(guò)期瞬間大量請(qǐng)求同時(shí)落到DB上。解法是互斥鎖重建緩存熱點(diǎn)數(shù)據(jù)邏輯上永不過(guò)期后臺(tái)異步續(xù)期。緩存雪崩大量key在同一時(shí)間段集中過(guò)期導(dǎo)致DB壓力驟增。解法是給過(guò)期時(shí)間加一個(gè)隨機(jī)值打散過(guò)期時(shí)間點(diǎn)。我不會(huì)只丟概念下面用一個(gè)題來(lái)演示答題思路。題目可能是某系統(tǒng)使用Redis緩存用戶(hù)信息key為user:{id}請(qǐng)?jiān)O(shè)計(jì)一個(gè)方案避免緩存雪崩。常規(guī)答法是過(guò)期時(shí)間設(shè)置為setex user:{id} 3600 value但3600秒就是固定值所有用戶(hù)同時(shí)過(guò)期。優(yōu)化方案是過(guò)期時(shí)間設(shè)置為3600 random.randint(0,300)這樣同一秒內(nèi)過(guò)期的key大幅減少。如果再進(jìn)一步可以引入多級(jí)緩存比如本地緩存一層Redis一層徹底兜底。筆試的考察深度通常到方案設(shè)計(jì)這個(gè)層級(jí)就夠了但如果你能多提一嘴熱點(diǎn)key的過(guò)期延時(shí)續(xù)期策略閱卷人印象會(huì)非常深。3.3 數(shù)據(jù)一致性場(chǎng)景題除了直接考語(yǔ)句和緩存策略第二部分還經(jīng)常給一個(gè)業(yè)務(wù)場(chǎng)景來(lái)考數(shù)據(jù)一致性。比如用戶(hù)修改頭像后需要展示新頭像但CDN/緩存里還是舊頭像你怎么處理這類(lèi)題的考察點(diǎn)很明確你有沒(méi)有真正思考過(guò)寫(xiě)更新和緩存失效之間的順序。我個(gè)人推薦的經(jīng)驗(yàn)公式是先更新數(shù)據(jù)庫(kù)再刪緩存。為什么不是先更新緩存因?yàn)椴l(fā)場(chǎng)景下先更新緩存再寫(xiě)庫(kù)一旦寫(xiě)庫(kù)失敗緩存里就是錯(cuò)誤數(shù)據(jù)。而先更新庫(kù)哪怕刪緩存失敗最多是下一次請(qǐng)求打回一個(gè)舊值再過(guò)一次過(guò)期時(shí)間就自愈了。這個(gè)順序問(wèn)題是我在真實(shí)項(xiàng)目中踩過(guò)坑后才徹底明白的。筆試時(shí)把這個(gè)順序邏輯寫(xiě)清楚比堆一堆術(shù)語(yǔ)要強(qiáng)得多。4. 網(wǎng)絡(luò)與系統(tǒng)排查思路比記參數(shù)更重要4.1 高頻網(wǎng)絡(luò)知識(shí)點(diǎn)TCP握手、HTTP狀態(tài)碼、DNS解析金山辦公的筆試中網(wǎng)絡(luò)部分的題目不會(huì)像網(wǎng)絡(luò)工程師那樣考報(bào)文級(jí)細(xì)節(jié)更多是考你能不能在應(yīng)用服務(wù)出問(wèn)題時(shí)順著網(wǎng)絡(luò)去排查鏈路。所以TCP三次握手過(guò)程、四次揮手為什么需要TIME_WAIT、HTTP的常見(jiàn)狀態(tài)碼含義200、301、302、403、404、500、502、503這些一定要滾瓜爛熟。另外我建議你重點(diǎn)準(zhǔn)備一下HTTP和HTTPS的區(qū)別以及Nginx反向代理的工作方式因?yàn)榻鹕竭@種產(chǎn)品線(xiàn)很重的公司線(xiàn)上一定大量使用Nginx做網(wǎng)關(guān)和負(fù)載均衡。常見(jiàn)的前置Nginx返回502的排查思路是先確認(rèn)后端服務(wù)是否存活再看Nginx連接后端的超時(shí)配置最后看后端進(jìn)程的連接數(shù)是否被打滿(mǎn)。這種排查鏈路如果能在筆試?yán)镉眠壿嬊逦奈淖謱?xiě)出來(lái)是很加分的。4.2 系統(tǒng)負(fù)載高你能不能在半小時(shí)內(nèi)定位問(wèn)題服務(wù)器CPU負(fù)載突然飆高你如何排查這幾乎是每年必出的場(chǎng)景題但能把整個(gè)過(guò)程答完整的人很少。我會(huì)用下面這套五步走來(lái)拆解一個(gè)典型的壓力場(chǎng)景也是我做線(xiàn)上問(wèn)題定位時(shí)的習(xí)慣第一先用uptime看Load Average的整體趨勢(shì)判斷負(fù)載是在漲還是已經(jīng)平穩(wěn)。如果Load持續(xù)高于CPU核心數(shù)說(shuō)明可能存在真正的資源爭(zhēng)搶而不是瞬時(shí)抖動(dòng)。第二用top進(jìn)入交互界面按CPU排序找到具體是哪個(gè)進(jìn)程占用了大量CPU。這一步最關(guān)鍵因?yàn)樨?fù)載高只是一個(gè)表象真正的問(wèn)題往往集中在某一個(gè)進(jìn)程。如果這個(gè)進(jìn)程是Java應(yīng)用接著用top -Hp 進(jìn)程號(hào)找到這個(gè)進(jìn)程內(nèi)部的哪些線(xiàn)程占用了CPU再用jstack導(dǎo)線(xiàn)程快照看這些線(xiàn)程在干什么。第三如果不是CPU密集型而是IO等待那么top里的wa指標(biāo)會(huì)明顯偏高此時(shí)需要用iostat看磁盤(pán)吞吐和IOPS看看是不是磁盤(pán)讀寫(xiě)的瓶頸。很多新人只盯著CPU忽略磁盤(pán)IO結(jié)果排查了半天方向全錯(cuò)。第四檢查內(nèi)存用free -h看還有多少可用內(nèi)存用vmstat看swap使用情況。如果你的應(yīng)用在持續(xù)swap那性能一定好不了這往往是內(nèi)存設(shè)置不合理導(dǎo)致的。第五結(jié)合上下文看看是不是流量突增、代碼死循環(huán)、緩存失效回源這三種典型因素。這套思路如果你是第一次接觸建議反復(fù)讀幾遍因?yàn)檫@就是一線(xiàn)運(yùn)維開(kāi)發(fā)工程師處理線(xiàn)上事故的底層邏輯筆試的時(shí)候把一個(gè)完整鏈路答下來(lái)絕對(duì)能讓閱卷老師覺(jué)得你不是紙上談兵。4.3 經(jīng)典的端口不通排查題再給你拆一道高頻基礎(chǔ)題用戶(hù)反饋某個(gè)服務(wù)訪(fǎng)問(wèn)不通你怎么排查這道題的經(jīng)典答題框架必須是從底層往上層一層層排除先確認(rèn)服務(wù)進(jìn)程有沒(méi)有在監(jiān)聽(tīng)對(duì)應(yīng)端口ss -lntp | grep 8080。再確認(rèn)本機(jī)防火墻是否放行端口iptables -L -n或firewall-cmd --list-all。然后在客戶(hù)端測(cè)試TCP連通性telnet 目標(biāo)IP 8080或nc -vz 目標(biāo)IP 8080。如果TCP通但HTTP不通用curl -v看完整請(qǐng)求輸出重點(diǎn)看返回的狀態(tài)碼和響應(yīng)頭。很多同學(xué)在這個(gè)題上第一反應(yīng)就是重啟服務(wù)或者看日志實(shí)際上第一件該做的事是確認(rèn)到底是客戶(hù)端連不上還是服務(wù)端沒(méi)響應(yīng)。把鏈路拆開(kāi)才能定位到具體某一層出了問(wèn)題。做題和干活是一樣的先確認(rèn)故障邊界再深入排查。筆試時(shí)把這個(gè)邏輯寫(xiě)得越清晰得分就越高。5. 容器化與CI/CD從工具使用到鏈路思維5.1 Docker的基礎(chǔ)題鏡像與容器的生命周期金山辦公2020年前后的業(yè)務(wù)容器化已經(jīng)是常態(tài)所以考Docker基礎(chǔ)毫不意外。這里有個(gè)核心概念題你務(wù)必搞清楚鏡像和容器的區(qū)別。鏡像是一個(gè)只讀的模板容器是鏡像運(yùn)行時(shí)的實(shí)例。你可以把平時(shí)docker run、docker build、docker commit、docker exec這些命令都答上來(lái)但我不建議只背命令更重要的是理解容器本質(zhì)上是進(jìn)程級(jí)別的隔離這個(gè)理念。筆試在Docker這塊的常見(jiàn)問(wèn)法有Dockerfile中CMD和ENTRYPOINT的區(qū)別是什么如何減小Docker鏡像體積如何讓容器里的服務(wù)優(yōu)雅退出以最后一個(gè)問(wèn)題為例優(yōu)雅退出的核心是讓主進(jìn)程能夠接收到SIGTERM信號(hào)并完成清理而不是被直接kill。很多同學(xué)壓根不知道Docker stop發(fā)的是SIGTERM而不是SIGKILL也不清楚Java應(yīng)用要配合trap或者Spring Boot的Graceful Shutdown特性才能實(shí)現(xiàn)優(yōu)雅下線(xiàn)。這些細(xì)節(jié)如果能在筆試?yán)飳?xiě)出來(lái)可以證明你真用容器跑過(guò)生產(chǎn)服務(wù)而不僅僅是在本地docker run -it過(guò)。5.2 CI/CD流程設(shè)計(jì)題不只是一個(gè)概念題既然崗位叫運(yùn)維開(kāi)發(fā)CI/CD相關(guān)的問(wèn)題一定會(huì)占一部分比重。我覺(jué)得這部分最常考的題型是設(shè)計(jì)題比如請(qǐng)?jiān)O(shè)計(jì)一條從代碼提交到生產(chǎn)環(huán)境發(fā)布的流水線(xiàn)。很多同學(xué)第一反應(yīng)是把GitLab CI、Jenkins、Docker、K8s這些名詞懟上去但我要告訴你的是面試官想看到的不是工具清單而是階段劃分。一條合格的流水線(xiàn)至少包含以下幾個(gè)階段代碼提交觸發(fā)構(gòu)建階段進(jìn)行編譯和單元測(cè)試。構(gòu)建成功后產(chǎn)出制品鏡像或JAR包推送到制品庫(kù)。部署到測(cè)試環(huán)境跑自動(dòng)化接口測(cè)試。審核通過(guò)后部署到預(yù)發(fā)環(huán)境進(jìn)行冒煙驗(yàn)證。最后灰度發(fā)布到生產(chǎn)環(huán)境觀察監(jiān)控指標(biāo)逐步放量。如果筆試題目要求你畫(huà)流程圖或用語(yǔ)言描述流程建議你按上面的層次結(jié)構(gòu)來(lái)答每一步說(shuō)清楚輸入是什么、輸出是什么、誰(shuí)觸發(fā)、出現(xiàn)問(wèn)題怎么回滾。能把這四個(gè)維度講清楚你的工程化思維就已經(jīng)超過(guò)大多數(shù)人。5.3 K8s重點(diǎn)Pod、Deployment、Service的關(guān)系近些年校招筆試題對(duì)Kubernetes的考察越來(lái)越頻繁考的倒不深但會(huì)涉及最核心的抽象模型。舉個(gè)例子Pod和Deployment的區(qū)別是什么Service怎么實(shí)現(xiàn)負(fù)載均衡。很多同學(xué)答Pod是最小調(diào)度單元Deployment是管理副本的控制器這話(huà)沒(méi)錯(cuò)但太干了。我提供一個(gè)更貼合實(shí)操的答法Deployment負(fù)責(zé)聲明我要多少個(gè)Pod副本保持運(yùn)行并且當(dāng)Pod掛了的時(shí)候自動(dòng)拉起新的如果業(yè)務(wù)需要升級(jí)版本Deployment會(huì)按照RollingUpdate策略逐個(gè)替換Pod避免服務(wù)中斷。而Service則是給一組Pod提供一個(gè)穩(wěn)定的訪(fǎng)問(wèn)入口實(shí)現(xiàn)負(fù)載均衡和服務(wù)發(fā)現(xiàn)。答題的時(shí)候能把升級(jí)策略副本管理服務(wù)暴露這幾個(gè)行為層面的內(nèi)容帶出來(lái)比單純默寫(xiě)概念好得多。6. 實(shí)戰(zhàn)題型演練把思路落到實(shí)處6.1 場(chǎng)景題一日志關(guān)鍵詞監(jiān)控報(bào)警這種題我強(qiáng)烈建議你認(rèn)真過(guò)一遍因?yàn)樗湫土藥缀趺總€(gè)運(yùn)維開(kāi)發(fā)崗位面試都會(huì)碰到。題目描述通常是線(xiàn)上有多個(gè)應(yīng)用實(shí)例需要監(jiān)控日志中出現(xiàn)OutOfMemory關(guān)鍵詞的實(shí)例并發(fā)送報(bào)警你會(huì)怎么實(shí)現(xiàn)一個(gè)完整的方案分為數(shù)據(jù)采集、實(shí)時(shí)處理、告警通知三個(gè)部分。采集端可以用Filebeat或Logstash采集應(yīng)用日志發(fā)到Kafka實(shí)時(shí)處理端可以用Flink或者Go的grok庫(kù)做關(guān)鍵詞匹配也可以簡(jiǎn)單用Logstash的filter直接過(guò)濾告警端命中關(guān)鍵詞后通過(guò)Webhook調(diào)用企業(yè)微信、釘釘或短信網(wǎng)關(guān)。這樣一套鏈路下來(lái)比寫(xiě)個(gè)腳本crontab每分鐘grep日志要健壯得多不會(huì)漏報(bào)也能做到秒級(jí)響應(yīng)。如果筆試只讓你用一個(gè)腳本一個(gè)定時(shí)任務(wù)這種輕量方案來(lái)解決也不能說(shuō)錯(cuò)但你要意識(shí)到它的缺陷單點(diǎn)問(wèn)題、日志輪轉(zhuǎn)時(shí)的漏讀、多實(shí)例部署困難。答完輕量方案之后如果能主動(dòng)補(bǔ)一句這個(gè)方案適合臨時(shí)應(yīng)急長(zhǎng)期用我會(huì)考慮引入采集鏈路這樣的作答層次會(huì)更飽滿(mǎn)。6.2 場(chǎng)景題二線(xiàn)上發(fā)布后性能下降還有一類(lèi)高頻場(chǎng)景題新版本發(fā)布后線(xiàn)上調(diào)用響應(yīng)時(shí)間明顯變長(zhǎng)你怎么排查我的第一反應(yīng)永遠(yuǎn)不是回滾而是先確認(rèn)影響范圍和變更內(nèi)容。因?yàn)榛貪L是一種高成本操作且如果是代碼問(wèn)題回滾后可能要重新排查所以除非線(xiàn)上已經(jīng)不可用否則一般建議先定位。第二步是看監(jiān)控曲線(xiàn)。發(fā)布前后對(duì)比CPU、內(nèi)存、QPS、RT、GC情況如果GC次數(shù)和耗時(shí)明顯上升那可能是新代碼中創(chuàng)建了大量對(duì)象或者某個(gè)緩存設(shè)置有問(wèn)題如果QPS沒(méi)變但RT變大那重點(diǎn)檢查有沒(méi)有慢調(diào)用、鎖競(jìng)爭(zhēng)、數(shù)據(jù)庫(kù)連接池是否被打滿(mǎn)。第三步是看日志特別是error日志和慢日志。如果某個(gè)接口的耗時(shí)從200ms變成800ms用tracing工具定位到調(diào)用鏈中具體哪一環(huán)耗時(shí)最長(zhǎng)。如果是外部依賴(lài)數(shù)據(jù)庫(kù)、第三方接口變慢那就是下游問(wèn)題如果是自身代碼邏輯導(dǎo)致那就直接看對(duì)應(yīng)代碼段的性能。排查思路比具體命令重要。答出先看監(jiān)控、再分模塊定位、最后看代碼這個(gè)三層遞進(jìn)邏輯基本就穩(wěn)了。6.3 場(chǎng)景題三如何保障系統(tǒng)高可用這個(gè)問(wèn)題范圍很大經(jīng)常作為筆試最后一道論述題或設(shè)計(jì)題出現(xiàn)。考察面廣但沒(méi)有標(biāo)準(zhǔn)答案關(guān)鍵在于你能否覆蓋到多個(gè)層面。我習(xí)慣從入口層、應(yīng)用層、數(shù)據(jù)層、基礎(chǔ)設(shè)施層四個(gè)角度來(lái)答。入口層DNS解析可以配置多線(xiàn)路Nginx做多節(jié)點(diǎn)負(fù)載均衡避免單點(diǎn)入口。應(yīng)用層服務(wù)部署多副本放到不同機(jī)架/可用區(qū)自動(dòng)故障轉(zhuǎn)移無(wú)狀態(tài)服務(wù)用負(fù)載均衡重新分發(fā)流量。數(shù)據(jù)層數(shù)據(jù)庫(kù)做主從復(fù)制Redis用主從加哨兵或者集群定時(shí)備份和日志備份形成災(zāi)備體系。基礎(chǔ)設(shè)施層網(wǎng)絡(luò)、電源、存儲(chǔ)都考慮冗余監(jiān)控系統(tǒng)全維度覆蓋出現(xiàn)異常時(shí)能做自動(dòng)化預(yù)案。這類(lèi)論述題的加分項(xiàng)是成本意識(shí)。如果能在方案里提到核心鏈路重點(diǎn)保障非核心業(yè)務(wù)降級(jí)處理這種策略性設(shè)計(jì)比單純堆一堆高可用組件要高級(jí)得多。因?yàn)槲易龅南到y(tǒng)都知道把三個(gè)9還是五個(gè)9成本不是線(xiàn)性上漲而是指數(shù)級(jí)上漲。能夠結(jié)合業(yè)務(wù)實(shí)際去設(shè)計(jì)高可用方案才是面試官最想看到的能力。7. 備考與答題的獨(dú)家實(shí)操心得7.1 筆試題的常見(jiàn)扣分點(diǎn)早知道早避坑我說(shuō)幾個(gè)閱卷時(shí)最常見(jiàn)的扣分點(diǎn)希望對(duì)你有幫助。第一題目要求寫(xiě)出完整命令或?qū)懗瞿_本結(jié)果只寫(xiě)了核心命令沒(méi)寫(xiě)流程控制。比如讓寫(xiě)一個(gè)腳本檢查多個(gè)服務(wù)的端口是否存活很多人就寫(xiě)nc -zv 127.0.0.1 80不寫(xiě)循環(huán)、不寫(xiě)判斷、不寫(xiě)輸出日志。這在填空題里能得分但在實(shí)現(xiàn)題里只能拿一半分。第二答案里沒(méi)有體現(xiàn)防御性編程。舉個(gè)例子一個(gè)腳本里用了臨時(shí)文件正常運(yùn)行沒(méi)問(wèn)題但如果上次異常退出后臨時(shí)文件沒(méi)有清理再次運(yùn)行就會(huì)報(bào)錯(cuò)。有經(jīng)驗(yàn)的人在腳本開(kāi)頭會(huì)加一句trap rm -f /tmp/xxx.$$ EXIT來(lái)保證退出時(shí)清理。這種細(xì)節(jié)寫(xiě)出來(lái)就是強(qiáng)烈的生產(chǎn)經(jīng)驗(yàn)信號(hào)。第三只寫(xiě)做了什么不寫(xiě)為什么這么做。比如答Redis緩存更新方案只說(shuō)更新數(shù)據(jù)庫(kù)后刪除緩存沒(méi)說(shuō)為什么這個(gè)順序更安全分?jǐn)?shù)就差一截。我建議答題時(shí)養(yǎng)成習(xí)慣結(jié)論理由例外。結(jié)論是一句話(huà)理由是把關(guān)鍵邏輯講清楚例外是說(shuō)明什么場(chǎng)景下方案不適用。7.2 短期內(nèi)高效備考的方向建議如果距離筆試只剩一到兩周我建議你把精力集中在以下三個(gè)板塊這是性?xún)r(jià)比最高的突擊路徑一是Shell文本處理和Python腳本題這是最高頻的考法占分比最大而且短期刷題效果最明顯。把常見(jiàn)場(chǎng)景題做一遍形成肌肉記憶。二是MySQL和Redis的重點(diǎn)應(yīng)用集中看索引優(yōu)化、explain的使用、緩存三類(lèi)問(wèn)題穿透、擊穿、雪崩的解法務(wù)必能用文字理通邏輯。三是網(wǎng)絡(luò)和系統(tǒng)排查題重點(diǎn)是TCP握手、HTTP狀態(tài)碼、CPU高負(fù)載排查用先定位再處理的思路來(lái)答題拒絕只堆名詞。至于Docker、K8s、CI/CD這些內(nèi)容如果在筆試中出現(xiàn)大概率是基礎(chǔ)概念加簡(jiǎn)單的設(shè)計(jì)題時(shí)間不夠的話(huà)可以先把Dockerfile核心指令、Pod/Deployment/Service區(qū)別、流水線(xiàn)階段劃分這三大塊吃透。7.3 一些我的個(gè)人經(jīng)驗(yàn)總結(jié)我做了這些年運(yùn)維開(kāi)發(fā)最深的感受是這個(gè)崗位筆試不是終點(diǎn)準(zhǔn)確說(shuō)筆試只是一個(gè)篩選信號(hào)。真正決定你能否通過(guò)后面面試的是你對(duì)為什么的理解程度。公司培養(yǎng)一個(gè)運(yùn)維開(kāi)發(fā)新人的成本并不低他們希望招到的是遇到問(wèn)題不慌、能自己找到答案的人。所以備考筆試的時(shí)候不妨多地假如我是這個(gè)系統(tǒng)的運(yùn)維負(fù)責(zé)人我會(huì)怎么做來(lái)思考問(wèn)題。你在草稿紙上反復(fù)推敲過(guò)的每一個(gè)極端場(chǎng)景最后都會(huì)變成你面試時(shí)的底氣。還有一個(gè)小建議。筆試時(shí)如果遇到完全沒(méi)見(jiàn)過(guò)的題千萬(wàn)不要空著不寫(xiě)。你可以先把題目中你已經(jīng)知道的知識(shí)點(diǎn)列出來(lái)再?lài)L試給出一個(gè)你認(rèn)為合理的方案哪怕不完整也能讓閱卷人看到你分析問(wèn)題的方向是對(duì)的。我在實(shí)際業(yè)務(wù)里遇到未知問(wèn)題也是這個(gè)策略先把已知邊界確認(rèn)掉再把問(wèn)題從大化小一層層拆最后總能找一個(gè)可以落地的解法。這套思路本身其實(shí)比任何標(biāo)準(zhǔn)答案都更能代表運(yùn)維開(kāi)發(fā)工程師的核心能力。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
丁香五月六月激情| 草综合网| 人人草人人爱手机视频看看| 色月丁| 99精品无码网站| 无码免费人妻A片AAA毛片西瓜| 啪啪啪大香蕉| 天天日日夜夜爽。| 色婷婷久久综合久色综| 欧美 日韩 人妻 高清 中文| 婷婷伊人综合中文字幕| 日日做天天操夜夜爽| 在线18av | 五月天激情子轮| 91大神操美女| 五月天婷婷色综合| 极品另类| 人人干AV| 日韩婷婷| 日本全黄一级999| 日日日日日| 久久9热| 五月天婷婷激情小说电影| 日本久久精品| 91n啪啪| 色五月五月婷婷| 久碰视频| 五月婷婷狠狠久久| 欧美日韩国产一二区| 婷婷激情人妻| 丁香五月欧美激情| 都市激情蜜桃婷婷五月天| 色噜噜狠狠色综合日日| 丁香久月| 日本色99| 久久精热| 91小黄书网址在线观看| 激情婷婷五月黑人| 婷婷六月丁香在线| 99激情在线| 538在线精品| 五月天丁香网| 极品另类| 丁香五月色色| 五月丁香影院| 婷婷激情六月综合| 五月婷婷AV| 丁香五月婷久久| 开心五月婷婷五月| 色婷婷成人丁香| 色欲av伊人久久大香线蕉影院| 丁香五月激情图片婷婷| 另类少妇人与禽zOZZ0性伦| 综合色色色色色色| 天天综合中文| 夜夜操天天干| 亚洲综合色色| www.久久久.com| 蜘蛛女侠2003满天星免费观看| 亚洲色情免费网| 99久久精品国产色欲| 日本三级99人妇网站| 99热最新网址| 色婷婷97| 色狠狠色噜噜AV天堂五区| 开心五月婷婷激情| 伊人喵咪a V| 欧美日韩91| 三级黄网站| 思思热在线| 99精品久久久久| 狼人婷婷综合| 欧美精品XXXXBBBB| 亚州综合色| 色色草97| 97婷婷在线视频| 91九九九九九九| 精品一二三区久久AAA片 | 这里只有精品2| 大香蕉五月丁香| 综合狠狠五月婷婷| 69激情小说| 欧美婷婷色五月| 五月丁香好婷婷A片网| 99 热国产在| WWW.99热| 狠狠色噜噜色狠狠狠综合久久成人波| 大香蕉综合在线| 国产精品A成V人在线播放| 丁香五月婷婷基地| 色婷婷色综合激情91| 五月婷婷激情久久| 婷婷综合色五月天| 大香蕉手机视频| 91久女| 激情啪啪五月| 欧洲精品欧洲情| 五月情综合| 五月天激情无码高清| 六月丁香婷婷综合在线| 天天操天天操天天操天天操天天操| 五月丁香婷婷啪啪| 色欧美日| 都市激情蜜桃婷婷五月天| 五月天成人在线播放丁香| 激情综合99| 伊人综合网站| 《诡秘之主》在线观看| 五月天欧美激情| 五月婷婷开心网| 色色色欧美| 丁香久月婷| 日本不卡中文字幕| 日本色五月| 天天操夜夜操| 亚洲操逼片| 色狠狠狠干| 激情五月少妇| 色色色色色色综合网| 激情国产五月| 久热亚洲| 婷婷操逼网| 亚洲日日日| 99啪啪| 亚州第一A片| 天天搞夜夜叫| 99久久www| 亚洲综合五月天| 97在线观看| 大香av| 激情五月婷婷在线| 99综合视频一体| 91好好热日本在线| 婷婷中文字幕| 91碰免费视频| 99热成人在线观看| 五月婷狠狠| 五月综合婷婷开心网| 这里只有精彩视| 亚洲色啪| 99热这里都是精品| 狠狠色丁香| 91色综合网站在线| 五月丁香六月婷婷久久久综合| 亚洲综合五月天| 超碰电影在线播放| 五月天亚洲色| 五月开心啪啪| 超碰在线超碰| 天天综合色丁香| 丁香五月婷在线观看| 五月天激情视频| 99热在线资源| 狠狠色婷婷7777久| 在线VA视频| 丰满少妇猛烈A片免费看观看| 中海油常州环保涂料有限公司| 99热偷拍| 九九热在线观看视频网站| 国产av天堂| 五月天激情综合在线| 日本一道久久| 开心久久爱五月天| 中文字幕在线视频播放| 丁香五月婷婷五月| 人人草成人视频| 色久影院| 久久在这里有精品| W色综合| 婷婷十月丁香| 五月丁香啪啪婷婷| 色色色色色色色色综合网| 丁香五月在线人妻| 97日本操| 99在线免费视频| 色色激情网| 久久HD| 五月天激情站| 亚洲av无码影院| 97人人做| 色五月婷婷婷婷| www.色情五月天.com| 久久伊人9| 天天操夜夜啊| 97色图片中文字幕视频在线观看| 伊人婷婷五月天| 99热这里精| WWW.久久99| 日本五月婷婷| 欧美婷婷五月激情| 色伊人啪| 99热精品免费| 《蜘蛛女》梁铮1995| 伊人五月天97| 婷婷99狠| 狠狠操狠狠操| 五月天激情久久| 久月婷婷| 五月婷天堂视频| 久久婷婷亚洲| 婷婷五月丁香色综合| 91久久1118| 激情网站综合五月天| 91fuliwang| 婷婷五月丁香久久| 5月丁香啪啪啪| 亚洲色色色色色色色色色| 开心五月色婷婷综合开心网| 亚洲 在线 性爱| 色婷婷丁香AV综合| 黄桃AV无码免费一区二区三区| 五月婷综合| 九九热这里只有精品556| 婷婷狠狠青青| 欧美成人AAA片一区国产精品| 国产精品VA在线| 久久五月天激情美女| 婷婷欠久少妇| 大战熟女丰满人妻AV| 国产va视频| 综合激情五月综合激情五月激情1| 91jiuseshunv| 5Www色5夜| 日本婷婷| 夜夜撸夜夜骑| 色五月丁香激情视频| 91ncm视频| 韩日另类| 另类 在线| 五月久久噜噜| 国产色丁香| 成人啪啪色婷婷久| 国产成人一区二区三区在线观看| 亚洲久久激情| 国产偷人妻精品一区| 丁香五月综合激情久久潮喷| 色婷婷视频| 第五婷婷伊人丁香| 婷婷色情五月| 丁香五月婷婷Av| 成人国产欧美大片一区| 黄色中文字目| 五月婷婷丁香| 超碰不卡在线| 97丁香五月| 欧美成人精品老美女噜噜噜| 99视频热| 99这里都是精品6| 99思思热只有在这里看 | 这里只有精品视频免费在线观看| 欧美日韩99| WWW.桔色成人.COM| 欧洲亚洲免费视频9| 五月丁香激情综合久久| 婷婷 激情 五月| 99er这里只有精品| 开心四月婷婷在线色播播| 日韩无码人妻一区二区| 色蜜婷婷| 91狠狠色丁香婷婷综合久久精品| 婷婷五月激情四月综合| 天天在线天天综合网色| 9久热这里只有精品| 丁香婷婷射| 丁香五月激情六月| 成人超碰Av| 大陆肏屄视频| 久久人人九| 欧美啪啪9| 超碰在线人人| 欧美大肥婆大肥BBBBB| 婷婷在线视频| 色婷婷香蕉| 综合色天天| 成人做爰A片免费看视频| 久久综合影院| 狠狠插狠狠插| 伊人在线另类| 色五月婷婷av| 国产婷婷五月中文字幕高清| 5月婷婷五月天| 天天爽天天摸| 婷婷金品综合视频| 99干免费视频| 超碰成人在线观看| 99热精国产这里只有精品| 色99热| 久久人人妻| 91成人视频| 色丁香久综合在线久综合在线观看| 五月综亚洲| 国产精品久久7777777精品无码| 99re这里只有精品视频了| 久久99热这里只有精品| 欧美婷婷综合| 玖玖在线| 狠狠精品干练久久久无码中文字幕 | 五月婷六月综合在线观看| 五月色丁香成人| 思思久久99热只有频精品66| 天天日夜夜拍| 国产女生爱爱AA| 91avse| 伊人五月人妻精品| 欧美日本国产欧美日本韩国99| 色五月婷婷久久| 国产乱妇乱子在线播视频播放网站| 大香网伊人久久综合| 伊人激情AV一区二区三区| 五月天丁香久久综合| 玖玖九九超碰| 超碰99在线| 五月社区婷婷激情| 久/久精品99看9| 婷婷色色综合| 五月情丁香色| 久久五月天激情| 激情网五月| 超碰A V在线| 久久天天天| 夜夜操天天干| 亚洲区在线| 第四色婷婷日本| 亚洲欧洲小视频9| 99er6免费视频热播| 成人网丁香五月| 99热久久这里只有精品2010| 天天综合精品| 婷婷综合在线| 欧美综合激情五月天| 丁香五月成人| 久久婷婷五月综合精品蜜芽| 丁香五月激情啪啪| 97超级啪啪在线观看| 欧美日韩成人| 伊人五月天在线| 毛片蕉地一二| 热久视频| 亚洲视频1区| 伊人日日干| 五月婷婷AV| 九九99热久久精品66中文字幕| 狠狠干激情五月| 婷婷五月丁香五月| 黄网在线免费观看| 99热啪啪| 六月丁香婷婷视频综合在线观看| 日韩啪啪网| 91视频久久久| 99在线精品视频| 99热天堂| 激情婷婷在线中文字幕| 国产免费AV网站| 射区导航| 激情另类综合| 这里只有精品视频视频在线观看| 色丁香五月| 色婷婷免费观看| 开心五月婷婷| 丁香五月色色| 天天日天天舔| 夜夜爽日日躁| 色婷婷yy久| 激情综合六月| 操日本三片99| 亚洲激情五月天| 婷婷和五月天| 97夫妻超碰| 激情五月天在线| 国产精自产拍久久久久久蜜 | 久久五月天视频| 先锋资源婷婷| 激情五月天网| 丁香激情婷婷网| 婷婷成人av| 婷婷色五月天在线| 日韩综合网络男女香蕉a片| 粉嫩av懂色av蜜臀av熟妇| 生活片五区| 无码网| 伊人色综合网| www一区二区三区| 丁香五月婷婷影视先锋| www,com,五月色色| 亚洲激情高潮| 综合爱久久| A在线观看| 金桔一区二区ab地址| 97色色网| 日韩AV大全| 欧美性爱一区| 亚洲精品字幕在线观看| 欧美黄色韩日网| 色婷婷综合久久久久| 久久久人妻| 五月丁香六月婷婷亚洲| 久久精品99国产精品日本| 五月色丁香激情| 丁香色五月AV在线| 91精品久久久久久综合五月天| 全国最新疫情| 五月丁香好婷婷A片网| 99亚州综合精品成人网| 婷婷五月天激情综合深爱激情| 五月丁香激情综合六月涩涩爱| 99热这里只有精品8| 婷婷五月色网| 桃色五月婷婷| 91无码高清| 国产激情视频在线观看| 色婷婷狠狠18| 久草久青福利| 久99综合婷婷| 99九九免费精品| 天天操夜夜操| 五月婷婷偷拍| 国产精品五月天婷婷| 色~性~乱~伦~噜| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 五月婷婷丁香色播网| 精品人妻在线| 欧美日本不卡黄色片| 亚洲欧美成人在线| 色五月综合| 婷婷婷五月天最新综合你懂的| 黑人熟妇一区二区三区| av五月天婷婷丁香| 国产精品国产成人国产三级| 九九操操| 五月丁香精品| 成人免费网站免费看| 丁香五月影院| 丁香五月六月综合激情| 六月丁香色色| 很很干天天干| 亚洲aV写真天天综合网久久| 五月综亚洲| 五月丁香啪啪网| 国产成人亚洲综合亚洲| 沈娜娜av| 激情五月成年| 午夜婷婷| 五月天婷婷色色| 婷综合| 色五月婷婷亚洲| 影音先锋 91工厂| 九九碰九九爱97超碰| 第五婷婷伊人丁香| 激情五月色综合网| 91久久九久久九久久九久久九久久| 99久久精品免费精品国产_国产精品久久久久久_国产在线|日韩_久久国产精品电影 | 丁香色五月天| 久久久久丁香婷婷五月天| 色五月丁香激情| 99re在线观看视频| 亚洲色五月天是什么| 丁香五月天导航| 超碰二区| 99啪啪视频| 国产日韩av片| 六月婷婷激情| 激情网站五月| 丁香五月成人论坛| 色欲香综合网| 久久婷婷五月天亚洲欧美| 色欲五月天| 丁香婷婷九月在线| 中文字幕在线视频播放| 天天久久婷婷| 9久久久| 激情宗合 激情宗合| 99热日本精品| 欧美久久网| 五月 激情视频| 色丁香五月| 国产肏屄大片| 五月丁香激情综合| 五月天丁香啪啪综合| 五月天婷亚洲天综合网综合| 丁香五月狠狠综合欧美| 五月婷婷说| 五月色亚洲| 婷婷五月色综合| 午夜丁香| 激情婷婷丁香五月| 婷婷玖玖丁香| 五月色婷婷在线观看| 安息电影在线观看完整版| 天天拍天天做视频| 五月天婷婷影院影院观看| 欧美成人性爱网| 超碰97免费在线| 五月婷婷激情网| 丰满人妻妇伦又伦精品国产| 黄色AAAAAAA| 日本视频99| 久热精品视频在线观| 99这里只有免费的精品| 99re思思热久久| 亚洲天堂久久| 激情五月色综合国产精品| 丁香六月婷婷综合欧美| 国产67194| 99热99艹在线观看| 69综合在线| 亭亭五月丁香综合欧美| 五月丁香激情六月| 久久99精品久久只有精品| 亚洲妇女熟BBW| 婷婷情色五月| 欧美色图天堂网| 玖玖精品视频99| 天天日天天摸| 亚洲精品无人区| 丁香激情五月| 激情综合网亚洲色图| www.色五月| 久热这里| 婷婷五月天六点丁香五月| 婷婷精品在线| 亚洲精品99| 日韩一级淫乱片一区二区三区| 九色91视频| 久久96热| 色噜噜婷婷| 嫩草视频观看| 狠狠干五码| 99热这里有精力| 92久操视频| 激情五月综合六月丁香婷婷狠狠干| 五月婷婷中文字幕| 国产精品激情AV久久久青桔| 婷婷伊人久久| 日本三久久| 小视频一区| 六月丁香五月天| 人人妻人人澡人人爽| 开心婷婷五月天电影院| 91超级碰碰| 91精品视频男人的天堂| 就去涩涩丁香五月天| 九九aV| 亚洲啪啪网| 99热99热在线| 五月做爱| 丁香五月天啪啪激情综和网| 欧美经典片免费观看大全| 91婷色| 久久久久久久人妻| 亚洲AVwwwwwww| 婷婷色情小说| 天堂伊人干| 综合久色五月| 久久思思热| WWW,激情五月天,COM| 综合色五月天| 丁香五月婷婷啪啪啪| 99色| 丁香 久久| 天天爽天天操| 免费播放片大片| 色导航色婷婷五月天在线观看| 9久热精品在线视频| 亚洲VA欧美VA| 五月综合久久| 色婷婷色五月丁香| 亚洲精品V天堂中文字幕| 日日日日做夜夜夜夜无码| 伊人激情影院| 日本婷婷丁香五月| 懂色av粉嫩av蜜臀av| 丁香五月综合图片在线观看| 荫道BBWBBB高潮潮喷| 开心四月婷婷在线色播播| 操操碰| 色婷婷丁香五月观看| 婷婷五月花| 六月婷五月丁香| 人妻日日日| www.婷婷五月天,com| 五月激情偷拍| 亚洲一级AV在线免费播放| 六月婷婷色综合| 国产精品汇聚精彩第二页 - 高清完整版在线 - 青蛙AV | 97福利视频| 少妇日麻屄| 性av| 久久婷婷成人综合色怡春院| 日本色久| 激情五月婷婷| 婷婷六月花| 亚洲一级AV在线免费播放| 亚洲乱码在线观看| 99久久国产成人精品| 欧洲MV日韩MV国产| 色五月中文网| 激情五月天婷婷图| 3p九色在线| www.天天干| 国产成人+综合亚洲+天堂| 91久久久久久| 成人丁香婷婷| 9久久精品| 夫妇交换刺激做爰| 五月激情综合美女久久| 国产91视频| 国产古装妇女野外A片| 色丁香五月综合网| 丁香五月婷婷亚洲综合精品| A片试看120分钟做受图片| 婷婷婷婷婷开心无码播放| 97久久草草超级碰碰碰| 无码 av电影| 思思99热| 79色色免费| 99精品国产在热久久婷婷| 夜夜爽天天爽| 婷婷久久亚洲| 国产黄色大片| 久久婷五月天| 在线可以看的av网址| 99色热视频| 亚洲亚洲人成综合网络| 91人妻PORNY九色大屁股| 风流少妇A片一区二区蜜桃| 久久精品视频在这里有| 五月欧美色播| 色婷婷丁香九月| 91紱請| 五月婷婷深深爱| 色。 日日日| 九九人人自拍| 五月丁香色欲| 99热国产| 亚洲无码11| 亚洲色综合性| tingtingjiqingwuyue| 亚州综合色| 黄桃AV无码免费一区二区三区| 91欧美日韩综合| 99久久久| 深爱开心激情网| www.99热视频| 97干在线看| av婷婷丁香| 色欲天天综合网| 婷婷久久精品| 五月婷婷在线免费观看 | 久久五月天婷婷| 可以看的av网站| 色综合性视频| 精品久久人妻热| 黄网在线播放| 成人在线不卡| 超碰人人91| 亚洲最大视频网站| 91丁香色| 色婷婷激情Av久久久| 国产熟妇的荡欲午夜视频| 九久9精品| 久久资源网五月婷| 1024国产| www.91操| 五月天色色色| 婷婷五月六月| 婷婷激情六月| 天天弄天天操| 丁香六月激情综合| 97色色色| 欧美精品XXXXBBBB| 无码少妇高潮喷水A片免费| 五月丁香婷婷综合网| 亚洲99热| 99操99| 99∨VTV| 久久九九99| 丁香六月啪啪| 国产乱子轮XXX农村| 亚洲妇女熟BBW| 成人中文网| 岛国在线观看91| 亚洲狠9| 婷婷激情五月天桃花网| 超碰永久在线| 92国产福利| 99在线视频精品| 亚洲另类电影| 欧美va视频不用播放器的va视频网| 丁香婷婷精品视频| 五月丁花色综合网| 亚洲色激情| 色婷婷激情| 天天射美女| www.色婷婷| 激情5月婷婷| 婷婷色六月| 国产精品色婷婷99久久精品| 五月丁香婷婷爱激情综合网| 五月婷高清视频| 婷婷激情丁香六月| 99爱视频| 大香蕉婷婷| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 啄木鸟黑丝一区二区| 这里只有免费的精品| 深爱激情五月网| 91蜜桃婷婷狠狠久久综合9色| 99性感视频| 婷婷六月激情| 婷婷五月激情小说| 精品综合网在线| 五月丁香综合啪啪| 天天碰夜夜操| 婷婷射综合| 欧美综合激情五月丁香| 天天婷婷色六月| 91久久久久久久久18| 69精品人人人人| 停停综合色色| 五月天婷婷在看| 婷婷丁香五月网| 综合久久婷婷| 狠狠九九婷婷韩| 婷婷五月色花丁香社区| 99热这里只有精彩| 大香蕉伊人久久| 99热一本| 婷婷婷色五月| 色婷婷成人网| 狠狠狠狠狠狠草| 五月丁香久人妻中文| 天天色宗合| 六月婷婷综合| 综合久久97| 婷婷五月激情视频| 婷婷伊人綜合中文字幕| 超碰93在线观看| 日日操人人操| 国产精品人成A片一区二区| www.久久久久久| 激情五月天网页| 强伦轩人妻一区二区电影| 影音先锋一区二区资源站 | a色色色色色| 五月天综合视频网| 强辱丰满人妻HD中文字幕| 激情黄色小说色五月| 这里只有精品免费观看网占| 九九碰九九爱97超碰| 久久婷婷五月天激情四射| 六月色国内综合| 欧美色色色| 五月丁香网站| 97碰| 五月天激情四射网站| 狠狠婷婷色综合| 九九人妻福利| 中文字幕在线免费观看视频| 99热欧美精品| 天天日日夜夜爽。| 天天综合天综合久久网| 色五月丁香激情视频| 色色色色综合| 欧美色图天堂网| 97视频91| 棕合影院色色| 日韩 中文 欧美| 五月亭亭色| 五月天,激情四射,婷婷频道| 99天天操夜夜操| 丁香五月亚洲婷婷| 激情综合色五月丁香| 99r久久这里只有精品| 26uuu欧美日本| 色播婷婷大香蕉| 久久婷狠狠色| 婷婷色情网| 67194中文字幕| 欧美色色色色色色| 香蕉婷婷色五月| 91ncm视频| 激情四射网| 97av在线视频| 天天爽天天日| www.激情五月天.com| 亭亭玉月丁香| 99视频久久免费视频| 天天爽天天爽| 只有久久精品免费| 无码人妻一区二区一牛影视| WWW五月| 大香蕉人人人| 婷婷情色五月天| 91精品在线看| 激情六月天| 六月婷婷七月丁香| 无码人妻一区二区一牛影视| 一级性感黄色内射视频| 思思久久精品| 五月丁香六月婷婷不卡免费无码| 色噜噜丁香| 五月婷婷丁香在线| 色婷婷激情| 五月丁香婷婷综合| 欧洲亚洲激情五月天在线| 日日夜夜亚洲一区| 成人五月天丁香婷| 激情五月伊人婷婷| 色综色网| 91九色中文| 99色在线视频观看| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 这里只有九九精品| 五月丁香婷婷婷激情爱爱| 亚洲六月婷婷| 五月激情综合五月| 大香蕉九九操| 亚洲天堂久久| 这里只有久久精99| 久久98| 俺来也狠狠| 婷婷五月色综合| 丁香婷婷免费| 玖玖婷婷视频| 夜夜操狠狠操| 婷婷五月花西瓜| 日本综合久久| 三级毛片视频| 香蕉国产2013| 中文字幕性爱丰满| 色婷婷成人网| 五月婷婷六月激情| 色婷| 99国产性感视频| 99热日韩| 月丁香久久久| 激情婷婷| 五月天丁香综合久久国产| 天天噜天天爱| 国产av影片| 99原创自拍视频在线观看| a久久| 插少妇综合网| 91久热| 加勒比久热| 五月婷婷丁香| 色久女| 玖玖资源天天无码| 五月丁了香蕉综合| 六月婷婷啪啪| 六月婷欧美丁香综合| 99热这里只有精品8| 五月丁香六月欧美综合网站| 婷婷五月俺要去| 99激情网| 停停五月色宗合| 亚洲黄色网址| 看片视频在线免费日产在线看| 丁香六月久久| 91精品国产综合久久密臀| 色色五月天激情| 婷婷欧美激情| 精品五月花| 无码成人AAAAA毛片AI换脸| 99热婷婷| 婷婷色五月开心五月| 国产一二三四五六七八视频| 丁香五月AV在线| 色综合激情| 1024成人在线观看| 色婷婷女优有码五月亭| 97人碰人操| 亚洲日韩一页精品发布| 五月丁香六月成人| 热九九精品| 婷婷激情在线| 狠狠操天天干| 狠狠草狠狠草| 国产婷婷色综合AV蜜臀AV| 最新亚洲色色网| 五月丁香怕啪啪| 五月婷婷六月丁香免费| 免费婷婷| 久久99久久99精品免观看粉嫩| 91在线看免费 九九九九| 色吊丝av中文字幕| 免费99色| 久久婷婷激情四射五月天| 91狼友视频在线观看| 五月婷婷综合激情小说| 欧美亚洲色色色色| 六月色丁香婷婷| 日韩在线观看网址| 欧美特大片黄| 182无码| 婷婷五月天av小说| 欧美男女婷婷| 大香蕉狼人久久| 九九大香视频| 五月婷精品| 99re这里只有精品99| 婷婷激情伍月网| 久久婷婷五月国产色综合激情| 激情五月天婷婷激情| 欧美欧盟性爱网| 九九视频精品这里只有| 五月丁香六月婷婷中文版| 五月天色综合服务平台| 亚洲色色色色| 色婷婷狠狠18| 色婷婷69| 桃色五月天| 99久久国产宗和精品1上映| 久久久99精品免费观看| 超碰人妻公开在线| 日本丰满久久| 亚洲六月色婷婷| 婷婷成人网五月天| 婷婷丁香亚洲五月天| 婷婷草| 五月婷婷色播| 色色婷婷五月天| 超碰成人公开| 婷婷五月天大香蕉| 五月天激情综合网俺也去| 美臀自射自家人妻| 天天日日综合| 爆乳熟妇一区二区三区爆乳照片| 久热9| 婷婷桃色网| 婷婷丁香九月| 六月欧美综合色情| 五月天 另类图片| 日本久久婷婷| 熟女人妻视频| 狼人婷婷综合| 色五月婷婷、老熟女| 久久ab| 丁香五月性爱| 久久婷婷青青| 五月丁香 啪啪| 99热这里只有精品33| 五月丁香婷婷欧美| 噼里啪啦在线观看免费完整版视频| 亚洲传媒在线观看| 日本久久精品| 久久久精品色| 久热大香蕉| 97ai婷婷| sisi热国产| 26uuu欧美| 牛色色碰| 99久在线观看| 色噜综| 亚洲精品午夜国产va久久成人| 久久九九激情五月天| 九九热精品99| 五月婷婷狠狠干| 九月婷婷| 大香久久伊人网| 欧美va国产va| 婷婷情色五月天| 综合久久五| 亚洲综合在线伊人婷| 亚洲六月色| 激情婷婷狠狠干| 香蕉国产2013| 五月激情婷婷四射| 五月丁香网站在线播放| 无码激情| 婷婷综合日本| 婷婷丁香五月天中文字幕| 天天色色天天| 久色五月天| 五月天色视频| 亚洲国产精品VA在线看黑人| 久久婷婷亚洲| www.婷婷,com| 亚洲啪啪自拍| 五月丁香婷婷六月天| 婷婷六月丁| 五月天激情四射网站| 。久久久久久久久久久久久久人妻| 五月婷婷av| 五月丁香综合在线| 色99网站| yw.av| 色五月五月天| 风流少妇A片一区二区蜜桃| 91精品综合久久久久久五月丁香| 五月丁香综合| 日韩无码人妻一区二区| 色久五月天| H亚洲| 性色99| 久久婷婷五月天大香蕉| 天天婷婷操| 九九久久精品| 色色综合色视频| www.操.com| 99久久精彩视频。| 99热在线观看免费精品| 日韩999| 91色五月| 久草性爱| 9l视频自拍九色9l视频自拍九色9l社区| 色色五月丁香婷婷综合| 丁香狠狠色婷婷久久无码视频| 97色五月丁香婷婷| 99热这里只有精品最新| 婷婷色五月91啪啪| 国产精品久久久60086| .青娱乐天天操B| 开心五月婷婷在线| 超碰成人影视| av色色国产| 日韩成人综合| pacopacomama 070722_670 素人奥様初撮りドキュメント 103 大久保純子 | 免费看欧美成人A片无码| 操逼巨乳91| 五月婷婷深深爱| www.久久久.com| 亚洲射激情| 51精品国自产在线| 婷婷五月六月丁香综合| 激情婷婷五月在线合集| 5月婷婷6月六月丁香| 久久婷视频| 久久99网站| 丁香婷婷五月天网站| 性一交一乱一交A片久| 婷婷夜夜夜夜| 91日综合欧美| 狼人狠狠操| 成人va在线观看视频| 办公室少妇激情呻吟A片在线观看 白人荫道BBWBBB大荫道 | 五月天婷婷乱| 超碰99热在线观看| 丁香五月首页| 这里只精品| av婷婷六月丁香社区在线观看| 激情深爱综合网| 91成人视频| av亚洲国产小电影| 天天日,天天插| 黄色成人网站在线播放| 五月天成人综合| 99热99这里有免费的精品| 日本久久极品| 99自拍视频| 很很干五月天| 五月天三级久久| 99热免费| 91色情播放| 九九精品在线视频观看| 亚洲亚洲人成综合网络| 99热首页| 久久久人妻不卡| 99国产在线精品视频| 五月丁香六月激情综合| 他改变了拜占庭| avh片在线观看| 婷婷综合五月天| 激情狠狠丁香月| 色婷婷综合综合网| 香蕉久久国产AV一区二区| 99re鈥哸鈥唙| 开心五月婷婷五月| 久久天堂女人| 996er热| 婷婷五月天久久久| 六月激情婷婷色| 亚洲AVwwwwwww| 五月天激情国产综合婷婷婷| 婷婷五月激情天| 《战争与艾拉》完整版| 97超碰欧美中文字幕| 五月综合视频| 狠狠狠狠狠| er99免费视频在线| 97碰碰人人| 99re久热| 色综合色综合网| 激情 婷婷| www.五月激情红色| 99九九久久| 色99无码| 色色欧美。| 中文字幕永久在线| 色色a| www.26uuu.com亚洲电影| 开心五月六月婷婷| www.精品99| 可以观看的AV| 热99视频精品| 丁香六月久久| 色原狠狠综合| 97人碰人操| 亚洲视频在线观看| 五月激情六月宗合| 精品色色| 青草少妇激情| 色狠狠综合| 日本狠狠爽| 99热最新精品| 丁香五月天网站| 特级操b片| 天堂久久大香蕉| 四虎99热在线观看网站| 人妻熟人中文字幕一区二区 | 五月综合777| 99思思在线视频| 97碰在线| 97香蕉久久超级碰碰高清版| 五月丁香A∨在线| 日韩人妻白浆视频系列| 九九热精品在线| 五月天综合视频| 婷婷91| 综合久久97| 在线网黄| 成人网站免费在线播放| 色五月婷婷九月| 日婷婷久久开心| 婷婷五月天激情基地| 丁香五月六月激情| 1995年关宝慧版蜘蛛女| 丁香五月激情六月综合| 天天模,夜夜模夜夜爽| 久热这里有精品视频| 色五月婷婷激情综合网| 丁香五月天无码AV| 色10月婷婷视频| 看黄的网站18禁| 色很很96| 99爱欧美| 天天天天天操| 色情激情五月| 这里只有精品视频在线看| 五月丁香六月婷婷综合网缴情| 五月天狠狠草| 丁香六月久久| 夜夜久久综合网| 91一起操| 天天插天天插| 99ER热精品视频| 国产伦亲子伦亲子视频观看| 婷婷五月激情欧美大胆视频| 婷婷五月精品| 五月丁香五月丁香五月丁香五月丁香91| 五月婷婷熟女| 中文字幕日产A片在线看| 综合色99| 搡BBBB搡BBB搡五十| 欧美色男人网站| 去色色五月天| 91在线操| 综合AV在线| 好吊操这里只有精品| 色婷婷六月开心中文字| 亚洲精品国产精品乱码不99| 婷婷六月啪啪| 成人一级片| 九九热九九| 五月激情四射网站| 538任你爽视频不一样的| 中文字幕婷婷| 激情婷婷丁香五月| 色五月天综合网| 婷婷伊人中文字幕| 人妻丰满精品一区二区A片| 五月天大香焦| 欧洲亚洲免费视频9| 99热在线里有精品| 激情综合激情五月一起草| 99热最新精品| 青草青草视频2免费观看| 嘿嘿视频免费看9| 婷婷综合色| 五月天婷爱综合| 新激情五月天天在线网| 中文激情网| 激情婷婷。| 99视频超级精品| 国产日韩亚洲欧美在线观看| 综合久久影院| 影音 五月 婷婷 久久| 婷婷操久久| 午夜性爱影视一区77| 神马欧美精| 欧美日本免费一道免费视频| 久久精品系列| 综合在线丁香五月| www.91九色| 国产成人综合电影| 香蕉狠狠爱视频| 日韩人妻操逼视频| 色婷婷五月综合| 五月色情婷婷| 色六月天天激情综合网| 色色色色综合| 亚洲乱码日产精品BD| 麻豆雪千夏| 婷婷五月综合啪| 婷婷六月丁香五月| 无码一级片| 色青青五月| 婷婷性爱影院| 色婷婷五月综合色婷婷| 激情五月天激情网| 激情久久久久久久久久| 五月婷婷很很色| 99热免费精品热久久66| 婷婷五月天视频免费在线观看| 操人妻AV| 久久机热这里只有精品免费视频| 色色亚洲五月天| 丁香六月在线综合| 99热99成人| 色综合久久99色| 免费成片在线观看| 亚洲精品久久久久久久久久吃药| 婷婷深爱五月| 五月丁香久人妻中文| 亚洲色色香蕉| 人妻丰满精品一区二区A片| 国产亚洲色婷婷久久99精品91| 亚洲五月花| 丁香五月停停av| caopeng97日韩| 丁香五月av| 99久久久免费| 成人在线综合| 日本毛片内射| 人人爱人人摸人人澡| 久久黄色片| 五月天成人伊人| 六月丁香五月婷婷| 色九月婷婷| 久久停停超碰| www.色色五月天.com| 婷婷综合成人| 五月狠狠| 99热这里只有精品首页| 丁香婷婷久久综合在线| 操你av| 国产肥白大熟妇BBBB视频| 精品婷婷五| 亚洲视频99| 99久久9| 大香蕉伊人久久| 中文字幕不卡+婷婷五月| 夜夜资源站| 色色爽爽天天| 色婷婷综合久久久久| www.婷婷六月天| 成片免费播放| 性爱综合网| 99人人干| 九九精品片一| 嫩BBB槡BBBB搡BBBB| 激情婷婷五月天网址| 久久久亚洲精品一区二区三区浴池| 六月丁香深深爱| 久草九一| 丁香婷婷六月男男|