99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線(xiàn)實(shí)戰(zhàn)洞察。

MySQL Utilities實(shí)戰(zhàn):存量環(huán)境下的高效運(yùn)維工具集

MySQL Utilities實(shí)戰(zhàn):存量環(huán)境下的高效運(yùn)維工具集 1. 為什么這個(gè)過(guò)氣工具集還在我的工作臺(tái)里前幾天幫一家公司排查主從復(fù)制延遲登上去發(fā)現(xiàn)兩個(gè)庫(kù)的表結(jié)構(gòu)因?yàn)殚_(kāi)發(fā)手工執(zhí)行了N次漏腳本的發(fā)布已經(jīng)悄悄長(zhǎng)出了100多處差異。我第一反應(yīng)不是打開(kāi)某個(gè)運(yùn)維平臺(tái)而是打開(kāi)終端敲了條命令mysqldiff --server1admin10.0.0.10:3306 --server2admin10.0.0.11:3306 \ --difftypesql --changes-file/tmp/schema_diff.sql不到半分鐘128處差異被清清楚楚列出來(lái)還生成了可以直接執(zhí)行的變更腳本。這套被我反復(fù)使用的工具就是很多人已經(jīng)不關(guān)注的官方工具集——MySQL Utilities。你可能覺(jué)得奇怪這玩意不是停止開(kāi)發(fā)了網(wǎng)上對(duì)它的評(píng)價(jià)也兩極分化。但我要說(shuō)的是對(duì)于運(yùn)維手里還捏著MySQL 5.7、甚至5.6存量環(huán)境的人來(lái)說(shuō)它依然是效率極高的瑞士軍刀。今天這篇就是我的實(shí)戰(zhàn)手冊(cè)把從安裝、結(jié)構(gòu)比對(duì)、數(shù)據(jù)導(dǎo)出導(dǎo)入到復(fù)制、高可用切換、權(quán)限克隆的高頻用法過(guò)一次最后附上我這些年踩過(guò)的坑。1.1 手工運(yùn)維的重復(fù)勞動(dòng)有多坑先說(shuō)我為什么對(duì)這套工具執(zhí)念這么深。早些年我管理幾十套MySQL實(shí)例每天干的活無(wú)非就是哪兩個(gè)庫(kù)結(jié)構(gòu)不一樣肉眼打開(kāi)兩個(gè)窗口比對(duì)字段新環(huán)境要搭從庫(kù)手寫(xiě)CHANGE MASTER那一套要復(fù)制一個(gè)用戶(hù)權(quán)限一行行SHOW GRANTS再手工回放。聽(tīng)起來(lái)都不難問(wèn)題是量大以后全是重復(fù)勞動(dòng)而且特別容易出錯(cuò)。比如結(jié)構(gòu)比對(duì)你肉眼比對(duì)字段順序、默認(rèn)值、字符集字符串長(zhǎng)一點(diǎn)眼睛直接看花。有一次我把varchar(255)看成varchar(256)上線(xiàn)第一天數(shù)據(jù)就溢出了。數(shù)據(jù)導(dǎo)出如果用mysqldump在多表關(guān)聯(lián)、存儲(chǔ)過(guò)程、觸發(fā)器混合的場(chǎng)景下dump出來(lái)的文件要么順序不對(duì)要么被外鍵約束卡住。權(quán)限復(fù)制就更不用提了一個(gè)賬號(hào)十幾個(gè)庫(kù)的權(quán)限手抄加引號(hào)轉(zhuǎn)義錯(cuò)一個(gè)字符就授權(quán)失敗。MySQL Utilities的設(shè)計(jì)初衷就是把這些高頻操作變成一句命令。你不用再去記那一長(zhǎng)串SQL拼接邏輯也不用擔(dān)心中間某一步漏了。雖然它現(xiàn)在的更新已經(jīng)停滯但核心功能在5.7乃至8.0的兼容模式下依然可以工作而且在很多企業(yè)內(nèi)部存量實(shí)例根本輪不到你用新工具那它就是你最順手的搬磚工具。1.2 工具箱全景你會(huì)用到的組件MySQL Utilities不是一個(gè)單一命令而是一套Python腳本集合入口是mysqluc。裝好以后你可以直接運(yùn)行mysqluc進(jìn)入它的命令行也可以像普通命令一樣直接調(diào)每個(gè)工具。我用得最多的幾個(gè)工具列個(gè)清單給你參考工具名作用我的使用頻率mysqldiff比對(duì)兩個(gè)數(shù)據(jù)庫(kù)/兩段SQL的對(duì)象差異生成變更腳本每周mysqldbexport導(dǎo)出庫(kù)/表數(shù)據(jù)支持SQL和CSV格式每周mysqldbimport導(dǎo)入數(shù)據(jù)能處理依賴(lài)順序每周mysqlserverclone從現(xiàn)有實(shí)例克隆出獨(dú)立新實(shí)例每月mysqlreplicate快速配置主從復(fù)制每月mysqlfailover主庫(kù)故障自動(dòng)切換每季度演練mysqluserclone克隆MySQL用戶(hù)權(quán)限隨時(shí)mysqlindexcheck檢查表中索引的使用情況每季度mysqlauditgrep過(guò)濾解析審計(jì)日志偶爾這些工具的共同點(diǎn)是參數(shù)風(fēng)格統(tǒng)一、有--dry-run預(yù)覽模式、輸出結(jié)果可解析。你在mysqluc里輸入一個(gè)工具名再敲--help基本就能把每個(gè)參數(shù)看明白。別被它的英文文檔勸退實(shí)際用起來(lái)比文檔簡(jiǎn)單得多。1.3 安裝與初始化從下載到mysqluc能用很多人卡在第一步就是因?yàn)檫@個(gè)工具是基于Python 2的。早先版本需要Python 2.6/2.7系統(tǒng)如果已經(jīng)用Python 3直接跑多半會(huì)報(bào)語(yǔ)法錯(cuò)誤。我目前的推薦方案是在專(zhuān)用管理機(jī)上用源碼包安裝不跟業(yè)務(wù)服務(wù)器摻和。以1.6.5版本為例安裝流程大概是這樣的# 下載并解壓源碼包 tar zxf mysql-utilities-1.6.5.tar.gz cd mysql-utilities-1.6.5 # 用python2執(zhí)行安裝管理機(jī)可以保留一個(gè)python2環(huán)境 python2 setup.py install如果你的系統(tǒng)把python指向了3那就要明確調(diào)用python2。裝完以后驗(yàn)證一下:mysqluc --version如果顯示mysqluc 1.6.5這樣的版本信息就說(shuō)明裝好了。還有一個(gè)常見(jiàn)的坑它默認(rèn)依賴(lài)mysql-connector-python。很多人在安裝時(shí)沒(méi)有先裝這個(gè)庫(kù)導(dǎo)致運(yùn)行任何工具都報(bào)ImportError: No module named mysql.connector。解決辦法一樣用Python 2環(huán)境裝對(duì)應(yīng)版本的connector然后確認(rèn)在PYTHONPATH里能找到。另外有些朋友習(xí)慣配合圖形管理工具一起用比如下載安裝dbx數(shù)據(jù)庫(kù)管理工具來(lái)做連接配置和任務(wù)監(jiān)控。我的建議是dbx這類(lèi)工具做可視化操作沒(méi)問(wèn)題安裝包從官方渠道拉連接MySQL時(shí)指定--socket或者TCP端口就行。但命令行場(chǎng)景下MySQL Utilities的本事是dbx沒(méi)法替你完成的尤其是差異比對(duì)和復(fù)制配置。所以?xún)烧吣壳霸谖疫@里是互補(bǔ)狀態(tài)不沖突。2. 結(jié)構(gòu)比對(duì)與數(shù)據(jù)導(dǎo)出導(dǎo)入最穩(wěn)的三件套工具裝好以后先掌握最常用的三件套。這三個(gè)工具能覆蓋日常變更上線(xiàn)前的大部分檢查工作。2.1 mysqldiff操作步驟與輸出解讀mysqldiff是我打開(kāi)率最高的命令。它的核心功能是比較兩個(gè)連接上的對(duì)象定義差異包括表結(jié)構(gòu)、視圖、存儲(chǔ)過(guò)程、函數(shù)、觸發(fā)器等?;久铋L(zhǎng)這樣mysqldiff --server1admin:pass10.0.0.10:3306/db1 \ --server2admin:pass10.0.0.11:3306/db2 \ --difftypesql --changes-file/tmp/db_diff.sql參數(shù)說(shuō)明里面--server1和--server2除了寫(xiě)庫(kù)名以外還支持db1.tab1這種形式用來(lái)比對(duì)單表。--difftype支持sql、unified、differ幾種格式。我強(qiáng)烈建議用sql因?yàn)樗敵龅牟盍靠梢灾苯臃诺缴a(chǎn)庫(kù)執(zhí)行。--changes-file會(huì)把差異SQL寫(xiě)進(jìn)文件方便你在執(zhí)行前人工Review。這里我特別提醒一點(diǎn)默認(rèn)情況下它只比較對(duì)象定義不會(huì)比較索引的可見(jiàn)性、統(tǒng)計(jì)信息這些運(yùn)行時(shí)屬性。如果你要連索引一起比加一個(gè)--show-options參數(shù)??匆淮螌?shí)際輸出# Comparing db1 to db2 [PASS] # Definition: Table db1.orders Reversed遇到[FAIL]的文件后面會(huì)跟具體的差異片段。有一次它告訴我某個(gè)字段的AUTO_INCREMENT屬性不一致我順著它的輸出去查果然發(fā)現(xiàn)從庫(kù)的表是用我三個(gè)月前的老備份恢復(fù)的差了一個(gè)自增計(jì)數(shù)設(shè)置。這種細(xì)節(jié)靠肉眼幾乎查不出來(lái)。還有個(gè)小技巧--changes-file生成的是完整ALTER語(yǔ)句但它不會(huì)幫你處理依賴(lài)順序。所以拿到變更腳本后我習(xí)慣先用dry-run模式跑一遍確認(rèn)沒(méi)語(yǔ)法錯(cuò)誤再執(zhí)行mysqldiff --server1admin:pass10.0.0.10:3306/db1 \ --server2admin:pass10.0.0.11:3306/db2 \ --difftypesql --dry-run2.2 mysqldbexport導(dǎo)出的正確姿勢(shì)如果說(shuō)mysqldump是重武器那mysqldbexport就更像給你精細(xì)控制的手術(shù)刀。它可以按庫(kù)、按表導(dǎo)出也可以只導(dǎo)出某些對(duì)象的數(shù)據(jù)而不導(dǎo)出表結(jié)構(gòu)。我一般這么用mysqldbexport --serveradmin:pass10.0.0.10:3306/db1 \ --formatsql --exportboth --skip-gtid --output-file/tmp/db1_export.sql--formatsql表示輸出SQL文件如果你想拿去做數(shù)據(jù)分析可以改成--formatcsv。--export有多個(gè)值both表示結(jié)構(gòu)加數(shù)據(jù)structure-only是只要結(jié)構(gòu)>mysqldbimport --serveradmin:pass10.0.0.12:3306 \ --formatsql --import-file/tmp/db1_export.sql--formatsql要和導(dǎo)出時(shí)一致。--import-file不指定的話(huà)它默認(rèn)讀stdin所以你可以用管道m(xù)ysqldbexport ... --output-file- | mysqldbimport ... --formatsql這里有個(gè)關(guān)鍵參數(shù)是--force默認(rèn)情況下如果目標(biāo)庫(kù)已有同名的表它不會(huì)覆蓋而是報(bào)錯(cuò)。想要覆蓋導(dǎo)入加--force。但--force使用時(shí)要萬(wàn)分小心它會(huì)直接把目標(biāo)表DROP掉重建。我的習(xí)慣是先備份再導(dǎo)入到臨時(shí)庫(kù)驗(yàn)證一次最后才切正式庫(kù)。權(quán)限陷阱也是老生長(zhǎng)談。目標(biāo)庫(kù)的賬號(hào)如果只有INSERT、SELECT權(quán)限導(dǎo)入時(shí)建表語(yǔ)句就會(huì)被拒絕。所以導(dǎo)入賬號(hào)最少需要CREATE、DROP、INSERT、ALTER權(quán)限。你要是用root導(dǎo)入問(wèn)題不大但生產(chǎn)環(huán)境不建議直接暴露root串在命令行里。可以用--login-path來(lái)管理密碼或者設(shè)置好~/.mylogin.cnf這樣命令里不出現(xiàn)明文密碼日志里也不容易泄露。3. 復(fù)制與高可用mysqlreplicate 和 mysqlfailover 的實(shí)戰(zhàn)經(jīng)驗(yàn)搭建主從復(fù)制過(guò)去要手動(dòng)處理七八個(gè)步驟創(chuàng)建復(fù)制賬號(hào)、拷貝數(shù)據(jù)、記錄binlog位置、配置server-id、啟動(dòng)slave……一步錯(cuò)后面全亂。3.1 用 mysqlreplicate 搭建主從復(fù)制如果你已經(jīng)有了一份全新的從庫(kù)數(shù)據(jù)mysqlreplicate能做的就是把那些手工步驟都省了。命令大概是這樣的mysqlreplicate --masteradmin:pass10.0.0.10:3306 \ --slaveadmin:pass10.0.0.11:3306 \ --rpl-userrepl:secret --start-slave執(zhí)行過(guò)程中它會(huì)在主庫(kù)創(chuàng)建復(fù)制賬號(hào)在從庫(kù)設(shè)置CHANGE MASTER TO并自動(dòng)記錄當(dāng)前的binlog坐標(biāo)。加--start-slave的話(huà)它會(huì)直接啟動(dòng)復(fù)制線(xiàn)程。實(shí)測(cè)下來(lái)只要網(wǎng)絡(luò)連通、server-id不沖突基本一次成功。這里我要強(qiáng)調(diào)一個(gè)隱藏條件它假設(shè)從庫(kù)的數(shù)據(jù)已經(jīng)跟主庫(kù)一致。如果不一致復(fù)制會(huì)在執(zhí)行過(guò)程中報(bào)錯(cuò)。所以我的標(biāo)準(zhǔn)流程是三層檢查用mysqldbexport或者別的備份工具把主庫(kù)數(shù)據(jù)恢復(fù)到從庫(kù)。用mysqldiff核對(duì)關(guān)鍵表結(jié)構(gòu)。最后才跑mysqlreplicate。在執(zhí)行前建議先看一遍--dry-run的輸出它會(huì)列出將要執(zhí)行的SQL確認(rèn)沒(méi)有意外再正式執(zhí)行。如果你要快速搭建從庫(kù)還有一個(gè)小兄弟工具叫mysqlserverclone。它可以在一個(gè)MySQL實(shí)例上克隆出一個(gè)新的獨(dú)立實(shí)例端口、數(shù)據(jù)目錄、server-id都可以指定mysqlserverclone --serveradmin:pass10.0.0.10:3306 \ --new-data/data/mysql3307 --new-port3307 \ --new-id3307 --mysqld-options--gtid_modeON這在日常開(kāi)測(cè)試環(huán)境時(shí)簡(jiǎn)直是救命工具。以前我建一套隔離測(cè)試庫(kù)要先裝了MySQL再手動(dòng)配my.cnf折騰半小時(shí)?,F(xiàn)在一條命令兩分鐘得到一個(gè)端口不同、server-id不同的獨(dú)立實(shí)例。3.2 mysqlfailover 的配置與切換演練再往上一個(gè)層次就是高可用切換。mysqlfailover可以在主庫(kù)故障時(shí)自動(dòng)把某個(gè)從庫(kù)提升為新主庫(kù)。它支持基于GTID或者binlog位置的復(fù)制拓?fù)??;九渲檬窍仍谥鲙?kù)啟動(dòng)一個(gè)持續(xù)監(jiān)控進(jìn)程mysqlfailover --masteradmin:pass10.0.0.10:3306 \ --discover-slaves-loginadmin:pass \ --failover-modeauto --log/var/log/mysqlfailover.log--discover-slaves-login告訴它自動(dòng)發(fā)現(xiàn)從庫(kù)--failover-modeauto表示故障時(shí)自動(dòng)切換。這個(gè)進(jìn)程要一直跑著所以最好用systemd或supervisor守護(hù)。切換策略一般用--candidateslave2來(lái)指定一個(gè)數(shù)據(jù)最新的候選從庫(kù)--ping-interval控制心跳頻率比如--ping-interval3就是每3秒探活一次。如果主庫(kù)5秒內(nèi)沒(méi)有響應(yīng)它就開(kāi)始選舉。選舉標(biāo)準(zhǔn)不是隨機(jī)的它會(huì)比較從庫(kù)的日志位置優(yōu)先選最接近主庫(kù)的那個(gè)。如果配置了--candidate則優(yōu)先選候選沒(méi)有候選選日志最新的從庫(kù)。切換完成后它會(huì)自動(dòng)把其他從庫(kù)重新指向新主庫(kù)。如果擔(dān)心自動(dòng)切換有風(fēng)險(xiǎn)你可以先把--failover-mode改成manual。這樣它只負(fù)責(zé)監(jiān)控和告警需要你手工確認(rèn)后才切換。我第一次在生產(chǎn)環(huán)境用它的安全方式就是manual先觀(guān)察它產(chǎn)生告警是否準(zhǔn)確連續(xù)演練幾次后才敢開(kāi)auto。3.3 高可用切換的邊界與我的避坑提醒我要潑一盆冷水mysqlfailover又不是萬(wàn)能的。首先是腦裂問(wèn)題。這個(gè)工具本身不做防腦裂處理。主庫(kù)網(wǎng)絡(luò)閃斷但它自身還活著新的主庫(kù)已經(jīng)被選舉出來(lái)。如果業(yè)務(wù)流量還往老主庫(kù)寫(xiě)兩個(gè)庫(kù)都會(huì)寫(xiě)入新數(shù)據(jù)后續(xù)數(shù)據(jù)合并就非常麻煩。我的規(guī)避手段是在網(wǎng)絡(luò)層面做隔離比如在發(fā)生切換時(shí)立刻用防火墻規(guī)則把老主庫(kù)的對(duì)外流量禁用或者一切用VIP漂移。VIP配合mysqlfailover切換時(shí)VIP指向新主庫(kù)才能相對(duì)可靠。其次是日志清理和binlog事件。如果從庫(kù)落后主庫(kù)太多日志已經(jīng)被purge那么這個(gè)從庫(kù)就沒(méi)有競(jìng)選資格。所以高可用環(huán)境里binlog的expire_logs_days配置不能太短。我一般設(shè)置7天同時(shí)搭配定時(shí)全備。最后是應(yīng)用側(cè)連接池。就算MySQL層面切換成功應(yīng)用的長(zhǎng)連接還捏著老主庫(kù)的IP。如果你不用VIP應(yīng)用側(cè)必須實(shí)現(xiàn)故障重連。這一點(diǎn)在演練前一定要和開(kāi)發(fā)團(tuán)隊(duì)確認(rèn)清楚不要等到真故障了才想起來(lái)改連接串。4. 日常巡檢、壓測(cè)與權(quán)限治理不止 DBA 能用MySQL Utilities的價(jià)值不只在緊急排障日常巡檢和上線(xiàn)前評(píng)估同樣能幫你省下大把時(shí)間。4.1 mysqlcheck / mysqlindexcheck 的巡檢組合mysqlcheck是MySQL自帶的表維護(hù)工具可以和mysqlindexcheck搭配來(lái)做巡檢。但我要重點(diǎn)說(shuō)mysqlindexcheck因?yàn)樗軝z查冗余索引和未使用索引這屬于很多DBA容易忽略的隱性浪費(fèi)。用法很簡(jiǎn)單mysqlindexcheck --serveradmin:pass10.0.0.10:3306/db1 \ --show-indexes --show-drops它會(huì)列出每個(gè)表的索引詳情并給出建議刪除的重復(fù)索引。比如一個(gè)字段a上既有單列索引又有(a,b)復(fù)合索引它會(huì)把單列索引標(biāo)成冗余。刪掉冗余索引之后寫(xiě)入性能能明顯提升。這個(gè)工具只分析索引定義不會(huì)真的去執(zhí)行DROP INDEX所以你可以放心跑。我一般每季度跑一次把輸出交給開(kāi)發(fā)確認(rèn)后再?zèng)Q定要不要?jiǎng)h。實(shí)測(cè)在我們的訂單庫(kù)中一次巡檢發(fā)現(xiàn)三個(gè)冗余索引刪除后寫(xiě)入響應(yīng)時(shí)間平均降了12%。不過(guò)這個(gè)數(shù)據(jù)因環(huán)境而異但方向是對(duì)的。4.2 壓測(cè)組合mysqlslap 與 mysqladmin 配合很多人不知道m(xù)ysqlslap就是MySQL自帶的一個(gè)壓力測(cè)試工具。它模擬客戶(hù)端負(fù)載幫你快速確認(rèn)一個(gè)庫(kù)能扛住多大的并發(fā)。最簡(jiǎn)單的用法mysqlslap --concurrency50 --iterations3 \ --number-of-queries1000 --create-schematest \ --querySELECT * FROM orders WHERE user_id12345 \ --host10.0.0.10 --useradmin --password***它會(huì)自動(dòng)造一個(gè)測(cè)試表壓測(cè)完后自動(dòng)清理。壓測(cè)的時(shí)候我同時(shí)在另一個(gè)終端跑mysqladmin status和mysqladmin extended-status來(lái)觀(guān)測(cè)線(xiàn)程數(shù)、請(qǐng)求隊(duì)列長(zhǎng)度。比如mysqladmin --host10.0.0.10 --useradmin -p status輸出里的Threads、Questions、Connections是重點(diǎn)指標(biāo)。如果線(xiàn)程數(shù)快速上漲但Questions漲不動(dòng)說(shuō)明有鎖等待。這時(shí)候配合SHOW ENGINE INNODB STATUS\G看鎖信息基本能定位到瓶頸。需要提醒的是mysqlslap的壓測(cè)結(jié)果只能做相對(duì)參考。它產(chǎn)生的負(fù)載和真實(shí)業(yè)務(wù)差得很遠(yuǎn)真實(shí)業(yè)務(wù)有讀寫(xiě)混合、有隨機(jī)分布、有事務(wù)提交頻率所以要拿它來(lái)定容量上限是不嚴(yán)謹(jǐn)?shù)?。我更推薦用它來(lái)做上線(xiàn)前冒煙比如確認(rèn)新索引有沒(méi)有帶來(lái)明顯副作用或者新從庫(kù)能否扛住基礎(chǔ)流量。4.3 mysqluserclone權(quán)限克隆的正確用法最后這個(gè)工具我做強(qiáng)推mysqluserclone。它可以一鍵把一個(gè)用戶(hù)的所有權(quán)限克隆到另一個(gè)新用戶(hù)身上。比如要?jiǎng)?chuàng)建一個(gè)和app_rw權(quán)限完全一樣的賬號(hào)app_rw_backupmysqluserclone --serveradmin:pass10.0.0.10:3306 \ app_rw app_rw_backup它會(huì)把原用戶(hù)的全局權(quán)限、庫(kù)級(jí)權(quán)限、表級(jí)權(quán)限都復(fù)制過(guò)去。相比手工SHOW GRANTS再重放至少節(jié)省了90%的時(shí)間而且不容易漏掉授權(quán)范圍。要注意的一點(diǎn)這個(gè)工具復(fù)制不了密碼本身的功能。它能克隆權(quán)限結(jié)構(gòu)但不會(huì)把原用戶(hù)的密碼hash復(fù)制過(guò)去。你需要為新用戶(hù)單獨(dú)設(shè)置密碼ALTER USER app_rw_backup% IDENTIFIED BY 新密碼;這個(gè)特性反而讓我覺(jué)得安全因?yàn)樾沦~號(hào)密碼必然要經(jīng)過(guò)一個(gè)人工設(shè)置的過(guò)程不會(huì)出現(xiàn)兩個(gè)賬號(hào)用同一套密碼的隱患。還有一個(gè)小場(chǎng)景應(yīng)用從一臺(tái)庫(kù)遷到另一臺(tái)庫(kù)應(yīng)用賬號(hào)也要跟著遷。你可以先用mysqldbexport把整個(gè)權(quán)限相關(guān)的庫(kù)導(dǎo)出再在目標(biāo)端導(dǎo)入。但賬號(hào)密碼的密文在mysql.user表里導(dǎo)出時(shí)有時(shí)候會(huì)變動(dòng)所以我更傾向于直接用mysqluserclone在主庫(kù)克隆再在目標(biāo)端創(chuàng)建相同的賬號(hào)。效率實(shí)測(cè)下來(lái)比導(dǎo)入導(dǎo)出干凈得多。5. 我踩過(guò)的坑和現(xiàn)在的工作流工具再好只講命令不講坑等于沒(méi)講。這部分我把個(gè)人踩坑經(jīng)歷整理出來(lái)希望能給你省下幾晚加班。5.1 常見(jiàn)報(bào)錯(cuò)對(duì)照表下面的表是按我實(shí)際的經(jīng)歷整理出來(lái)的附帶解決思路。報(bào)錯(cuò)/現(xiàn)象原因解決辦法ImportError: No module named mysql.connector缺少mysql-connector-python用Python2環(huán)境安裝connector確認(rèn)PYTHONPATHUnable to retrieve server information連接賬號(hào)權(quán)限不足給賬號(hào)加SELECT、RELOAD等權(quán)限或使用rootERROR 2013 (HY000): Lost connection連接超時(shí)或keepalive斷開(kāi)執(zhí)行前加--connect-timeout120網(wǎng)絡(luò)不穩(wěn)時(shí)重試mysqldiff提示對(duì)象不存在server參數(shù)寫(xiě)錯(cuò)庫(kù)名或者沒(méi)加--pattern檢查--server1db的庫(kù)名表級(jí)別比對(duì)要寫(xiě)db.table導(dǎo)入時(shí)報(bào)外鍵約束錯(cuò)誤表導(dǎo)入順序不對(duì)導(dǎo)入前臨時(shí)SET FOREIGN_KEY_CHECKS0或者按依賴(lài)排序切換后應(yīng)用連不上應(yīng)用長(zhǎng)連接沒(méi)有重連機(jī)制使用VIP或者在應(yīng)用側(cè)啟用連接探活復(fù)制的從庫(kù)掉線(xiàn)無(wú)法自動(dòng)續(xù)傳網(wǎng)絡(luò)閃斷導(dǎo)致IO線(xiàn)程停止START SLAVE;查看Last_IO_Errno修復(fù)網(wǎng)絡(luò)后重新START5.2 我的生產(chǎn)工作流現(xiàn)在我的常規(guī)變更都是這樣走的第一步變更前做結(jié)構(gòu)比對(duì)。只要涉及表結(jié)構(gòu)變更先跑mysqldiff生成變更腳本作為評(píng)審依據(jù)。第二步變更后做數(shù)據(jù)校驗(yàn)。涉及數(shù)據(jù)遷移就用mysqldbexport mysqldbimport并在遷移前后分別做行數(shù)統(tǒng)計(jì)。行數(shù)統(tǒng)計(jì)我直接用SQL幾條簡(jiǎn)單的SELECT COUNT(*)就夠了。第三步重要實(shí)例的復(fù)制變化用mysqlreplicate重新配置。配置后觀(guān)察SHOW SLAVE STATUS確認(rèn)沒(méi)有報(bào)錯(cuò)。第四步每季度固定做一次mysqlindexcheck巡檢和mysqlslap壓測(cè)。這兩個(gè)命令我會(huì)寫(xiě)進(jìn)cronjob輸出保存到文件方便歷史對(duì)比。第五步高可用每周做一次切換演練。不是真的把主庫(kù)停機(jī)而是用--failover-modemanual觸發(fā)一次計(jì)劃內(nèi)切換觀(guān)察日志和VIP漂移情況。這比出問(wèn)題后再臨時(shí)演練可靠得多。5.3 維護(hù)現(xiàn)狀與替代方案我不得不承認(rèn)MySQL Utilities的官方維護(hù)確實(shí)停止了最后的1.6.5版本也是多年前的產(chǎn)物。它和新版MySQL 8.0的部分特性存在兼容性風(fēng)險(xiǎn)尤其是GTID、權(quán)限模型、密碼插件等深度集成的地方。所以如果你管理的全是MySQL 8.0環(huán)境我會(huì)建議用Oracle官方推廣的MySQL Shell和它的AdminAPI來(lái)替代一部分功能特別是復(fù)制和高可用場(chǎng)景。但如果你和我一樣手頭還有相當(dāng)比例的5.7實(shí)例MySQL Utilities依然是成本最低、最省事的方案。它不需要額外裝agent不需要升級(jí)業(yè)務(wù)側(cè)代碼命令行一敲就能用。另外一個(gè)趨勢(shì)是使用MySQL Enterprise Monitor或開(kāi)源的Prometheusmysqld_exporter做監(jiān)控告警工具集則逐漸退居二線(xiàn)變成變更輔助工具。這其實(shí)是個(gè)好分工監(jiān)控交給新體系變更操作繼續(xù)用這些老伙計(jì)。畢竟它們足夠小、足夠快沒(méi)有花里胡哨的依賴(lài)。說(shuō)實(shí)話(huà)這么多年過(guò)去了MySQL Utilities已經(jīng)不是我每天必開(kāi)的工具但每當(dāng)我需要快速做一個(gè)結(jié)構(gòu)比對(duì)或者臨時(shí)搭一個(gè)從庫(kù)測(cè)試環(huán)境第一個(gè)想到的還是它。這也解釋了為什么它還在我的工作臺(tái)里占著一席之地。工具的價(jià)值不在于新不新而在于能不能穩(wěn)定解決你手頭的問(wèn)題。與其追逐每個(gè)新工具不如把手上的這組命令吃透在關(guān)鍵時(shí)刻能頂上去就夠了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
婷婷五月天六点丁香五月| 亚洲99视频| 亚洲精品亚洲人成人网| 五月婷人妻| 婷婷视频在线| 五月天色色色| 丁香婷婷少妇| 久99久视频| 五月天啪啪| 99成人无码| 国产综合久久久777777| 亚洲V国产V欧美V久久久久久| 丁香五月五月婷婷| 99久久er| 梁铮版蜘蛛女在线观看| 国产精品日日躁夜夜躁| 一区无码| 六月五月天婷婷涩播在线| 婷婷五月天亚洲综合| 思思热久久阴99| 久久丁香网| 香蕉综合网| wwwwww.色| 欧洲综合视频| 金品在线视频99| 无码激情AAAAA片-区区| 色五月天综合网| 色综合日日| 久久婷婷网站| 五月丁香无码| 九九热99在线视频| 伊人大综合| 六月综合婷婷开心伊人| 亚洲色视频| 操一操干一干| 天天爽天天操| 婷婷五月天AV在线| 久久3p| 五月天婷婷久久综合| 丁香婷婷五月激情| 色综合久久99色| 婷婷五月激情欧美大胆视频| 婷婷综合性爱网| 色欲色香综合网| 国产成人亚洲综合A∨婷婷| 色五月涩涩婷婷蜜桃| 日本色图综合| 丁香成人五月天| 免费看成人747474九号视频在线观看| 91久久九九| 日本人妻伦在线中文字幕| 97超碰在线免费观看| 亚洲经典小视频| 婷婷丁香一月| 欧美亚洲婷婷五月| 婷婷五月天激情免费在线观看| 色99视| 色色色色热热| 丁香色播五月天| 怕怕av| 在线视频色五月| 国产av基地| AV在线收看| 婷婷五月欧美| 97视频91| 天天人人天天爽| 97资源碰碰| 丁香五月激情五月| 综合久久高清| 五月天无码| AV在线免费网站| 久久婷婷综合基地| 亚洲色情免费网| 日本无va视频| 婷婷六月综合激情| 婷婷五月天精品| 丁香九月激情| 成人美女网| 亚洲精品视频在线播放| 欧美性做爰大片免费看办公室| 天天草天天爽| 亚洲精级| 人妻久久婷婷| 六月丁香深深爱| 五月天婷婷开心| 九色色| 日日撸夜夜操| 99男人的天堂| 九九热在线精品视频| 狠狠干婷婷| 婷婷久久五月| ...婷婷五月综合不卡,国产在线手机| 色婷婷欧美| www.99热| 亚洲综合五月| 免费看欧美成人A片无码| 精品少妇人妻AV无码专区偷人| 九九热视频精品999| 热久久婷婷| 人人操AV| 丁香五月激情在线| 五月综合久久| www.91九色| 亚洲夜五月| 九色色| 六月婷久久| 婷婷五月色| 免费视频在线观看的网站| 一本道在线电影| 人操91在线| 亚洲激情视频在线观看| 婷婷五月天免费视频| 婷婷五月综合色拍| 97成人在线视频| 欧美色色日韩| 五月色欧美| 五月丁香六月婷婷色情| 久久综合66| 色婷婷五月色| 天天操屄网| 婷婷色播婷婷| 欧美日韩成人高清在线| 婷婷爱婷婷| 五月婷婷深深爱| 久久97久久99久久综合欧美| 五月丁色AV| 琪琪理论片| 亚洲天天操| 国产在线aaa片一区二区99| 中文字幕天天干| www.五月天婷婷.com| 99re热视频这里只精品5| 五月色婷婷综合| 婷婷情色五月| www狠狠| 超热久碰.com| 丁香5月婷婷| 色婷婷五月天偷拍| 五月天丁香网站| www.深爱激情| 黄色AAAAAAA| 激情伊人五月婷婷久久| 99热精品在线| 激情综合网丁香| 99人妻碰碰碰久久久久视| 国产精品VIDEOSSEX久久发布| 天天综合五月天| 都市激情小说婷婷| 99九九热播在线免费视频| 五月婷婷六月丁香免费| 婷婷五月天AV| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 日本五月婷婷| 色婷久| 国产亚洲精品久久久久苍井松 | 操一区| 五月丁香婷婷婷激情爱爱| 人人摸人人操人人爱| 狠狠操.com| 婷婷五月天综合久久| 在线色婷婷| 欧美视频在线观看噜噜| 色婷婷狠狠18yy| 很操日本7| 狠狠综合网| 综合色五月天| 天天色粽合合合合合合合| 久操干| 天天插综合| 97涩婷婷| 国产激情av| 99久久五月丁香野外| 六月婷婷久久| 99在线视频资源| 色五月五月婷婷| 狠狠爱五月婷婷| 婷婷五月天Av| 色情五月丁香婷婷网| 天天爽夜爽| 色五月天影视| 91精品国产综合久久久不卡电影| 99热在这里只有精品| 无码一级片| 丁香五月激情在线| 91久久综合亚洲鲁鲁五月天| 久久综合婷婷| 日韩小视频在线99| 91婷婷丁香五月| 97丁香婷婷| 综合色图区| 伊人五月婷婷| 99视频在线观看欧| 99A级片| 日本99视频| 色欲Av五月天| 日本欧特黄色刺激一区影视久精品无码| 人妻操逼视频| 亚洲性爱干干| 十区AV| 狠狠综合| 婷婷五月天综合中文| 免费操超碰| 亚洲天堂热| 五月色婷丁香| 久久婷婷五月天| 婷婷丁香五月六月激情| 97亚洲婷婷| 大香蕉啪啪啪| 丁香五月激情综合网激情五月| 五月丁香六月激情网站| 亚洲无码色| 欧美熟女乱又伦| 丁香五月天婷婷大香蕉| 婷婷丁香六月天| 五月噜噜| 欧日美女Va| 色亭亭九月| 九色91视频| 开心四月婷婷在线色播播| 亲子乱AV-区二区三区| 操操天堂| AV五月婷婷露脸| 色色五月丁香| 丁香婷婷婷五月综合色情| 九九99精品视频在线观看| www。五月天。com| 婷婷久久网| 久久爱综合| 色婷婷影院| 激情婷婷综合五月少妇| 狠狠色婷婷7| 超碰在线网站| 五月婷婷 自拍| jiZZdr| www.99视频| 婷婷五月天777| 九色无码| 成人人操| 婷婷五月丁香A∨| 午夜色婷婷| 国产精品久久久久久五月天加勒比| 欧美三级黄色片久久| 日韩AC在线免费观看| 激情五月天色色| 九月丁香婷婷综合激情| 1024操逼视频| 五月天婷婷丁香花| 激情五月天色色色| 激情婷婷护士激情| 日韩熟女啪啪视频| 99热热热99精品丁香| 91玖玖| 丁香五月天在线观看| 婷婷六月婷婷| 欧美噜噜噜草| 99亚洲综合| -91九色大屁股| 九九九九九九综合| 1024婷婷综合久久五月天| 99ri精品在线观看| 色情五月天导航| 91九九九九九九| 性色做爰片在线观看WW| 香蕉久久国产AV一区二区| 久久98| 五月综合丁香婷婷| 大香蕉五月天婷婷| 婷婷五月综合在线| 欧美成人AAA片一区国产精品| 538在线精品| 丁香色六月婷婷| 99热精品6| 开心五月婷婷在线视频免费观看| 天天舔天天摸天天射| 精品久久99| 九九色色网| 国産精品| 丁香五月亭亭六月综合激情网| 久婷久婷激情肉| www.五月天婷婷| 九九干视频| 五月天狠狠色| 丁香五月综合高清在线| 狠狠色狠狠鲁| 免费观看的婷婷五月视频在线| 99色性爰网络| 九九性视频| 亚洲另类在线观看| 综合天堂AV久久久久久久| 狠狠色色色| 狠狠色噜噜狠狠狠狠狠色综合久久| 久久综合9| HD久久精品视频| 97操碰人人| 色狠狠999综合| 久久久中文| 成人超碰AV| 五月婷婷免费视频| 五月天婷婷綜合院| 欧美交换配乱吟粗大25P| 全部老头和老太XXXXX| 少妇人妻人伦A片| 久久99大| 九九碰九九爱97超碰| 美女100%露全身无挡网站| 五月天激情.com| 九九这里都是精品| 亚洲精品色| 久久精品一区二区三区四区| 99九九视频精彩在线| 婷婷精品在线| 久久99成人性爱高清视频| 久久视频这里有精品99| 丁香五月婷婷啪啪| 九月激情综合婷婷| 激情五月婷婷伊人| 欧美性爱五月天| 日韩婷婷| 97欧美在线| 免费AV黄在线播放| 狠狠爱婷婷丁香| 9色91视频| 五月激情网站| 深情五月天| 婷婷五月影院| 久热九九| 中文激情网| 久777| 99热观看| 久久这里只有精品无码| 天天干天天干天天干天天干天| 丁香五月狠狠在线观看| wwxx日本| 色五月丁香网| 第五婷婷伊人丁香色| 人人爱天天摸摸天天爱| 久9热| 亚洲成人综合网在线免费观看| 99久久99九九九99九他书对| 久久一热| 丁香激情综合| 久久这里面只有精品视频| 丁香五月激情在线| 婷婷五月丁香国产| 伦99热| 97色在线| 亚洲网视屏| 五月青青草综合| 色玖玖爱| 九九青草热| 三十路磁力链接| 色五月激情综合网| 国产精品色婷婷99久久精品| 开心激情婷婷| 婷婷五月天综合网| 六月天婷婷| 噜噜噜狠狠色综合| 开心五月深爱五月| 精品99只有。| 99热免费18| 九九热精品6| 欧美日韩一区二区三区四区| 婷婷激情社区| 六月丁香色色色| 亚洲第一综合| 五月天久久婷婷| 久久久久婷婷| 三区激情四射av| 99噜噜噜在线播放| 婷婷色网站| 9热久久在线| 婷婷激情五月综合| 久久作爱| 亚洲最大成人综合网720P| 这里只有精品99www| 色欧美色色色| 狠狠爱五月婷婷| 久久久久亚洲AV成人无码电影| 色综合久久天天综合网| 亚洲俩性性爱图片久久第六页| 国产肥白大熟妇BBBB视频| 精品色色网| 久久婷婷原创视频| 97碰碰在线看视频免费| 九九这里有精品视频| 666555。COm毛片| 婷婷色基地| 91人碰| 婷婷永久在线| 99热这里只有国产精品| 色婷婷中文在线| 91啪啪视频| 婷婷开心激情综合五月天| 久久电影五月天丁香电影| 激情五月婷| 婷婷六月激情小说网| 三十熟女| 久久综合婷婷| 午夜做爱影院| 五月天五月色婷婷综合| 91九九精品| 激情五月综合| 六月丁香影院| 人人爽天天莫| 日韩久综合| 亚洲中文乱字字幕在线永久| 五月丁香六月婷婷久久| 五月天激情偷拍| 色婷婷丁香AV综合| 精品婷婷| 秋霞AV淫| 色色 亚洲| 色色自拍视频网站| 成人午夜免费电影| 午夜微拍福利| 天天天天操| 激情五月天偷拍综合网| 人人干Av| 精品一二三区视频立| 色综合色综合色综合| 思思热在线播放| 激情婷婷丁香色五月| 超碰9| 碰人人97| 少妇水多A片太爽了| 4399亚洲视频| 六月激情婷婷| 五月丁香黄色| 婷婷丁香久久五月综合| 久久香蕉影院| 99操碰| 丁香六月天婷婷| 亚洲综合五月天| 九九在线视频| 99色精品| 一起草性爱不卡视频| 激情五月天综合图片小说网站| 97性视频| 91精品婷婷国产综合| 婷婷五月天综合亚洲| 久久综合婷婷| 色色色色综合网| 九九这里是免费的视频5| 开心五月天激情网站| 精品国产va久久久久久久| 亚洲成人影视在线观看| 丁香五月AV| 激情五月九九九| 亚洲成人AV电影在线| 色色激情五月天| 激情另类综合| 狠狠干狠狠色| 色五月六月| 色99网| 精品人妻在线| 欧美视频五区| 99精品自拍| 91日日日| 五月亭亭六月天| 丁香花五月天激情| av九九| 日韩婷婷| 五月激情天| 97干在线视频| 亚洲精品久久久久久久久久飞鱼| 婷婷激情五月呦呦| 激情五月狠狠喔| 婷婷五月综合基地| www色综合亚洲92| 色婷婷操逼网| 五月婷网| 丁香五色月婷婷网| 久久精品66| 五月激情五月婷婷五月天在线| 亚洲九九99精品视频在线播放| 丁香五月98| 五月天中文网| 丁香五月天激情综合| 欧洲色| 91久久| AVDV久久| 操B视频在线播放| 色婷插| 影音先锋五月天婷婷丁香在线观看| 久久综合55| 五月丁香婷色| 久久婷婷五月天懂色| 婷婷丁香77777| 五月婷婷免费视频| 99色视频在线| 五月花激情| 国产成人片| 97色精品视频 | 狠狠干天天内射| WWW五月天| 丁香五月天在线| 五月天社区| 色色色综合网| 91碰碰碰久久久久| 99久久婷婷国产综合精品青桔| 婷婷美女精品视频| 免费亚洲婷婷五月| 色情综合网| 色五月激情图片| 五月婷婷啪啪啪| 丁香五月色播中文在线播放| 激情小说在线视频| 亚洲亚洲人成综合网络| 五月丁香六月婷婷成人| 天天射天天射一道本日本社区| 九九婷婷五月天| 一起草av| 国产第99页| 热99这里只是精品| 久久婷婷五月| 免费看欧美成人A片无码| 日韩有码一区| 亚洲五月婷婷在线| 欧美五月婷婷| 日本道久久91| 日本va网站| 亚洲欧美婷婷五月色综合| www五月| 五月天AV大香蕉| 六月婷婷狠狠色在线观看| 色无码| 日本不卡高字幕在线2019| 色色色婷| 国产成人亚洲综合A∨婷婷| 婷婷五月影院| 日本99久久| 婷婷丁香五月综合网上| 精品一二三区久久AAA片| 三级毛片7979| 婷婷色5月激情网| 色情综合| www99热| 天天爱综合网| 婷婷日本在线| 丁香五月激情视频在线| 九九人人操| av网址在线| 天天狠天天叉| 九九伦子片| 视频免费精品免费精品免费精品免费精品免费精品免费精品免费99 | 五月天婷婷激情| 五月丁香婷婷激情影院欧美| 综合久久人妻| 久综合4| 欧美激情xxxXX| 色情五月丁香| 九热视频| 小视频久久久aaa| www.色综合.com| 另类综合色| 亚洲国产成人AV在线| 色五月婷婷婷婷| 成人视频网| 婷婷五月天成人五月天| 丁香五月偷拍| 玖玖在线资源视频| 国外亚洲成AV人片在线观看| 六月香五月婷| 大香蕉在九| 婷婷五月天深爱| 男女啪啪做爰高潮无遮挡| 激情 五月 婷婷 丁香| 99在线小视频| 香蕉婷婷色五月| 九九热最新| 五月丁香亚洲校园欧美| 五月花婷婷| 激情小说婷婷小说| 少妇AB又爽又紧无码网站| 日本天天综合| 激情五月婷婷视频| 午夜做爱影院| 操九色| 婷婷综合色色| 五月婷婷久久开心网| 欧美成人精品A片免费一区99| 日韩欧美一区二区三区四区| 91夫妻视频| 日日日天天干| 日韩 中文 欧美| 人人摸人人搞| 婷婷五月天亚洲精品| 婷婷成人av| 五月婷婷日| 九九香蕉网| 五月丁香婷婷综合| 婷婷久久亚洲| av色婷婷| 在线看片h站| 婷婷丁香五月高清| 人人摸人人操人人爽| 久操操| 狠狠久综合| 无码色综合| 色狠狠综合| 天天噪夜夜爽| 色色五月天婷婷丁香| 激情综合网五月激情| 婷婷开心青青草| 色婷婷无吗| 亚洲成人在线免费| 精品九九视频在线观看| 射久久丁香五月| 天天综合网在线| 日韩AV色色色| 人妻人人操| 丁香婷婷九月在线| 亚洲av网站| 久久久99精品| 亚洲欧美婷婷五月色综合| 强辱丰满人妻HD中文字幕| 日日夜夜婷婷| 亚洲综合激| AV在线收看| 九九碰九九爱97超碰| 久久99激情丁香婷婷小说网| 五月激情丁香六月狠狠干| 久久91久久精品久久| 在线播放中文字幕| 9久久网| 免费看欧美成人A片无码| 色五月欧美| 99在线观看视频蜜臀| 性爱激情小说AV五月丁香花| 风流少妇A片一区二区蜜桃| 玖玖午夜视频| 91色情播放| A√天堂网在线| 丁香五月婷婷综合精品素人| tingtingcaobi| 色情五月婷婷| 99九九视频| 五月婷婷欲色| 色噜噜,噜噜色| 99操无码视频观看| 91人人爽人人操| 无码激情AAAAA片-区区| 伊人在线视频| 成人在线视频网| 久久99精品久久只有精品| 深爱激情小说五月婷婷| 九九Av| 天堂综合久久| 99热很操老逼| 狠狠狠狠草草| 五月丁香婷婷狠狠操| 成人片在线播放| 中美日韩成人在线| 丁香五月色| 丁香五月停停av| 天天爽,天天操。| 五月天无码| 伊人超碰| 色播六月| 99re在线观看| 综合啪啪| 综合久久婷婷| 九九激情网| 亚州操操| 热久国产| 日韩九区| 色色综合成人网| 激情色色| 亚洲精品乱码久久久久久按摩观| 久久性视频| 日本久久高清| 婷婷五月大| 丁香五月香蕉在线| 99re这里只有精品视频6| 丁香女人五月天| 婷婷激情五月天7| www。狠狠干。com| 亚洲色婷婷激情| 五月色丁香婷婷中文字幕| 色国产五月| 激情网开心网| 99热这里只有精品国产首页| 九九热最新地址| 天天日天天舔| 丁香五月综合| 亚洲另类在线观看| 超碰人人摸人人操| 变天就操逼婷婷五月| 欧美碰碰碰| 色婷婷狠狠| 久久激情五月| 六月婷婷综合激情| 成人做爰A片免费看视频| 日本猛少妇色XXXXX猛叫| 久久久99精品免费观看| 婷婷六月偷拍| 日韩 中文 欧美| 久久99久久99精品免视看婷婷| 五月婷婷色色| 密乳视频| 色五月激情综合| 成人在线99| 五月综合人妻| 猫咪伊人久久| 伊人成人宗合网| 一级性爱视频| 99在线精品免费视频| 免费视频WWW在线观看网站| 日本三级99人妇网站| 99精品超在线播放| 热的国产,热的综合,热的有码| 开心五月婷| 久久婷婷91| 亚洲视频在线观看| 蜜臀av粉嫩av懂色av| 5月色婷婷| 丁香婷婷婷五月| 丁香九月激情| 高清av在线国产| 热99国产精品| 九九久热| 色色色综合| 五月丁香久久色| 亚洲中文无码成人| 久re热视频| 国产美女无遮挡裸体毛片A片| 欧美久人人| 五月久久噜噜| 色五月婷婷综合在线| 亚洲精品国产熟女久久久| 日本久久精品18| 99久久成人| 超碰99在线观看| 婷婷WWW久久| 亚洲天堂亚洲色色色| 欧美激情VA永久在线播放| 欧美精品中文字幕亚洲专区| 大香蕉婷婷色| 婷婷五月天电影网| 久久您您综合网| 国产片天天爽夜夜爽| 六月婷婷开心| 狠狠ri| 99热这里只有99| www.狠狠操| 欧美日韩婷婷五月天| 天天色情站| 丁香五月首页| 99WWW免费视频| 夜夜撸日日骑| 亚洲亚洲人成综合网络| 亚洲网站在线鸭子av| 97色色综合| 久艹久| 九九九九九九九热| 中文字幕人妻熟女在线| 99re熱| 久综合网| 亚洲综合99| 国产色网站| www.99热这里精品| 九九热只有精品| 久婷狼色诱惑在线| 丁香五月在线观看综合| AA片在线观看视频在线播放| 一区二区中文字幕| 开心五月婷婷激情| 2014天天爽| 久久a热| 99色干| 99ri精品视频在线观看| 五月丁香综合激情网| 天天日天天插| 久久免费操| WWW99热| 婷婷五月综激情| 久久婷婷五月天激情四射| 日韩黄色电影| 五月丁香 啪啪| 色色狼人综合| 亚洲九九夜夜| 天天搞夜夜爽夜夜爽| 色综合色色色| 综合激情五月综合激情五月激情1 天天爱天天做天天舔 | 五月婷中文字幕| 亚洲激情综| 久婷久婷| 99热在线爱| 99热这里是精品| 五月婷婷香蕉| 色婷婷av综合网| 九热视频| www.色色五月天.com| 亚洲中文字幕av| 五月天国产成人| 欧美 日韩 人妻 高清 中文| 婷婷激情欧美| 久久精品五月| 日本欧美在线| 亚洲色五月天在线| 五六月婷婷久久| 可以看的av| 婷婷五月丁香久久| 人妻少妇色综合| 都市激情小说婷婷| 婷婷玖玖五月天| 色播五月| 夜夜爽天天日| 毛片新网地| 九九在线精点品| 狠狠干在线视频| 色站9/| 97碰碰人人| 综合狠狠干| 大香蕉啪啪啪啪啪啪| 九九色99| 激情久久五月网| 91久久国产综合久久| 亚洲中文av| 啄木鸟黑丝一区二区| 丁香六月天婷婷| av久热| 久色中文| 黑人无码一区| 少妇高潮A片无套内谢麻豆传| 久播影院免费观看电视剧大全最新网| 色玖玖爱| 国产av天天插天天操天天爽| 91视频五月丁香| 青草视频在线蜜臀| 99热日| 男女啪啪做爰高潮无遮挡| 五月花在线观看视频| 亚洲精品网站色视频| 欲色人妻| 99色视频| 婷婷激情五月| Va另类视频| 日本熟妇精品99| 香港九九六区八区99| 九九aV| 无码 色| 色色色在线免费视频| 9婷婷内射| 日韩成人无码| 色一情一乱一乱一区91Av| 日日日日操| 99在线观看免费精品视频| 激情九月天天天天婷婷| 九九婷| 色99在线观看| xx久久| jiqingliuyuetian| 内射丰满人妻| 亚洲国产婷婷色五月| 99热超| 色综合99无码 | AV网址大全在| 国产毛多水多女人A片| 91超级碰在线视频| 婷婷五月丁香伊人| 婷婷色色网| 性小说五月天| 噜一噜免费视频| 久久久久激情| 丁香五月婷婷Av| 4438全国最大视频成人网站在线观看| 风流少妇A片一区二区蜜桃| 色婷婷色99国产综合精品| 久久久久人妻精品| 五月色天情| 日本激情五月| 99色丁香婷婷综合网| 色五月丁香总合网| 99无码视频| 99久在线精品| 狠狠第四色| 五月婷婷色播| 狠狠色97| 9久热在线视频精品| 超碰9在| 91大神在线免费看视频全集男男一起操| www久久久久久久久久久| 激情五月天婷婷| 色婷婷成人| 人人草人人舔| 久久这里只有精品热在99| 丁香成人五月天| 九九综合精品| 人人爱国产| 国产成人99久久亚洲综合精品| caop在线视频| 丁香婷婷久久| 涩综合婷婷| 成人短视频在线观看| 丁香五月天啪啪| 无码少妇高潮喷水A片免费| 欧美成人精品A片免费一区99| 狠狠干综合| 日韩av手机在线观看| 亚洲黄色网址| 五月丁香久久激情综合| 五月丁香日逼| 激情综合色婷婷啪啪六月天| 1024婷婷综合久久五月天| 超碰a女人的天堂| 伊人网碰碰| 大香蕉久久伊人婷婷五月丁香| 丁香五月婷婷深爱综合激情| 美女va| 久婷婷久草| 天天五月情| 综合婷婷都市激情| 大香蕉九操| www五月| 久久综合婷婷激情| 亚洲黄色av网站| 五月丁香久| 天天 青草 制服丝袜 在线| 色五月婷婷五月久久| 日日夜夜小色哥| 五月天激情综合| 五月亭亭直播| 91中文狠狠综合| 婷婷丁香五月天熟女丝袜| 99啪| 第四色婷婷色五月| 色五月亚洲| 丁香五月天之婷婷影院| 久草丁香婷婷1024| 97欧美在线| 开心 五月 综合| 婷婷激情五月天在线| 久久3p| 办公室少妇激情呻吟A片在线观看 白人荫道BBWBBB大荫道 | 日韩AV大全| 丁香8月手机综合| 久综合九| 丁香五月天婷婷久久综合| 色色射| 99久久99九九99九九九| 丁香五月婷婷香| 久草大| 丁香六月亭亭久久综合| www激情| 五月桃花网综合| 激情六月丁香| 草做免费在线观看| 日韩AAAAA| 99碰碰碰| 激情六月下句是什么| 一级黄色尤物综合视频手机在线观看| 人人干av| 婷婷综合一二三| 五月婷婷久久开心网| 99国产精品久久久久久久久久久 | 操操操B| 综合久久综合久久| 丁香五月第四色88| 成人午夜无码视频| 亚洲国产网站| 极品人妻videosss人妻| 91Chinese在线| YW无码| WWW、日本色丁香、co m| 玖玖爱综合网| 丁香五月瑟瑟| 99视频地址| 亚洲五月天婷婷| 婷婷色色宗合网| 国产六月婷婷| 五月综合无码| www.久久综合| 五月婷婷激情视频| 国产性爱在线| 亚洲综合激情五月天婷婷| 久久久无码精品成人A片小说 | 色婷丁香五月| 婷婷精品在线| 久久婷婷草| 五月丁香在线婷婷美女| 九九热精品| 五月丁香婷婷在线| 青青草原伊人网| 色婷婷丁香AV综合| 2w在线视频| 亚洲精品V天堂中文字幕| 婷婷伊人| 69精品人人人人| 亚洲天堂啪啪| 99久久久久久www| 六月丁香成人| 天天干天干| 丁香婷婷影院| 丁香五月婷婷在线视频| 99国产精品久久久久久久久久久| 婷婷六月激情小说网| 新97人人上人人| 先锋资源91| 草综合14| 99久久新视频| 日韩啊啊啊| 97热久久| 4399人妻无码久久久| 四季AV综合网| 婷婷娌伦网| 99热超碰天堂网| 色激情五月天| 97欧美在线| 色99自拍| 成人在线网| www99热| 婷婷激情五月吧| 五月婷婷五月天| 国产99精品免费视频| 色婷五月天| 激情五月综合六月丁香婷婷狠狠干| 免费观看的av| 色婷丨日丨天丨综合久久| 精品少妇人妻AV无码专区偷人 | 99精品热| 五月丁香网av| 亚洲成人AV高清字幕| 色婷婷五月亚洲| wwww.9免费视频| 色色日本| 久草视频一,二三四| 99热.com| 五月婷婷色播网| 五月婷护士| 五月丁香综合网| 欧美婷婷日本| 丁香五月综合| 五月婷婷六月基地| 婷婷娌伦网| 综合久久99| 婷婷五月天性| 丁香五月黄色| 九九视频这里只有精品| 婷婷久久六月天| 99热九九九九| 久久五月激情综合| 六月激情婷婷色| 久热99视频在线观看| 日本爆乳片手机在线播放| 任你草| 国产五月视频| 五月综合在线| 99丁香五月婷| 欧美123区免| 综合色久| 99热只有这里才是精品| 久久婷婷五月综合成人d啪| 久久五月婷| 婷婷五月天黄色小说| 久久99激情| 国产精品久久久久久久久久 | 不卡的AV网站| 狼人婷婷久久| www.日日夜夜| 婷婷爱爱蜜臀天天操| 亚洲成av人影院| 日本五月天激情| 五月婷婷开心亚洲无| 一起操最新网址| 久久免片| 六月丁香五月天| 日日噜狠狠色综| 久久精品五月| 亚洲精品99| 91大屁股精品| 奸逼视频| 精品人人操| 久久久潮喷-久久久九九-成人AV| 在线播放成人网站| 婷婷五月天干干| 久鲁鲁色网| 天天综合久久| 狠狠插.com| 色优久久| 激情综合五月开心狠狠| 翔田千里aV中文字幕| 影音先锋男人资源站一区二区| 丁香六月综合激情| 另类 在线| 永久地址 色| eeuus五月婷| 中文字幕,综合,91| 日本天堂网站99| 色综合婷婷| 久草视频一,二三四| 五月激情婷婷女| 五月天色婷婷av| 丁香五月婷婷啪啪| 99亚洲精美视频在线观看| 丁香婷婷老熟女综合网| 人人草人人舔| 九九aV| 91精品久久久久、久五月天| 99热精品9| 99热这里只有精品21| 武则天精品久久| 国产免费一区二区三州老师F1F1……| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 日本三级成人秘书精品片| 91综合在线| 99热碰碰热| 久久精品人妻| 久久久性爱视频| 深爱激情网五月天| 亚洲精品久久久久久久久久吃药| 亚洲小说五月婷婷| 天天操夜夜爽天天操| 久操综合| 欧美精产国品一二三区| 亚洲AV无码影院| 久久国产高潮白浆免费观看99| 色婷婷伊人激情在线观看| 免费无码毛片一区二区A片| 五月天伊人| 九九综合| 大香蕉综合| 五月天激情小说| 天天综合精品| 色五月婷婷老师| www久久99| 综合色图区| 国产激情综合五月久久| 亚洲综合婷婷| 九九色热| 国外亚洲成AV人片在线观看| 欧美成人精品A片免费一区99| 五月婷婷丁香| 年轻的妺妺伦理HD中文| 日产精品久久久久久久蜜臀| 免费视频WWW在线观看网站| 蜜桃成语时李时珍 免费| 国产欧美日韩综合精品一区二区| 丁香网站| 久久婷婷五月综合色欧美| 天天综合天综合久久网| 婷婷五月天亚洲综合网| 色婷婷AV在线观看| 六月丁香天堂| 色五月婷婷自拍| 日本色99| 99热在线观看免费中文| 噜综合| 丁香五月天五码婷婷| 99精品22| 色无码| 激情五月小说婷婷| 蜜桃人妻无码AV天堂三区| co超碰在线观看| 激情婷婷视频在线| 九九热啪啪| 青青夜夜狠狠夜夜狠狠| 色婷婷五月天堂资源| 丁香五月亚综合图片| 综合激情在线| 亚洲激情网| 丁香五月婷婷影视先锋| 99色| 99re99热| 嫩草AV久久伊人妇女超级a| 五月丁香六月激情在线| www色色色com| 六月丁香婷婷综合色播| 色婷婷成人在线| 免费视频这里只有精品| 丁香五月婷婷亚洲色图| 九九热精品| 玖玖婷婷五月天毛片| 色噜噜五月天| 热这里只有精| www,99热| 欧美99热| 影音先锋91在线资源站| 99精品女人天堂| 色之综合网| 一级性爱视频| 激情综合网五月天| 就爱日五月天| 国产激情久久久| 成人欧美Va| 综合久久影院| 欧美婷婷丁香社区在线播放| 大香蕉人在线65| 26UUU亚洲欧美| 国内外色色色色色成人视频| 91精品久久久久久77777| 九一牛视频探花| 99热综合| 天天插天天操| 五月婷婷性爱| 久久9RE热视频精品98| 亚洲色情免费网| 99熟女啪啪视频| 五月桃花网综合| 婷婷伊人綜合中文字幕| 99热在线精品观看| 99热在线播放| 第五婷婷伊人丁香色| 婷婷激情五月综合在线视频| 五月丁香久久综合| 九月婷婷人人操人人舔人人爱| 六月99天天婷婷激情综合| 亚洲欧美一区二区三区爱爱动图| 97精品综合久久| 另类激情码| 五月久久丁香| 亚洲久热| 五月丁香婷婷中文| 久久机热/这里只有精品| 嫩BBB槡BBBB搡BBBB| 97碰| 婷婷99狠狠躁| 午夜精品久久久久久久爽| 五月天婷婷色色| 激情爱爱网站超大免费| 丁香亚洲色综合| 精品人妻久久久| 99性爱视频| 六月丁香啪啪啪| 无码色色色| 久9草在线观看视频| WWW、日本色丁香、co m| 综合网亚洲| 久久婷婷色| 99亚洲视频| 久久精彩视频99| 色情五月天A片| A片试看50分钟做受视频| 伊人五月天男人的天堂在线| 久久婷婷五月综合色奶水99啪| www九月婷婷| 丁香五月婷婷色| 日本欧美成人片AAAA| 久色视频在线| 色色射| 天堂A∨在线| 丁香五月另类色婷婷麻豆| 九九精品热播| www.婷婷五月天.com| 亚洲欧洲小视频9| 丁香五月婷婷色偷偷| 日韩AC在线免费观看| 99热这里精| 久久久国产精品黄毛片 | 大香蕉久久婷婷| 天天干天天操天天射| 婷婷婷婷婷婷婷婷| 五月天大香蕉AV| 久久精品性爱| 四射综合网| 月婷婷婷婷五月| 丁香玖玖视频大全| 五月天停婷基地| 99热天堂| 色婷婷综合久久久久| 日韩久久视频| 国产 码在线成人网站| 五月开心婷婷极品激情| 开心激情站| 天天天天天色| 影音 五月 婷婷 久久|