99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Tmux自動(dòng)保存會(huì)話日志:原理、配置與生產(chǎn)環(huán)境實(shí)踐

Tmux自動(dòng)保存會(huì)話日志:原理、配置與生產(chǎn)環(huán)境實(shí)踐 1. 為什么需要自動(dòng)保存Tmux會(huì)話日志如果你和我一樣日常開發(fā)、運(yùn)維或者長(zhǎng)時(shí)間跑任務(wù)都離不開Tmux那你肯定遇到過(guò)這種糟心事一個(gè)跑了三天三夜的編譯任務(wù)或者一個(gè)正在調(diào)試的復(fù)雜服務(wù)因?yàn)榫W(wǎng)絡(luò)閃斷、終端意外關(guān)閉甚至只是手滑關(guān)掉了終端窗口整個(gè)Tmux會(huì)話連同里面所有寶貴的輸出信息瞬間消失。更讓人抓狂的是有時(shí)候一個(gè)關(guān)鍵的錯(cuò)誤信息就在你眼皮子底下閃過(guò)還沒(méi)來(lái)得及細(xì)看就被后續(xù)的日志刷掉了。這時(shí)候你恨不得能把屏幕上的每一個(gè)字符都“焊”下來(lái)。這就是我們今天要解決的問(wèn)題。Tmux本身是一個(gè)強(qiáng)大的終端復(fù)用器它能讓會(huì)話在后臺(tái)持續(xù)運(yùn)行但它默認(rèn)并不負(fù)責(zé)把屏幕上滾過(guò)的所有內(nèi)容持久化到磁盤。script命令是一個(gè)經(jīng)典的解決方案它能記錄終端的所有輸入輸出但把它和Tmux優(yōu)雅地結(jié)合起來(lái)實(shí)現(xiàn)“無(wú)感”的、自動(dòng)化的日志記錄里面有不少門道。比如如何為每個(gè)Tmux窗口或窗格單獨(dú)生成日志文件如何避免日志文件無(wú)限膨脹如何讓這個(gè)機(jī)制在每次啟動(dòng)Tmux時(shí)自動(dòng)生效而不需要你手動(dòng)敲一堆命令最近在社區(qū)里關(guān)于“mobaxterm保存日志”、“vs調(diào)試信息保存到日志文檔同時(shí)打印顯示”的討論也很多這說(shuō)明大家對(duì)于終端輸出持久化的需求是普遍且強(qiáng)烈的。尤其是當(dāng)你在處理“慢查詢?nèi)罩尽狈治?、“redis日志”監(jiān)控或者排查“android保存異常前后關(guān)鍵日志、內(nèi)核異?!边@類復(fù)雜問(wèn)題時(shí)一份完整的、按時(shí)間或會(huì)話組織的終端記錄其價(jià)值不亞于一份詳細(xì)的調(diào)試報(bào)告。所以這篇文章的目的就是分享一套我經(jīng)過(guò)多年實(shí)踐打磨出來(lái)的、在Linux環(huán)境下為Tmux會(huì)話自動(dòng)保存日志的完整方案。我會(huì)從最核心的原理講起一步步拆解配置方法并重點(diǎn)分享那些容易踩坑的細(xì)節(jié)和高級(jí)用法讓你不僅能“抄作業(yè)”更能理解背后的“所以然”。2. Tmux日志記錄的核心原理與工具選型在動(dòng)手之前我們必須搞清楚兩件事第一Tmux本身是如何處理屏幕內(nèi)容的第二有哪些工具可以捕獲這些內(nèi)容。Tmux的核心是一個(gè)客戶端-服務(wù)器模型。當(dāng)你運(yùn)行tmux命令時(shí)會(huì)啟動(dòng)一個(gè)服務(wù)器進(jìn)程tmux server。這個(gè)服務(wù)器管理著所有的會(huì)話session、窗口window和窗格pane。你在終端里看到的實(shí)際上是Tmux客戶端渲染出的一個(gè)“視圖”。所有在窗格中運(yùn)行的進(jìn)程比如bash, vim, top的輸出都會(huì)先被Tmux服務(wù)器捕獲然后再轉(zhuǎn)發(fā)給連接的客戶端進(jìn)行顯示。這就給我們提供了兩個(gè)攔截日志的切入點(diǎn)在進(jìn)程層面攔截在進(jìn)程如bash和Tmux服務(wù)器之間插入一個(gè)記錄器。這就是script命令的工作方式。script會(huì)啟動(dòng)一個(gè)新的shell并記錄這個(gè)shell及其所有子進(jìn)程的所有輸入輸出。在Tmux層面攔截直接讓Tmux服務(wù)器把它要發(fā)送給客戶端的內(nèi)容額外保存一份到文件。Tmux內(nèi)置了pipe-pane命令和capture-pane命令可以做到這一點(diǎn)。方案對(duì)比與選型script命令方案原理通過(guò)exec script -f log.txt替換當(dāng)前窗格的shell開始記錄。優(yōu)點(diǎn)記錄非常原始和完整包括控制字符、顏色碼如果使用-f參數(shù)。它是操作系統(tǒng)自帶工具無(wú)需額外安裝。缺點(diǎn)與Tmux結(jié)合時(shí)需要一些技巧。一個(gè)script進(jìn)程只記錄一個(gè)窗格。如果直接在~/.bash_profile里啟動(dòng)script可能會(huì)遇到遞歸調(diào)用或記錄不完整的問(wèn)題比如“vi ~/.bash_profile 報(bào)錯(cuò)e325: attention”這種錯(cuò)誤可能就和環(huán)境變量或終端狀態(tài)被script改變有關(guān)。Tmux內(nèi)置pipe-pane方案原理在Tmux內(nèi)部使用pipe-pane命令將一個(gè)窗格的輸出實(shí)時(shí)管道傳輸pipe到一個(gè)外部命令如cat log.txt或文件中。優(yōu)點(diǎn)與Tmux原生集成配置靈活可以綁定到快捷鍵可以方便地為不同窗格指定不同日志文件。缺點(diǎn)默認(rèn)可能不記錄窗格中更早的歷史內(nèi)容需要結(jié)合capture-pane -S -來(lái)保存初始內(nèi)容。對(duì)于已經(jīng)存在的窗格需要手動(dòng)開啟。Tmux內(nèi)置capture-pane方案原理將窗格當(dāng)前可見(jiàn)或指定范圍的內(nèi)容一次性捕獲并保存到Tmux的緩沖區(qū)或文件中。通常用于快照而非持續(xù)流式記錄。優(yōu)點(diǎn)適合定時(shí)備份或手動(dòng)保存特定時(shí)刻的輸出。缺點(diǎn)不是自動(dòng)的持續(xù)記錄。我的選擇與理由對(duì)于“自動(dòng)保存”這個(gè)核心需求pipe-pane方案是更優(yōu)雅、更貼合Tmux哲學(xué)的選擇。它允許我們?cè)赥mux會(huì)話的生命周期內(nèi)動(dòng)態(tài)地控制日志記錄并且可以很容易地通過(guò)Tmux配置文件~/.tmux.conf實(shí)現(xiàn)自動(dòng)化。script命令更適合在非Tmux環(huán)境或者對(duì)記錄格式有非常嚴(yán)格要求的場(chǎng)景下使用。因此接下來(lái)的實(shí)戰(zhàn)將圍繞Tmux的pipe-pane命令展開。我們會(huì)設(shè)計(jì)一個(gè)機(jī)制每當(dāng)創(chuàng)建一個(gè)新的Tmux窗格時(shí)自動(dòng)為其啟動(dòng)日志記錄并將日志文件以“會(huì)話名-窗口索引-窗格索引-時(shí)間戳”的格式保存到指定目錄。這樣日志不僅自動(dòng)保存了還具備了良好的可追溯性。3. 實(shí)戰(zhàn)配置實(shí)現(xiàn)Tmux窗格日志自動(dòng)記錄理論清晰了現(xiàn)在我們來(lái)動(dòng)手實(shí)現(xiàn)。我們的目標(biāo)是修改Tmux的配置文件使得任何新創(chuàng)建的窗格都能自動(dòng)開始將輸出記錄到獨(dú)立的日志文件中。3.1 基礎(chǔ)環(huán)境與配置文件準(zhǔn)備首先確保你有一個(gè)可用的Tmux環(huán)境。大部分Linux發(fā)行版都可以通過(guò)包管理器安裝。例如在CentOS/Rocky Linux上sudo yum install tmux在Ubuntu/Debian上sudo apt install tmux。Tmux的核心配置文件是用戶家目錄下的~/.tmux.conf。如果不存在創(chuàng)建它touch ~/.tmux.conf所有后續(xù)的配置都將寫入這個(gè)文件。修改后需要重啟Tmux服務(wù)器tmux kill-server然后重新進(jìn)入或在現(xiàn)有會(huì)話中按前綴鍵默認(rèn)是Ctrlb后輸入:source-file ~/.tmux.conf來(lái)重新加載配置。3.2 核心配置腳本解析我們將把自動(dòng)日志記錄的邏輯寫成一個(gè)Tmux的“鉤子”hook綁定到“窗格創(chuàng)建完成”這個(gè)事件上。以下是完整的配置段落你可以直接添加到你的~/.tmux.conf文件末尾# ~/.tmux.conf - 自動(dòng)日志記錄配置 # 1. 定義日志存儲(chǔ)目錄 set -g log_dir “$HOME/.tmux/logs” # 使用$HOME變量兼容性更好 # 2. 創(chuàng)建日志目錄如果不存在 run-shell “mkdir -p #{log_dir} 2/dev/null || true” # 3. 定義自動(dòng)開啟日志記錄的函數(shù)/命令 set -g plugin ‘tmux-plugins/tmux-logging’ # 注意上面這行是如果你使用Tmux Plugin Manager (TPM)來(lái)安裝插件時(shí)的寫法。 # 但我們這里采用純配置實(shí)現(xiàn)不依賴外部插件所以可以注釋掉或刪除。 # 4. 核心為每個(gè)新窗格綁定自動(dòng)日志記錄 set-hook -g after-new-window ‘run-shell “tmux pipe-pane -t #{session_name}:#{window_index}.#{pane_index} ‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log”’ set-hook -g pane-focus-in ‘if-shell -F “#{:#{pane_start_command},}” “run-shell ‘tmux pipe-pane -t #{session_name}:#{window_index}.#{pane_index} ‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log’’”’配置逐行詳解第1行set -g log_dir “$HOME/.tmux/logs”-g表示全局設(shè)置。log_dir是我們自定義的一個(gè)Tmux用戶選項(xiàng)user option用來(lái)存儲(chǔ)日志目錄路徑。我選擇$HOME/.tmux/logs因?yàn)樗[藏在用戶目錄下且與Tmux相關(guān)。你可以根據(jù)習(xí)慣修改為/var/log/tmux需要sudo權(quán)限或$HOME/logs/tmux。使用$HOME而不是~因?yàn)樵赥mux配置中~可能不會(huì)被正確展開。第2行run-shell “mkdir -p #{log_dir} 2/dev/null || true”這是一個(gè)在加載配置時(shí)執(zhí)行的shell命令。mkdir -p確保日志目錄存在-p參數(shù)表示如果父目錄不存在則一并創(chuàng)建。2/dev/null將錯(cuò)誤輸出比如目錄已存在重定向到空設(shè)備避免干擾。|| true確保即使命令失敗極少數(shù)情況也不會(huì)導(dǎo)致整個(gè)配置加載失敗。第4-5行set-hook -g after-new-window …和set-hook -g pane-focus-in …這是實(shí)現(xiàn)自動(dòng)化的關(guān)鍵。set-hook用于綁定事件。after-new-window在新建窗口后觸發(fā)。注意在Tmux中新建窗口時(shí)會(huì)自動(dòng)創(chuàng)建一個(gè)窗格所以這個(gè)鉤子能捕獲到新窗格的創(chuàng)建。pane-focus-in當(dāng)焦點(diǎn)進(jìn)入一個(gè)窗格時(shí)觸發(fā)。我們配合條件判斷使用目的是為了處理那些在會(huì)話恢復(fù)tmux attach時(shí)已經(jīng)存在但尚未開始記錄的舊窗格。if-shell -F “#{:#{pane_start_command},}”這是一個(gè)條件判斷。#{pane_start_command}是窗格啟動(dòng)時(shí)運(yùn)行的初始命令。如果它為空通常意味著這個(gè)窗格啟動(dòng)的是一個(gè)默認(rèn)shell比如bash并且我們預(yù)設(shè)的日志記錄命令pipe-pane還沒(méi)有運(yùn)行。這個(gè)條件判斷可以防止對(duì)已經(jīng)開啟日志記錄的窗格重復(fù)執(zhí)行命令。run-shell ‘tmux pipe-pane …’這是實(shí)際執(zhí)行日志記錄的命令。我們通過(guò)run-shell在Tmux內(nèi)部調(diào)用tmux命令本身。pipe-pane命令詳解-t #{session_name}:#{window_index}.#{pane_index}-t指定目標(biāo)。#{session_name},#{window_index},#{pane_index}是Tmux提供的格式變量能唯一標(biāo)識(shí)當(dāng)前窗格。這確保了命令作用于正確的窗格。‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log’這是pipe-pane要執(zhí)行的命令。exec cat file這是一個(gè)經(jīng)典的技巧。exec會(huì)讓當(dāng)前shell進(jìn)程被cat命令替換cat從標(biāo)準(zhǔn)輸入讀取數(shù)據(jù)并追加到文件。這樣窗格的輸出流就通過(guò)管道源源不斷地寫入日志文件。使用是追加模式避免覆蓋。文件名模板#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log#{session_name}會(huì)話名如mysession。W#{window_index}窗口索引從0開始如W0。P#{pane_index}窗格索引從0開始如P0。$(date %Y%m%d_%H%M%S)執(zhí)行命令時(shí)的時(shí)間戳精確到秒。例如20231026_143022。這是關(guān)鍵它為每次日志記錄會(huì)話生成唯一文件名避免了多個(gè)窗格或多次記錄相互覆蓋。也方便你按時(shí)間查找日志。重要提示上面的配置使用了兩個(gè)鉤子并且pane-focus-in里的命令和after-new-window里的幾乎一樣。在實(shí)際測(cè)試中我發(fā)現(xiàn)有時(shí)僅靠after-new-window在復(fù)雜場(chǎng)景如從已有會(huì)話恢復(fù)下可能不夠可靠。pane-focus-in作為一個(gè)補(bǔ)充觸發(fā)器能確保當(dāng)你切換到某個(gè)未開始記錄的舊窗格時(shí)自動(dòng)為其開啟日志。這是一種防御性編程思維。3.3 配置驗(yàn)證與手動(dòng)控制添加配置并重載后新建一個(gè)Tmux窗口或窗格然后立刻檢查日志目錄ls -la ~/.tmux/logs/你應(yīng)該能看到類似mysession_W0_P0_20231026_143022.log的文件正在被創(chuàng)建并且文件大小會(huì)隨著你在該窗格中的操作而增長(zhǎng)。手動(dòng)控制命令 雖然配置是自動(dòng)的但了解手動(dòng)命令對(duì)調(diào)試和高級(jí)管理很有幫助。為指定窗格開啟日志記錄在Tmux會(huì)話內(nèi)按前綴鍵后輸入:pipe-pane -o ‘exec cat /tmp/tmux.log’-o參數(shù)表示僅輸出不記錄輸入。如果你需要記錄輸入即你敲的命令可以去掉-o但要注意這可能會(huì)記錄密碼等敏感信息停止當(dāng)前窗格的日志記錄:pipe-pane不帶任何參數(shù)的pipe-pane命令會(huì)關(guān)閉當(dāng)前窗格的管道。查看當(dāng)前窗格是否正在記錄:display-message “#{pane_in_mode}”如果返回1通常表示該窗格正處于某種特殊模式如復(fù)制模式或…正在管道傳輸。但這不是一個(gè)百分百準(zhǔn)確的指標(biāo)。更直接的方法是查看進(jìn)程樹pstree或檢查日志文件是否在增長(zhǎng)。4. 高級(jí)優(yōu)化與常見(jiàn)問(wèn)題排查基礎(chǔ)功能實(shí)現(xiàn)了但在生產(chǎn)環(huán)境長(zhǎng)期使用我們還需要考慮更多日志輪轉(zhuǎn)、性能影響、異常處理等。下面分享幾個(gè)我踩過(guò)坑后總結(jié)的優(yōu)化點(diǎn)。4.1 日志輪轉(zhuǎn)與清理策略日志文件不加以管理遲早會(huì)撐爆磁盤。我們不應(yīng)該在Tmux配置里做復(fù)雜的日志輪轉(zhuǎn)如logrotate那應(yīng)該是系統(tǒng)層面的任務(wù)。但我們可以通過(guò)優(yōu)化日志生成策略來(lái)配合。1. 按日或按會(huì)話分割日志上述配置使用了精確到秒的時(shí)間戳這會(huì)導(dǎo)致大量小文件。一個(gè)更好的策略是按天分割。修改pipe-pane命令中的文件名部分‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d).log’這樣同一天同一個(gè)窗格的所有輸出都會(huì)進(jìn)入同一個(gè)文件。文件大小可控也便于按天歸檔。2. 集成系統(tǒng)logrotate在/etc/logrotate.d/下創(chuàng)建一個(gè)配置文件例如tmux$HOME/.tmux/logs/*.log { daily missingok rotate 30 compress delaycompress notifempty create 0640 $USER $USER }這個(gè)配置會(huì)每天輪轉(zhuǎn)日志保留30天并壓縮舊日志。create指令確保新創(chuàng)建的日志文件權(quán)限正確。3. 在Tmux會(huì)話結(jié)束時(shí)清理有時(shí)一個(gè)臨時(shí)會(huì)話的日志無(wú)需保留??梢栽O(shè)置一個(gè)鉤子在會(huì)話銷毀時(shí)刪除其對(duì)應(yīng)的日志文件。但這需要更復(fù)雜的腳本因?yàn)橐粋€(gè)日志文件可能對(duì)應(yīng)多個(gè)窗格且會(huì)話名可能重復(fù)。一個(gè)更簡(jiǎn)單的做法是定期手動(dòng)清理或依賴上面的logrotate。4.2 性能影響與注意事項(xiàng)I/O負(fù)載pipe-pane會(huì)將所有輸出實(shí)時(shí)寫入磁盤。對(duì)于輸出極其頻繁的窗格例如tail -f一個(gè)巨大的日志文件這可能會(huì)增加I/O壓力。在機(jī)械硬盤上需要留意。對(duì)于絕大多數(shù)開發(fā)、運(yùn)維操作影響微乎其微。網(wǎng)絡(luò)延遲感知寫入本地磁盤通常很快但如果日志目錄位于網(wǎng)絡(luò)存儲(chǔ)NFS上可能會(huì)引入延遲極端情況下可能讓終端感覺(jué)“卡頓”。磁盤空間監(jiān)控務(wù)必監(jiān)控日志目錄所在磁盤的空間使用情況??梢詫懸粋€(gè)簡(jiǎn)單的cron任務(wù)或systemd timer來(lái)檢查并報(bào)警。敏感信息泄露切記這會(huì)記錄終端上顯示的所有明文信息包括你輸入的密碼、密鑰、API Token等。因此避免在開啟自動(dòng)日志的Tmux窗格中輸入密碼。使用ssh-agent,gpg-agent或交互式密碼輸入工具。考慮使用pipe-pane -o只記錄輸出不記錄輸入。但輸入的命令行本身也常是調(diào)試的關(guān)鍵信息這需要權(quán)衡。確保日志目錄的權(quán)限設(shè)置正確如700僅允許所有者讀寫。對(duì)于包含敏感信息的臨時(shí)會(huì)話可以在創(chuàng)建會(huì)話時(shí)臨時(shí)禁用自動(dòng)日志或者事后安全地刪除日志文件。4.3 常見(jiàn)問(wèn)題與排查指南即使配置正確也可能遇到問(wèn)題。下面是一些典型場(chǎng)景和排查思路。問(wèn)題1日志文件沒(méi)有創(chuàng)建或沒(méi)有內(nèi)容。檢查配置是否加載在Tmux中按Ctrlb然后輸入:show-options -g log_dir查看log_dir變量是否設(shè)置正確。檢查目錄權(quán)限運(yùn)行l(wèi)s -ld ~/.tmux/logs/確保目錄存在且當(dāng)前用戶有寫權(quán)限。檢查鉤子是否觸發(fā)可以暫時(shí)在鉤子命令中加入調(diào)試信息。例如將run-shell部分改為run-shell “echo ‘Hook triggered for #{session_name}:#{window_index}.#{pane_index} at $(date)’ /tmp/tmux-hooks.log”然后新建窗格查看/tmp/tmux-hooks.log文件是否有輸出。這能幫你確認(rèn)是配置沒(méi)生效還是pipe-pane命令本身有問(wèn)題。檢查pipe-pane命令語(yǔ)法Tmux命令對(duì)引號(hào)嵌套非常敏感。確保你的配置文件中引號(hào)是匹配的。建議使用單引號(hào)包裹整個(gè)exec cat …命令就像示例中那樣。查看Tmux服務(wù)器日志啟動(dòng)Tmux時(shí)加上-vv參數(shù)tmux -vv new-session可以輸出詳細(xì)日志到標(biāo)準(zhǔn)錯(cuò)誤或文件有助于診斷。問(wèn)題2日志記錄意外停止。窗格中的進(jìn)程崩潰或結(jié)束如果窗格中的主進(jìn)程如bash退出pipe-pane的管道也會(huì)終止。這是預(yù)期行為。手動(dòng)誤關(guān)閉不小心在窗格中執(zhí)行了不帶參數(shù)的:pipe-pane命令。Tmux服務(wù)器重啟如果Tmux服務(wù)器重啟所有窗格的管道狀態(tài)會(huì)丟失。我們的pane-focus-in鉤子會(huì)在你重新聚焦時(shí)嘗試恢復(fù)但前提是窗格還在。問(wèn)題3如何為已經(jīng)存在的舊會(huì)話/窗格開啟自動(dòng)日志我們的pane-focus-in鉤子就是為了解決這個(gè)問(wèn)題。你只需要切換到那個(gè)舊的窗格鉤子就會(huì)觸發(fā)如果條件滿足。如果沒(méi)觸發(fā)可以手動(dòng)執(zhí)行一次:pipe-pane -o ‘exec cat …’命令。問(wèn)題4我想記錄更早的、創(chuàng)建日志之前的內(nèi)容。pipe-pane只記錄從命令執(zhí)行后開始的內(nèi)容。如果你想保存窗格中當(dāng)前已有的回滾歷史scrollback可以在開啟持續(xù)記錄前先手動(dòng)保存一次快照# 在目標(biāo)窗格中先按前綴鍵(Ctrlb)然后輸入 :capture-pane -S -300 # 捕獲從300行之前到現(xiàn)在的所有內(nèi)容 :save-buffer ~/.tmux/logs/history_snapshot.log # 保存到文件 # 然后再開啟pipe-pane進(jìn)行持續(xù)記錄5. 延伸應(yīng)用打造終端工作流與日志分析自動(dòng)日志記錄不僅僅是一個(gè)“備份”功能。當(dāng)它成為你工作流的一部分時(shí)可以解鎖更多高效用法。5.1 與監(jiān)控和告警集成想象一下你有一個(gè)在Tmux窗格中長(zhǎng)時(shí)間運(yùn)行的后臺(tái)任務(wù)比如一個(gè)數(shù)據(jù)處理的Python腳本。你可以結(jié)合簡(jiǎn)單的shell腳本來(lái)監(jiān)控日志#!/bin/bash # monitor_tmux_log.sh LOG_DIR“$HOME/.tmux/logs” SESSION“data_processing” WINDOW0 PANE0 LOG_FILE$(ls -t “$LOG_DIR”/${SESSION}_W${WINDOW}_P${PANE}_*.log 2/dev/null | head -1) if [ -z “$LOG_FILE” ]; then echo “No log file found for ${SESSION}:${WINDOW}.${PANE}” exit 1 fi # 持續(xù)監(jiān)控日志文件查找錯(cuò)誤關(guān)鍵詞 tail -F “$LOG_FILE” | while read line; do if echo “$line” | grep -q “ERROR\|CRITICAL\|FAILED”; then # 發(fā)送告警例如通過(guò)郵件、Slack webhook等 echo “ALERT found in $LOG_FILE: $line” | mail -s “Tmux Task Alert” your-emailexample.com # 或者播放一個(gè)聲音 paplay /usr/share/sounds/freedesktop/stereo/alarm-clock-elapsed.oga 2/dev/null fi done這個(gè)腳本會(huì)找到指定窗格最新的日志文件然后tail -F持續(xù)跟蹤一旦發(fā)現(xiàn)包含“ERROR”等關(guān)鍵詞的行就觸發(fā)告警。你可以用cron或systemd服務(wù)來(lái)啟動(dòng)這個(gè)監(jiān)控腳本。5.2 基于日志的復(fù)盤與知識(shí)管理每天下班前花5分鐘瀏覽一下~/.tmux/logs/目錄下的日志。你可能會(huì)發(fā)現(xiàn)某個(gè)復(fù)雜命令的成功參數(shù)組合。一個(gè)之前花了半小時(shí)解決的錯(cuò)誤其解決方案被完整記錄了下來(lái)。一段有用的代碼片段或配置輸出。你可以建立一個(gè)簡(jiǎn)單的知識(shí)庫(kù)將有價(jià)值的日志片段整理歸檔。例如用一個(gè)筆記軟件如Obsidian, Logseq或一個(gè)簡(jiǎn)單的Git倉(cāng)庫(kù)來(lái)管理。給日志文件配上好的命名規(guī)范我們之前的配置已經(jīng)做到了搜索起來(lái)會(huì)非常方便。5.3 替代方案淺析何時(shí)不用Tmux內(nèi)置方案雖然pipe-pane方案很優(yōu)雅但有些場(chǎng)景下你可能需要考慮其他工具需要記錄精確時(shí)序和終端控制序列如果你在做終端應(yīng)用的性能分析或錄制終端操作視頻script命令的-t參數(shù)可以輸出帶時(shí)間戳的數(shù)據(jù)流配合scriptreplay可以完美回放。這是pipe-pane難以替代的。環(huán)境限制無(wú)法修改Tmux配置比如在臨時(shí)租賃的服務(wù)器或嚴(yán)格管控的環(huán)境。這時(shí)你可以在啟動(dòng)Tmux之前先用script命令包裝script -f my_session.log tmux new-session -s mysession這樣整個(gè)Tmux會(huì)話包括所有子窗口的輸出都會(huì)被記錄到一個(gè)文件。缺點(diǎn)是所有窗格混在一起且文件會(huì)非常大。使用第三方終端復(fù)用器比如screen命令。screen也有類似的日志功能Ctrla, H開始/停止記錄但功能和集成度不如Tmux的pipe-pane靈活。最后再分享一個(gè)我個(gè)人的小技巧我會(huì)在~/.bash_profile或~/.zshrc里設(shè)置一個(gè)別名快速搜索今天的Tmux日志alias tlog“grep -r ‘\$1’ ~/.tmux/logs/*$(date %Y%m%d)*.log 2/dev/null | head -20”這樣在終端里輸入tlog “Connection refused”就能快速搜索今天所有Tmux日志里出現(xiàn)的連接錯(cuò)誤對(duì)于問(wèn)題排查來(lái)說(shuō)效率極高。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月天成人在线播放| 女人天堂 AV| 91性高潮久久久久久久久| 五月天激情综合网站| 99色综合久久| 99re在线播放| 99色网站| 国产亚洲在线观看| 丁香五月影视| 超碰人人干| 99在线观看免费精品视频| 中文成人在线| 丁香五月瑟瑟| 五月丁香婷婷钟和色图| 午夜69成人做爰视频| 天天摸天天做天天爱天天爽| 深爱五月日韩| 色五开心五月五月深深爱| 日韩成人网址| 久99久热| 欧美日朝成人| 久久ww| 五月天婷婷激情四射综合| 99热免费| 99热热热99精品婷婷| 大香蕉中文| 99久久九九| 激情桃色网| 激情婷婷五月| 99热精品在线观看| 亚洲色情久久| 色亚洲中文| 97人妻碰碰碰久久香蕉| 色婷婷免费观看| 黄色短视频在线观看| 成人片黄网站色大片免费毛片| 大香蕉五月婷婷| 99热这里只有免费精品| 五月丁香婷婷深深爱| 99热这里只有精品一区| 九九这里都是精品| 成人丁香色| 国产精品久久久海的味道| 激情综合婷婷| 99免费热视频| 亭亭五月丁香五月天激情| 天天摸天天高潮天天爽| 色婷婷久综合久久一本国产AV| 五月天全国最大成人网| 伍月婷丁香花全集| 九九在线视频| 五月天色区| 婷婷久久亚洲| 伊人激情AV一区二区三区| 色五月天在线观看| AV片一区在线观看| 超碰精品国产首页| 激情综合色网| 狠狠干青青草| 99∨VTV| 激情六月丁| 色播播五月| 播五月开心婷婷欧美综合| 色偷偷色婷婷| 天天做天天爽| 激情五月婷色| WWW夜夜| 五月天婷婷xxx| 亚洲熟妇AV综合网五月丁香伊人| 人妻VideOssS人妻| 桃色五月天| 99在线观看| CHINESE熟女老女人HD视频| 风流少妇A片一区二区蜜桃| 牛牛热这里只有jingpin| 久久综合香蕉国产国产蜜臀AV| 九九99九九精品视频| 玖玖婷婷视频| 五月四色色| 色五月婷激情| 婷婷丁香五月激情| 丁香97综合| 日韩在线一级| www.爱操com.| www.久久爱.com| 久操操| 疯狂做受XXXX高潮A片| 丁香五月花| 五月丁香六月停停停| 99色久| 色噜噜伊人| 亚洲色情网站| 538在线精品| 91a片爽| 五月天婷婷基地综合网| 操操操操操电影网| 激情五月天色播| 日本三级第一页| 欧美日韩国产一区二区| 精品九九视频在线观看| 日日.c| 中文字幕视频色婷婷| 大香婷婷| 狠狠色噜噜狠狠| 九九精品热| 激情5月婷婷| 97五月天婷婷综合激情网| 九九热这里只有精品23| 丁香久久综合| 五月婷婷六月丁香在线视频免费在线观看| 国产中文亚洲欧美日韩性交| 五月婷婷丁香五月婷婷| 婷色五月| 五月天婷婷激情网| 日韩视频99| 一区二区传媒视频| 久久婷婷六月综合综合色| 日本综合色图| 噜噜噜狠狠色综合| 亚洲天堂爱爱| 91精品婷婷国产综合| 伊人五月人妻精品| 亚洲爆乳无码精品AAA片蜜桃| 先锋资源婷婷| 激情影院丁香五月| 婷婷中文网站| 婷婷五月在线观看| 丁香五月婷婷天堂大香蕉| 99在线视频精品| 久九色| 色天天综合| 欧美色色色色色| 日亚二欧美| 五月天婷婷伊人| 五月天久久婷婷| 日韩AV在线免费观看| 婷婷涩五月天综合| 日韩中出视频| 99免费在线| AV片一区在线观看| 夜夜撸日日骑| 亚洲视频久久| 激情人妻综合| 99日本在线| 欧洲一区二区| 婷婷99狠狠躁天天躁| 六月丁香五月婷婷| 五月丁香六月婷婷成人| 99这里只有精品|v| 五月激情精品视频| 激情5月婷婷| 五月丁六月香av| 色欲色香综合网| 日本三级大片| 五月婷婷开心激情六月蜜桃| 久9综合| 五月天欧美 另类小说| 丁香五月激情综合| 亚洲综合在线丁香五月| 久热伊人9| 丁香五月伊人| 亚洲色综合| 五月天狠狠| 五月丁香六月婷婷亚洲天堂网站| 亚洲中文字幕在线观看| 婷婷五月天激情基地| 婷婷桃色网| 色情综合网| 五月婷婷综合在线视频| 丁香久久综合| 婷婷在线午夜| 色娸娸综合网| www.色婷婷| 天天狠狠色噜噜| 超碰人人摸人人操| 中文成人在线| 无码人妻一区二区三区四区| 五月天婷婷久草丁香| www.91九色| 五月丁香久人妻中文| 婷婷射图五月天| 丁香婷婷五月六月久久| 很很操很很操| 1024欧美日韩精品久久久| 99爱在线视频| 热的国产,热的综合,热的有码| 欧美交换配乱吟粗大25P| 九月婷婷综合八月丁香在线观看| 伊人久久大香线蕉亚洲五月天,| 色偷偷五月天| 夜夜操少妇| 99情色五月天| 婷婷五月天激情网| 狠狠色狠狠操| renre人人操国产超碰在线| a毛片二逼wwwwwwwwww| 亚洲天堂大香蕉| 视频综合网| 色色丁香婷婷五月天| 日韩在线观看亚洲| 桃色五月婷婷| 伊人综合网站| 亚洲永久四色| 天天影院色| 五月天开心激情网色欲无码| 日韩一级A片黄色| 99国产在线精品视频| 久久这里只有精品99| 丁香综合伊人| 色噜噜狠狠色综合成人99| 青青草国产亚洲精品久久| 久久六月综合| 五月天艹天天| 婷婷色五月亚洲| 婷婷五月精品中文字幕| 99热黄| 夜夜撸日日操| 97在线精品视频| 色色婷婷综合网| 亚州精品色情无码A片| 91女人18毛片水多国产| 国产成人精品一区二区三区视频| 欧美性爱五月天| 五月丁查人人| 综合一本道| 色爆五月| 免费黄色片子| 玖玖资源在线视频| 四色永久成人网站| 色狠狠综合网| www.婷婷,com| 丁香五月婷婷大香蕉| 天天色伊人| 69热在线| 五月丁香综合啪啪| 五月天色色激情综合| Caop在线| 123草逼网| 婷色综合| 91传媒无码人妻精| 亚洲激情五月| av无码电影| 日本A片一区| 超碰在线观看三级片| 午夜丁香| 无码人妻丰满熟妇奶水区码| www婷婷色| 大香蕉220| 国产亚洲成AV人片在线观黄桃| 都市激情蜜桃婷婷五月天| 色综合久久综合中文综合网| 色五月天丁香婷婷| a网站免费观看| 色播综合| 99热精这里只有精品| 狠狠香婷婷五月| 精品无码av丁香五月激情| 婷婷99狠狠躁天天躁| 99热老网站| 欧美三日本三级少妇三99| 第四色大香蕉| 久久中文人妻系列| 五月天激情网页| 久久综合天天综合| xxx.色婷婷| 色情五月婷婷| 99综合网| 超碰av在| 婷婷伊人综合中文字幕| 成人深爱丁香五月| 天天xxxxxx天天日| 在线另类视频| 国产又色又爽又黄又免费| 成人综合网站| 99小视频在线观看| 五月天婷婷色在线视频免费观看| 色五月亚洲五月天| 99色网站| 综合网亚洲| 婷婷五月天a| 婷婷色Av| 欧美婷婷日本| 熟女色色一区二区| 97视频91| 天天射夜夜骑| 色色丁香| av操B网站| 99热99草97| 婷婷五月情| 色婷婷视频| 婷婷丁香五月综合激情小说| www.婷婷五月天| 婷婷五月天久久| 内射在线CHINESE| 日韩欧美婷婷丁| 亚洲六月色婷婷| 六月激情婷婷色| 丁香5月婷婷| 超碰免费大香蕉| 色婷婷五月丁香在线观看| 丁香五月成人论坛| 成人在线日韩欧美| 一本色道久久88加勒比| 日韩久热| 开心网五月色婷婷| 丁香六月婷婷色XXXX| 狠狠色狠狠操| 国产在线网| www.99热在线观看| 色五月第四色| 日本乱子人伦在线视频| 五月综合丁香婷婷| 五月亭亭六月天| 狠狠干夜夜干| 91色九| 亚洲精品性色| 婷婷综合久久| 97久久久| 日本美女上人| 丁香婷婷性久久| 六月丁香五月亭亭| 久久婷婷五月综合| 九九精品99| 99热在线免费| 九色亚洲| 6080av| 超碰在线国产| 欧美在线看| 香蕉AV777XXX色综合一区| 亚洲成人综合在线| 婷婷久久综合| 综合久久影院| 91丁香五月| 五月第四色| 免费视频在线观看的网站| 97狠狠色| 男女99免费视频| 激情五月份婷婷| 五月丁香六月花| 五月婷婷大香蕉| 超碰免费人妻| 啪啪91| 色在线99| 91九色国产在线| AV网在线观看| 青青草成人网| 色色色婷婷| 婷婷五月天在线观看免费| 色婷婷成人做爰A片免费看网站| 久久久久婷婷| 很很干天天干| 综合激情五月综合激情五月激情1| 久久久久久综合88| 色婷婷影视| 丁香5月激情网| 国产激情在线| 久久9视频欧美| 婷婷久久免费| 丁香激情网| 丁香六月久久| 夜夜躁狠狠| 九九碰九九爱97超碰| 久99视频| 国产成人精品一区二区三区视频| 婷婷夜夜夜夜| 91se在线观看| 色五月丁香婷婷| 色婷婷手机在线| 激情婷婷五月天| 激情五月黄色小说| 亚洲成人在线在线| 思思re99视频在线观看| 激情丁香六月| 综合色播| 五月婷婷激情综合网 | 六月婷婷之青青草| 国产精品色情AAAAA片软件| 99热综合在线观看| 1024操逼视频| 丁香五月激情欧欧美| 色青青电影色五月| 26uuu丁香婷婷五月| 丁香六月激情| 五月婷婷爽爽爽| 色五狠狠| 久99热| 大香蕉久久| er99免费视频在线| 99操免费视频| 五月天婷婷成人网| 婷婷五月天影院| 久久久97| 亚洲婷婷综合视频| 五月天婷婷色| 99这里只有精品视频| 91婷婷色 | 日韩av在线免费观看| 99热地址| 婷婷激情视频欧美视频自拍视频欧美剧 | 热99精品视频五月| 99热这里有精品24| 激情亚洲婷婷| 天天久综合网永久入口18| 五月草视频| 九九综合久久| 激情小说婷婷| 五月天亚洲最大成人| 亚洲天堂色| 色综合久久88色综合天天99| 激情影院免费视频婷婷五月天| 成人短视频免费| 91欧美| 五月综合影院| 五月婷婷伦理| 丁香五月婷婷黑人妻黄色电影院| 日韩一级淫乱片一区二区三区| 91人人爽狠狠狠| 天天干天天操天天干天天操天天干天天操 | 色欲久久久久久综合网综合网| 91久久久久久| 婷香五月| 丁香五月天堂网| 六月婷婷无码观看| 亚洲婷婷在线播放十月| 久久99久久久| 字母不卡码人逼| 成片免费播放| 可以直接看的av| 深爱五月激情| 欧美草久久五月天91| 7月婷婷六月丁香| 九9九9无码| 亚洲狠狠爱婷婷| 狠狠操综合| 日韩啪啪视频| 色月九九| 91婷色| 婷婷五月无码| www狠狠爱com| 欧美三级视频下载| 91伦| 丁香婷婷浪潮AV久久综合| 思思热这里只有精品| 亚洲啪啪网| 综合色色色色色色| 狠狠xx| 激情五月婷婷老师| 无月播播激情在线观看视频| 五月丁香综合久久| 五月丁香六月色婷婷| 婷婷丁香色五月亚洲| 色色五月天丁香婷婷| 亚洲天堂制| 嫩草极品| 五月婷婷综合成人| 久久婷婷色综合老司机| 久久九九re热| 色综合狠狠色| 大香蕉网站,大香蕉综合| 五月花激情网| 欧洲一区二区| 九九热这里只有精品5| 久久99久久99精品免视看婷| 五月天久久婷婷| 九九色影视| 五月婷婷丁香六月| 狠狠干在线| 天天精品视频免费观看| 久热91| 人人操av| 色情婷婷久久五月天| 91碰人人| 91啪啪啪啪| 国产综合婷婷| www99热| 色情五月丁香婷婷网| 狠狠艹狠狠艹| 国产精品久久7777777精品无码| 久草xx性爱视频| 五月丁香六月婷婷综合| 成人版视频在线观看| 久久婷婷五月综合激情国产| 色色色综合色| 激情四射亚洲| 免费人人操| 日本99久久| 亚洲另类婷婷五月丁香在线播放| 日韩av干| 五月天另类激情在线| 久久久大香蕉| EEUSS鲁片一区二区三区| 色婷婷成人做爰A片免费看网站| 五月Huangsewang| 看逼中文字幕| 老司机午夜福利视频金瓶梅| 色五月首页| 99热免费| 99ER热精品视频| 亚洲av成人一区二区电影在线| 九九人人自拍| 天天婷婷操| 色综合久久五月天| 综合激情婷婷| 丁香五月综合久久| www.狠狠色.com| 五月天综合色| 最近中文字幕大全免费版在线 | 九九色区| 婷婷六月色情| 色婷婷电影| 琪琪色五月婷婷老师| 光棍影院日韩精品| 天天噜天天爱| 丁香五月91| 热热色色五月天婷婷| 97性视频| 99精品免费欧美小视频| 激情五月综合亚洲另类| 五月天丁香婷婷社区| av婷婷丁香 六月| 这里只有精品2| 九九热九九| 99人人操| 五月婷导航| 这里只有精品视频在线| 成人资源在线| 五月色俺婷婷| 国产又色又爽又黄又免费| 99热精品观看| 丁香密臀AV激情网| 久久婷婷一级片| 中文字幕在线播放视频| 九月丁香欧美综合| 婷婷 月 丁香| 精品人妻午夜一区二区三区四区| 无码四色色色| 亚洲啪啪网| 亚洲不卡123| 免费精品66| 99热老网站| 日韩无码性爱| 婷婷色五月色| 任你弄在线视频免费| 天天日天天添| 色激情五月| 大香蕉操操| 色五开心五月五月深深爱| 拍真实国产伦偷精品| 婷婷色情网| 人人操av| 综合久久高清| 91丨九色丨白浆| 狠狠久综合| 五月天成人在线播放丁香| 亚洲五月婷| 九九九日本熟女| 激情性爱五月| 婷婷五月AV| 超碰人人操人人干| 五月丁香花视频| 激情久久综合网| 成人精品99| 亚洲AV成人一区二区在线观看| 色色影院aaaav| 欧美99| 色欲婷婷夜夜| 少妇水多A片太爽了| 久这里只有精品| 天天综合精品| 好好日激情五月天| 五月天天丁香婷婷| 激情丁香六月| 玖玖色资源| 色综合大香蕉| 欧亚色色| 无码一区精品一区视频| 五月亭亭综合五码| 国产第99页| 丁香五月香蕉| 综合久久综合久久| 4399成人黄A片| 亚洲综合五月天综合| 无码激情AAAAA片-区区| 99热在线成人网站| 青996青| 丁香五月天网站| 超碰在线91| 日日夜夜狠狠| 5月婷婷五月天| 青青久久大香蕉| 天堂色婷婷| 99免费热在线精品| 天天插AV丝袜中| 婷婷丁香成人五月天| 五月婷亚洲精品AV天堂| 天天爱天天做天天舔| 综合天堂AV久久久久久久| 天天爽天天日天天舔| 婷婷五月色图| 国产精品久久久久久妇女6080| 激情综合亚洲色婷婷五月| 97艹| 天天干天天干天天干| 99亚洲色| 色五月婷婷av| AA片在线观看视频在线播放| 丁香五月婷婷视频| 综合激情开心五月| 男人天堂AV在线一区二区| 六月婷婷激情| 五月婷婷开心六月激情小说| 黄网在线免费播放| 国产性爱在线| 伊人婷婷大香蕉| 精品一区二区三区四区五区六区介绍| 丁香五月天日韩无码| 色五月婷婷av| 五月天停停基地| 97资源碰碰| www...com黄在线观看| 91丨九色丨白浆| 日日操夜夜爽天天天| 丁香六月综合激| 99色视频| 五月丁香色婷婷久久| 狠狠色狠狠鲁| 激情床戏| 丁香婷婷综合影院| 中文字幕成人| 亭亭色网| 丁香久久| 丁香五月综合网亚洲综合欧美狠狠| 91无码视频| 91在线观看www| 婷婷色色五月天| 少妇性按摩无码中文A片| 激情婷婷狠狠干| 91Chinese在线| www亚洲无码| 久久久国产精品黄毛片| 玖玖在线视频| 操逼六区| 狠狠干狠狠干| 在线观看中文字幕| 日日日天天干| 婷婷五月天激情综合深爱| 欧美色图天堂网| 97碰碰视频| 久久九九经典| 欧美日韩国产一二区| 99re热视频这里只精品| 五月天婷婷久久| Av大香蕉| 色婷婷99| 亚洲另类在线观看| 亚洲另类婷婷综合| 日韩成人无码人妻| 九九RE视频在线精品| 激情五月婷| 激情五月丁香亭亭 | 丁香色五月 97干| 五月天精品| 六月色播| 日本丁香五月| www.五月天| 色天五月天在线观看视频| 激情五婷网| 五月激情天天干| 综合五月天完整| 丁香成人色情五月天| 婷婷五月天资源| 激情五月四色| 激情五月综合| 久久精品五月天| 婷婷五月丁香综合激情| 超碰在线看| 天天综合在线网| 久色激情| 亚洲精品无人区| 成人在线观看精品| 婷婷五月综合免费在线| 大香蕉大香蕉在线影院| 99热这里只有精品1025| 怕怕視頻| 色婷婷AV五月天| 在热视频精品| WWW.桔色成人.COM| 九九色综合九九色| 国产在线aaa片一区二区99| 9色婷婷| 丁香婷婷五月天成人| 亚洲视频码| 六月婷久久| 日韩婷婷五月| 91小黄书网址在线观看| 激情丁香五月天| 婷婷激情九月| 久久精品A片777777| 激情精品久久| 五月婷婷久久大香蕉| 婷婷激情肏屄网| 26uuu亚洲色| 欧美成人性爱网| 亚洲AV成人片无码网站| 亚洲乱码日产精品BD| 久久久久9久无码视频| 色色色色色色五月婷婷| 大香蕉久久伊人婷婷五月丁香| 爱草视频在线| 成人色图情色成人网 www.5b5b5bcom 五月天 | av在线观看网站| 五月天婷婷激情小说电影| 色婷婷激情| 影音先锋91视频| 日韩不卡DvD| 激情丁香五月激情婷婷| 色激情五月| 精品一二三区久久AAA片| 亚洲欧美日韩另类| 精品思思久久| 99在热线免费视频| 思思热在线观看| 色欧美日| 五月四色色| 无码人妻电影| 男人的天堂在线婷婷| 九月色婷婷| 99热a片免| 99爱精品| 中文字幕综合| 激情小说五月欧美亚洲丁香| 天天插天天插| 91chinese 在线| 狠狠狠激情网| 色婷婷电影网| 九九www| 五月综合婷婷久久在线| 精品人妻一区| 六月婷久久| 五月伊人婷婷| 99燥99日| 欧美亚洲999| 综合久久影院| 九九re视频在线视频| 色婷婷丁香五月丁香| 99re免费精品视频| 精品综合爱| 玖玖资源天天无码| 精品夜夜澡人妻无码AV| 97资源碰碰| 婷婷五月色惰| 强奸幻女毛片| 久久五月婷天天干| 强辱丰满人妻HD中文字幕| 97碰免费视频在线| 九九99热久久精品66中文字幕| 伊人网色婷婷五月天| 丁香五月AV综合| 色情五月丁香| www.91婷婷| 五月婷婷色播| 五月激情婷婷国产精品久久久久久| 中文字幕色色色| 99精品国产乱码久久久人妻| 久久精品爱爱| 五月丁香亚洲综合| www.狠狠| 九九热在线99| 久色网| 乱码操操| 狠狠色婷婷7777久| 久久只有18视频| 欧美在线操| 亚洲国产成人在线| 秋霞成人毛片一级A片| 操逼三区| 亚洲精品第一国产综合亚AV | 国产激情AV| 五月天色婷婷成人| 色综合99色| 色色色.COM| 91大屁股在线| 亚洲免费婷婷| 91九色无码日韩| 欧美在线操| 色情五月丁香| 欧美一级色| 五月在在观看| 色噜噜狠狠狠狠色综合久欧美| 亚洲婷婷乱乱丁香| ady狠狠入| 99网99热| 久久综合激情| 久久怡红院| 成 久久| 天堂网操| 综合视频久久| 久婷婷五月激情| 日本V在线观看不卡视频网站| 五月色俺婷婷| 婷婷久久图片| 五月丁香六月婷综合成人综合| 色五月婷婷 成人| XX色综合| 成人丁香五月| 99爱爱| 青草青草视频2免费观看| 五月丁香黄色| 久色激情| 久久久GOGO无码啪啪艺术| 开心激情站婷婷五月天| 任你日热视频| 久久久精品人妻| 六月婷婷亚洲| 色婷婷色情| 亚洲精品V天堂中文字幕| 色色网五月激情| 狠狠久久婷五月| 最近中文字幕2019视频1| 另类激情网| 日本超碰在线| 日韩AV在线影片| 色综合丁香婷婷| 婷婷伊人激情婷婷| 97碰碰在线观看视频| 欧美性爱五月天| 日韩视频99| 婷婷五月天激情四射五月天激情| 丁香婷婷激情网站| 欧美一级色| 99r这里| 激情AV| 婷婷五月另类网站| 一本色道久久综合狠狠躁小说| 五月天六月婷婷电影| 亚洲成人免费在线| 爱狠射| 成人做爰A片免费看网站找不到了| 这里只有精品1| 婷婷五月天va| 影音先锋色婷婷| 亚洲99热| 狠狠爱综合网| 国产9色在线/日韩| 五月香六月婷| 国产色色网址网站| 9l视频自拍9l九色9l成人| 少妇性按摩无码中文A片| 色丁香婷婷| 香蕉AV777XXX色综合一区| 丁香五月在线人妻| 综合色吧| 九色1区视频在线| 极品人妻VIDEOSSS人妻| 中文AV在线播放| 日韩五月丁香| 天天综合网亚洲综合网| 五月丁香婷婷在线综合蜜桃| 踪合专区啪啪| 99热亚洲综合| 狼人伊人天堂| 99国产精品久久久久久久久久久| 色五月综合| 久久精品系列| 激情五月天激情五月天| 五月婷丁香亚洲| ...婷婷国产成人亚洲日韩| 日韩欧美一级大黄网站| 99碰| 99热碰碰| 丁香九月激情久久| 无码一级片| 婷婷五月综合社区在线| 97超碰免费超级在线观看| 99在线精品视频| 婷婷激情综合网| 五月婷婷深深爱| 激情五月天偷拍综合网| 色婷婷色婷婷五月| 狠狠色综合五月| 99爱免费在线视频| 婷婷五月天伦理| www.av视频xx999.com| 另类视频综合| 婷婷色导航| 欧美色五月| 婷婷综合五月| 久久久婷婷| 丁香五月天激情网址| 九九色热| 噜噜色天天开心| 日本综合久| 噜综合| 亚洲色色图片| 色的色综合| 国产熟女日日骚五月丁香爱| 开心五月综合激情综合五月| 久久只这里有精品| 五月激情婷婷开心| 五月色综合网| 九九视屏| 丁香六月啪啪| 天天爽天天操| 丁香狠狠干| 美女爆乳18禁www久久久久久| 字母不卡码人逼| se色综合网| 肏屄色播伊人97婷婷| 久久综合五月天| 永久的网站AAAA | 9久热视频| 99久久久久久久| 中文字幕不卡+婷婷五月| 九九99在线免费在线观看视频| 五月婷婷色| 人妻videos人妻高清| 可以免费看的av网站| 六月婷婷在线| 色哟哟精品| 看片视频在线免费日产在线看| 色吧综合网| 9色资源在线| 在线成人视频免费| 九九热视频精品2| 777精品成人a v久久| 天天做天天爱天天综合网| 99久久玖玖| 色墦五月丁香| 亚洲AV永久无码影院黑人| 婷婷综合色图| 婷婷五月天影视| 丁香五月天色婷婷| 91久久久久久久| 六月婷婷毛片| 99久精品视频| 夜夜天天久久婷婷| 精品久久人妻| 狠狠干婷婷| 性爱五月婷婷| 天天综合激情| AV人人操| 五月丁香综合激情| 伊人久热91| 亚洲丁香五月综合| 狠狠五月天| 天天做天天爽| 色娸娸综合网| 激情综合网亚洲色图| 久久婷婷五月天| AA片在线观看视频在线播放| 3p久久| 精品一区二区三区木瓜| 久久伊人9| 超碰婷婷色| 久久亚洲婷婷| 丁香婷婷影院| 色婷婷基地 | 丁香九月综合激情| 热99热9| 天天日天天色| 182TV大香蕉| 五月天夜夜爱夜夜操| 色五月六月| 婷婷综合一二三| 狠狠久综合| 色五月播五月| Caop在线| 常久最新免费的色吊丝| 丁香五月激情综合| 91人人操.COM| 五月丁香六月情| 99视频| 色色综合成人网| 婷婷色五月开心五月| 九九精品9| 久久午夜理论| 五月婷婷六月色| 国产熟女大叫受不了| 婷婷五月丁香手机在线视频| 国产熟妇的荡欲午夜视频| 色五月婷婷中文字幕在线观看 | 九九激情| 成人在线视频网| 激情爱爱网站超大免费| 五月婷婷9| 婷婷香五月综合激情| 丁香网站| www.粉嫩av.com| 中文字幕AV在线播放| 99久久97久久欧美综合网| 欧美色五月天| 亚洲狠狠丁香婷婷香蕉| 欧美亚洲999| 91日本在线观看| 91操熟女| 丁香婷婷五月综合色情| 五月 激情视频| 婷婷五月丁香欧洲| 六月色激情| 婷婷激情图片| 99热热热国产超碰| 六月激情网| 九九大香蕉黄色影院| WWW.桔色成人.COM| 久久婷网| 婷婷五月综合久久中文字幕| 婷婷网影院| 97人人搞| 97久久精品| 中文字幕在线免费观看视频| 九九色人| 日本婷婷| WWW夜夜| 在线观看国产高清视频免费网站| 五月天伊人av| 最近中文字幕大全免费版在线 | 月婷婷亚洲| 欧美成人AAA片一区国产精品| 五月天婷婷久色| WW婷婷五月天com| 热99精品视频| 99热伊人综合| 天天操婷婷| 夜夜资源站| www.天天干| 狠狠色情婷婷| 欧美三级视频| 丁香五月在线观看| 五月丁香激情四射综合| 丁香五月天电影| 日日鲁鲁夜夜爽爽| 日噜噜色| 91视频一起草| 激情的五月婷婷蜜桃| 少妇性BBB搡BBB爽爽爽视頻| sewuyuejiqingwang| 99热免费18| 操日视频| 久久久er热| 成人小说色图婷婷五月| 色婷婷色99国产综合精品| 日本久久高清| 中文字幕按摩做爰| 婷婷五月情天| 天天噜日日噜综合无码| 99热在线观看| 激情五月天色婷婷| 人人综合久| 五月天丁香| 思思re99视频在线观看| 成人 在线 日韩| 男男野外做爰全过程69| 亚洲另类视频| 9久热| www99精品日韩| 日本在线视频播放91| 婷婷九月激情| 丁香五月婷婷亚洲激情四射| 色玖玖| 婷婷六月花| 国产白丝在线一区| 亚洲日韩成人三级av| 美欧成人视频| 69午夜成人影片| 99噜噜| 婷婷欠久少妇| 色吧五月婷婷| 99精品免费欧美小视频| 青草青草久热这里只有精品| 激情AV综合| 五月婷在线观看| 综合五月激情网| 91狠狠综合久久| 日本性视频| 我爱大香蕉| 五月婷视频在线| 伊人六月无码视频| 91色噜噜狠狠狠狠色综合| 国产看真人毛片爱做A片| 国产精品国产| 99热这里有精品24| www.久久99| www.久操| 亚州美女| 丁香五月天堂| 五月婷婷综合在线视频小说| 伍月婷丁香婷| 亚洲乱码w在线观看| 色色色五月天婷婷| 久久婷婷视频| aa久久| 丁香五月天资源网| 日韩精品色| 色婷丁香五月| 亚洲AV成人在线| 最新日韩久热免费视频看看| 97一区二区| 免费做A爰片77777| 爱射综合| 色五月婷婷综合在线| 婷婷丁香色无五月| 久热中文字幕在线线观看 | 色婷婷九月| 五月天三级| 亚洲日本激情| 狼人久草| 97色在线观看视频| 91日综合欧美| 日韩人人操| 九久九精品| 五月开心播播网| 婷婷久久综合久| 色五月丁香五月| 五月婷婷啪| 丁香九月婷| 久久久www| 激情另类综合| 五月丁香啪啪婷婷| 91.com男女操| 五月天另类激情在线| 天天精品视频免费观看| 日日舔夜夜操| 色婷婷视频综合| 婷婷五月天首页| 青青福利网| 亚洲综合婷婷五月| 超碰renrenai| 美女主播野战视步页| 甈吧vv| 五月色俺婷婷| www,av好吊操| 五月丁香亚洲婷婷| 99久久久| 久色婷婷200| 丁香六月婷婷综合缴| 99re这里只有| 色情久久久| 色吧综合网| 深爱综合网| 五月天激情国产综合婷婷婷| 99热久久这里只有精品| 欧美性生交XXXXX无码小说 | 五五月丁香花激情综合网| www。狠狠干。com| 天天色天天爱天天舔| 五月婷婷黄色视频| 亚洲婷婷激情五月天| 99网| 人人97碰| 色偷偷五月天| 国产日产亚系列精品版优势| 色啦啦视频| 久草九九| 国产67194| 日日天天操| 六月丁AV| 婷婷久久五月天丁香| AV性爱网| 日韩专区五月天婷婷丁香| 九月婷婷在线观看| 中文字幕丰满人妻无码专区| 亚洲色啪| 中文不卡一二三区| 黄色激情五月天| 91久久久久久久久18| 99这里只有精品| 奇米影视777在线_在线观看午夜_h小视频在线观看_岛国大片 | 婷婷99狠狠| yirenjiqingshiping| 久久久久8888| 丁香六月中文| 激情文学五月丁香六月婷婷| 婷婷月综合| 国产熟妇的荡欲午夜视频| 丁香六月天婷婷| 久热久| www五月天激情com| 丁香花五月天激情| 风流少妇A片一区二区蜜桃 | 他改变了拜占庭| 久久丁香五月婷婷| 色综合九九色综合88| 丁香五月综合| 色综合久久综合| 人人爱干人人爱草| 洗浴中心操B视频| 亚洲操操| 9999热免费视频视频| 99久久久| 欧美五月丁香| www.婷婷六月天| 婷婷五月a| 性 色 婷婷| av在线免费网站| 色综合久久之分久久| 成人国产综合| 丁香狠狠色婷婷| 天天操夜夜夜拍拍拍| 五月天婷婷无码视频| 色五月综合在线| 97超碰色| 色婷婷色五月另类综合| 99久在线精品99re8热| 日本三级中国三级99人妇网站| 黄色五月婷| 综合激情综合啪啪| 久热99热| 激情玖玖综合网| 婷婷伊人无码| 国产精品美女| 九九色婷婷Av| 婷婷六月丁香久| 久操大香蕉| 影音先锋综合网| 婷婷中文字幕版| 久久久久这里只有精品| 九九视屏| 午夜婷婷五月天| 精品无码久久久久久久久| 久草五月婷婷| 五月丁香婷婷基地| 琪琪色网在线| 91艹人| 久99| 九九超日本| 天天日天天干天天插天天射| 丁香五月婷婷啪啪| 伊人久久艹| 色五月婷婷91| 94干大香蕉| 欧美人人草| 五月综合人妻| 婷婷 亚洲图片 丁香| 色一情一乱一乱一区91Av| 黄网在线播放| 色私五月婷婷| 人妻激情视频| 狠狠xx| 婷婷五月日本| 五月六月激情| 美女久久婷婷| 呦呦v线| 国产成人精品123区免费视频| 五月婷五月婷伊人伊人五月婷| 91大神操美女| 毛片新网地| 婷婷操超碰| 久久综合中文字幕| 中文字幕激情综合| 亚洲AV无码一区二| 亚洲成人五月| www.激情五月天.con| 夜夜操天天干| 欧美啪啪五月天| 久久婷婷视频| 停停五月色宗合| 久久婷婷综合国产| 九九热re99re6在线精品| 神马欧美精| 人伦30P| 日本人妻A片成人免费看片| 成人AV在线网站| 国产激情综合五月久久| 99在线er热| 极品少妇高潮啪啪AV无码| 色五月激情五月丁香五月婷婷啪啪综合 |