99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Tmux自動(dòng)保存會(huì)話日志:原理、配置與生產(chǎn)環(huán)境實(shí)踐

Tmux自動(dòng)保存會(huì)話日志:原理、配置與生產(chǎn)環(huán)境實(shí)踐 1. 為什么需要自動(dòng)保存Tmux會(huì)話日志如果你和我一樣日常開發(fā)、運(yùn)維或者長(zhǎng)時(shí)間跑任務(wù)都離不開Tmux那你肯定遇到過(guò)這種糟心事一個(gè)跑了三天三夜的編譯任務(wù)或者一個(gè)正在調(diào)試的復(fù)雜服務(wù)因?yàn)榫W(wǎng)絡(luò)閃斷、終端意外關(guān)閉甚至只是手滑關(guān)掉了終端窗口整個(gè)Tmux會(huì)話連同里面所有寶貴的輸出信息瞬間消失。更讓人抓狂的是有時(shí)候一個(gè)關(guān)鍵的錯(cuò)誤信息就在你眼皮子底下閃過(guò)還沒(méi)來(lái)得及細(xì)看就被后續(xù)的日志刷掉了。這時(shí)候你恨不得能把屏幕上的每一個(gè)字符都“焊”下來(lái)。這就是我們今天要解決的問(wèn)題。Tmux本身是一個(gè)強(qiáng)大的終端復(fù)用器它能讓會(huì)話在后臺(tái)持續(xù)運(yùn)行但它默認(rèn)并不負(fù)責(zé)把屏幕上滾過(guò)的所有內(nèi)容持久化到磁盤。script命令是一個(gè)經(jīng)典的解決方案它能記錄終端的所有輸入輸出但把它和Tmux優(yōu)雅地結(jié)合起來(lái)實(shí)現(xiàn)“無(wú)感”的、自動(dòng)化的日志記錄里面有不少門道。比如如何為每個(gè)Tmux窗口或窗格單獨(dú)生成日志文件如何避免日志文件無(wú)限膨脹如何讓這個(gè)機(jī)制在每次啟動(dòng)Tmux時(shí)自動(dòng)生效而不需要你手動(dòng)敲一堆命令最近在社區(qū)里關(guān)于“mobaxterm保存日志”、“vs調(diào)試信息保存到日志文檔同時(shí)打印顯示”的討論也很多這說(shuō)明大家對(duì)于終端輸出持久化的需求是普遍且強(qiáng)烈的。尤其是當(dāng)你在處理“慢查詢?nèi)罩尽狈治?、“redis日志”監(jiān)控或者排查“android保存異常前后關(guān)鍵日志、內(nèi)核異?!边@類復(fù)雜問(wèn)題時(shí)一份完整的、按時(shí)間或會(huì)話組織的終端記錄其價(jià)值不亞于一份詳細(xì)的調(diào)試報(bào)告。所以這篇文章的目的就是分享一套我經(jīng)過(guò)多年實(shí)踐打磨出來(lái)的、在Linux環(huán)境下為Tmux會(huì)話自動(dòng)保存日志的完整方案。我會(huì)從最核心的原理講起一步步拆解配置方法并重點(diǎn)分享那些容易踩坑的細(xì)節(jié)和高級(jí)用法讓你不僅能“抄作業(yè)”更能理解背后的“所以然”。2. Tmux日志記錄的核心原理與工具選型在動(dòng)手之前我們必須搞清楚兩件事第一Tmux本身是如何處理屏幕內(nèi)容的第二有哪些工具可以捕獲這些內(nèi)容。Tmux的核心是一個(gè)客戶端-服務(wù)器模型。當(dāng)你運(yùn)行tmux命令時(shí)會(huì)啟動(dòng)一個(gè)服務(wù)器進(jìn)程tmux server。這個(gè)服務(wù)器管理著所有的會(huì)話session、窗口window和窗格pane。你在終端里看到的實(shí)際上是Tmux客戶端渲染出的一個(gè)“視圖”。所有在窗格中運(yùn)行的進(jìn)程比如bash, vim, top的輸出都會(huì)先被Tmux服務(wù)器捕獲然后再轉(zhuǎn)發(fā)給連接的客戶端進(jìn)行顯示。這就給我們提供了兩個(gè)攔截日志的切入點(diǎn)在進(jìn)程層面攔截在進(jìn)程如bash和Tmux服務(wù)器之間插入一個(gè)記錄器。這就是script命令的工作方式。script會(huì)啟動(dòng)一個(gè)新的shell并記錄這個(gè)shell及其所有子進(jìn)程的所有輸入輸出。在Tmux層面攔截直接讓Tmux服務(wù)器把它要發(fā)送給客戶端的內(nèi)容額外保存一份到文件。Tmux內(nèi)置了pipe-pane命令和capture-pane命令可以做到這一點(diǎn)。方案對(duì)比與選型script命令方案原理通過(guò)exec script -f log.txt替換當(dāng)前窗格的shell開始記錄。優(yōu)點(diǎn)記錄非常原始和完整包括控制字符、顏色碼如果使用-f參數(shù)。它是操作系統(tǒng)自帶工具無(wú)需額外安裝。缺點(diǎn)與Tmux結(jié)合時(shí)需要一些技巧。一個(gè)script進(jìn)程只記錄一個(gè)窗格。如果直接在~/.bash_profile里啟動(dòng)script可能會(huì)遇到遞歸調(diào)用或記錄不完整的問(wèn)題比如“vi ~/.bash_profile 報(bào)錯(cuò)e325: attention”這種錯(cuò)誤可能就和環(huán)境變量或終端狀態(tài)被script改變有關(guān)。Tmux內(nèi)置pipe-pane方案原理在Tmux內(nèi)部使用pipe-pane命令將一個(gè)窗格的輸出實(shí)時(shí)管道傳輸pipe到一個(gè)外部命令如cat log.txt或文件中。優(yōu)點(diǎn)與Tmux原生集成配置靈活可以綁定到快捷鍵可以方便地為不同窗格指定不同日志文件。缺點(diǎn)默認(rèn)可能不記錄窗格中更早的歷史內(nèi)容需要結(jié)合capture-pane -S -來(lái)保存初始內(nèi)容。對(duì)于已經(jīng)存在的窗格需要手動(dòng)開啟。Tmux內(nèi)置capture-pane方案原理將窗格當(dāng)前可見(jiàn)或指定范圍的內(nèi)容一次性捕獲并保存到Tmux的緩沖區(qū)或文件中。通常用于快照而非持續(xù)流式記錄。優(yōu)點(diǎn)適合定時(shí)備份或手動(dòng)保存特定時(shí)刻的輸出。缺點(diǎn)不是自動(dòng)的持續(xù)記錄。我的選擇與理由對(duì)于“自動(dòng)保存”這個(gè)核心需求pipe-pane方案是更優(yōu)雅、更貼合Tmux哲學(xué)的選擇。它允許我們?cè)赥mux會(huì)話的生命周期內(nèi)動(dòng)態(tài)地控制日志記錄并且可以很容易地通過(guò)Tmux配置文件~/.tmux.conf實(shí)現(xiàn)自動(dòng)化。script命令更適合在非Tmux環(huán)境或者對(duì)記錄格式有非常嚴(yán)格要求的場(chǎng)景下使用。因此接下來(lái)的實(shí)戰(zhàn)將圍繞Tmux的pipe-pane命令展開。我們會(huì)設(shè)計(jì)一個(gè)機(jī)制每當(dāng)創(chuàng)建一個(gè)新的Tmux窗格時(shí)自動(dòng)為其啟動(dòng)日志記錄并將日志文件以“會(huì)話名-窗口索引-窗格索引-時(shí)間戳”的格式保存到指定目錄。這樣日志不僅自動(dòng)保存了還具備了良好的可追溯性。3. 實(shí)戰(zhàn)配置實(shí)現(xiàn)Tmux窗格日志自動(dòng)記錄理論清晰了現(xiàn)在我們來(lái)動(dòng)手實(shí)現(xiàn)。我們的目標(biāo)是修改Tmux的配置文件使得任何新創(chuàng)建的窗格都能自動(dòng)開始將輸出記錄到獨(dú)立的日志文件中。3.1 基礎(chǔ)環(huán)境與配置文件準(zhǔn)備首先確保你有一個(gè)可用的Tmux環(huán)境。大部分Linux發(fā)行版都可以通過(guò)包管理器安裝。例如在CentOS/Rocky Linux上sudo yum install tmux在Ubuntu/Debian上sudo apt install tmux。Tmux的核心配置文件是用戶家目錄下的~/.tmux.conf。如果不存在創(chuàng)建它touch ~/.tmux.conf所有后續(xù)的配置都將寫入這個(gè)文件。修改后需要重啟Tmux服務(wù)器tmux kill-server然后重新進(jìn)入或在現(xiàn)有會(huì)話中按前綴鍵默認(rèn)是Ctrlb后輸入:source-file ~/.tmux.conf來(lái)重新加載配置。3.2 核心配置腳本解析我們將把自動(dòng)日志記錄的邏輯寫成一個(gè)Tmux的“鉤子”hook綁定到“窗格創(chuàng)建完成”這個(gè)事件上。以下是完整的配置段落你可以直接添加到你的~/.tmux.conf文件末尾# ~/.tmux.conf - 自動(dòng)日志記錄配置 # 1. 定義日志存儲(chǔ)目錄 set -g log_dir “$HOME/.tmux/logs” # 使用$HOME變量兼容性更好 # 2. 創(chuàng)建日志目錄如果不存在 run-shell “mkdir -p #{log_dir} 2/dev/null || true” # 3. 定義自動(dòng)開啟日志記錄的函數(shù)/命令 set -g plugin ‘tmux-plugins/tmux-logging’ # 注意上面這行是如果你使用Tmux Plugin Manager (TPM)來(lái)安裝插件時(shí)的寫法。 # 但我們這里采用純配置實(shí)現(xiàn)不依賴外部插件所以可以注釋掉或刪除。 # 4. 核心為每個(gè)新窗格綁定自動(dòng)日志記錄 set-hook -g after-new-window ‘run-shell “tmux pipe-pane -t #{session_name}:#{window_index}.#{pane_index} ‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log”’ set-hook -g pane-focus-in ‘if-shell -F “#{:#{pane_start_command},}” “run-shell ‘tmux pipe-pane -t #{session_name}:#{window_index}.#{pane_index} ‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log’’”’配置逐行詳解第1行set -g log_dir “$HOME/.tmux/logs”-g表示全局設(shè)置。log_dir是我們自定義的一個(gè)Tmux用戶選項(xiàng)user option用來(lái)存儲(chǔ)日志目錄路徑。我選擇$HOME/.tmux/logs因?yàn)樗[藏在用戶目錄下且與Tmux相關(guān)。你可以根據(jù)習(xí)慣修改為/var/log/tmux需要sudo權(quán)限或$HOME/logs/tmux。使用$HOME而不是~因?yàn)樵赥mux配置中~可能不會(huì)被正確展開。第2行run-shell “mkdir -p #{log_dir} 2/dev/null || true”這是一個(gè)在加載配置時(shí)執(zhí)行的shell命令。mkdir -p確保日志目錄存在-p參數(shù)表示如果父目錄不存在則一并創(chuàng)建。2/dev/null將錯(cuò)誤輸出比如目錄已存在重定向到空設(shè)備避免干擾。|| true確保即使命令失敗極少數(shù)情況也不會(huì)導(dǎo)致整個(gè)配置加載失敗。第4-5行set-hook -g after-new-window …和set-hook -g pane-focus-in …這是實(shí)現(xiàn)自動(dòng)化的關(guān)鍵。set-hook用于綁定事件。after-new-window在新建窗口后觸發(fā)。注意在Tmux中新建窗口時(shí)會(huì)自動(dòng)創(chuàng)建一個(gè)窗格所以這個(gè)鉤子能捕獲到新窗格的創(chuàng)建。pane-focus-in當(dāng)焦點(diǎn)進(jìn)入一個(gè)窗格時(shí)觸發(fā)。我們配合條件判斷使用目的是為了處理那些在會(huì)話恢復(fù)tmux attach時(shí)已經(jīng)存在但尚未開始記錄的舊窗格。if-shell -F “#{:#{pane_start_command},}”這是一個(gè)條件判斷。#{pane_start_command}是窗格啟動(dòng)時(shí)運(yùn)行的初始命令。如果它為空通常意味著這個(gè)窗格啟動(dòng)的是一個(gè)默認(rèn)shell比如bash并且我們預(yù)設(shè)的日志記錄命令pipe-pane還沒(méi)有運(yùn)行。這個(gè)條件判斷可以防止對(duì)已經(jīng)開啟日志記錄的窗格重復(fù)執(zhí)行命令。run-shell ‘tmux pipe-pane …’這是實(shí)際執(zhí)行日志記錄的命令。我們通過(guò)run-shell在Tmux內(nèi)部調(diào)用tmux命令本身。pipe-pane命令詳解-t #{session_name}:#{window_index}.#{pane_index}-t指定目標(biāo)。#{session_name},#{window_index},#{pane_index}是Tmux提供的格式變量能唯一標(biāo)識(shí)當(dāng)前窗格。這確保了命令作用于正確的窗格。‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log’這是pipe-pane要執(zhí)行的命令。exec cat file這是一個(gè)經(jīng)典的技巧。exec會(huì)讓當(dāng)前shell進(jìn)程被cat命令替換cat從標(biāo)準(zhǔn)輸入讀取數(shù)據(jù)并追加到文件。這樣窗格的輸出流就通過(guò)管道源源不斷地寫入日志文件。使用是追加模式避免覆蓋。文件名模板#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log#{session_name}會(huì)話名如mysession。W#{window_index}窗口索引從0開始如W0。P#{pane_index}窗格索引從0開始如P0。$(date %Y%m%d_%H%M%S)執(zhí)行命令時(shí)的時(shí)間戳精確到秒。例如20231026_143022。這是關(guān)鍵它為每次日志記錄會(huì)話生成唯一文件名避免了多個(gè)窗格或多次記錄相互覆蓋。也方便你按時(shí)間查找日志。重要提示上面的配置使用了兩個(gè)鉤子并且pane-focus-in里的命令和after-new-window里的幾乎一樣。在實(shí)際測(cè)試中我發(fā)現(xiàn)有時(shí)僅靠after-new-window在復(fù)雜場(chǎng)景如從已有會(huì)話恢復(fù)下可能不夠可靠。pane-focus-in作為一個(gè)補(bǔ)充觸發(fā)器能確保當(dāng)你切換到某個(gè)未開始記錄的舊窗格時(shí)自動(dòng)為其開啟日志。這是一種防御性編程思維。3.3 配置驗(yàn)證與手動(dòng)控制添加配置并重載后新建一個(gè)Tmux窗口或窗格然后立刻檢查日志目錄ls -la ~/.tmux/logs/你應(yīng)該能看到類似mysession_W0_P0_20231026_143022.log的文件正在被創(chuàng)建并且文件大小會(huì)隨著你在該窗格中的操作而增長(zhǎng)。手動(dòng)控制命令 雖然配置是自動(dòng)的但了解手動(dòng)命令對(duì)調(diào)試和高級(jí)管理很有幫助。為指定窗格開啟日志記錄在Tmux會(huì)話內(nèi)按前綴鍵后輸入:pipe-pane -o ‘exec cat /tmp/tmux.log’-o參數(shù)表示僅輸出不記錄輸入。如果你需要記錄輸入即你敲的命令可以去掉-o但要注意這可能會(huì)記錄密碼等敏感信息停止當(dāng)前窗格的日志記錄:pipe-pane不帶任何參數(shù)的pipe-pane命令會(huì)關(guān)閉當(dāng)前窗格的管道。查看當(dāng)前窗格是否正在記錄:display-message “#{pane_in_mode}”如果返回1通常表示該窗格正處于某種特殊模式如復(fù)制模式或…正在管道傳輸。但這不是一個(gè)百分百準(zhǔn)確的指標(biāo)。更直接的方法是查看進(jìn)程樹pstree或檢查日志文件是否在增長(zhǎng)。4. 高級(jí)優(yōu)化與常見(jiàn)問(wèn)題排查基礎(chǔ)功能實(shí)現(xiàn)了但在生產(chǎn)環(huán)境長(zhǎng)期使用我們還需要考慮更多日志輪轉(zhuǎn)、性能影響、異常處理等。下面分享幾個(gè)我踩過(guò)坑后總結(jié)的優(yōu)化點(diǎn)。4.1 日志輪轉(zhuǎn)與清理策略日志文件不加以管理遲早會(huì)撐爆磁盤。我們不應(yīng)該在Tmux配置里做復(fù)雜的日志輪轉(zhuǎn)如logrotate那應(yīng)該是系統(tǒng)層面的任務(wù)。但我們可以通過(guò)優(yōu)化日志生成策略來(lái)配合。1. 按日或按會(huì)話分割日志上述配置使用了精確到秒的時(shí)間戳這會(huì)導(dǎo)致大量小文件。一個(gè)更好的策略是按天分割。修改pipe-pane命令中的文件名部分‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d).log’這樣同一天同一個(gè)窗格的所有輸出都會(huì)進(jìn)入同一個(gè)文件。文件大小可控也便于按天歸檔。2. 集成系統(tǒng)logrotate在/etc/logrotate.d/下創(chuàng)建一個(gè)配置文件例如tmux$HOME/.tmux/logs/*.log { daily missingok rotate 30 compress delaycompress notifempty create 0640 $USER $USER }這個(gè)配置會(huì)每天輪轉(zhuǎn)日志保留30天并壓縮舊日志。create指令確保新創(chuàng)建的日志文件權(quán)限正確。3. 在Tmux會(huì)話結(jié)束時(shí)清理有時(shí)一個(gè)臨時(shí)會(huì)話的日志無(wú)需保留??梢栽O(shè)置一個(gè)鉤子在會(huì)話銷毀時(shí)刪除其對(duì)應(yīng)的日志文件。但這需要更復(fù)雜的腳本因?yàn)橐粋€(gè)日志文件可能對(duì)應(yīng)多個(gè)窗格且會(huì)話名可能重復(fù)。一個(gè)更簡(jiǎn)單的做法是定期手動(dòng)清理或依賴上面的logrotate。4.2 性能影響與注意事項(xiàng)I/O負(fù)載pipe-pane會(huì)將所有輸出實(shí)時(shí)寫入磁盤。對(duì)于輸出極其頻繁的窗格例如tail -f一個(gè)巨大的日志文件這可能會(huì)增加I/O壓力。在機(jī)械硬盤上需要留意。對(duì)于絕大多數(shù)開發(fā)、運(yùn)維操作影響微乎其微。網(wǎng)絡(luò)延遲感知寫入本地磁盤通常很快但如果日志目錄位于網(wǎng)絡(luò)存儲(chǔ)NFS上可能會(huì)引入延遲極端情況下可能讓終端感覺(jué)“卡頓”。磁盤空間監(jiān)控務(wù)必監(jiān)控日志目錄所在磁盤的空間使用情況??梢詫懸粋€(gè)簡(jiǎn)單的cron任務(wù)或systemd timer來(lái)檢查并報(bào)警。敏感信息泄露切記這會(huì)記錄終端上顯示的所有明文信息包括你輸入的密碼、密鑰、API Token等。因此避免在開啟自動(dòng)日志的Tmux窗格中輸入密碼。使用ssh-agent,gpg-agent或交互式密碼輸入工具。考慮使用pipe-pane -o只記錄輸出不記錄輸入。但輸入的命令行本身也常是調(diào)試的關(guān)鍵信息這需要權(quán)衡。確保日志目錄的權(quán)限設(shè)置正確如700僅允許所有者讀寫。對(duì)于包含敏感信息的臨時(shí)會(huì)話可以在創(chuàng)建會(huì)話時(shí)臨時(shí)禁用自動(dòng)日志或者事后安全地刪除日志文件。4.3 常見(jiàn)問(wèn)題與排查指南即使配置正確也可能遇到問(wèn)題。下面是一些典型場(chǎng)景和排查思路。問(wèn)題1日志文件沒(méi)有創(chuàng)建或沒(méi)有內(nèi)容。檢查配置是否加載在Tmux中按Ctrlb然后輸入:show-options -g log_dir查看log_dir變量是否設(shè)置正確。檢查目錄權(quán)限運(yùn)行l(wèi)s -ld ~/.tmux/logs/確保目錄存在且當(dāng)前用戶有寫權(quán)限。檢查鉤子是否觸發(fā)可以暫時(shí)在鉤子命令中加入調(diào)試信息。例如將run-shell部分改為run-shell “echo ‘Hook triggered for #{session_name}:#{window_index}.#{pane_index} at $(date)’ /tmp/tmux-hooks.log”然后新建窗格查看/tmp/tmux-hooks.log文件是否有輸出。這能幫你確認(rèn)是配置沒(méi)生效還是pipe-pane命令本身有問(wèn)題。檢查pipe-pane命令語(yǔ)法Tmux命令對(duì)引號(hào)嵌套非常敏感。確保你的配置文件中引號(hào)是匹配的。建議使用單引號(hào)包裹整個(gè)exec cat …命令就像示例中那樣。查看Tmux服務(wù)器日志啟動(dòng)Tmux時(shí)加上-vv參數(shù)tmux -vv new-session可以輸出詳細(xì)日志到標(biāo)準(zhǔn)錯(cuò)誤或文件有助于診斷。問(wèn)題2日志記錄意外停止。窗格中的進(jìn)程崩潰或結(jié)束如果窗格中的主進(jìn)程如bash退出pipe-pane的管道也會(huì)終止。這是預(yù)期行為。手動(dòng)誤關(guān)閉不小心在窗格中執(zhí)行了不帶參數(shù)的:pipe-pane命令。Tmux服務(wù)器重啟如果Tmux服務(wù)器重啟所有窗格的管道狀態(tài)會(huì)丟失。我們的pane-focus-in鉤子會(huì)在你重新聚焦時(shí)嘗試恢復(fù)但前提是窗格還在。問(wèn)題3如何為已經(jīng)存在的舊會(huì)話/窗格開啟自動(dòng)日志我們的pane-focus-in鉤子就是為了解決這個(gè)問(wèn)題。你只需要切換到那個(gè)舊的窗格鉤子就會(huì)觸發(fā)如果條件滿足。如果沒(méi)觸發(fā)可以手動(dòng)執(zhí)行一次:pipe-pane -o ‘exec cat …’命令。問(wèn)題4我想記錄更早的、創(chuàng)建日志之前的內(nèi)容。pipe-pane只記錄從命令執(zhí)行后開始的內(nèi)容。如果你想保存窗格中當(dāng)前已有的回滾歷史scrollback可以在開啟持續(xù)記錄前先手動(dòng)保存一次快照# 在目標(biāo)窗格中先按前綴鍵(Ctrlb)然后輸入 :capture-pane -S -300 # 捕獲從300行之前到現(xiàn)在的所有內(nèi)容 :save-buffer ~/.tmux/logs/history_snapshot.log # 保存到文件 # 然后再開啟pipe-pane進(jìn)行持續(xù)記錄5. 延伸應(yīng)用打造終端工作流與日志分析自動(dòng)日志記錄不僅僅是一個(gè)“備份”功能。當(dāng)它成為你工作流的一部分時(shí)可以解鎖更多高效用法。5.1 與監(jiān)控和告警集成想象一下你有一個(gè)在Tmux窗格中長(zhǎng)時(shí)間運(yùn)行的后臺(tái)任務(wù)比如一個(gè)數(shù)據(jù)處理的Python腳本。你可以結(jié)合簡(jiǎn)單的shell腳本來(lái)監(jiān)控日志#!/bin/bash # monitor_tmux_log.sh LOG_DIR“$HOME/.tmux/logs” SESSION“data_processing” WINDOW0 PANE0 LOG_FILE$(ls -t “$LOG_DIR”/${SESSION}_W${WINDOW}_P${PANE}_*.log 2/dev/null | head -1) if [ -z “$LOG_FILE” ]; then echo “No log file found for ${SESSION}:${WINDOW}.${PANE}” exit 1 fi # 持續(xù)監(jiān)控日志文件查找錯(cuò)誤關(guān)鍵詞 tail -F “$LOG_FILE” | while read line; do if echo “$line” | grep -q “ERROR\|CRITICAL\|FAILED”; then # 發(fā)送告警例如通過(guò)郵件、Slack webhook等 echo “ALERT found in $LOG_FILE: $line” | mail -s “Tmux Task Alert” your-emailexample.com # 或者播放一個(gè)聲音 paplay /usr/share/sounds/freedesktop/stereo/alarm-clock-elapsed.oga 2/dev/null fi done這個(gè)腳本會(huì)找到指定窗格最新的日志文件然后tail -F持續(xù)跟蹤一旦發(fā)現(xiàn)包含“ERROR”等關(guān)鍵詞的行就觸發(fā)告警。你可以用cron或systemd服務(wù)來(lái)啟動(dòng)這個(gè)監(jiān)控腳本。5.2 基于日志的復(fù)盤與知識(shí)管理每天下班前花5分鐘瀏覽一下~/.tmux/logs/目錄下的日志。你可能會(huì)發(fā)現(xiàn)某個(gè)復(fù)雜命令的成功參數(shù)組合。一個(gè)之前花了半小時(shí)解決的錯(cuò)誤其解決方案被完整記錄了下來(lái)。一段有用的代碼片段或配置輸出。你可以建立一個(gè)簡(jiǎn)單的知識(shí)庫(kù)將有價(jià)值的日志片段整理歸檔。例如用一個(gè)筆記軟件如Obsidian, Logseq或一個(gè)簡(jiǎn)單的Git倉(cāng)庫(kù)來(lái)管理。給日志文件配上好的命名規(guī)范我們之前的配置已經(jīng)做到了搜索起來(lái)會(huì)非常方便。5.3 替代方案淺析何時(shí)不用Tmux內(nèi)置方案雖然pipe-pane方案很優(yōu)雅但有些場(chǎng)景下你可能需要考慮其他工具需要記錄精確時(shí)序和終端控制序列如果你在做終端應(yīng)用的性能分析或錄制終端操作視頻script命令的-t參數(shù)可以輸出帶時(shí)間戳的數(shù)據(jù)流配合scriptreplay可以完美回放。這是pipe-pane難以替代的。環(huán)境限制無(wú)法修改Tmux配置比如在臨時(shí)租賃的服務(wù)器或嚴(yán)格管控的環(huán)境。這時(shí)你可以在啟動(dòng)Tmux之前先用script命令包裝script -f my_session.log tmux new-session -s mysession這樣整個(gè)Tmux會(huì)話包括所有子窗口的輸出都會(huì)被記錄到一個(gè)文件。缺點(diǎn)是所有窗格混在一起且文件會(huì)非常大。使用第三方終端復(fù)用器比如screen命令。screen也有類似的日志功能Ctrla, H開始/停止記錄但功能和集成度不如Tmux的pipe-pane靈活。最后再分享一個(gè)我個(gè)人的小技巧我會(huì)在~/.bash_profile或~/.zshrc里設(shè)置一個(gè)別名快速搜索今天的Tmux日志alias tlog“grep -r ‘\$1’ ~/.tmux/logs/*$(date %Y%m%d)*.log 2/dev/null | head -20”這樣在終端里輸入tlog “Connection refused”就能快速搜索今天所有Tmux日志里出現(xiàn)的連接錯(cuò)誤對(duì)于問(wèn)題排查來(lái)說(shuō)效率極高。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚洲激情精品| 色婷婷五月综合| 中字幕视频在线永久在线观看免费| 丁香色六月婷婷| 狠狠色综合无线观看| 丁香五月天亚洲视频| 天天日日人| 婷婷五月天性爱视频| 狠狠香蕉| 精品久久人妻| 久久这里只有精品1| 久xxxx| 五月亭亭六月天| 中文字幕久久一区二区三区| 色综合久久88色综合天天人守婷| 五月天婷婷xxx| W色综合| 991精品在线视频| 色五月婷婷丁香国产在线| 狠狠色狠狠色综合日日91| 色五月天婷婷| av九九| av操一操| 婷婷五月天AV| 天天日,天天插| 99精品视频在线观看| 第四色婷婷色五月| 婷婷淫淫狠狠六月| 色www久视频| 91碰视频| 久久性爱视频| 99视频在线精品免费观看2| 99免费热视频| 五月色天情| 五月色丁香婷婷中文字幕| 久久人人九九| 国产91视频| 九月色婷婷综合| 七月丁香婷婷 色色| 五月婷婷综合在线| 中文字幕人妻熟女在线| 久久人妻少妇嫩草AV| 综合久久99| 91丨九色丨高潮丰满日本| 色色日本| 99热老网站| 激情六月天| 婷婷五月天在线观看免费| 久久黄色免费视频| 五月婷婷啪啪网| 99er6| 人妻激情综合| 六月色婷婷欧美| 婷婷五月天成人五月天| 欧美婷婷五月激情| 夜丁香五月婷婷| 免费播放99性爱视频| 久久婷婷五月综合激情国产| 激情小说婷婷五月| 91九色熟女| 97色啪| 丁香五月很很肏| 免费视频WWW在线观看网站| 五月色网| 丁香婷婷五月综合欧美另类| 另类激情五月| 五月丁香综合精品| 九月色婷婷综合| 五月天成人综合| 色噜噜狠噜噜视频| 激情开心五月天| 久久9视频| 久久九九国产精品怡红院| 五月激情影院| 欧美三级大片AA在线看| 草综合网| 婷婷五月av| 夜色综合网| 91人人操人人爱| 情色婷婷五月天| 狠狠人妻色综合| 大香蕉av在线| 色婷综合| 色五月激情问网站| 天天干电影| 91色综合| 北条麻妃伊人 | 色色影院aaaav| WWW五月天| 亚洲色婷婷五月| 色激情五月| 久久香蕉影院| 另类国产区| 99re这里只有精品99| 五月开心婷婷| 国产在这里只有精品| 99噜噜噜在线播放| 97视频久久| 深爱五月综合网| 五月天婷婷在线AN| 五月天婷婷成人网| 六月婷婷久久| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 五月丁香六月婷婷综合免| 99视频精品全部免费观看| www.久久av.com| AV电影在线播放| 熟女人妻视频| 人妻久久久久| 91丨九色丨熟女|新版| 免费观看的av| 9+1视频网址| 丁香成人色情五月天| 97人人看| 99久久五月丁香野外| 思思热思在线精品视频| 91日韩在线| 丁香色色五月| 影音先锋 91工厂| 丁香五月激情综合| caopeng97人人| 日韩激情婷婷五月天| 99re这里| www.亚洲激情.com| 色狠狠色噜噜噜a天堂一区| 国产 码在线成人网站| 久久性都花花世界成人免费视频| 丁六月激情| 久久久香| 99热资源在线| 97亚洲精品| 99色这里| 久久人人看| 五月婷在线影院| 五月天色婷婷网| 丰满老熟妇BBBBB搡BBB| www色婷婷久久综合久色 | 五月丁香婷婷婷激情爱爱| 荫道BBWBBB高潮潮喷| 人人摸人人操人人爽| 啪到高潮激情丁香五月| 色婷婷色五月综合| 俺去也婷婷| 亚洲综合色婷| 天堂草在线看www| 欧美丰满熟妇BBB久久久| 欧美性二区| 五月婷婷激情性爱| 在线播放成人网站| 色情五月综合婷婷| 成人va在线观看视频| 亚洲操精品| 操操自拍| 婷婷欧美| 人人操人av| 99婷婷精品推荐在线视频| 熟女婷婷网站一婷婷五月一丁香婷婷一婷婷激情网| 六月婷婷五月丁香| 色五月婷婷色五月| 99色五月| 另类激情综合| 天天爽天天爽夜夜爽| 亚洲黄色影视| 人妻操操色| 日本精品人妻无码77777| 色 免费网站视频| 99色在线视频| 激情综合另类| 操人精品| 可以看的av网站| 超碰人人操在线| 婷综合| 亚洲AV网站| 97碰超级人人看| 97啪啪| 久久怡红院| 五月亚洲激情| 亚州婷婷五月激情综合| 久久这里有精品| 婷婷五月天成人导航| 五月天婷婷久久视频| 狠狠色丁香久久久婷| www.激情| 五月婷婷丁香社区| 俺来也综合网精品一区| 激情电影五月婷婷| 九九色色| 九九色热视频| 久思思久视频| 99视频在线观看视频| 久久婷婷五月天| 掩去也综合五月视频| 婷婷大香蕉| 五月婷婷之六月丁香| 丁香五月瑟瑟| 二色av| 日韩五月天婷婷| 亚洲无码影片| 久久精彩视频| 天天狠狠夜夜狠狠2023| 翔田千里无码| www久久99| 久久婷婷五月丁香蜜桃网| 99热这里只有精品8| 91狠狠综合久久久久久| 色五月开心久久网| 欧美情色一区| 九九香蕉网| 午夜青草资源| site:901-07.com| 色香五月天| 丁香六月天婷婷| 婷婷色五月丁香六月欧美啪| 天天日,天天干,天天操| www.五月天婷婷姐姐| 欧美久久网| 精品欧美一区二区三区久久久| 丁香婷婷基地| 五月激情婷婷开心| 婷婷五月天熟妇| 最新色色五月天| 热99色| 五月叮香啪| 丰满熟女人妻一区二区三| 人妻久久久久| 色综合久久综合中文综合网| 一本九九色| 国产精品国产成人国产三级| 日本婷婷| 激情亚洲网| 丁香五月天在线| 综合激情网| 一本久道综合色婷婷五月| 91啦丨九色丨刺激中文| 亚洲丁香五冃97色| 色五月婷婷在线观看第一页舔| 成人五月丁香社区| 丁香五月婷婷啪| 国产综合网在线| 啪啪五月天啪啪| 久色网| 久久色9| 欧美日本国产| 国产黄色大片| 九月丁香欧美综合| 色女人久久| 婷婷激情四射五月天| 婷色影院| 婷婷香蕉视频| 婷婷久久五月天中文字幕在线观看| 99精品成人无码A片观看金桔| 国产免费一区二区在线A片视频| 激情五月天网站| 五月天婷婷丁香六月| 五月激情综合五月| 9这里只有精品| 呦呦v线| 婷婷色五月激情| 99久热在线精品| 伊人网碰碰| 婷婷天堂视频| 色噜噜狠狠色综合无码久久欧美| www.五月天性.com| 色色综合色| 日本婷婷色日| 超碰99在线观看| 99热这里精品| 成人精品视频99在线观看免费| 久久久婷婷| 精品一二三区久久AAA片| 五月婷婷激情综合| 激情影院69| 吾爱AV导航| 97五月天婷婷综合激情网| 5五月综合网亚洲| 婷婷五月18永久免费网站| 91碰操| 色欲色香综合网站| 五月丁香好婷婷A片网| 啪啪操超碰| 狠狠色97| 久久这有这里精品| 亚洲色在线观看| 六月色婷婷| 狠狠色婷婷7777久| 99燥99日| 香蕉网久久| 91精品91久久久中77777久久玖玖九九 | 很操日本7| 婷婷色丁香五月| 日日夜夜天天爽| 色五月婷婷激情| 五月婷婷激情| 国产AV一区二区三区最新精品 | 色五月婷婷五月天激情综合| 天天操天天日天天爱| 色五月婷婷激情五月| 五月丁香中文| 97久久久| 五月婷婷日| 色情五月天小说| 六月色国内综合| 丁香五月婷婷视频| 成人免费120分钟啪啪| 狠狠色狠狠色综合日日91| 色婷婷狠狠爱| 99热这里只有精彩| 疯狂做受XXXX高潮A片| 成人无码中文| 色五月av伊人| 丁香五月婷婷啪| www.色五月| 99偷拍视频在线日本| 天天综合久久| 丁香六月狠狠干| 狠狠综合网| 日本三级网址| 99精品网站| 男人天堂99| 热99玖玖99玖玖99九九| 综合五月丁香久久| 婷婷激情九月| 综合九九久久| 九九九九这里只有精品| 日韩黄色影院| 婷婷丁香一月| 五月天开心网| 婷婷第六色| 欧美综合激情丁香五月六月婷| 激情四射五月天| 丁香五月大香蕉AV| 激情五月丁香五月| 五月天色色色网| 99久久99热| 日本一级特黄大片AAAAA级| 国产3p露脸普通话对白| 色综合色婷婷色伊人| 激情噜噜噜| 黄色高清无码| 青青草原99热| 亚洲AV无码成人电影| 国产日产成人亚洲欧美国产VA| 婷婷无码五月天| 五月激情丁香啪啪| 五月情涩综合婷婷| 五月天大香焦| 伊人AV五月婷| 久久久人人操A V| 激情综合另类| 99艹精品在线观看| 亚洲色99| 久热亚洲| 天天操无码| 婷婷五月天高清无码| 99热精品在线观看| 丁香五月 综合| 97人人干| 婷婷色天香| 五月天成人综合| 午夜亚洲国产精品av一区二区| 第五色色色婷婷| 九九艹女| 天天操综合网| 日韩性视频| 欧美三级欧美一级| 99操99| 丁香婷婷影院| 亚洲综合网激情小说| 99久久久久| 这里只有精9| www.久久| 欧美日韩一区二区三区四区| 亚欧州精品视频| 9l视频自拍9l九色9l成人| 久久五月天色婷婷| 99这里有精品| 五月丁香综合影院| 伊人啪啪网| 激情丁香五月AV| 丁香五月手机在线| 另类天堂| 天天插操| 这里有精品| 91碰碰视频| 91人人网| 五月婷婷熟女| 婷婷五月丁香A∨| 色丁香五月| 日本色婷婷| 无码AV免费精品一区二区三区 | 欧美性生交XXXXX无码小说| 日韩性视频| 26uuu欧美| 激情五月综合色婷婷| 婷婷色资源| 99热在线观看免费精品| 99免费成人网| 亚洲国产黄色电影| 五月综合久久| 丁香婷婷激情| 色婷婷丁香特级性爱视频| 丁香五月天亚洲综合| 97香蕉久久超级碰碰高清版| 天天干夜夜欢| 五月婷婷三级| 99欧美精品99日本精品| 色~性~乱~伦~噜| 五月婷综合性中心| 九九久久精品| 国产在线自| 性一交一乱一交A片久久四色| 5月丁香六月婷婷| 久久精品夜色噜噜亚洲a∨| 久色激情| 五月久久婷婷丁香| 婷婷瑟瑟五月天| 亚州精品色情无码A片| 九月激情婷婷丁香| 色五月婷婷中文字幕| 综合五月网| 狠狠操.com| 成人在线视频男人的天堂4399| www.夜夜| 99热8| 播五月丁香三月婷婷| 久久婷婷丁香五月一二三| 91xxxx九色| 国产精品扒开腿做爽爽爽A片唱戏 青青草国产亚洲精品久久 | 丁香青青五月天| 色九区| 思思热这里只有精品| 思思视频这里是精品| 97丁香五月| 久久大大香| 高清无码视频网址| 91九色国产在线| 五月丁香激情婷婷综合| 99热18| 久久综合丁香激情五月| 人人看人人草人人摸| 五月婷久久| HD久久精品视频| 天天射天天插天天干| 日本九九九九| 丁香五月婷婷五月| 99在线精品视频| 日本一级一片免费视频| 婷婷九月在线| 97碰碰在线观看视频| 丁香五月天激情网| 丁香婷婷六月在线资源观看| 日本成人噜噜噜噜噜| 91丨九色丨国产打屁股| 中文字幕在线免费观看视频| 天天色天天射天天日| 婷婷五月综合啪| 欧美成综合在线观看| 97碰碰叉| 亚洲99一级无嗎特制在线| 狠狠五月婷婷| 色吊丝99| 久久9RE热视频精品98| 亚洲AV电影美洲AV电影| 综合玖玖偷拍| 五月天婷婷操逼视频| 激情九色| 1024人妻| 婷婷五月俺要去| 天天爽—爽| 老司机午夜福利视频金瓶梅| 青青草护士中出内射-欧美电影在线天堂新版| 久这里只有精品99| 婷婷色5月天在线。| 五月丁香好婷婷姑娘综合网| 99视频精品8| 人妻 性久久久久久| 亚洲色婷婷五月| 激情五月天小说|五月天开心激情网|亚洲精品国产自在现线|黄色五月天 | 中文字幕婷婷五月天| 国产片天天爽夜夜爽| 快乐激情五月色婷婷| 久久久久久久综合狠狠综合| 青青五月天婷婷| 天天舔天天插天天干| 99精品国产乱码久久久人妻| 日本无码专区| 久久婷婷东京热大香樵| 99综合一区| 九九99久久| w婷婷五月婷婷w| 热久视频| 日本综合久久| 九八Av| 丁J香六月首页| 4438成人电影| 五月丁香婷婷无码A∨| 操一操插一插| 六月丁香综合| www五月婷婷88导航| 丁香久久激情俄| 九九 激情 网| 五月丁香色婷婷婷基地| 婷婷五月天激情丁香| 97色操| 婷婷五月婷婷| 99精日本久久| 丁香五月自拍| 激情婷婷五月天日本系列| 色婷婷五月天| 最新高清无码专区| 九色七七| 婷婷丁香人妻久久在线观看| www.henhenl| 欧洲色| 婷婷激情五月天桃花网| 97干在线视频| 色婷五月天激情| 91久久久久久久久| 超碰A V在线| 伊人五月天日日夜夜久久久天天| 五月天天视频| 202丰满熟女妇大| 91色在线 | 日韩| 五月丁香六月婷婷在线小说视频| 丁香六月激情四射| www.一起草av| WWW激情五月天| 日韩一级片| 9999色色色色| 久久综合丁香激情五月| 五月丁香亭亭AV女优| www.天天干.com| 99热国产免费| 殴美97色| 99热这里只有的精品视| 国产99久久久国产精品免费看| 五月亭亭色| 青青福利网| 欧美在线视频99| 天堂五月婷婷| 五月婷婷中文字幕| 99cao婷婷| 天天噜天天爱| av大香蕉| 丁香五月色综合色播五月| 久久五月网| 任你搞在线观看视频| 天天做天天双| 我爱大香蕉| www.99热视频| 色综合久久天天综合网| …亚洲黄色在线播放日韩、av中文a…| 亚洲热综合网在线观看| 另类小说五月天| 91蜜桃婷婷狠狠久久综合9色| 日本va欧美va国产激情| 国产精品视频网| 操你av| 欧美成人精品三区综合A片| 欧美性爱五月天| 日本激情91| 久热re在线视频| 色色综合色| 日操熟女| 五月婷婷激情久久| 亚洲成人av在线播放| 这里只有精品免费视频| www91精品| 婷婷五月天成人网| 五月丁香琪琪| 久久这里有精品| 久久久久久xxxxx| 久久综合激情| 色婷婷丁香五月丁香| 八戒青柠影视剧在线观看| 久久黄色网扯| 久九男女天堂| 色婷五月天激情| 性爱网六月丁香| 99视频在线观看网址| 婷婷刺激综合| 日本三级中国三级99人妇网站| 亚洲无码播放| 婷婷午夜| 日日夜夜综合| 色婷婷国产精品综合在线观看| 99爱视频| 99热九九这里只有精品| 久热在线中文字幕色999舞| 五月丁香天堂网婷婷| 成人综合视频网址| 五月婷婷婷色| 久久久免费精彩视频| 色狠狠999综合| 婷婷永久在线| 色婷五月天亚洲| www.婷婷激情网.com| 99热在线观看| 就99这里只有精品| 午夜激情久久| 色色色免费视频| 色国产五月| 亚洲无码免费看| 99在线视频播放| eeuus五月婷| 99热草草| 丁香五月色| 天天操天天日天天爽| 婷婷六月久久| 91丨九色丨东北熟女| 丁香六月亚洲综合| 99啪啪视频| 日韩丁香涩| 天天做天天爽| 狠狠色官网| 国精产品一区二区三区| 狠狠干,狠狠操| 丁香五月在线| 婷婷六月色丁香视频在线观看| 99热很操老逼| 国产精产国品一二三在观看| 色五月婷婷九月| 丁香八月综合激情| 欧美激情综合色综合啪啪五月| 欧美性爱五月天| 六月份天丁香婷婷| 激情综合网亚洲色图| 狠狠五月激情丁香六月| 成人免费黄色短视频| 伊人婷婷大香蕉| 婷婷夜夜夜夜| 五月欧美色播| 91婷婷色| 婷婷五月色花丁香社区| www.色婷婷.com| 色播播五月天| 久久人妻伊人| 五月丁香AV、伊人业余、性色熟妇 | 天天噜天天插| 天天插天天射天天干| 中国女人做爰A片| 久久婷婷内射| www.夜夜爱.com| 99日韩| 99碰超| 免费观看大片视频 丁香婷婷 六月欧美| 狠狠色丁香99| 色综合爽| 久久99网站| 精品人妻在线| 六月婷婷九月丁香| 婷久久综合| 五月丁香久久综合91| 九九成人视频| 丁香五月天堂网| 色五月在线观看| 成人丁香色| 色五月综合在线| 婷婷五月丁综合| 极品五月天| 热久久66| 。久久久久久久久久久久久久人妻| 性婷婷| 五月天久久久| 69精品人人人人| 任你爽免费视频| 丁香九九九九| 亚洲色久| 婷婷6月综合网| 噜噜噜噜噜久| eeuus五月婷| 丁香五月天色综合| 婷婷久久五月天亚洲欧美国产日韩在线观看 | 婷婷五亚洲| 79色色免费| 五月丁香婷婷人体| 操一操| 久久婷婷五月综合啪| 婷婷五月激情欧美大胆视频| 五月花丁香婷婷| 久久视频在线| 伊人在线视频| 超碰久热| 少妇水多A片太爽了| 国产AV一区二区三区日韩| 亚洲精品无AMM毛片| 色色婷婷综合| 9999热在线观看| 91精品国产99久久久久久天美| 丁香蜜臀黄色婷婷五月天| 久久久人妻不卡| 色婷婷在线视频久| 欧美色五月天| 丝袜人妻| 无码激情AAAAA片-区区| 中文字幕人妻AV| 特级操b片| 伊人五月婷婷| 色婷婷久久| 丁香五月偷拍| 另类国产欧美视频| 色婷婷五月色| 深爱开心五月天| 深爱激情丁香五月| 91大神操美女| 中文成人在线| 亚州色综合| 日本久久网| 五月天成人手机在线视频| 日日.c| 婷婷五月天久久| 91精品91久久久久77777| 五夜丁香| 天天操天天操| xxxx久| 97干干干丁香| 操操人人| 天天视频亚洲| 激情六月综合| 激情综合另类| 天堂婷婷五月在线| 婷婷五月天综合网| 成人无码精品1区2区3区免费看| www. 五月. com| 色五月丁香六月资源站| 99热这里只有是亚洲国产| 97精品综合久久| 精品99*| 这里只有精品日韩| 激情五月天偷拍综合网| 欧美性猛交99久久久久99按摩| 一起肏在线视频| 亚洲婷婷开心五月| 色婷婷丁香| 超碰激情五月| 天天模,夜夜模夜夜爽| 天堂色婷婷| 青青久久91| 99er6| 婷婷五月天激情综合| 久久月天堂| 桃色伊人在线| 狠狠狠狠狠狠| 久久丁香五月| 激情五月婷婷综合| 七月婷婷色香综合网| 开心婷婷中文字慕| 日日夜夜干| 中文字幕不卡网站| 五月丁香天堂网婷婷| 五月天色社区| 综合色五月天| 碰97久久| 玖玖激情网| 激情网婷婷婷| 狠狠婷婷综合| 婷婷操逼网| 99∨VTV| 色情综合| 婷久久| 色色日本欧美| 日韩AAAAAAAAAAA片| 日本WwW色偷偷丁香花久久久京东热| 99色视| 五月婷婷激情久久| 五月婷婷开心五月| 丁香五月成人自拍| 日日噜狠狠色| 激情超碰网| 午夜五月天| 五月婷综合| 亚洲视频伍月婷婷| 久久青草国| 亚州色色色| 日韩五月婷婷| 另类小说色婷婷| 日韩免费99| 国产精品色婷婷99久久精品| 99视频九九热| 超碰91人人操| 亚洲综合成人网| 婷婷五月天激情四射| 99久久综合网| 99爱爱| 婷婷五月天xxx| 疯狂做受XXXX高潮A片| 色婷婷六月开心中文字| 九日日夜夜69| 五月天婷婷综合免费| 色婷婷四色| 亚州操操| 操操操操操操婷婷五月天| 久久激情综合| 极品人妻videosss人妻| a性生活久久无| 日韩色色视频www| 黄色99热| 丁香五月电影| 天天草天天舔| 婷婷丁香六月天激情四射网| 亚洲五月天激情| 色欲av伊人久久大香线蕉影院| 久久久久久人妻| 777丁香六月青青草婷婷综合久月| 99ree6| 婷婷丁香十月| 九九久久99| 欧美成人一区二区三区在线视频 | 精品一区二区三区免费毛片爱| 五月天久久成人| 9999综合99综合人| 生活片五区| 色天天久婷婷| 日韩AV中文字幕在线| 在线观看的av| 色婷婷五月天成人网| www五月天com| 激情六月综合| 午夜婷婷五月天| 色五婷婷| 色婷婷丁香A片区毛片区女人区| 伊人五月天婷婷| 婷婷五月激情的图片| 天天爽天天操| 综合网激情| a69在线视频| 97香蕉人人在线观看| 99热免费观看| 日日夜夜久| 激情色中文| 色婷婷无吗| 色婷婷色99国产综合精品| 五月丁香基地| 天天骑日日爽| 99人人操| 激情五月成年| 色综合激情| 五月婷婷六月丁香综合| 日本色噜| www.久久久久久| 久久caop| 久久久久er热| 天天干天天插| 26uuu另类| 丁香六月婷婷综合色| 天啪色| 97超碰免费超级在线观看| 欧洲亚洲免费视频9 | 婷婷五月天VI| 丁香五月性| 婷婷五月大香蕉| 9色婷婷| 超碰人妻在线| 天天综合网在线| 五月丁香婷婷伊人| 九九热视频精品2| 97丁香五月| 国产91在线视频| 免费看欧美成人A片无码| 亚洲中文字幕网| www.天天日| 色综合色综合网| 丁香五月第九色| 激情五月深爱五月观看| 丁香五月婷婷AV| 欧美婷婷九月| 婷婷五月天天激情| 亚洲一区二区色图-亚洲精品国产精品乱码-成人AV | 五月婷婷亚洲综合网| 91婷婷丁香五月天免费视频网站| 色婷婷AV在线| 色爱综合五月| 午夜激情久久| 色婷婷五月丁香色| 大香蕉AV电影在线| 99ER热精品视频| 欧美成人精品A片免费一区99| 伊人99热| 另类专区在线观看| 欧美丁香五月97色| 中美日韩成人在线| 日本久热| 久久婷.com| 亚洲av成人在线| 日本高清久| 免费AV在线| 婷婷久久五月天丁香| 久草狼人| 91avse| 97人人操人人干| 丁香五月婷婷色| 五月丁香黄色视频| 人人操av| 亚洲成av人影院| 国产高潮A片羞羞视频涩涩| 日本不卡高字幕在线2019| 99亚洲精品| 欧美成人精品A片免费一区99| 国产黄大片在线观看画质优化| 青青草免费公开视频| 亚洲殴洲精品Av在线| www.成人婷婷综合| 婷婷瑟瑟五月天| 丁香六月久久| 成人精品人妻| 五月天婷婷丁香| 日日干日日| 五月丁香久久综合91| 91久久人人操| 激情久久 婷婷| 人人人操| 五月婷俺去也| 丁香伊人综合| 欧美日本va| 五月丁香六月色| 丁香九月激情| 欧美性猛交99久久久久99按摩| 97色五月婷婷在线| 韩日AV片| 26uuu精品一区二区| 久去色色| 色久综合天天做视频| 久久天天| 思思久久精品| 五月丁香六月婷婷不卡免费无码 | 五月丁香色婷婷综合| 99热在线精品观看| 成人电影AV在线观看| 亚洲欧美成人在线| 五月丁香亚州综合网| 丁香婷婷色| 色在线五月天免费| 99精品小视频| 色狠狠综合| 91妻人人爽人人看片| av线电影| 色婷婷成人丁香| 超碰熟女拍拍| 午夜丁香婷婷| 欧美性爱丁香五月| 九月影院義母在线播放| 丁香五色月婷婷网| 射久久丁香五月| 99re在线播放| 91色在线| 日韩六十路91性交电影| 中文字幕,综合,91| 欧美性猛交XXXX乱大交极品| 丁香久月| 五月婷婷久久综合| 色婷婷五月天| 又大又粗九一在线| 五月色色色| 久热精品视频| 狠狠色成人影片| 国产精品成人网站| 天天草天天舔| 色婷婷久久综合| 免费碰碰视频久| 人人人操Av| 日本99色| 美女被操一区二区| 人人爱干人人爱草| 激情图片婷婷丁香五月| 色色色九九九五月婷婷| 丁香五月婷婷激情小说| 夜夜爽天天干| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 人人97碰| 狠狠干在线| 五月婷婷综合在线亚洲视频| 婷婷久热| 激情五月天网站| 精品热九九| 综合激情五月丁香9999久久精| 超碰免费大香蕉| 强奸幻女毛片| 深爱丁香激情| 五月婷婷五月天| 久久久99久久| 免费观看大片视频 丁香婷婷 六月欧美| aV直接看| 五月婷婷六月丁香综合视频在线| 婷婷午夜精品久久久| 久久影视婷婷五月| 丁香婷在线| 亚洲精品久久久久久久久久吃药 | 久久久五月五丁香| 欧美25p| 色五月婷婷777| 婷婷五月天伊人在线| 9久久精品| 九九热自拍| 五月天婷婷丁香导航| 亚洲成人AV电影网| 丁香五月综合在线观看| 亚洲六月色| 激情五月婷婷综合网| 婷婷综合久久| 欧美va亚洲va| 色色色热| 啪啪色激情五月天| 激情五月天婷婷丁香| 久久东京热婷婷五月| 综合一区二区三区| 久久性刺激| 99精品在线观看视频| 久久久久久久久久91| 日本理论久久| 色色综合色| 一起操 91N.com| 五月丁香六月激情综合欧美| 91熟妇大香蕉| 99在线观看精品视频| 视频在线免费观看欧洲乱码| 开心激情婷婷| 超碰色婷婷| 狠狠爱综合网| 欧洲婷婷五月天| 熟妇人妻中文字幕无码老熟妇| 免费日韩99| 欧美日韩精品人妻狠狠躁免费视频| 一根材五月婷成人| 97caop| 这里只有精品在线免费视频| 九色视频入口91| 天天日天天干天天天| 99热精品超碰| 婷婷五月天久久| 色情五月天小说| http:色情日本com| 人妻久久久久久久久久久| 99五月婷| 日本色色色| 色婷婷在线综合色播网| 日韩人妻白浆视频系列| 五月丁香六月激情欧美综合| 啪啪黄页网| 国产这里只有精品| 99色一| 色爱综合五月| 97碰碰视频在线观看| 久久婷婷六月| 婷婷操无码| 久久久久久久久99精品| 五月天激情综合网站| 射婷婷中文字幕| 99热在线播放| 91九色熟女| 丁香五月成人| 色色网站免费| 精品思思久久| 久综合九综合99| 久久久精品AV| 呦呦AV| 人人搡人人| 日日夜夜天天| 亚洲色色香蕉| 色五月激情综合网| 日韩色色色色| WWW99热| 五月天自拍视频| 免费97碰碰| 99在线精品免费视频| 这里只有精品无码| 婷婷5月色| 久久一品区| www五月| 久久久无码精品成人A片小说| www.激情五月天.com| 婷婷丁香黄色| 超碰碰碰碰| 日日日日日| 色色日韩无码| 欧美在线操| 九色激情| 99久久久久| 天天干天天操天天射| 五月天性色| 婷婷五月综合在线| 亚洲综合欧美色丁香婷婷888月图片| 99热只有| 国产婷婷综合| 丁香综合网| 六月丁香视频网站| 91九色欧美| 91 影音先锋| 久久免片| 五月激情小说| 五月花亭亭| 欧美狠狠草| 丁香久久五月婷综合| 欧美十二区| 91丨九色丨东北熟女| 五月婷婷人人人操| 五月婷婷免费看| 狠狠干狠狠干狠狠干狠狠干| 99久久九九| 色婷久| 婷婷新网址| 青青草伊人婷婷| 亚洲人妻AV| 亚洲愉拍99热成人精品| 婷婷丁香人妻天天爽| 成人九九视频| 五月婷婷m| 99小精品| 五月婷婷深深的爱| 一级精品999WWW| 懂色av蜜臀av粉嫩av永陈冠希 | 狠狠色综合网站| 五月天激情婷婷| 色色色综合网| 五月丁香花婷婷玉莉AV| 色婷婷五月婷婷五月婷婷五月| 蜜乳9188| 99亚色色色| 久久人人九九| 欧美视频五区| 久99久视频免费观看| 久久九九九九| 操比激情五月| 色婷婷色丁香色欲av| 狠狠干.com| 九九爱激情| 日本综合九九| av五月天婷婷丁香| 五月丁香亭亭激情操逼网| 日韩精品视频中文字幕| 99精品国产在热久久| 亚洲视频一区| 成熟妇人A片免费看网站| 人人操av| 六月成人网| 91聚色综合网| 中文字幕高清av| 最新久久99视频网站| 99人人看| 日韩另类在线观看| 操操天堂| 亚洲小视频免费播放| 狠狠色五月激情| 五月婷婷这里都是精品| 六月婷婷七月丁香| 九九色视频| 色爱五月天| 亚州操操| 天天玩夜夜操| 九九热在线视频| 无码激情AAAAA片-区区| 99国产99| www.久久久久久久久久久| A在线观看| 亚洲操操| 操逼123网| 色在线视频网2025| 免费视频无码| 久久99久久99久久99人受| 五月丁香激情综合网| 亚洲激情六月丁香| 狠狠xx| 色五月婷婷五月| 无码人妻电影| 亚洲无码99| 激情婷婷激情在线不卡| 色婷婷女优有码五月亭| 丁香五月婷婷亚洲综合精品| sS丁香五月婷婷| 99人人操人人摸| 夜夜骑天天操| 91狠狠综合久久久久久| 亚洲爆乳无码精品AAA片蜜桃| 男女啪啪视频久 9| 99精品久久久久| 五月婷六月综合在线观看| 色丁香久综合在线久综合在线观看| 日韩五月丁香| 五月婷综合| 五月婷婷影视| 五月天激情四射网站| 九九视频网| 丁香婷婷五月基地| 操碰99| 狠狠色 综合色区| 67194中文字幕| 狠狠肏综合网| 玖玖婷婷色五月| 久久婷婷五月天| 色综合久网| 再綫Av免费視品| 骚。com| 久久这里只有精品8| 久久性都花花世界成人免费视频| 色综合区| 狠狠搞亚洲| 五月天婷婷丁香| 99热官网精品在线| 婷婷的激情五月| 色综合色| 色噜噜丁香| 51XX午夜影福利| 久久99成人性爱高清视频| 丁香五月成人社区| 日本三级片片| 丁六月激情| 99热国产精品| 亚洲久艹| 丁香五月激情月| 婷婷五月色| 亚州婷婷五月激情综合| 激情婷婷丁香色五月综合| 婷婷的99视频网站| 激情婷婷22月间| 亚洲色欲欧美一区二区三区| 日韩九区| 亚洲四色五月| 这里只有精品久| 五月丁香六月婷婷网| 激情婷婷网| 久热只有这里精品| 婷婷丁香六月| 66精品国产成人| 日本色爽| 人人操人| 欧美另类五月激情| 色色激情| 久久永久网址| 超碰免费大香蕉| 人操人人| 久狠日av| 亚洲无码 图片区| 99热国内| 天天日天天色| 99ri在线观看视频| 狠狠干五月天| 色约约视频一区二区三区四区五区 | 国内裸舞二区| 婷婷色综合| 婷婷99中文字幕| 色五月大| 六月激情丁香一道本7777| www激情com| 亚洲区在线| 天天干天天操天天爱| 精品无码久久久久久久久| aaa丁香五月天| 亚洲国产99| 日本高清久久| 99精品性爱| 五月丁香| 久久色情| 日韩成人av在线| 婷婷伊人| 色色色色色热| 天天插综合| 天天骑日日爽| 九月丁香| 综合激情五月丁香| 97精品人人A片免费看| 五月婷婷少妇之| 色伊人91在线视频| 男女久久婷婷五月天| 久久精彩视频18| 成人丁香五月天| 99玖玖在线视频| 五月婷婷激情久久|