99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Tmux自動(dòng)保存會(huì)話日志:原理、配置與生產(chǎn)環(huán)境實(shí)踐

Tmux自動(dòng)保存會(huì)話日志:原理、配置與生產(chǎn)環(huán)境實(shí)踐 1. 為什么需要自動(dòng)保存Tmux會(huì)話日志如果你和我一樣日常開發(fā)、運(yùn)維或者長(zhǎng)時(shí)間跑任務(wù)都離不開Tmux那你肯定遇到過(guò)這種糟心事一個(gè)跑了三天三夜的編譯任務(wù)或者一個(gè)正在調(diào)試的復(fù)雜服務(wù)因?yàn)榫W(wǎng)絡(luò)閃斷、終端意外關(guān)閉甚至只是手滑關(guān)掉了終端窗口整個(gè)Tmux會(huì)話連同里面所有寶貴的輸出信息瞬間消失。更讓人抓狂的是有時(shí)候一個(gè)關(guān)鍵的錯(cuò)誤信息就在你眼皮子底下閃過(guò)還沒(méi)來(lái)得及細(xì)看就被后續(xù)的日志刷掉了。這時(shí)候你恨不得能把屏幕上的每一個(gè)字符都“焊”下來(lái)。這就是我們今天要解決的問(wèn)題。Tmux本身是一個(gè)強(qiáng)大的終端復(fù)用器它能讓會(huì)話在后臺(tái)持續(xù)運(yùn)行但它默認(rèn)并不負(fù)責(zé)把屏幕上滾過(guò)的所有內(nèi)容持久化到磁盤。script命令是一個(gè)經(jīng)典的解決方案它能記錄終端的所有輸入輸出但把它和Tmux優(yōu)雅地結(jié)合起來(lái)實(shí)現(xiàn)“無(wú)感”的、自動(dòng)化的日志記錄里面有不少門道。比如如何為每個(gè)Tmux窗口或窗格單獨(dú)生成日志文件如何避免日志文件無(wú)限膨脹如何讓這個(gè)機(jī)制在每次啟動(dòng)Tmux時(shí)自動(dòng)生效而不需要你手動(dòng)敲一堆命令最近在社區(qū)里關(guān)于“mobaxterm保存日志”、“vs調(diào)試信息保存到日志文檔同時(shí)打印顯示”的討論也很多這說(shuō)明大家對(duì)于終端輸出持久化的需求是普遍且強(qiáng)烈的。尤其是當(dāng)你在處理“慢查詢?nèi)罩尽狈治?、“redis日志”監(jiān)控或者排查“android保存異常前后關(guān)鍵日志、內(nèi)核異?!边@類復(fù)雜問(wèn)題時(shí)一份完整的、按時(shí)間或會(huì)話組織的終端記錄其價(jià)值不亞于一份詳細(xì)的調(diào)試報(bào)告。所以這篇文章的目的就是分享一套我經(jīng)過(guò)多年實(shí)踐打磨出來(lái)的、在Linux環(huán)境下為Tmux會(huì)話自動(dòng)保存日志的完整方案。我會(huì)從最核心的原理講起一步步拆解配置方法并重點(diǎn)分享那些容易踩坑的細(xì)節(jié)和高級(jí)用法讓你不僅能“抄作業(yè)”更能理解背后的“所以然”。2. Tmux日志記錄的核心原理與工具選型在動(dòng)手之前我們必須搞清楚兩件事第一Tmux本身是如何處理屏幕內(nèi)容的第二有哪些工具可以捕獲這些內(nèi)容。Tmux的核心是一個(gè)客戶端-服務(wù)器模型。當(dāng)你運(yùn)行tmux命令時(shí)會(huì)啟動(dòng)一個(gè)服務(wù)器進(jìn)程tmux server。這個(gè)服務(wù)器管理著所有的會(huì)話session、窗口window和窗格pane。你在終端里看到的實(shí)際上是Tmux客戶端渲染出的一個(gè)“視圖”。所有在窗格中運(yùn)行的進(jìn)程比如bash, vim, top的輸出都會(huì)先被Tmux服務(wù)器捕獲然后再轉(zhuǎn)發(fā)給連接的客戶端進(jìn)行顯示。這就給我們提供了兩個(gè)攔截日志的切入點(diǎn)在進(jìn)程層面攔截在進(jìn)程如bash和Tmux服務(wù)器之間插入一個(gè)記錄器。這就是script命令的工作方式。script會(huì)啟動(dòng)一個(gè)新的shell并記錄這個(gè)shell及其所有子進(jìn)程的所有輸入輸出。在Tmux層面攔截直接讓Tmux服務(wù)器把它要發(fā)送給客戶端的內(nèi)容額外保存一份到文件。Tmux內(nèi)置了pipe-pane命令和capture-pane命令可以做到這一點(diǎn)。方案對(duì)比與選型script命令方案原理通過(guò)exec script -f log.txt替換當(dāng)前窗格的shell開始記錄。優(yōu)點(diǎn)記錄非常原始和完整包括控制字符、顏色碼如果使用-f參數(shù)。它是操作系統(tǒng)自帶工具無(wú)需額外安裝。缺點(diǎn)與Tmux結(jié)合時(shí)需要一些技巧。一個(gè)script進(jìn)程只記錄一個(gè)窗格。如果直接在~/.bash_profile里啟動(dòng)script可能會(huì)遇到遞歸調(diào)用或記錄不完整的問(wèn)題比如“vi ~/.bash_profile 報(bào)錯(cuò)e325: attention”這種錯(cuò)誤可能就和環(huán)境變量或終端狀態(tài)被script改變有關(guān)。Tmux內(nèi)置pipe-pane方案原理在Tmux內(nèi)部使用pipe-pane命令將一個(gè)窗格的輸出實(shí)時(shí)管道傳輸pipe到一個(gè)外部命令如cat log.txt或文件中。優(yōu)點(diǎn)與Tmux原生集成配置靈活可以綁定到快捷鍵可以方便地為不同窗格指定不同日志文件。缺點(diǎn)默認(rèn)可能不記錄窗格中更早的歷史內(nèi)容需要結(jié)合capture-pane -S -來(lái)保存初始內(nèi)容。對(duì)于已經(jīng)存在的窗格需要手動(dòng)開啟。Tmux內(nèi)置capture-pane方案原理將窗格當(dāng)前可見(jiàn)或指定范圍的內(nèi)容一次性捕獲并保存到Tmux的緩沖區(qū)或文件中。通常用于快照而非持續(xù)流式記錄。優(yōu)點(diǎn)適合定時(shí)備份或手動(dòng)保存特定時(shí)刻的輸出。缺點(diǎn)不是自動(dòng)的持續(xù)記錄。我的選擇與理由對(duì)于“自動(dòng)保存”這個(gè)核心需求pipe-pane方案是更優(yōu)雅、更貼合Tmux哲學(xué)的選擇。它允許我們?cè)赥mux會(huì)話的生命周期內(nèi)動(dòng)態(tài)地控制日志記錄并且可以很容易地通過(guò)Tmux配置文件~/.tmux.conf實(shí)現(xiàn)自動(dòng)化。script命令更適合在非Tmux環(huán)境或者對(duì)記錄格式有非常嚴(yán)格要求的場(chǎng)景下使用。因此接下來(lái)的實(shí)戰(zhàn)將圍繞Tmux的pipe-pane命令展開。我們會(huì)設(shè)計(jì)一個(gè)機(jī)制每當(dāng)創(chuàng)建一個(gè)新的Tmux窗格時(shí)自動(dòng)為其啟動(dòng)日志記錄并將日志文件以“會(huì)話名-窗口索引-窗格索引-時(shí)間戳”的格式保存到指定目錄。這樣日志不僅自動(dòng)保存了還具備了良好的可追溯性。3. 實(shí)戰(zhàn)配置實(shí)現(xiàn)Tmux窗格日志自動(dòng)記錄理論清晰了現(xiàn)在我們來(lái)動(dòng)手實(shí)現(xiàn)。我們的目標(biāo)是修改Tmux的配置文件使得任何新創(chuàng)建的窗格都能自動(dòng)開始將輸出記錄到獨(dú)立的日志文件中。3.1 基礎(chǔ)環(huán)境與配置文件準(zhǔn)備首先確保你有一個(gè)可用的Tmux環(huán)境。大部分Linux發(fā)行版都可以通過(guò)包管理器安裝。例如在CentOS/Rocky Linux上sudo yum install tmux在Ubuntu/Debian上sudo apt install tmux。Tmux的核心配置文件是用戶家目錄下的~/.tmux.conf。如果不存在創(chuàng)建它touch ~/.tmux.conf所有后續(xù)的配置都將寫入這個(gè)文件。修改后需要重啟Tmux服務(wù)器tmux kill-server然后重新進(jìn)入或在現(xiàn)有會(huì)話中按前綴鍵默認(rèn)是Ctrlb后輸入:source-file ~/.tmux.conf來(lái)重新加載配置。3.2 核心配置腳本解析我們將把自動(dòng)日志記錄的邏輯寫成一個(gè)Tmux的“鉤子”hook綁定到“窗格創(chuàng)建完成”這個(gè)事件上。以下是完整的配置段落你可以直接添加到你的~/.tmux.conf文件末尾# ~/.tmux.conf - 自動(dòng)日志記錄配置 # 1. 定義日志存儲(chǔ)目錄 set -g log_dir “$HOME/.tmux/logs” # 使用$HOME變量兼容性更好 # 2. 創(chuàng)建日志目錄如果不存在 run-shell “mkdir -p #{log_dir} 2/dev/null || true” # 3. 定義自動(dòng)開啟日志記錄的函數(shù)/命令 set -g plugin ‘tmux-plugins/tmux-logging’ # 注意上面這行是如果你使用Tmux Plugin Manager (TPM)來(lái)安裝插件時(shí)的寫法。 # 但我們這里采用純配置實(shí)現(xiàn)不依賴外部插件所以可以注釋掉或刪除。 # 4. 核心為每個(gè)新窗格綁定自動(dòng)日志記錄 set-hook -g after-new-window ‘run-shell “tmux pipe-pane -t #{session_name}:#{window_index}.#{pane_index} ‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log”’ set-hook -g pane-focus-in ‘if-shell -F “#{:#{pane_start_command},}” “run-shell ‘tmux pipe-pane -t #{session_name}:#{window_index}.#{pane_index} ‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log’’”’配置逐行詳解第1行set -g log_dir “$HOME/.tmux/logs”-g表示全局設(shè)置。log_dir是我們自定義的一個(gè)Tmux用戶選項(xiàng)user option用來(lái)存儲(chǔ)日志目錄路徑。我選擇$HOME/.tmux/logs因?yàn)樗[藏在用戶目錄下且與Tmux相關(guān)。你可以根據(jù)習(xí)慣修改為/var/log/tmux需要sudo權(quán)限或$HOME/logs/tmux。使用$HOME而不是~因?yàn)樵赥mux配置中~可能不會(huì)被正確展開。第2行run-shell “mkdir -p #{log_dir} 2/dev/null || true”這是一個(gè)在加載配置時(shí)執(zhí)行的shell命令。mkdir -p確保日志目錄存在-p參數(shù)表示如果父目錄不存在則一并創(chuàng)建。2/dev/null將錯(cuò)誤輸出比如目錄已存在重定向到空設(shè)備避免干擾。|| true確保即使命令失敗極少數(shù)情況也不會(huì)導(dǎo)致整個(gè)配置加載失敗。第4-5行set-hook -g after-new-window …和set-hook -g pane-focus-in …這是實(shí)現(xiàn)自動(dòng)化的關(guān)鍵。set-hook用于綁定事件。after-new-window在新建窗口后觸發(fā)。注意在Tmux中新建窗口時(shí)會(huì)自動(dòng)創(chuàng)建一個(gè)窗格所以這個(gè)鉤子能捕獲到新窗格的創(chuàng)建。pane-focus-in當(dāng)焦點(diǎn)進(jìn)入一個(gè)窗格時(shí)觸發(fā)。我們配合條件判斷使用目的是為了處理那些在會(huì)話恢復(fù)tmux attach時(shí)已經(jīng)存在但尚未開始記錄的舊窗格。if-shell -F “#{:#{pane_start_command},}”這是一個(gè)條件判斷。#{pane_start_command}是窗格啟動(dòng)時(shí)運(yùn)行的初始命令。如果它為空通常意味著這個(gè)窗格啟動(dòng)的是一個(gè)默認(rèn)shell比如bash并且我們預(yù)設(shè)的日志記錄命令pipe-pane還沒(méi)有運(yùn)行。這個(gè)條件判斷可以防止對(duì)已經(jīng)開啟日志記錄的窗格重復(fù)執(zhí)行命令。run-shell ‘tmux pipe-pane …’這是實(shí)際執(zhí)行日志記錄的命令。我們通過(guò)run-shell在Tmux內(nèi)部調(diào)用tmux命令本身。pipe-pane命令詳解-t #{session_name}:#{window_index}.#{pane_index}-t指定目標(biāo)。#{session_name},#{window_index},#{pane_index}是Tmux提供的格式變量能唯一標(biāo)識(shí)當(dāng)前窗格。這確保了命令作用于正確的窗格。‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log’這是pipe-pane要執(zhí)行的命令。exec cat file這是一個(gè)經(jīng)典的技巧。exec會(huì)讓當(dāng)前shell進(jìn)程被cat命令替換cat從標(biāo)準(zhǔn)輸入讀取數(shù)據(jù)并追加到文件。這樣窗格的輸出流就通過(guò)管道源源不斷地寫入日志文件。使用是追加模式避免覆蓋。文件名模板#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log#{session_name}會(huì)話名如mysession。W#{window_index}窗口索引從0開始如W0。P#{pane_index}窗格索引從0開始如P0。$(date %Y%m%d_%H%M%S)執(zhí)行命令時(shí)的時(shí)間戳精確到秒。例如20231026_143022。這是關(guān)鍵它為每次日志記錄會(huì)話生成唯一文件名避免了多個(gè)窗格或多次記錄相互覆蓋。也方便你按時(shí)間查找日志。重要提示上面的配置使用了兩個(gè)鉤子并且pane-focus-in里的命令和after-new-window里的幾乎一樣。在實(shí)際測(cè)試中我發(fā)現(xiàn)有時(shí)僅靠after-new-window在復(fù)雜場(chǎng)景如從已有會(huì)話恢復(fù)下可能不夠可靠。pane-focus-in作為一個(gè)補(bǔ)充觸發(fā)器能確保當(dāng)你切換到某個(gè)未開始記錄的舊窗格時(shí)自動(dòng)為其開啟日志。這是一種防御性編程思維。3.3 配置驗(yàn)證與手動(dòng)控制添加配置并重載后新建一個(gè)Tmux窗口或窗格然后立刻檢查日志目錄ls -la ~/.tmux/logs/你應(yīng)該能看到類似mysession_W0_P0_20231026_143022.log的文件正在被創(chuàng)建并且文件大小會(huì)隨著你在該窗格中的操作而增長(zhǎng)。手動(dòng)控制命令 雖然配置是自動(dòng)的但了解手動(dòng)命令對(duì)調(diào)試和高級(jí)管理很有幫助。為指定窗格開啟日志記錄在Tmux會(huì)話內(nèi)按前綴鍵后輸入:pipe-pane -o ‘exec cat /tmp/tmux.log’-o參數(shù)表示僅輸出不記錄輸入。如果你需要記錄輸入即你敲的命令可以去掉-o但要注意這可能會(huì)記錄密碼等敏感信息停止當(dāng)前窗格的日志記錄:pipe-pane不帶任何參數(shù)的pipe-pane命令會(huì)關(guān)閉當(dāng)前窗格的管道。查看當(dāng)前窗格是否正在記錄:display-message “#{pane_in_mode}”如果返回1通常表示該窗格正處于某種特殊模式如復(fù)制模式或…正在管道傳輸。但這不是一個(gè)百分百準(zhǔn)確的指標(biāo)。更直接的方法是查看進(jìn)程樹pstree或檢查日志文件是否在增長(zhǎng)。4. 高級(jí)優(yōu)化與常見(jiàn)問(wèn)題排查基礎(chǔ)功能實(shí)現(xiàn)了但在生產(chǎn)環(huán)境長(zhǎng)期使用我們還需要考慮更多日志輪轉(zhuǎn)、性能影響、異常處理等。下面分享幾個(gè)我踩過(guò)坑后總結(jié)的優(yōu)化點(diǎn)。4.1 日志輪轉(zhuǎn)與清理策略日志文件不加以管理遲早會(huì)撐爆磁盤。我們不應(yīng)該在Tmux配置里做復(fù)雜的日志輪轉(zhuǎn)如logrotate那應(yīng)該是系統(tǒng)層面的任務(wù)。但我們可以通過(guò)優(yōu)化日志生成策略來(lái)配合。1. 按日或按會(huì)話分割日志上述配置使用了精確到秒的時(shí)間戳這會(huì)導(dǎo)致大量小文件。一個(gè)更好的策略是按天分割。修改pipe-pane命令中的文件名部分‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d).log’這樣同一天同一個(gè)窗格的所有輸出都會(huì)進(jìn)入同一個(gè)文件。文件大小可控也便于按天歸檔。2. 集成系統(tǒng)logrotate在/etc/logrotate.d/下創(chuàng)建一個(gè)配置文件例如tmux$HOME/.tmux/logs/*.log { daily missingok rotate 30 compress delaycompress notifempty create 0640 $USER $USER }這個(gè)配置會(huì)每天輪轉(zhuǎn)日志保留30天并壓縮舊日志。create指令確保新創(chuàng)建的日志文件權(quán)限正確。3. 在Tmux會(huì)話結(jié)束時(shí)清理有時(shí)一個(gè)臨時(shí)會(huì)話的日志無(wú)需保留??梢栽O(shè)置一個(gè)鉤子在會(huì)話銷毀時(shí)刪除其對(duì)應(yīng)的日志文件。但這需要更復(fù)雜的腳本因?yàn)橐粋€(gè)日志文件可能對(duì)應(yīng)多個(gè)窗格且會(huì)話名可能重復(fù)。一個(gè)更簡(jiǎn)單的做法是定期手動(dòng)清理或依賴上面的logrotate。4.2 性能影響與注意事項(xiàng)I/O負(fù)載pipe-pane會(huì)將所有輸出實(shí)時(shí)寫入磁盤。對(duì)于輸出極其頻繁的窗格例如tail -f一個(gè)巨大的日志文件這可能會(huì)增加I/O壓力。在機(jī)械硬盤上需要留意。對(duì)于絕大多數(shù)開發(fā)、運(yùn)維操作影響微乎其微。網(wǎng)絡(luò)延遲感知寫入本地磁盤通常很快但如果日志目錄位于網(wǎng)絡(luò)存儲(chǔ)NFS上可能會(huì)引入延遲極端情況下可能讓終端感覺(jué)“卡頓”。磁盤空間監(jiān)控務(wù)必監(jiān)控日志目錄所在磁盤的空間使用情況??梢詫懸粋€(gè)簡(jiǎn)單的cron任務(wù)或systemd timer來(lái)檢查并報(bào)警。敏感信息泄露切記這會(huì)記錄終端上顯示的所有明文信息包括你輸入的密碼、密鑰、API Token等。因此避免在開啟自動(dòng)日志的Tmux窗格中輸入密碼。使用ssh-agent,gpg-agent或交互式密碼輸入工具。考慮使用pipe-pane -o只記錄輸出不記錄輸入。但輸入的命令行本身也常是調(diào)試的關(guān)鍵信息這需要權(quán)衡。確保日志目錄的權(quán)限設(shè)置正確如700僅允許所有者讀寫。對(duì)于包含敏感信息的臨時(shí)會(huì)話可以在創(chuàng)建會(huì)話時(shí)臨時(shí)禁用自動(dòng)日志或者事后安全地刪除日志文件。4.3 常見(jiàn)問(wèn)題與排查指南即使配置正確也可能遇到問(wèn)題。下面是一些典型場(chǎng)景和排查思路。問(wèn)題1日志文件沒(méi)有創(chuàng)建或沒(méi)有內(nèi)容。檢查配置是否加載在Tmux中按Ctrlb然后輸入:show-options -g log_dir查看log_dir變量是否設(shè)置正確。檢查目錄權(quán)限運(yùn)行l(wèi)s -ld ~/.tmux/logs/確保目錄存在且當(dāng)前用戶有寫權(quán)限。檢查鉤子是否觸發(fā)可以暫時(shí)在鉤子命令中加入調(diào)試信息。例如將run-shell部分改為run-shell “echo ‘Hook triggered for #{session_name}:#{window_index}.#{pane_index} at $(date)’ /tmp/tmux-hooks.log”然后新建窗格查看/tmp/tmux-hooks.log文件是否有輸出。這能幫你確認(rèn)是配置沒(méi)生效還是pipe-pane命令本身有問(wèn)題。檢查pipe-pane命令語(yǔ)法Tmux命令對(duì)引號(hào)嵌套非常敏感。確保你的配置文件中引號(hào)是匹配的。建議使用單引號(hào)包裹整個(gè)exec cat …命令就像示例中那樣。查看Tmux服務(wù)器日志啟動(dòng)Tmux時(shí)加上-vv參數(shù)tmux -vv new-session可以輸出詳細(xì)日志到標(biāo)準(zhǔn)錯(cuò)誤或文件有助于診斷。問(wèn)題2日志記錄意外停止。窗格中的進(jìn)程崩潰或結(jié)束如果窗格中的主進(jìn)程如bash退出pipe-pane的管道也會(huì)終止。這是預(yù)期行為。手動(dòng)誤關(guān)閉不小心在窗格中執(zhí)行了不帶參數(shù)的:pipe-pane命令。Tmux服務(wù)器重啟如果Tmux服務(wù)器重啟所有窗格的管道狀態(tài)會(huì)丟失。我們的pane-focus-in鉤子會(huì)在你重新聚焦時(shí)嘗試恢復(fù)但前提是窗格還在。問(wèn)題3如何為已經(jīng)存在的舊會(huì)話/窗格開啟自動(dòng)日志我們的pane-focus-in鉤子就是為了解決這個(gè)問(wèn)題。你只需要切換到那個(gè)舊的窗格鉤子就會(huì)觸發(fā)如果條件滿足。如果沒(méi)觸發(fā)可以手動(dòng)執(zhí)行一次:pipe-pane -o ‘exec cat …’命令。問(wèn)題4我想記錄更早的、創(chuàng)建日志之前的內(nèi)容。pipe-pane只記錄從命令執(zhí)行后開始的內(nèi)容。如果你想保存窗格中當(dāng)前已有的回滾歷史scrollback可以在開啟持續(xù)記錄前先手動(dòng)保存一次快照# 在目標(biāo)窗格中先按前綴鍵(Ctrlb)然后輸入 :capture-pane -S -300 # 捕獲從300行之前到現(xiàn)在的所有內(nèi)容 :save-buffer ~/.tmux/logs/history_snapshot.log # 保存到文件 # 然后再開啟pipe-pane進(jìn)行持續(xù)記錄5. 延伸應(yīng)用打造終端工作流與日志分析自動(dòng)日志記錄不僅僅是一個(gè)“備份”功能。當(dāng)它成為你工作流的一部分時(shí)可以解鎖更多高效用法。5.1 與監(jiān)控和告警集成想象一下你有一個(gè)在Tmux窗格中長(zhǎng)時(shí)間運(yùn)行的后臺(tái)任務(wù)比如一個(gè)數(shù)據(jù)處理的Python腳本。你可以結(jié)合簡(jiǎn)單的shell腳本來(lái)監(jiān)控日志#!/bin/bash # monitor_tmux_log.sh LOG_DIR“$HOME/.tmux/logs” SESSION“data_processing” WINDOW0 PANE0 LOG_FILE$(ls -t “$LOG_DIR”/${SESSION}_W${WINDOW}_P${PANE}_*.log 2/dev/null | head -1) if [ -z “$LOG_FILE” ]; then echo “No log file found for ${SESSION}:${WINDOW}.${PANE}” exit 1 fi # 持續(xù)監(jiān)控日志文件查找錯(cuò)誤關(guān)鍵詞 tail -F “$LOG_FILE” | while read line; do if echo “$line” | grep -q “ERROR\|CRITICAL\|FAILED”; then # 發(fā)送告警例如通過(guò)郵件、Slack webhook等 echo “ALERT found in $LOG_FILE: $line” | mail -s “Tmux Task Alert” your-emailexample.com # 或者播放一個(gè)聲音 paplay /usr/share/sounds/freedesktop/stereo/alarm-clock-elapsed.oga 2/dev/null fi done這個(gè)腳本會(huì)找到指定窗格最新的日志文件然后tail -F持續(xù)跟蹤一旦發(fā)現(xiàn)包含“ERROR”等關(guān)鍵詞的行就觸發(fā)告警。你可以用cron或systemd服務(wù)來(lái)啟動(dòng)這個(gè)監(jiān)控腳本。5.2 基于日志的復(fù)盤與知識(shí)管理每天下班前花5分鐘瀏覽一下~/.tmux/logs/目錄下的日志。你可能會(huì)發(fā)現(xiàn)某個(gè)復(fù)雜命令的成功參數(shù)組合。一個(gè)之前花了半小時(shí)解決的錯(cuò)誤其解決方案被完整記錄了下來(lái)。一段有用的代碼片段或配置輸出。你可以建立一個(gè)簡(jiǎn)單的知識(shí)庫(kù)將有價(jià)值的日志片段整理歸檔。例如用一個(gè)筆記軟件如Obsidian, Logseq或一個(gè)簡(jiǎn)單的Git倉(cāng)庫(kù)來(lái)管理。給日志文件配上好的命名規(guī)范我們之前的配置已經(jīng)做到了搜索起來(lái)會(huì)非常方便。5.3 替代方案淺析何時(shí)不用Tmux內(nèi)置方案雖然pipe-pane方案很優(yōu)雅但有些場(chǎng)景下你可能需要考慮其他工具需要記錄精確時(shí)序和終端控制序列如果你在做終端應(yīng)用的性能分析或錄制終端操作視頻script命令的-t參數(shù)可以輸出帶時(shí)間戳的數(shù)據(jù)流配合scriptreplay可以完美回放。這是pipe-pane難以替代的。環(huán)境限制無(wú)法修改Tmux配置比如在臨時(shí)租賃的服務(wù)器或嚴(yán)格管控的環(huán)境。這時(shí)你可以在啟動(dòng)Tmux之前先用script命令包裝script -f my_session.log tmux new-session -s mysession這樣整個(gè)Tmux會(huì)話包括所有子窗口的輸出都會(huì)被記錄到一個(gè)文件。缺點(diǎn)是所有窗格混在一起且文件會(huì)非常大。使用第三方終端復(fù)用器比如screen命令。screen也有類似的日志功能Ctrla, H開始/停止記錄但功能和集成度不如Tmux的pipe-pane靈活。最后再分享一個(gè)我個(gè)人的小技巧我會(huì)在~/.bash_profile或~/.zshrc里設(shè)置一個(gè)別名快速搜索今天的Tmux日志alias tlog“grep -r ‘\$1’ ~/.tmux/logs/*$(date %Y%m%d)*.log 2/dev/null | head -20”這樣在終端里輸入tlog “Connection refused”就能快速搜索今天所有Tmux日志里出現(xiàn)的連接錯(cuò)誤對(duì)于問(wèn)題排查來(lái)說(shuō)效率極高。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
情涩婷婷五月天| 日韩成人无码| 五月激情五月婷婷五月天在线| 狠狠爱五月婷婷| 国产精品18久久久| 99热都是精品| 91欧美| 久热精品视频| 婷婷六月激情丁香| 丁香婷婷人妻综合网| 中文字幕97超级碰| 婷丁香五月天| 亚洲激情免费视频| 东北婷婷五月天| 色域五月婷婷丁香| www、丁香五月天| 国产操B| 久久HD| 丰满人妻一区二区三区| 99热这里只有精品在线观看| 亚洲激情婷婷| 五月婷婷视频在线观看| 天天做天天爱天天玩| renre人人操国产超碰在线| 成人视频一区| eeuss人妻| 无码橾| 伊人久久丁香狠狠婷婷综合香蕉| 国产在线网| 99色色网| 午夜天堂一区人妻| 九九日伊人| 中文字幕在线观看视频www| 九九热av| 91蜜桃婷婷狠狠久久综合9色| 99在线精品视频| 97色色色色色| www.99热在线| 色色五月天婷婷| 狠狠干在线| 激情五月天无人视频在线| 99re思思热这里| 狠狠精品干练久久久无码中文字幕| 99超级碰碰| 26uuu欧美日本| 五月丁香六月综合激情网| 天干干夜夜操| 五月丁香在线婷婷美女| 五月天婷婷色综合| 欧美 日韩 成人 在线| 丁五月激情视频免费| 亚洲视频99| 色在线视频网2025| 五月婷婷之综合激情| 日本三级黄色大片| 成人无码髙潮喷水A片| 伊人久久婷婷| 久久日婷婷| 久久精品日| 色婷婷五月综合色婷婷| 色婷婷19| 丁香花五月天| 丁香五月天激情综合| 五月丁香婷婷网在线在线| 高清无码入口| 色综合色综合网| 婷婷色播婷婷| 亚洲成Av人片乱码色第1集| 婷婷五月天Av| 九九热在线观看视频网站| 六月婷婷视频| 婷婷五月天基地| 亚洲精品国产setv| 人妻无码视频网| 五月花综合视频| 婷婷精品性性性性性性性| 99亚洲色色| 欧美五月婷婷| 六月丁丁香| 九八Av| 六月丁香啪| 黄色激情久久| 久久久久久丁香五月| 日本人人xxx| 性生活视频98791| 99色亚洲| www综合久久| 五月婷婷色| 五月天中文字幕在线婷婷| 99热这里只有精品国产首页| 久久婷婷亚洲| 91人人超碰在线| 玖玖国产视频一区| 色五月婷婷丁香五月| 九九九九国产| 999九九九久久久99HD| 天天色播| 99热在线观看免费精品| 性按摩玩人妻HD中文字幕| www.爱婷婷.com| 香蕉婷婷| 五月天婷婷AV| 91碰碰视频在线观看| 色综合久久88色综合天天看| 五月婷婷激情综合网| 中出内射的人妻视频| 亚洲综合在线丁香五月| 九九热精品| 五月天丁香婷婷视频网址 | 日本高清久久| 日本久久人| 在线观看熟女少妇| 激情久久五月天| 亚洲综合五月天婷婷| 色九月婷婷综合| 五月丁香婷中文| 天天在线XXX| 五月丁香综合激情| 欧美色图天堂网| 啪啪小说五月天| 久热9| 永久免费一区二区三区| 婷婷六月激情综合| 大香蕉色婷婷伊人在线| 丁香五月婷婷亚洲色图| 色五月综合| 婷婷综合在线网| 色五月婷色彩免播放器| 日本久久婷| 欧美超碰亚洲| 狠狠狠夜夜夜| 日本网站久久| 婷婷激情五月天视频在线| www夜夜| 香蕉乱插| 九九热视频在线观看| 美国少妇性做爰| 亚洲欧美成人在线| 色五月综合激情| 久久婷婷五月综合网| 久久色在线视频| 成人网在线视频| 丁香花综合永久入口| 五月天丁香六月综合| 色婷婷婷婷五月天| 人人97操| 五月婷婷视频在线观看| 成人五月天视频| 丰满少妇乱A片无码| 97综合在线| 五月天综合色| 色色色在线| 天天透天天爱| 丁香五月停停基地| 五月婷婷啪啪网| 蜜桃婷婷狠狠久久综合| 日韩aaaaa| 九九九九九九毛片| 色婷婷中文在线| 99碰碰中文| 天堂草在线观| 色婷婷香蕉丁丁网| 91丨九色丨白浆秘| 91人妻PORNY九色大屁股| 噜噜在线| 99热伊人| 色婷婷成人做爰A片免费看网站| 婷婷开心深爱五月天| 草一草avb| 超碰在线超碰| 99无码| 蜜臀av无码久久久久久久久| 夜夜操加勒比| 五月天婷婷激情综合| 婷婷日韩| 亚洲婷婷91丁香| 97视频.干com| 99激情视频| 激情网五夜婷婷| www.婷婷| 91精品综合久久久久久五月丁香| 亚洲永久免费| 激情涩涩网| 亚洲天堂热| 精品国产va久| 在线免费观看激情视频| 色色色色色色色色五月先| 色婷婷综合久久久久| 日本综合色色| 99热这里有精品24| 亚洲色综久久五月| 五月天偷拍| 五月天成人网婷婷| 色色色五月婷| 最近中文字幕在线中文视频| 桃色激情网| 欧美日韩成人一区二区| 狠狠精品干练久久久无码中文字幕| 激情综合婷婷| 91色噜噜狠狠狠狠色综合| 99在线小视频| 99色免费视频| 国产一级片| 亚洲日本韩国| 玖玖爱综合网| 开心五月色婷婷综合开心网| 99re热在线视频| 成功精品影院| 在线观看免费狠狠色丁香香综合| 成人婷婷五月天| 婷婷热色| 五月丁香综合网| 五月情涩综合婷婷| 91人妻色色网| 综合色色综合| 丰满少妇乱A片无码| 日本社区五月天激情| 色综合色五月| CAoub青青超碰| 婷婷另类小说| 中文资源在线a| 色丁香五月婷婷| 人人人人人人人草| 天天摸.天天mo| www.婷婷com| 99热天堂| 久热精品视频| 色天天久婷婷| aⅤ79成人片| 狠狠色噜噜狠狠狠狠狠色综合久久| 久久婷婷五月天激情四射| ...婷婷国产成人亚洲日韩| 九九色天堂| 激情丁香五月婷婷| 一区二区三区视频| 久色五月丁香视频| 五月天激情视频网站| 91九色视频| 婷婷五月丁香基| 欧美在线视频99| 丁香五月亚综合图片| 综合五月草 | www.色九月| 91.www综合| 成人视频一区| 久久综合影院 | 天堂在线观看视频| 亚洲妇女熟BBW| 婷婷综合色色| 五月丁香啪啪婷婷| 色五月五月天色婷婷色五月| 天天撸天天干天天插| 久99久在线| 亚洲99一级无嗎特制在线| 色色五月婷婷| 99精品在线播放| 91ncm视频| 久久这里只有国产视频| 婷婷在线午夜| 亚洲婷婷丁香五月视频| 97涩涩丁香五月天| 五月天播播综合| 综合网色| 五月天激情四射| 色色亚洲视频| 人人摸人人| 日撸夜撸日操| wwwwww.色| 99热这里只有精品98| 另类视频综合| 日韩无码专区| 日本女va| 日 日干 日日做| 久久综合这里只有精品1| 五月天婷婷操逼视频| 在线超碰精品| 伊人玖玖网| 国产三级在线播放| 激情五月丁香六月综合AVXXXX| 色天使久久综合| 色色五月婷婷网| 免费看欧美成人A片无码 | 亚洲狠狠狠| 五月天四色房丁香| 婷婷五月天天aV| 米奇影视资源777狠狠色婷婷五月天激情网| 色婷婷基地在线| 99九九精品| 爆乳熟妇一区二区三区爆乳| 欧美天天草人人草| 激情婷婷综合| 丁香六月亚洲综合| 天天精品视频免费观看| 五月丁香色综合| 5五月综合网亚洲| 深爱激情五月网| 日本人人xxx| 激情五月色播五月| 久久久久亚洲AV成人无码电影| 操操自拍| 99热精品在线| 久久婷婷五月综合色区| 另类图片五月激情| 插逼综合网| 秋霞A V毛片| 狠狠爱综合网| 欧美婷| 久狠日av| 97在线精品视频| 丁香五月天啪啪| 久久亚洲婷婷| 白度黄视频| 亚洲色图在线视频| 97色色色| 99热只有精品在线观看| 婷婷五月天社区| 六月丁香久久| 日韩在线观看网址| 开心五月婷婷婷美女| 91丨九色丨国产打屁股| 激情五月com| 五月激情久久| 天天做天天爽| 九月大香蕉| 五月天色综合| 久久婷婷五月激情网站| 久久99激情| www色色com| 婷婷五月丁香综合亚洲| 五月丁香婷婷色色色| 五月天激情综合首页| 99黄色| 色五月中文网| 另类少妇人与禽zOZZ0性伦| 91狼友视频在线观看| www.婷婷,com| 婷婷天天综合| 婷婷五月天影院| www.色婷婷.com| 五月丁香亭亭A片| www.97碰碰com| 狠狠婷婷爱| 色偷偷五月天| 99丁香婷婷综合网| 精热在线综合网| 国产VA亚洲VA96| 91人妻PORNY九色大屁股| 久久精品99国产精品日本| 操操日韩| 91大屁股| 丁香五月性| av在线不卡播放| 亚洲精品网站色视频| 亚洲亚洲永久无码777777| 五月丁香婷中文| 久热伊人91| 中文无码婷婷| 99久视频| 五月天激情亚洲| 99色在线观看免费| 六月丁香色色| 欧美色色色色色色色色| 婷婷综合成人五月天| 激情床戏| 97爱综合| 亚洲天堂aaa| 色婷婷香蕉| 丁香五月婷婷偷拍| 人妻久久久久久久| 激情婷婷五月社区| 思思re视频在线| 永久精品| 91viP在线看| 可以免费看的AV网站| 91狠狠综合久久久久久| 色噜噜狠狠色综| 日日操夜夜爽| 奇米影视777在线_在线观看午夜_h小视频在线观看_岛国大片 | 激情98色婷婷五| 婷婷中文字幕| 99操| 丁香六月激情| 色吧婷婷| 久久免费操| 亚洲免费婷婷| 97人妻碰碰碰碰碰久久久久久| 五月天三级| 激情五月天丁香| 99ri精品在线| 99狠狠| 婷婷影院欧美| 成人va视频| 五月婷九月| α久久| 97精品综合| 99黄色性生活| 99re热视频这里只精品| 激情五月丁香五月| 99色在线| 狠狠色婷婷7| 日日操日日撸| 色五月婷婷天天干| 少妇人妻人伦A片| 五月丁香综合激情在线观看| 狠狠操天天干| 思思热性操| 国产亚洲成AV人片在线观黄桃| 日本女va| 无码激情AAAAA片-区区| 免费观看的AV| 玖玖婷婷五月天毛片| 五月婷婷免费| 亚洲成人精品三区| 五月婷视频| 五月天婷婷情色| 丁香婷婷性久久| 久久久久久久久久久97| AV在线资源| 人妻人人操| AV九九| 丁香婷婷大香蕉| 久久五月天综合| 狠狠色狠狠干| 美女被操一区二区| 五月天偷拍| 婷婷激情视频| 九九在线视频| 淫水导航| 91成人电影| 亚洲免费看片| 亚洲丁香五月美女| 开心久久网婷婷| 99九九玖玖| 97色婷| 福利视频在线播放| 婷婷成人五月天成人文学小说| 亚洲成人av在线观看| 色色色色热| 丁香五月网址| caop视频| 久久久婷婷五月亚洲97号色| 婷婷第六色| 少妇大叫太大太粗太爽了A片| 综合激情综合啪啪| 99re久久| 婷婷在线操| 美女视频图片久久91| 蜜臀99精品| 久久欧洲久久| 热久久婷婷| 玖玖在线视| 97五月天婷婷午夜| 91九色无码内射| 热久久91| 五月婷婷久草在线视频综合| 国产免费AV网站| 北京熟妇搡BBBB搡BBBB | 日日操天天操| 91精品综合久久久久久五月丁香| 亚洲成人网站在线观看| 日韩五月婷婷久久| 深爱激情六月天| 国际国外精品欧洲南美洲专区无码不卡| 91伦| 五月婷婷五月天| 美女丁香五婷婷| 色五月婷色彩免播放器| 激情五月婷婷色色| 噼里啪啦在线观看免费完整版视频| 久久这里只| 91操人| 国产高清视频91九九九久久久| 97在线碰| 人。妻久久| 色久播播| 91狠狠色色丁香婷婷综合久久| 99在线精品免费视频| 五月天播播| 欧美99热| 丁香五月影院| 久久图色4| 午夜少妇在线观看视频| 日本一级特黄大片AAAAA级| 99热这里精| 婷婷五月情| 五月丁香综合久久夜夜| 五月激情综合网| 精品99在线观看| 亭亭五月天黑人2014| 97自拍视频在线| 日韩AV中文字幕在线| 成人做爰A片免费看网站找不到了| 六月丁香激情| 色99视| 久久色情| 91seav| 深爱激情五月婷婷| 久久久久99精品成人片| 成人婷婷桔色| 人妻性爱av网站| 欧美乱码国产一级A片| 9久久狠狠的| 天天综合网在线| 五月婷在线| 婷婷五月天激情综合深爱激情 | 国际国外精品欧洲南美洲专区无码不卡| 一区二区成人电影| 99九九在线精品热动漫| 丁香六月婷婷色播| 色五月自偷自拍婷婷婷婷| 亚洲视频在线网站| 五月丁小婷婷激情四射| 无码人妻丰满熟妇奶水区码| 色综合久久久久| 天天肏夜夜肏| 人妻熟妇国产精品| 五月丁香婷婷在线| 色婷婷导航| www99在线观看视频| 亚洲六月色| 五月婷婷亞洲中文| 久久视频在线| 天天摸天天做天天爱天天爽| 天天激情站| 九九免费精品| 99爱视频免费| 噜噜噜久久| 天天插综合网| 狠狠色五月| 人人爱人人草| 综合久久久| 超碰人人91| 99精品视频在线观看| 日日杆天天| 婷婷五月情天| 日本成人噜噜噜| 欧美婷婷五月天| 亚洲va欧美va天堂v国产综合| 九九机热| 99色色网| 色色婷| 热久精品| 99ER热精品视频| 色婷婷性爱网| 色射7856五月天激情四射| 综合玖玖偷拍| 色综合综合色| 性爱在线播放av| 夜夜天天久久婷婷| 综合五月激情| 狠狠综合网| PORNY九色9l自拍视频成人| 久久xxxx| 中字幕视频在线永久在线观看免费| 少妇AB又爽又紧无码网站| 久久久天堂国产精品女人| 性天天中文网| 天天爽天天爽| 老司机伊人| 超碰免费在线| 丁香五夜激情四射夜夜夜| 综合玖玖偷拍| 六月婷婷天天操夜夜爽视频| 婷婷五月天日日日干干干| AA片在线观看视频在线播放| 五月婷婷激清网| 婷婷 月 丁香| 婷婷99视频精品| 中文av网| 99精品综合在线| 思思99久久| 熟女激情网| 五月天精品综合| 色综合网页| 91人人澡人人爽人人看| 思思热思在线精品视频| 久久免费精品小视频| 五月天网站免费欧美| 久久日韩婷婷五月| 亚洲AV人人操| 最新午夜理论片| 被强行糟蹋的女人A片| wwwxxx五月婷婷小说| 亚洲成人五月天| 国产激情综合五月久久| 亚洲成人中文字幕| 色色影院aaaav| 久机视频这只有精品| 超碰成人免费| 婷婷伊人綜合中文| 国产精品久久在线观看技巧| 九九热在线精品| 婷婷大香蕉| 九九激情视频| 无码激情精品色婷婷久久久久| 久久激情网| 亚洲亚洲人成综合网络| 五月久久网| 开心五月婷婷激情网| 久9久成人精品视频| 麻豆AV一区二区三区| 丁香五月网| 热99re| 玖玖资源在线视频| 99碰视频| 五月天俺去也| 欧美性做爰大片免费看办公室| 97碰人人操| WWW.开心五月天.COM| 五月丁香六月婷| 99在线小视频| 日本九九热| 26UUU精品一区二区| 九九人人看| 欧美熟女乱又伦| 婷婷和五月天| 五月婷婷综合丁香视频| 99久久97| 丁香五月人妻熟女| 人人操AV| 激情婷婷丁香五月天小说| 可以看的av| 婷婷天堂伊人| 婷婷丁香五月激情图片| 偷拍五月丁香| 婷婷五月丁香六月| 综合网啪| 2022人人操人人看| 99精在线| 另类国产欧美视频| 99热99干| a性生活久久无| 第四色婷婷最爱| 夜夜躁爽日日| 婷婷五月天av| 天天综合色| 九九99九九精品视频| 婷婷综合成人五月天| 婷婷久久大香蕉| 色婷婷99| jiZZdr| 九色婷婷| 天天看A片| 曰曰久久| 日本色天堂| 婷婷娌伦网| 色婷婷五月天在线观看| 久久婷婷丁香五月宗合| 精品色色| 婷婷五月综激情| 在线观看欧美| 久久婷婷网| 婷婷色啪| 99熟女| 婷婷五月天伊人网| 伊人春天av| 综合色图区| 思思热99er在线视频| 成人看片网站| 思思久久96热在精品国产,| 人妻熟人中文字幕一区二区| 久久久精久人妻| 香蕉久操| 久久丁香五月婷| 任你搞在线观看视频| 天天狠狠六月婷丁香影院| 四射综合网| 亚洲 视频 导航 一区| 欧洲一区二区| www.minyis.com【JT】实力收量可预付QQ2101460746| 最新久久网址| 天天天天干| 婷婷五月激情基地| 26uuu成人网| 99无码黄色视频| 大香蕉Av在线| 亚洲综合五月天婷婷| 欧美日韓成人亚洲精品另类| 精品一区久热| 激情五月天视频| 99ri在线| 亚洲亚洲人成综合网络| 婷婷五月天亚洲综合| 99久久高清视频| 亚洲熟女色| 超碰三级秋霞| 欧美熟女视频 色婷婷| 99精品视频网站| 色婷婷综合久久久久| 婷婷五月天小说| 五月花婷婷丁香| www.99精品视频| 亚洲天堂色色| 亚州精品久久久久AV无码| 婷婷久久18| www.狠狠| 天天舔日日肏夜夜爽| 99ri视频在线播放| 色综合色| 99免费| 久久天天天| 久99久视频精品| 人妻九九九九| 能看的av片| 九月激情综合婷婷| 成人片黄网站色大片免费毛片| 蜜桃五月天| 超碰在线人妻| 五月天大香焦| 日日撸夜夜操| 天天干狠狠| 婷婷她六月天| 亚洲无码九九九| 亭亭玉月丁香| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 激情99| 99热精这里只有精品| 久9免费视频| 色五月激情五月| 色五月天丁香婷婷| 五月天夜夜爱夜夜操| 婷婷五月综合网| 丁香五月婷婷色综合| 9久精品视频| 狠狠搞亚洲| 亚洲人成网亚洲欧洲无码久久| 韩国不卡AC视频| 亚洲情欲| 五月天开心婷婷激情网站 | 人妻激情视频| 色婷婷8| 五月花免费视频| 人妻久久久久久久| 日韩无码人妻一区二区三区综合| 五月丁香激情四射综合| 九九色婷婷Av| 亚洲人妻av伦理| 999婷婷综合| 激情五月四色| 五月丁香六月婷婷亚洲激情综合| 中文字幕在线免费| 欧美婷婷丁香五月| 狠狠久久婷五月综合色| 欧美日韩91| 日本欧美在线| 五月天婷婷AV| 五月婷婷天| 丁香五月激情六月综合| 激情五月深爱五月观看| 91操片| 狠狠色大香蕉| 一区二区aV电影免费看| 亚洲无码影音| 少妇高潮呻吟A片免费看软件| 五月婷婷香| 亚洲成人无码网站| 久久久久这里只有精品| WWW,婷婷,COM| 国产精品蜜臀99| 五月丁香六月婷婷色| 性爱动图国产麻豆一区二区三区 | 天天舔天天插天天爱| 97久久草草超级碰碰碰| 日韩精品一品二区三区的使用体验| 婷婷福利影院| 天堂美国久久| 7777国产盗摄农村女人| 91av传媒高清在线视频网| 丁香六月啪| 五月天婷婷无码| 婷婷大香蕉| 狠狠综合久久| 色婷婷视频| 开心五月激情网| 91精品无码| 夜夜 操无码| 91大神操美女| 色色色欧美| 五月婷色| 亚洲黄色影视| 婷婷五月天综合网| 情欲禁地| 91人妻九色大屁股| 9久热在线视频| 综合九色| 色色婷婷丁香五月天| 九色无码| 欧美 日韩 成人 在线| 大香蕉天堂| 久久婷婷视频| 噜综合| 五月综合婷婷网| 噜噜噜噜在线| 99热这里只有精品86| 俺去也五月天| 91九色|疯狂|高潮|对白|| 久99热| 色五月激情综合网| 99热网精品| 91美女啪啪| 99久久精品国产色欲| 九色91美女| 久久99热这里只有| 视频这里只有精品16| 国产日日操夜夜操的肉棒视频| 五月婷婷综合久久| 亚洲天堂啪啪| 激情综合一| 欧美大片免费观看| 五月情涩综合婷婷| 亚洲欧洲国产精品| 精品色情一区二区三区四区| 米奇影视资源777狠狠色婷婷五月天激情网| 日日肏夜夜干| 五月丁香六月婷| 五月天色不卡| 日碰日| 大天天伊人| 五月色视频| 婷婷网五月| 丁香五月手机在线| 精品色色| 九热av| 乱码操操| 五月四色色| 五月丁香婷婷视频| 99热精品在线| 久热久re| 人人爽人人射-美女久久久久久久久久-成人AV| 青青草护士中出内射-欧美电影在线天堂新版| wwwwww.色| 五月丁香操婷逼| 白人荫道BBWBBB大荫道| 99ri视频在线观看| 五月亭亭六月色| 婷婷丁香人妻天天| 丁香五月天社区| 天天操天天国产三级片处女学生妹| 91操片| 思思re视频在线| 久久92| 97色 五月天丁香| 国产精品人妻欲求不满| 可以免费看的av网站| 91丨九色丨熟女|新版| 99婷婷狠狠成为人免费视频| 丁香色成人| 婷婷五月天激情综合深爱| 午夜九九九九九九九九九九九九九| 久热这里| 五月天天堂久久| 精品少妇蜜臀91| 五月天综合网| 丁香婷婷五月人体| 狠狠色丁香婷婷基地| 五月婷婷导航| 99超碰欧美| 第四色婷婷日本| 激情五月天小说|五月天开心激情网|亚洲精品国产自在现线|黄色五月天 | 婷婷五月天在线观看免费| 天天插综合| 大香蕉人人人| 区区欧美你爱| 色色婷| 伊人婷婷大香蕉| 亚洲夜夜操| 色狠狠色噜噜AV天堂五区| 9月色婷婷| 天天综合亚洲| 99色爱| 99re思思热在线视频| 五月天激情网站| 九一娱乐在线观看视频| 丁香五月另类小说在线阅读| 亚洲精品无码久久| 婷婷六月综合基地| 人人噜天天上| 一区二区三区四日本| 99激情网| 婷婷丁香五另类网站| 婷婷影院欧美| 这里只有精品2| 亚洲网站观看视频| 无码G高清天| 99热66| 久操人妻| 欧美日本国产欧美日本韩国99 | 亚洲亚洲亚洲AAAAAA| 日本不卡高字幕在线2019| 激情久久久| 久久停停超碰| 色婷婷五月天成人网| 综合色播| 任你搞在线观看视频| 色久激情在线| seav天堂| 99精品7| 大伊香蕉精品视频在线| 久久杏爱视频| 五月天婷婷色| 色婷婷五月天激情在线播放| 五月婷久久| 五月天日日操夜夜操 | 婷婷伊人綜合中文字幕小说| 欧美日本黄色| 99热综合在线| 丁香五月欧美激情| AV在线观看网站| AA久久| 色色丁香婷婷综合| 五月丁香婷婷基地| 97干在线| 丁香五月婷婷深五月| 无码操B| 五月丁香六月婷婷,婷| 99热8| 激情综合五月激情XXXX| 欧美激情五月天| 九九热这里都是精品6| 亚洲精品99| 九色视频这里只有精品| 丁香花社区av| 丁香五月婷久久| 欧美日韩日韩成人| 色婷婷偷拍| 婷香五月| www色色色com| 99久久综合网| 91人人人人人人人| 看片视频在线免费日产在线看| 99爱爱网| 欧美操人| 天天婷婷天天| 影音先锋一区二区资源站| 五月丁香六月激情欧美综合| 婷婷玖玖五月天| 91精品久久久久久综合五月天| 丁香五月婷婷久久综合激情网| 久久xx| 丁香五月综合在线播放 | 五月丁香久久综合| 开心五月天激情网| 99综合激情久久精品久久| 99国产欧美视频| 色99在线视频| 日韩成人五月天| 成人在线二区| 99视频精品全部观看10| 玖玖综合色| 中字幕视频在线永久在线观看免费| 婷婷六月天激情影院| 婷婷五月色花丁香社区| 九九精品综合| 日本特黄aaaaa| 玖玖综合玖玖| 26uuu成人网| 99热在线观看亚洲区| 五月天综合久久丁香91| 久操婷婷| 色婷婷五月视频| 97操在线视频| 久久五月婷天天干| 91九色中文字幕女在线观看| 五月天五月色婷婷综合| 五月天操逼激情| 超碰com| 色综合色欲综合天天免费 | 婷婷色色婷婷| 秋霞黄色一级久久| 99热色综合| 99久久6| 99免费视频在线观看爱| www.99久久久| 丁香五月狠狠在线观看| 99自拍视频网站| 夜夜骑日日夜夜| 国产精品视频| 97色五月婷婷在线| 日韩欧美颜射| 精品无码99| 天天插天天插天天操| 超碰免费人人肏| 九九九九这里只有精品| 丁香婷婷激情网站| 狠狠艹狠狠艹| 欧美超碰人人| 国产99久久久国产精品免费看| 亚洲乱码w在线观看| 五月婷婷,六月激情| 超碰97干| 色亭亭九月| 九九99久久| 碰97久久| www.成人婷婷综合| 深爱五月婷婷开心中文字幕| 大香蕉Av在线| 五月丁香亭亭电影久久| 婷婷深爱五月天| 六月丁香网| 婷婷综合五月色播| 天天做天天爱高潮片| www.com色播五月天| 艳妇野外情欲放荡HD| 91精品无码| 五月婷婷中文字幕| 中文字幕日韩无码制服诱或| 婷婷五月天综合网| 亚洲成Av人片乱码色第1集| 黄桃AV无码免费一区二区三区 | 超碰成人免费| 久久人五月| 激情涩播| 国精产品一区一区三区免费视频| 9久久久久久久久久久| 亚州色色色| 婷婷五月丁香色情| 天天插天天狠| 爱久综合| 丁香花成人区| 99久久天堂婷婷| 国产精品18久久久| 香蕉综合网| 色色色综合网| 丁香综合网| 91九色国产熟女| 婷婷五月天激情诱惑| 激情五月色综合国产精品| 日日操夜夜爽白洁| 欧美黑人大吊| 丁香婷婷六月天| 9精品视频在线观看| 99热www| 无码人妻一区二区一牛影视| 婷婷的五月天另类视频| 国产国产乱老熟女视频网站97| 人人操AV| 婷婷六月啪啪| 久久大香蕉| 婷婷五月花| 九色自拍| 色色免费网站| 色婷婷综合久久久久| 丁香五月激情啪| 猫咪伊人久久| 乱码操操| AV电影在线播放| 美日韩成人| 色婷婷狠狠| 婷婷香蕉| 婷婷五月天社区| 99精品综合| 99久久网站| 99热精品在线播放| 日日夜夜狠狠| 极品少妇高潮啪啪AV无码| 99久久九九| 青青草免费公开视频| 人妻丰满精品一区二区A片| 日韩成人无码| 综合久久丁丁香婷| 色婷婷av综合网| 一起操 91N.com| 1024亚洲| 九月婷婷色色| 中文字幕综合| 激情婷婷五月天。| 99热这里只有精品国产免费| 成人色情五月天婷婷丁香| 激情 婷婷 插| 丁香五月六月婷婷殴美综合| 天天婷婷综合亚洲亚洲| enecarbon-materials.comWu染请涟系Bao护@wip1688 | 亚洲成人电影在线免费观看| 超碰永久在线| jiujiujiuwuyuetian| 色五月综合网| 九九这里有精品视频| 久久网思思| 99乱视频| 丁香九月久久| 中文字幕无码人妻少妇免费视频| www,婷婷,com| www.久9| 婷婷九九| 综合狠狠五月婷婷| 婷婷综合精品视频97| 在线观看免费狠狠色丁香香综合| 欧美色五月| 大战熟女丰满人妻AV| 国产综合A片| 91综合色| 九九热视频网站| 丁香婷婷婷五月| 日本婷久久| 大学生高潮无套内谢视频| 97涩婷婷| 91日本在线| 五月婷婷久久内射| 亚洲色五月婷婷| 丁香五月婷婷在线| 在线精品97| 久99综合婷婷| 天天模,夜夜模夜夜爽| 亚洲无码色色| 操人91| 色九九一二| 日本三级大片| 婷婷丁香激情| 99精品热视频| 婷婷五月丁香激情| 激情丁香九九五月综合网| 婷婷五月天AV激情| 五月狠狠| 久久精品一区二区三区四区| 九色在线观看91av| 婷婷成人综合免费视频| 国产va视频| 丁香六月天| 婷婷久久内射| 91啪级电影| 久久多色| 亚洲黄色网址| 久热欧美| 激情五月开心五月丁香五月| 开心激情站| 色色色婷婷| 成人精品视频99在线观看免费| a片在线免费观看一区| 深爱丁香网| 丁香五月天婷婷激情| 成人无码精品1区2区3区免费看| 久9久成人精品视频| 婷婷五月激情片| www.99久久久| 色色色色色九九九九九| 丁香五月在线人妻| 俺去也五月| 国产片XXXXA片国语对白| 伊人玖玖精品| 五月之婷婷| 五月天大香蕉| 九九热大香蕉| 99视频网| 国产毛片欧美毛片久久久| 亚洲无码成人| 色色色成人网| 中文字幕网伦射乱中文| 九九精品热| 久久精品五月天| 亚洲综合欧美色丁香婷婷888月图片| 精品九九在线观看| 色色丁香婷婷| 九月av在线| 色天天综合| 中文字幕在线免费看线人| 99热99在线| 97五月天| 9l久久久视频| 国产热精品| 中文字幕黄色片| 色婷丁香| 丁香久久综合| 九九激情视频| 久久婷婷五月综合伊人| 久草热8精品视频在线观看| 欧亚色色| 色色丁香| 色色色国产| 五月天成人在线视频网站| 亚洲天堂AV综合网| 97色伦另类图片小说视频| 伊人玖玖网| 日韩另类在线观看| 久久丁香婷| 日日夜夜爽爽| 少妇人妻人伦A片| 伍月婷丁香婷| 99热这里只有精品免费| 日韩人妻在线观看| 99婷婷国产最新视频| 99人妻碰碰碰久久久久视| 一级性爱视频| 五月婷av| 五月天影院| 婷婷综合在线网| 日日舔夜夜操| 丁香狠狠色婷婷久久无码视频| 丁香五月丁香伊人| av一级棒av| 国产又黄又爽又激情不遮挡视频在线观看| 日韩成人电影AV| 五月情丁香色| 这里只有精品久久| 人人人人人人人人人草| 亚洲乱码日产精品BD在线观看| 五月激情丁香久久综合网| 天天操夜夜操| 亚洲第一色色色色| 欧美日韩欧美| 内射丰满人妻| 亚洲综合五月天婷婷| 狠狠干伊人| 日本丰满久久| 亚洲色热| 全高清无码视頻| 色情综合网| 这里只有精品视频视频在线观看| 人人摸人人干| 五月色无码| 婷婷丁香18| 日韩在线aaa| 亚洲精品网址| 色色激情五月| 天天插天天插天天操| 色综合五月| 五月丁香婷婷婷婷综合网| 激情婷婷激情在线不卡| 色小说五月天| 91九色在线视频| 六月激情婷婷| 婷婷五月天xxx| 亚洲精级| 综合啪啪| 婷婷色婷婷亚洲成人| 色偷偷AV亚洲男人的天堂| 久久久久人妻中文| 色婷婷AⅤ| www.99热| 婷婷成人综合五月| 91九色在线观看免费| 五月天堂婷婷| www。88热在线视频免费观看| 成人综合视频网址| 五月天亚洲色| 开心五月激情网| 国产看真人毛片爱做A片| 国产精品色婷婷AV综合色色| www.色9| 狠狠干婷婷| 五月丁香六月激情综合欧美| 91婷婷色 | 婷婷八月丁香激情综合| 中文字幕在线免费观看视频| 天天色情站| 少妇达人正片在线播放_ikun_福利吧| 狼人狠狠操| 99在线精品免费视频| 精品乱码久久久久| 金桔一区二区ab地址| 成人久碰| www.91操| 久久这里只有精品16| 六月婷婷综合久久| 丁香六月啪啪| 五月天亚洲色| www.婷婷网| 激情骚五月| 成人av免费观看| 日本人人xxx| 激情网五夜婷婷| 人人操人人添人人摸97| 99热6精品| 婷婷五月视屏| 激情涩涩网| 97碰碰视频| 九九在线热九九在线热99热|