欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Linux下Tomcat開機(jī)自啟:systemd配置與排障全指南

Linux下Tomcat開機(jī)自啟:systemd配置與排障全指南 如果你手頭有一臺(tái)跑著生產(chǎn)業(yè)務(wù)的 Linux 服務(wù)器上面部署了 Tomcat那你大概率經(jīng)歷過這種時(shí)刻機(jī)房斷電、服務(wù)器自動(dòng)重啟或者運(yùn)維例行升級內(nèi)核 reboot 之后同事過來說“網(wǎng)站打不開了”。SSH 上去一看MySQL、Nginx 都活著唯獨(dú) Java 進(jìn)程沒了——Tomcat 沒有開機(jī)自啟。后來我專門整理過一套在 linux 上設(shè)置 tomcat 開機(jī)啟動(dòng)的完整方法才把這件回頭看并不復(fù)雜、踩坑時(shí)卻相當(dāng)折磨人的事徹底理順。這篇內(nèi)容適合手里有 Linux 服務(wù)器、用 Tomcat 跑著 Java Web 項(xiàng)目、且經(jīng)受不起下次重啟后服務(wù)靜默消失的開發(fā)或運(yùn)維朋友。文章不會(huì)只給你一段能用的配置我會(huì)把方案選型、單元文件每個(gè)參數(shù)的作用、驗(yàn)證方式、常見坑的完整排查鏈路以及配套的 JVM 參數(shù)、日志切割、多實(shí)例部署這些細(xì)節(jié)一并講清楚。1. 為什么 Linux 服務(wù)器上的 Tomcat 必須配置開機(jī)自啟1.1 先說一個(gè)讓我凌晨爬起來加班的場景我印象特別深有一年某個(gè)測試環(huán)境因?yàn)闄C(jī)房變更要重啟一臺(tái)老應(yīng)用服務(wù)器上面跑著 Tomcat 8.5 和幾個(gè)客戶對接用的 JSP 系統(tǒng)。重啟完成、網(wǎng)絡(luò)通了之后用客戶端工具一連——接口直接報(bào)連接超時(shí)。SSH 上去看Memcached 是起的Nginx 是起的唯獨(dú)java進(jìn)程一個(gè)都看不到Tomcat 壓根沒有跟著系統(tǒng)起來。當(dāng)時(shí)這臺(tái)機(jī)器的 Tomcat 是同事手動(dòng)startup.sh拉起來的配置里也沒有任何開機(jī)自啟的邏輯。更要命的是沒人記得具體配置細(xì)節(jié)JAVA_HOME、CATALINA_BASE 全靠/etc/profile里的環(huán)境變量撐腰。我后來花了大半夜把環(huán)境全部摸了一遍才意識(shí)到配置 Tomcat 開機(jī)啟動(dòng)這件事不只是寫一行命令那么簡單它需要把啟動(dòng)方式、環(huán)境變量、用戶權(quán)限、服務(wù)依賴全部理順。從那以后我在任何一臺(tái)要長期跑 Tomcat 的 Linux 機(jī)器上做的第一件事就是先把開機(jī)自啟搞定。1.2 開機(jī)自啟的三種主流方案先做個(gè)了斷到目前為止我在不同年代、不同發(fā)行版的機(jī)器上實(shí)際用過的方案主要有三種方案原理適用場景維護(hù)成本systemd 服務(wù)單元通過/etc/systemd/system/tomcat.service聲明服務(wù)由 systemd 托管生命周期當(dāng)前幾乎所有主流發(fā)行版CentOS 7、Debian 8、Ubuntu 15低管理命令統(tǒng)一SysV init 腳本在/etc/init.d/放腳本通過update-rc.d或chkconfig注冊老系統(tǒng)、最小化容器、嵌入式環(huán)境中依賴順序全手動(dòng)crontab reboot用戶 crontab 里寫reboot /path/startup.sh臨時(shí)性、實(shí)驗(yàn)性環(huán)境低但服務(wù)狀態(tài)和重啟策略幾乎沒有我見過不少生產(chǎn)環(huán)境的服務(wù)器還在用第三種方式就是reboot掛一條啟動(dòng)命令。你說它不行它確實(shí)能在重啟后把 Tomcat 拉起來。但問題在于沒有服務(wù)狀態(tài)管理如果想用systemctl查狀態(tài)、自動(dòng)重啟、看失敗次數(shù)、做資源隔離它什么都給不了。而且reboot的 cron 任務(wù)經(jīng)常踩環(huán)境變量坑——crontab 的執(zhí)行環(huán)境不是登錄式 Shell/etc/profile里定義的 JAVA_HOME 它根本讀不到啟動(dòng)一個(gè)失敗一個(gè)。SysV init 腳本在 CentOS 6 時(shí)代是絕對主力我現(xiàn)在也還會(huì)遇到基于老鏡像的機(jī)器。它的邏輯就是啟動(dòng)時(shí)按 rc.d 里的腳本順序調(diào)用#!/bin/sh從頭寫一套 start/stop/restart 邏輯還要考慮鎖文件、PID 文件。能用但確實(shí)繁瑣而且很多長期沒人維護(hù)的 init 腳本里連注釋都過期了。1.3 為什么我最終把生產(chǎn)環(huán)境的 Tomcat 全部切到 systemd如果機(jī)器發(fā)行版支持 systemd我的建議非常直接別折騰其他方案直接用 systemd。理由不復(fù)雜就三條。第一服務(wù)狀態(tài)可觀測。systemctl status tomcat看到的是active (running)、activating、failed這些明確狀態(tài)結(jié)合journalctl -u tomcat能看到服務(wù)日志定位速度比在/var/log/tomcat/里翻半天快得多。第二依賴和資源控制原生支持。我可以聲明Afternetwork.target等網(wǎng)絡(luò)就緒也可以設(shè)置MemoryLimit、CPUQuota對 Tomcat 這種占內(nèi)存大頭、容易出現(xiàn)內(nèi)存泄漏的 Java 進(jìn)程這是實(shí)實(shí)在在的護(hù)欄。第三失敗重啟策略。Restarton-failure加上RestartSec讓 Tomcat 意外退出后自動(dòng)拉起。相比在 crontab 里反復(fù)跑pgrep去判斷進(jìn)程存在與否systemd 的處理方式又干凈又可靠。現(xiàn)在主流發(fā)行版幾乎都跑 systemd所以下面的配置全部圍繞 systemd 展開同時(shí)穿插說明一些老方案里的對應(yīng)做法。2. 手把手把 Tomcat 配成 systemd 開機(jī)自啟服務(wù)2.1 動(dòng)手前先體檢目錄、賬號(hào)、路徑這三個(gè)事別跳過配置前我會(huì)先確認(rèn)三件事任何一件沒確認(rèn)清楚后面都會(huì)回來找麻煩。第一JDK 的真實(shí)路徑。在命令行里執(zhí)行which java readlink -f $(which java)后一條命令會(huì)把/usr/bin/java這類軟鏈接一路解析到真實(shí)路徑比如/usr/local/java/jdk-17/bin/java那 JAVA_HOME 就是/usr/local/java/jdk-17。千萬別想當(dāng)然寫成/usr/lib/jvm/...以readlink解析出來的為準(zhǔn)。第二Tomcat 安裝目錄和版本。通常我會(huì)用/usr/local/tomcat作為 CATALINA_HOME。要注意目錄里有沒有完整的bin、conf、lib結(jié)構(gòu)缺少文件大概率是以前解壓到一半或者路徑被改過??梢詧?zhí)行/usr/local/tomcat/bin/version.sh看版本前提是 JAVA_HOME 已經(jīng)在當(dāng)前 Shell 導(dǎo)出。第三運(yùn)行賬號(hào)。強(qiáng)烈建議不要用 root 直接跑 Tomcat。一旦進(jìn)程被利用或者 war 包出問題root 權(quán)限的 Java 進(jìn)程會(huì)造成更大的麻煩。我通常新建一個(gè)系統(tǒng)用戶useradd -r -s /bin/false tomcat chown -R tomcat:tomcat /usr/local/tomcat-r表示系統(tǒng)賬戶-s /bin/false讓它無法交互登錄對 Tomcat 運(yùn)行來說足夠。大家常問的“Tomcat 啟動(dòng)閃退”有相當(dāng)一部分就是目錄權(quán)限不對啟動(dòng)腳本寫不了日志或 PID 文件導(dǎo)致進(jìn)程退出。2.2 寫一個(gè)能打的 tomcat.service 單元文件在/etc/systemd/system/tomcat.service創(chuàng)建文件這是 systemd 管理 Tomcat 的入口。我先把一份經(jīng)過生產(chǎn)驗(yàn)證的配置完整貼出來再做逐行解釋。[Unit] DescriptionApache Tomcat 9 Web Application Container Afternetwork.target Wantsnetwork.target [Service] Typeforking Usertomcat Grouptomcat EnvironmentJAVA_HOME/usr/local/java/jdk-17 EnvironmentCATALINA_HOME/usr/local/tomcat EnvironmentCATALINA_BASE/usr/local/tomcat EnvironmentCATALINA_PID/usr/local/tomcat/logs/tomcat.pid PIDFile/usr/local/tomcat/logs/tomcat.pid ExecStart/usr/local/tomcat/bin/startup.sh ExecStop/usr/local/tomcat/bin/shutdown.sh Restarton-failure RestartSec10 TimeoutStartSec60 TimeoutStopSec30 [Install] WantedBymulti-user.target這個(gè)文件里的[Unit]部分描述服務(wù)是什么、啟動(dòng)順序上的依賴[Service]部分是核心定義了進(jìn)程類型、用哪個(gè)用戶運(yùn)行、執(zhí)行什么腳本[Install]段決定了它掛載到哪個(gè)啟動(dòng)目標(biāo)multi-user.target表示這臺(tái)機(jī)器進(jìn)入正常的非圖形化運(yùn)行級別時(shí)啟動(dòng)。2.3 單元文件里這些參數(shù)每一行都在解決什么問題很多人習(xí)慣網(wǎng)上復(fù)制一份配置能用就行出了問題就完全不知道往哪里看。我建議把幾個(gè)關(guān)鍵參數(shù)吃透。Typeforking。Tomcat 的startup.sh啟動(dòng) Java 進(jìn)程后會(huì)立即返回退出真正的 Tomcat 主進(jìn)程是被 fork 出來的子進(jìn)程所以對 systemd 來說必須聲明Typeforking。如果不聲明或聲成simplesystemd 會(huì)把短暫駐留的啟動(dòng) Shell 當(dāng)成主服務(wù)導(dǎo)致狀態(tài)判斷完全錯(cuò)亂。PIDFile 與 CATALINA_PID。systemd 需要跟蹤 Tomcat 實(shí)際主進(jìn)程的 PID 來管理它。Tomcat 自身通過 CATALINA_PID 來寫 PID 文件。單元文件里我把 PID 指向/usr/local/tomcat/logs/tomcat.pid。這里有一個(gè)非常典型的坑很多發(fā)行版默認(rèn) Tomcat 配置里沒有導(dǎo)出 CATALINA_PID啟動(dòng)時(shí)根本沒有 PID 文件可讀systemd 在 stop 和 status 時(shí)的判斷會(huì)對不上。解決辦法就是顯式在服務(wù)里設(shè)置同時(shí)寫上PIDFile讓 systemd 知道去哪里讀。Environment。這一步我要特別強(qiáng)調(diào)。systemd 通過ExecStart啟動(dòng)的服務(wù)不會(huì)讀取/etc/profile、~/.bashrc這些 Shell 初始化文件。不少人的 Tomcat 平時(shí)手動(dòng)啟動(dòng)沒問題一配 systemd 就報(bào)JAVA_HOME is not defined correctly十有八九是這個(gè)原因。所以我把 JAVA_HOME、CATALINA_HOME、CATALINA_PID 統(tǒng)統(tǒng)用 Environment 寫進(jìn)去不依賴任何全局 Shell 變量。After / Wants。Afternetwork.target表示網(wǎng)絡(luò)目標(biāo)完成后才會(huì)啟動(dòng) Tomcat避免在網(wǎng)絡(luò)接口沒有就緒時(shí)就去綁定端口。如果你的項(xiàng)目強(qiáng)依賴數(shù)據(jù)庫或 Redis也可以追加Aftermysql.service之類的聲明。注意After不產(chǎn)生啟動(dòng)依賴它只是順序約束要用Requires或Wants來真正拉起依賴服務(wù)最常見的組合就是Wants...加After...。Restart 策略。Restarton-failure搭配RestartSec10進(jìn)程異常退出時(shí) 10 秒后自動(dòng)重試。on-failure只處理非正常狀態(tài)如果你自己調(diào)systemctl stop tomcat它不會(huì)去重啟這也是我推薦這個(gè)值的原因。TimeoutStopSec。Tomcat 關(guān)閉時(shí)可能要優(yōu)雅停掉應(yīng)用和連接池時(shí)間給太短會(huì)被 systemd 強(qiáng)殺。我設(shè)了 30 秒大多數(shù) Web 應(yīng)用足夠。如果線上應(yīng)用有長事務(wù)、連接池回收慢可以再調(diào)大一點(diǎn)。2.4 啟用自啟、驗(yàn)證生效一次做過配置寫完以后執(zhí)行systemctl daemon-reload systemctl enable tomcat systemctl start tomcat每次修改 service 文件必須重新執(zhí)行daemon-reload這是新手最容易漏掉的動(dòng)作。enable會(huì)在/etc/systemd/system/multi-user.target.wants/下生成符號(hào)鏈接下次開機(jī)時(shí)自動(dòng)啟動(dòng)start是立即啟動(dòng)并不是必須和enable一起執(zhí)行但先手動(dòng)啟動(dòng)一次能盡早發(fā)現(xiàn)配置錯(cuò)誤。啟動(dòng)后一定要做到驗(yàn)證閉環(huán)systemctl status tomcat systemctl is-enabled tomcat ss -lntp | grep 8080 curl -sI http://127.0.0.1:8080 | head -n 3如果看到enabled、狀態(tài)是active (running)、8080 端口監(jiān)聽正常這一步就完成了。我自己的習(xí)慣還會(huì)再補(bǔ)一句journalctl -u tomcat -n 50 --no-pager確認(rèn)日志沒有異常然后找個(gè)時(shí)間真正 reboot 一次驗(yàn)證自啟——這一步必須有下面會(huì)解釋為什么。3. 配置自啟途中踩過的坑和完整排查鏈路3.1 環(huán)境變量丟失systemd 說這不是它的鍋癥狀很典型手動(dòng)執(zhí)行startup.sh一切正常systemctl start tomcat后過幾秒狀態(tài)變成failedjournalctl -u tomcat里能看到類似Neither the JAVA_HOME nor the JRE_HOME environment variable is defined At least one of these environment variable is required to run this program原因就是我前面說的systemd 啟動(dòng)的進(jìn)程不加載 Shell 環(huán)境文件。很多教程讓你把 JAVA_HOME 寫進(jìn)/etc/profile這只會(huì)影響交互式 Shell不會(huì)影響 systemd。排查鏈路按順序走systemctl show tomcat -p Environment看 systemd 實(shí)際傳給進(jìn)程的環(huán)境變量。如果沒有 JAVA_HOME去單元文件里補(bǔ)上EnvironmentJAVA_HOME...絕對路徑以readlink -f $(which java)解析出來的為準(zhǔn)。XShell 里敲的java -version能用不代表 Tomcat 腳本能用腳本看的是 JAVA_HOME/JRE_HOME不是 PATH 里的 java 命令。3.2 PID 文件缺失狀態(tài)一直卡在 activating有一個(gè)場景我遇到不止一次Tomcat 其實(shí)已經(jīng)起來了8080 端口也在監(jiān)聽業(yè)務(wù)能通但systemctl status顯示的卻是activating (start-pre)或者反復(fù)failed用systemctl stop還停不下來。根因基本可以鎖定在 PID 文件上。Typeforking加 PIDFile 時(shí)systemd 會(huì)用 PID 文件里的主進(jìn)程號(hào)來判斷服務(wù)是否成功啟動(dòng)。如果 CATALINA_PID 沒有導(dǎo)出startup.sh 不寫 PID 文件或者寫的路徑進(jìn)程沒權(quán)限寫就會(huì)卡在狀態(tài)判斷上。排查方式ls -l /usr/local/tomcat/logs/tomcat.pid cat /usr/local/tomcat/logs/tomcat.pid如果沒有這個(gè)文件檢查單元文件里 CATALINA_PID 是否配置如果文件存在但權(quán)限是 root檢查chown -R tomcat:tomcat /usr/local/tomcat因?yàn)?Tomcat 運(yùn)行用戶寫不了這個(gè)文件同樣會(huì)導(dǎo)致 systemd 狀態(tài)不對。SELinux 開啟時(shí)如果目錄上下文不對也可能拒絕寫權(quán)限這個(gè)下面單獨(dú)說。3.3 啟動(dòng)閃退排查先在前臺(tái)跑一次 catalina.sh配了自啟之后閃退日志往往被 systemd 收走反而不如直接前臺(tái)啟動(dòng)看得快。排查閃退我最順手的動(dòng)作是把 Tomcat 開到前臺(tái)sudo -u tomcat /usr/local/tomcat/bin/catalina.sh runcatalina.sh run是前臺(tái)運(yùn)行日志直接打到終端報(bào)錯(cuò)一眼能看到。常見閃退原因端口被占用。ss -lntp | grep 8080看是不是別的服務(wù)占著或上一次啟動(dòng)的殘留進(jìn)程占著端口。war 包解壓失敗、webapps 下的應(yīng)用啟動(dòng)異常導(dǎo)致線程啟動(dòng)時(shí)報(bào)錯(cuò)退出。內(nèi)存不足或 JVM 參數(shù)非法比如-Xmx設(shè)置超出物理內(nèi)存啟動(dòng)直接報(bào)Could not reserve enough bytes for object heap。系統(tǒng)服務(wù)對進(jìn)程數(shù)量、文件句柄有限制journalctl -u tomcat里能看到句柄耗盡的跡象。定位到根因后按對應(yīng)的方式改配置改完再systemctl start tomcat驗(yàn)證。不要反復(fù)無腦重啟日志不會(huì)騙人。3.4 端口能通但外網(wǎng)訪問不了防火墻與 SELinux 兩個(gè)兄弟自啟配好了本機(jī) curl 127.0.0.1:8080 有響應(yīng)外面怎么都訪問不到這時(shí)候要懷疑防火墻和 SELinux。firewalld 在 CentOS/RHEL 系機(jī)器上默認(rèn)可能攔截了外部到 8080 的訪問firewall-cmd --permanent --add-port8080/tcp firewall-cmd --reloadSELinux 則是另一個(gè)容易忽略的環(huán)節(jié)。Tomcat 安裝到非標(biāo)準(zhǔn)目錄后進(jìn)程寫日志、寫臨時(shí)文件可能被 SELinux 策略擋住。先看當(dāng)前模式getenforce如果是Enforcing可以用restorecon -RF /usr/local/tomcat恢復(fù)目錄的 SELinux 上下文如果 Tomcat 確實(shí)需要連接外部網(wǎng)絡(luò)或端口可能需要設(shè)置對應(yīng)的 boolean。這里不展開講 SELinux 策略撰寫但要記住遇到進(jìn)程行為異常、日志中帶著Permission denied又說不清權(quán)限問題時(shí)八成和 SELinux 有關(guān)。注意不建議圖省事直接在生產(chǎn)上永久關(guān)閉 SELinux。造成的問題應(yīng)該用策略去解決頂多臨時(shí)setenforce 0驗(yàn)證確認(rèn)后再定位是哪條策略。3.5 journalctl 里最值得記住的五類關(guān)鍵線索配自啟的排查基本繞不開journalctl -u tomcat我總結(jié)過幾類最常出現(xiàn)的日志線索看到就知道往哪里查日志線索指向的問題JAVA_HOME is not defined環(huán)境變量沒配置或路徑不對去 [Service] 段補(bǔ) Environmentpid file write failedPID 文件路徑不可寫檢查目錄權(quán)限、SELinux 上下文Address already in use端口被占用找占用進(jìn)程或改 server.xml 端口Broken pipe、Connection reset通常是反向代理/防火墻/長連接資源問題優(yōu)先看 Nginx 和網(wǎng)絡(luò)側(cè)OutOfMemoryError、GC overhead limit exceededJVM 或堆內(nèi)存不足調(diào) CATALINA_OPTS每次排查都從日志入手按鏈路一層層往下通常能比東翻西找快一半時(shí)間。4. 開機(jī)自啟配好之后順手把這些運(yùn)維細(xì)節(jié)也安排上4.1 JVM 參數(shù)放哪最干凈用 setenv.sh 而不是硬塞 service設(shè)置好自啟之后很多人會(huì)問我想調(diào) JVM 堆內(nèi)存、GC 參數(shù)怎么辦兩個(gè)選擇一是全部懟在 service 文件的 Environment 里二是在/usr/local/tomcat/bin/下創(chuàng)建setenv.sh。Tomcat 每次啟動(dòng)都會(huì)自動(dòng)加載bin/setenv.sh里導(dǎo)出的環(huán)境變量。這是官方預(yù)留的擴(kuò)展機(jī)制比在 systemd 單元文件里寫一長串 Environment 干凈得多也更方便維護(hù)。我通常在 setenv.sh 里寫export CATALINA_OPTS-Xms512m -Xmx2048m -XX:MetaspaceSize256m -XX:UseG1GC -XX:HeapDumpOnOutOfMemoryError注意兩個(gè)變量的區(qū)別CATALINA_OPTS只作用于 Tomcat 啟動(dòng)的 JVM不影響它內(nèi)部的輔助工具JAVA_OPTS會(huì)作用于所有基于 Java 的進(jìn)程包括啟動(dòng)腳本里的輔助程序。針對 Tomcat 的堆和 GC 配置優(yōu)先用 CATALINA_OPTS。修改 setenv.sh 后不用重寫 servicesystemctl restart tomcat即可生效這個(gè)先后順序建議固定下來。4.2 catalina.out 無限增長一個(gè) logrotate 配置解決Tomcat 的catalina.out會(huì)越滾越大尤其線上打了大量訪問日志或異常棧時(shí)一個(gè)季度漲到幾個(gè) GB 很常見。有些項(xiàng)目把日志輸出在 catalina.out 里不處理遲早拖垮磁盤。我在生產(chǎn)上通常用 logrotate 做每日切割配置放在/etc/logrotate.d/tomcat/usr/local/tomcat/logs/catalina.out { daily rotate 7 copytruncate compress missingok notifempty }這里最需要注意的參數(shù)是copytruncate。因?yàn)?Java 進(jìn)程一直持有 catalina.out 這個(gè)文件句柄直接mv重命名會(huì)導(dǎo)致 Tomcat 繼續(xù)寫舊句柄肉眼看到的是日志“消失”實(shí)際磁盤空間沒釋放。copytruncate先復(fù)制再清空原文件雖然極端情況下會(huì)丟一點(diǎn)點(diǎn)新日志但比重啟 Tomcat 去切日志劃算得多。4.3 多實(shí)例部署用模板化 service 文件省一半配置如果一臺(tái)服務(wù)器上要跑多個(gè) Tomcat 實(shí)例比如按項(xiàng)目名隔離的web1、web2完全不需要為每個(gè)實(shí)例各寫一份 service 文件。systemd 支持模板單元tomcat.service通過%i引用實(shí)例名[Unit] DescriptionTomcat instance %i Afternetwork.target [Service] Typeforking Usertomcat Grouptomcat EnvironmentCATALINA_HOME/opt/tomcat-appserver EnvironmentCATALINA_BASE/opt/tomcat-%i EnvironmentCATALINA_PID/opt/tomcat-%i/logs/tomcat.pid PIDFile/opt/tomcat-%i/logs/tomcat.pid ExecStart/opt/tomcat-appserver/bin/startup.sh ExecStop/opt/tomcat-appserver/bin/shutdown.sh Restarton-failure [Install] WantedBymulti-user.target然后一行命令注冊并啟動(dòng)對應(yīng)實(shí)例systemctl enable tomcatweb1 systemctl start tomcatweb1需要注意多實(shí)例場景里CATALINA_HOME可以共用一份 Tomcat 程序但CATALINA_BASE必須每個(gè)實(shí)例各自獨(dú)立conf/、webapps/、logs/、temp/放在各自的 BASE 目錄下。這會(huì)讓自啟配置的復(fù)雜度大大下降也方便后續(xù)單獨(dú)重啟某個(gè)實(shí)例而不影響其他應(yīng)用。4.4 升級 Tomcat 版本時(shí)自啟配置怎么平滑過渡Tomcat 大版本升級時(shí)最容易踩的雷就是解壓新版到新目錄然后忘了改自啟單元文件里指向 CATALINA_HOME 的路徑重啟回來發(fā)現(xiàn)啟動(dòng)的還是老版本。我的做法一般是先用軟鏈接固定路徑ln -s /usr/local/tomcat-9.0.85 /usr/local/tomcatservice 文件里始終只寫/usr/local/tomcat升級時(shí)解壓新版目錄停服務(wù)換軟鏈接指向再啟動(dòng)。如果出問題就回退軟鏈接整個(gè)過程可逆可控。升級前記得備份conf/server.xml、conf/web.xml和webapps下需要保留的業(yè)務(wù)應(yīng)用。Tomcat 10 把javax.*換成jakarta.*的兼容差異比較大升級時(shí)要么代碼同步遷移要么先確認(rèn)業(yè)務(wù)是否接受這個(gè)改動(dòng)。4.5 順便提一句安全加固manager 后臺(tái)別裸奔很多網(wǎng)站在 Tomcat 配置完成后conf/tomcat-users.xml里寫死了一個(gè)manager-gui角色賬號(hào)用于后臺(tái)部署 war 包。我的建議是兩步走一是 manager 相關(guān)角色盡量不開放公網(wǎng)訪問至少在防火墻層或 Nginx 層限制來源 IP二是如果確實(shí)需要遠(yuǎn)程管理配合 Tomcat 的 Valve 配置做來源地址白名單而不要只靠一個(gè)弱口令頂著。這個(gè)不屬于自啟范圍但既然聊到線上的 Tomcat順手提醒總比出了安全事件再補(bǔ)要省心。5. 我總結(jié)的幾個(gè)實(shí)操習(xí)慣照著做能少走很多彎路配置和排障都講完了最后分享幾個(gè)我自己養(yǎng)成的習(xí)慣都是踩過坑后留下的。第一配置完自啟后一定要找時(shí)間重啟一次機(jī)器驗(yàn)證。很多人配完enable就覺得萬事大吉等真重啟才發(fā)現(xiàn)某個(gè)依賴順序或環(huán)境變量在純引導(dǎo)環(huán)境里根本不生效。重啟后確認(rèn)進(jìn)程在、端口在、systemctl status是 active才算完成閉環(huán)。第二每次都先daemon-reload再改狀態(tài)。改 service 文件卻不 reloadsystemd 仍在用舊配置這會(huì)浪費(fèi)大量時(shí)間。我自己的流程是改完文件 →systemctl daemon-reload→systemctl restart tomcat→journalctl -u tomcat -n 30收尾。第三寫文檔比記憶可靠。Tomcat 版本、JAVA_HOME 路徑、實(shí)例名、端口、依賴關(guān)系這些信息散落在不同人腦子里最危險(xiǎn)。我會(huì)在機(jī)器上放一個(gè)/etc/systemd/system/README-tomcat.txt或者同步到私有維基記錄每次變更前后的狀態(tài)和原因下次不管誰接手都能快速接上。第四盡量用 systemd 統(tǒng)一管理減少“手藝人腳本”。手寫 shell 腳本輪詢進(jìn)程、在 rc.local 里追加啟動(dòng)命令這些方式應(yīng)急時(shí)可以但長期維護(hù)下來狀態(tài)不可觀測、失敗不自愈的代價(jià)會(huì)越來越高。把 Tomcat、Nginx、MySQL 這些服務(wù)通通納入 systemd 視角后一條命令就能看清整臺(tái)機(jī)器的服務(wù)圖譜排障思路也會(huì)清晰很多。配置 Tomcat 開機(jī)自啟本質(zhì)上并不難難的是把方案選對、把細(xì)節(jié)做扎實(shí)。希望這篇實(shí)踐筆記能讓你下次面對“重啟后服務(wù)消失”的時(shí)候不再手忙腳亂。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
成人综合视频在线| 色五月综合| 丁香色影院| 婷婷色五月激情| 另类国产综合| 天天日狠狠| 亚州精品成人片| 中文字幕成人| 九九久久精品| 色婷婷伊人| 亚洲久久婷婷丁香五月天| 五月丁香久久色| 色色五月婷| 99色色视频| 五月天欧美 另类小说| 色婷婷色综合激情91| 五月天婷婷成人网| 丁香激情五月天| WWW.桔色成人.COM| 午夜丁香婷婷| 免费亚洲婷婷| 婷婷香五月天| 国产成人亚洲综合A∨婷婷| 婷婷六月婷婷| 五月天激情站| 99国产er热视频| 五月婷婷久| 51XX午夜影福利| 五月婷婷亚洲天堂97色婷婷| 香蕉婷婷五月| 4399无码视频二区| 在线sebiav精品视频| 欧美性爱五月天| 丁香五月情| 五月婷婷,六月丁香| 9l久久久视频| 丁香五月手机视频| 亚洲另类毛片| 五月丁香激情综合啪啪| 97视频久久| 丁香99| 成人无码精品1区2区3区免费看| 色呦呦美女| 精品人妻久久久久| 视频一二区| 丁香涩涩爱| 亚洲国产成人裸舞| 五月天另类小说| 亚洲色综久久五月| 色偷偷五月天| 色婷婷免费观看| 蜘蛛女侠2003满天星免费观看| 九九热99精品在线| 五月天婷婷在线播放免费| 密乳视频| 青青草成人网| 亚洲色网络| 99热主页日本| 少妇AB又爽又紧无码网站| 丁香五月成人| 99视频啪啪| 大香蕉视频婷| 高清视频一区| 2025最新亚洲激情在线| 99在线观看视频| 丁香五月Av| 99这里热| 色婷婷成人做爰A片免费看网站| 日韩操人| 大香蕉丁香| 婷婷终合色图| 丁香五月天导航| 99噜噜噜在线播放| 亚洲激情免费视频观看| 99精品在线| 色色色网站| 狠狠精品干练久久久无码中文字幕 | 91n网站cad入口在线观看| www久久久久久久久久久| 99热99在线| 亚洲美女高潮久久久久久69| 色婷婷丁香花五月天| 狠狠色婷| 天天爽成人综合网站| 九九热九九| 精品怡红九九九| 色综合色综合色综合色综合| 亚洲综合色网| 六月99天天婷婷激情综合| 婷婷五月天av| 亚洲视频99| 五月丁香琪琪| 97久久超视频| WWW五月天| 激情五月婷婷丁香综合网 | 婷婷五月图片小说视频| 婷婷五月天社区| 狠狠久久婷五月综合色| 丁香五月综合色婷婷| 色婷婷丁香中文在线播放| 噜噜狠狠色综合久| 五月激情综合婷婷| 69五月天视频| 激情六月综合| 色婷婷激情| 丁香五月视频在线观看| 91超级碰碰| 无码91中文字幕| 色婷六月| 激情综合网色播五月| 色五月婷婷五月| www。五月,com| 婷婷激情综合| 黄网在线播放| 天堂久久婷婷| 精品久久这里热66| 免费99色| 亚洲婷婷免费| 五月丁香另类网| 五月开心婷婷网| 五月天婷婷爱| 日本三级第一页| 天天艹天天综合网| 成人AV在线电影| 在线91日韩| 在线VA视频| 婷婷射图| 六月婷婷av| 深爱开心激情| 操逼综合网| www.精品99| 狠狠香蕉| 日本99视频| 人人草人人看| 99亚洲视频| 久久色这里只有精品| 99热亚洲| 五月婷免费视频久久久| 国自产拍偷拍精品啪啪一区二区| 伊人春天av| 99ri视频在线播放| 中文字幕,综合,91| 婷婷射丁香| 成人无码中文| 婷婷丁香六月天| 亚洲av成人一区二区电影在线| 五月婷丁香久久久| 丁香九月激情在线视频| 一起草性爱不卡视频| 成人做爰黄A片免费看直播室男男 久草热8精品视频在线观看 | 久久五月丁香激情综合| AA片在线观看视频在线播放| 天天天摸夜夜夜玩| 久久99免费视屏| 久久激情五月网| 91男同视频| 97亚洲色 torrent magnet| 啪啪 综合网| 青青草99热久久精品国| 色色婷婷丁香| 欧洲亚洲免费视频区| 能直接看的av网站| Jh7Uf088VHafNm| 色偷偷AV亚洲男人的天堂| 情五月亚洲婷婷| 欧美性猛交99久久久久99按摩| 99热精品在线播放观看| 婷婷中文综合网| 六月婷婷久久大全| 激情综合色图| 五月天电影网| 99色| 激情五月亚洲综合网| 欧美S码亚洲码精品M码| av一区二区电影免费在线观看| 人妻videos人妻高清| 黄色热99| 操人久久| 丁香五月激情六月| 日韩精品一品二区三区的使用体验| www,com,五月色色| 色婷婷丁香五月观看| 中文字幕视频色婷婷| 五月天 无码| 久久久久久99精品无码| 99色视频| www.五月天色色.com| 久久丝丝热| 麻豆AV一区二区三区| 久久99久久99精品免观看软件 | 国产67194| 日本99热| 99视频在线啪| 97人人射| 天天综合五月| 深爱激情av| 国产成人AV在线播放| 九九RE视频在线精品| 99re思思精品在线观看| 丁香六月综合激情| 亚洲精品网址| 激情人妻蜜夜系列区| 97色色色| 99久久99热这里只有精品| 五月婷婷丁香六月| 丁香激情综合| 亚洲无码99| 丁香五月婷婷影院| 激情狠狠丁香月| 六月久久婷婷| 久久五月婷婷视频| 另类五月激情| 99热在线观看| 99视频在线| 精品五月天| 九九蜜臀精品| 丁香五月六月综合激情| 在线91日韩| 免费视频无码| 婷婷狠狠操| 俺去也五月天| 色色色色五月| 操逼棍操逼| 91婷婷丁香五月天免费视频网站| 丁香婷婷五月色成人网站| 婷婷丁香社区| 99热亚洲| 九九99久久| 综合网啪| 99国产精品久久久久久久久久久 | 色女伊人| 丁香六月天婷婷开心综合| ww久久| 大香蕉啪啪啪啪啪啪| 影音先锋女人AA鲁色资源| 97九色视频| 国产精品A片| 色噜噜伊人| 日韩在线视频中文字幕| 黄色成人网站在线播放| 人妻九九九九| 日韩成人综合网| 好色婷婷| 亚欧州精品视频| 天天透天天干| 日韩在线一级| 91丨九色丨高潮丰满日本| 97伊人综合婷婷| 色综合网页| 丁香五月婷婷图片综合| 狠狠干狠狠操狠狠爱| 这里只有精品96| 免费看欧美成人A片无码| 五月丁香激情啪啪| 91久热| 99精色| 色99在线| 色婷婷成人做爰A片免费看网站| www夜夜| 1024日韩| 99精品成人无码A片观看金桔| 激情小说视频图片| 欧美大片| 日本网站久久| 大香蕉99热| 久久精品9| 最新久久网址| 综合激情五月丁香9999久久精| 欧美激情丁香五月| 五月婷婷六月激情网| 欧美婷婷五月天综合| 五月天深爱激情网| 亚洲六月色婷婷| 色婷婷综合网站| 六月天婷婷| 99在线精品免费视频| 色五月婷婷7777| 日本美女97在线视频| H亚洲| 丁香五月www| 67194中文字幕| 日本色色网| 久久黄色免费视频| 99热官网精品在线| 婷婷五月激情网| 99国产精品白浆在线观看免费| 五月婷婷操操| 久热AA| 区区久久妻| 天天干夜夜b| 日日日日操| 原琪琪色影院| 婷婷伊人综合| 五月色婷婷亚洲 | 无码字幕中文| 婷婷色婷婷亚洲成人| 五月婷婷香蕉| 97婷婷狠狠| 99国产精品久久久久久久久久久| 九热视频精品| 夜夜夜叫天天天做| 99热在线播放| 十区AV| 五月婷婷与六月丁香图片激情| 五月婷婷六月奇米网丁香| 另类小说色婷婷| 色婷婷丁香五月| 丁香五月婷婷久久久| 婷婷射综合| 色天天久婷婷| 亚洲激情五月| 九九色播五月丁香| 亚洲国产色色| 99国产精品久久久久久久久久久 | 美女激情综合| 六月婷婷五月天| 国产精品美女久久久久AV超清| 91碰操| 九九AV| 色色色无码| 婷婷激情五月| 丁香色五月婷婷17C| 996er热| 国产3p露脸普通话对白| 国产伦理精品高清在线观看网站一区二区 | 国产日批视频| 91色婷婷综合久久中文字幕二区| 午夜福利8055| 五月天 另类图片| 午夜丁香| 国产中文亚洲欧美日韩性交| 久久婷婷五月综合色奶水99啪| 免费无码毛片一区二区A片| 久综合九| 丁香五月婷婷在线| 亚洲无码免费看| 夜夜夜夜做天天天做无码视频| 久操激情| 五月色婷婷影院| www,婷婷| 激情久久 婷婷| 国产日日操夜夜操的肉棒视频| 久久久久久人妻| 日韩在线99| 五月婷婷无码| 97色视频网| 日日插日日干| 久久婷婷五月综合色天| 五月丁香另类图片| 久婷首页| 激情婷婷五月| 五月天激情图片| 亚洲综合视频网| 亚洲精品成人片在线播| 99免费偷拍视频| 丁香五月婷婷色情综合| 综合久久高清| 婷婷丁香成人| 五月天国产成人| 思思久久精品| 97丁香五月天| 性爱激情五月| 婷婷丁香五月天激情| 亚洲视频码| 另类综合婷婷五月天欧美视频| 色五月综合激情网| 婷婷六月激情| 操99| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 99只有这里是精品| 五月色亚洲| 久久hd| 成人精品人妻| 亚洲乱码精品久久久久..| 六月婷五月丁香| 少妇水多A片太爽了| 色五月婷婷激情五月| 激情综合色五月丁香| 五月天激情开心网| 七七色色综合| 日本三级日本三级99| 欧美激情五月天在线观看| 老美AA片| 欧美色五月| 亚洲五月婷| 91久热| 99热这里只有精品50| 成人小说色图婷婷五月| 亚洲欧美综合7777色婷婷| 色热久资源| 国产精产国品一二三在观看 | 欧美日韩123| 深爱五月婷婷| 国产婷婷五月色情综合| 九九热这里只有精品7| 超碰免费在线| 噜噜噜久久| 丁香六月婷月91婷月| 九九99久久精品| 五月天综合在线观看| 久99热在线观看| 婷婷丁香六月| 欧美 日韩 成人| 五月丁香六月婷婷,婷| 综合网精品99| 婷婷六月综合激情| 五月性色| 天天干天天干天天干天天干天天| 91色九| 666555。COm毛片| 97在线/亚洲| 丁香色啪综合| 婷婷六月激情| 亚洲AV电影美洲AV电影| 天天拍天天操| 久久作爱| 婷婷五月六| 乱女乱妇熟女熟妇综合网站| 成年人夜夜喷水| 在线看片h站| 丁香六月婷婷久久综合| 另类小说色婷婷| 天天草天天爱| 婷婷综合网站| 久久98热re| 综合久久丁丁香婷| 欧美色婷婷| 97九色视频| 婷婷六月激情丁香| 综合色天天| 日本色99| 五月丁香啪综合| 深爱激情五月天色婷婷| 亚洲艹网| 这里只有精品免费在线视频| 久久99网址| 色色五月天 亚洲| 丁香激情五月| 激情五月天社区| 亚洲 视频 导航 一区| 亚洲国产精品综合色区| 久久99久久99精品免视看婷婷| 激情综合区| 久久大香蕉伊人| 狠狠色噜噜狠| 婷婷六月丁香五月图区| 牛色色碰| 草了bav视频在线观看| 天天色视频| 青青福利网| 狠狠一日| 精品自拍97| 激情亚洲五月| 五月伊人91| 河北真实伦对白精彩脏话| 激情五月天视频| 久久9久| 色婷婷综合影院| 99er热精品视频| 79色色色色| 黄色笑话深爱激情网丁香五月婷婷啪啪啪啪啪 | 欧美色图天堂网| 九九99九九99| 久久婷婷热| 丁香六月婷婷综合激情欧美| 99爱视频精品在线观看| 激情五月天婷婷久久久久久久久久久| 五月丁色AV| 激情六月下句是什么| 开心婷婷五月激情网小说| 成人五月天在线观看| 色婷婷综合久色AV五色最新| 五月天激情网址| 《》【无码】想被搞到爽AV应募而来的超M素人 西纯子 10musume-011723-01 | 婷婷激情五月综合| 久色网| 欧美精品中文字幕亚洲专区| 综合五月激情| 9精品视频在线观看| www.91操| 影音先锋激情网| 99日韩网站| 俺去也婷婷| 九九碰九九爱97超| 精品久久久91久久影视网| 丁香,开心成人,久久| 97偷拍对白视频| 六月丁香激情| 开心五月天私房婷婷| 五月婷婷六月丁香激情综合网| 五月婷婷六月激情网| 开心婷婷五月天激情网| 99热精品在线播放| 第四色色色色色丁香五月天| 日本啪啪网| 婷婷五月天激情偷拍| 丁香网五月天激情| 五月停亭六月,六月停亭的英语| 丁香五月色| 91九色PORNY大屁股| 97久久五月丁香婷婷| 99re最新地址视频| 丁香色婷婷| 99re思思热久久| 色噜噜丁香| 9 9 9色色| 婷婷色影院| 九九久久五月天综合伊人| 丁香五月婷中字幕| 中文字幕 中文字幕明步| 国产做A爰片毛片A片美国| 婷婷丁香熟女| 色综合久久综合中文综合网| 欧美日本一区二区三区| 日韩啪| 可以免费观看的AV| 狼友超碰| 亚洲九九九九| 国产成人高清| 五月天啪啪网| 在线播放成人网站| 婷婷色狠狠| 开心婷婷五月| 五月天怕怕| 色五月激情五月丁香五月婷婷啪啪综合 | 婷婷激情五月天小说校园| 99热思思| 超碰在线caop| 婷婷丁香69精华| 色噜噜婷婷| 婷婷伊人綜合中文字幕小说| 激情五月天色婷婷综合| 婷婷五月丁香伊人网| 啪啪黄页网| 五月天社区婷婷| 五月丁香综合啪啪| 99亚州综合精品成人网| 久热精品免费视频4| 99视频自拍| 5月婷婷五月天| 成人精品视频99在线观看免费| 97超碰在线免费观看| 激情综合网,婷婷五月天| 五月天精品视频| 91九色精品熟女内射| 伊人在线婷婷草| 亭亭玉月丁香| 婷婷五月丁香久久| 五月丁香啪| 99re免费视频| 天天爱天天做天天爽| 婷婷午夜精品久久久| 99九九热播在线免费视频| 久久久思思热| 激情综合婷婷| 这里只有精品免费在线视频| 日韩操逼大片| 色色色婷婷五月天| 七七九色| 激情久久 婷婷| 婷婷五月天久久| 五月成人丁香av91| 天天久久综合| 亚洲黄网在线| 99色最新在线视频网站| 一点色成人网| 婷婷久久婷婷色五月| 91九色在线| 99久久久免费| 丁香六月五月天| 99毛片| Av九九| 久久总和99| 丁香五月欧美午夜视频| AV五月丁香| 91婷婷搞| 男人天堂伊人五月丁香| 中文人妻AV久久人妻18| 色婷婷色五月色丁香| 国产日产亚洲系列最新| 国产精品蜜臀99| 97 天堂| 婷婷六月激情在线视频| 色玖玖网| 亚洲色另类| 97久久人人操| 996er热| 婷婷激情蜜桃玖玖丁香| 91碰免费视频| 婷婷五月天美女21p| 超碰日日操| 另类图片天天影视在线观看| 99热这里只有精品9| 性爱五月婷婷| 日日噜噜夜夜狠狠久久丁香六月| 日日噜狠狠色综| 99久久国产宗和精品1上映| 在线五月色播| 人妻中文av| 欧美激情综合色综合啪啪五月| 人妻久热| 日韩综合成人| 天天干电影| 淫视馆aV二区一区| 亚洲V国产V欧美V久久久久久| 久久九九99字幕| 99热全是精品| www.五月丁香| 九九机热| 五月丁香六月综合情在线观看| 久久99网站| 婷婷久久亚洲| 丁香五月婷婷激情网| 国产毛片欧美毛片久久久| 婷婷成年人免费视频| 色色色干| 亚洲人操亚洲人| 色色免费网站| 天天插天天干天天舔| 色碰碰| av亚洲国产小电影| 九九性爱网| 能看的av片| 久久国产AV| 91久久婷婷| 99热这里只有精品一区| www久久久久久久97| 2025神马午夜福利| 婷婷综合五月天| 婷婷成人丁香色情基地30| 玖玖99免费视频| caop视频| 五月天婷婷小说| 久久99激情丁香婷婷小说网| 思思热闹这里只有精品| 丁香五月婷婷激情四射| 激情五月婷婷| 日本片日本片祼观看网站在线看中文版网页在线看 | 99er在线观看| www久久久| 色婷婷综合影院| 97精品人人A片免费看| 91久久1118| 色色丁香激情五月| 亚洲人人96@| 欧美熟女99| 日韩AV成人电影| 先锋影音av色五月天资源站| 五月丁香色| 五月婷婷 激情五月| 色五月婷婷在线视频| 日韩啪| 在线综合亚洲欧美65| 97色色视频| 天天肏高清在线| 九九精品热| 丁香婷婷五月六月天| 26.uuu丁香五月婷婷| 日韩美女在线视频19| 婷婷五月欧美综合| 日韩黄色中文字幕| 曰韩少妇内射免费播放| 久久综合影院| 午夜成人网站在线观看| 狠狠插狠狠插| 久久hd| 99免费在线| www激情com| 激情综合网 激情五月天| 无码一区二区日韩| 色婷婷4| 狠狠五月激情在线| 五月亚洲激情| 色色99色色| eeuss人妻| 五月激情丁香六月狠狠干| 9l视频自拍9l九色成人| 天天射影| 久思思久视频| 丁香久久| 丁香亭亭久久| 婷婷另类开心| 99久久精品视频女神1| 手机激情网| 26uuu国产激情视频| 99热的无码| 夜夜骑福利资源| 五月婷婷香| 五月丁香六月婷婷在线观看| 婷婷五月天影院| 99热精品观看| 操操操Av| 婷婷金品综合视频| 综合久久婷婷| 波多野结衣成人作品在线| 玖玖九九9999在线观看视频精品| 1024亚洲| 久99久在线| 色婷婷五月综合在线| 99热网站| 天天草天天舔| 五月婷婷啪啪| www.99视频| 九九热青草| 五月婷狠狠| se.久久视频在线观看| 91无码视频| 欧美日韩AAAAA| 婷婷五月天狠狠| 99色| 人妻内射一区二区在线视频| 国成人网| 婷婷激情性爱| 欧美激情2025| 生活片五区| 国产亚洲成AV人片在线观黄桃| 国产精品24r| 九九色热| 亚洲麻豆乱码国产2028| 久久久27操| 国产毛片精品一区二区色欲黄A片| 玖玖婷婷免费| 婷婷综合| 激情亚洲网| 欧美色五月| 久久免费高| 色婷操逼| 色导航色婷婷五月天在线观看| 亚洲婷婷91丁香| 一级片操逼视频| 亚洲精品在线视频| 亚洲精品五月| 91精品久久久久久| 99视频日韩| 亚洲精品乱码久久久久久综合| 一级操逼内射在线视频| 激情五月综合| 亚洲AV第二区国产精品| 米奇影视五月天| 9999久久久久| 久re热视频| 日在线V视频在线播放| 色五月婷婷大香蕉| 九九九AAA热视频| 五月六月播婷婷| 欧美丁香五月| 久久九九激情五月天| 婷婷欧美色| 日本色色网站| 91操屁股| av性爱在线| 午夜无码熟熟妇丰满人妻| 任我肏| 精品无吗va视频免费观看| 99精品国产乱码久久久人妻| www。五月天激情| 激情网婷婷五月天| 狠狠色婷| 人人草人人爱手机视频看看| 99久热| 99国产er热视频| 欧美精产国品一二三区| 蜜乳人妻一区二区三区| 九九机热| 99婷婷综合| 在线五月色播| 婷婷丁香六月天| 亚洲中文字幕AV| 99性爱视频| 五月丁香九九| 色色色色网| 丁香五月婷婷亚洲激情四射| 婷婷激情六月天视频| 99视频只有这里精品| 天天天天天日| 久久爱综合| 综合网五月天123| 久99综合婷婷| 激情综合色网| 久久综合五月天| 丁香五月91| 婷婷97碰碰| 影音先锋一区| 国产综合色婷婷精品久久| 色偷偷色婷婷| 99热9999| 日韩色色网| 天天做天天爽| 伊人久久婷婷五月天激情四射| 色999;丁香五月| 婷婷放心五日爱| 亚洲综合成人网| 久久婷婷五月国产色综合激情| 激情综合网五月婷婷| 久久五月天婷婷视频| 人妻久久久久久| 干婷婷五月天| 色碰97| 久久久性爱视频| 综合色色综合| 99re热在线视频| 26UUU成人网| 欧美69久成人做爰视频| 色色网五月激情| 成人网丁香五月| 丝袜激情网| 九九这里只有精品在线视频| 久久性爱视频| 五月丁香婷婷成人综合网| 香蕉五月婷婷| 丁香五月婷婷啪啪| 操国产人妻| 97干在线免费| 99久在线视频| 色五月激情综合| 婷婷五月丁香人妻无码高清| 影音先锋四区| 激情五月图| 丁香久久激情俄| 欧美综合123区| 五月丁香视频在线观看| 九九中文色色| 99精色| 婷婷丁香久久网| 五月丁香综合网| 人妻性操逼中文字幕 国产| 亚洲亚洲人成综合网络| 26uuu最新地址| 91天天操天天干天天射| 婷婷久久色五月婷婷久久久| 色综合伊人网| 久久五月丁香六月婷| H亚洲| 婷婷社区五月天| 婷婷五月综合啪| 五月丁香综合啪啪| 99欧美热| 天天综合网在线| 国语精品探花| 五月丁香久久综合| 丁香五月手机视频| 亚洲妇女熟BBW| 五月婷婷在线观看黄| ...婷婷国产成人亚洲日韩| 先锋男人91资源| 公的粗大挺进了我的密道| 丁香桃色网| www.狠狠干| 日本系列_4页_777FP| 91re色综合视频| 亚洲日日操| www.色婷婷.com| 99re在线观看视频| 国产精品社区| 色五月在线综合| www.狠狠操| 另类激情五月在线视频欧美| 丁香婷婷久久老熟女综合网| 欧美人人操| 停停六月 综合| 麻豆AV一区二区三区| 色情五月婷婷| 伊人婷婷色| 五月丁香在线国产 | 五月天天天色| 99热热这里只精品996小说| WWW、日本色丁香、co m| 91超级碰碰| 国产精品成人网站| 天堂美国久久| 国产精品99久久久久久久女警| 婷婷午夜| 日韩 中文 欧美| 激情小说五月天| 天天干com| www.亚洲激情| 久久婷婷五月综合激情国产| 丁香无五月网| 五月婷亚洲精品AV天堂| www,色婷婷| 综合网色综合| 婷婷综合网在线| 五月天天堂久久| 99热热热国产超碰| 九九九九成人| 亚洲色图啪啪| 超爽内射| 大香婷婷| 超碰国产AV| 99久精品视频| 色五月婷婷五月天激情综合| 97操在线资源| 欧美色色日韩| 啪啪操超碰| 国产亚洲99久久| 六月婷婷色色色| 久婷首页| 久九色| 婷婷五月av| 激情综合5月| 五月天色婷婷激情综合| 婷婷五日b| 色色色综合视频| 91视屏在线观看com.wwwvv| 色婷婷综合久色AV五色最新| 思思99热这里只有精品| 99热无码精品| 色婷婷五月天激情久久| 天堂婷婷丁香六月网| 五月天色在线| 永久精品| 婷婷色啪| www.久久| 五月婷婷综合在线亚洲视频| 久久无意婷婷| 午夜日日| 五月天激情综合网俺也去| 久久永久网址| 色香五月天| 99视频只有这里精品| 九月色婷婷综合| 91人妻人人做人碰人人爽九色| 可以免费观看的AV| 国产毛片欧美毛片久久久| 超碰2021| www,久久久人人| 99黄色在线视频精品熟女| 日日日,com| 九九这里精品| 丁香五月天社区| 色墦五月丁香| 色色综合网www| 9 1在线视频| 五月天国产成人| 色五月成人在线| 4438激情网| 日日干日日| 婷婷激情五月天激情小说| 婷婷伊人久久| 狠狠人人| 天堂综合久| 天天干一干| 熟女国产在线一区二区三区四区| 91婷婷色| 丁香六月激情蜜桃| 波多野结衣AV无码Porn| 大伊香蕉精品视频在线| 日韩无码乱轮| 婷婷五月天伦理| 五月丁香欧美| 成人精品在线观看| 香蕉99网| 五月丁香啪啪啪| 欧美精品熟女一区二区| 午夜激情综合| 九九热内射| 五月丁香六月在线欧美| 色色色色色色色色网站| 日本99热| 婷五月天六| 成人超碰AV| 国产在线黄色| 五月色婷丁香| 草操AV在线| 久久狠狠干| 五月婷婷久久大片| 天堂AV三级| 色欲一二三| 丁香六月在线综合| 色三级色三级| 色爱亚洲| 六月丁花香啪啪激情欧美| 9l视频自拍9l视频自拍九色学生| 开心综合激情综合| 亚洲操b| 国产综合81p| 天天插天天干天天舔| 天天日天天爽| 色玖玖综合网| 五月丁香啪啪综合| 婷婷碰碰| 亚洲第一色色色色| 六月激情婷婷| 婷婷五月天大香蕉| 五月天另类图片| 婷婷五月天福利| 综合亚洲六月婷婷在线| 色婷婷成人网| 午夜福利8055| 人草人人| 久久激丁香| ss99热| 天天做天天爱天天爽| 色综合色综合网| 婷婷五月天激情丁香| 亚洲视频在线网站| 热99久久这里只有精品| 色噜噜狠狠一区二区三区| www.henhenl| 五月丁香另类图片| 欧美婷婷丁香五月| 天天天天天色| 国产69久久久欧美黑人A片| 操笔无码| 婷婷久久大香蕉| 婷婷久久婷婷色五月| 九九久久99| 亚洲小视频免费播放| 99热66| 久99久视频精选| 日日噜狠狠色综合久| 欲色人妻| 婷婷五月六| 99re久热| 久久久久久久人妻| 久Se视频在线观看| 99亚洲精品| 色婷婷777狠狠| 六月婷婷啪啪| 91九色视频| 亚洲综合九九| 亚洲精品欧洲精品| 中国女人做爰A片| 五月丁香婷婷激情久久| 性爱网五月婷婷| 丁香五月亚洲综合| 免费色婷婷| 免费亚洲婷婷| 99在线资源| 狠狠狠狠狠狠| www.夜夜夜| 日韩aⅴ视频| 五月精品| 亚洲国产成人在线| 亚洲人人操| 亚洲激情视频网| 狠狠综合久久综合| 97操碰视频| 99色婷婷视频| 开心五月天激情网| 久久精品爱爱| 乱精品一区字幕二区| 99热中文字幕久久| 91久女| 丁香五月天激情综合| 色综合天堂| 色色色色网| 婷婷五月激情在线| 色99在线看| 色色99| 99爱免费视频在线观看| 久久九精品| 日本丁香五月| 欧美亚洲婷婷五月| 丁香五月777| 五月丁香在线观看| 五月激情丁香| 欧美精品99| 99国产精品久久久久久久久久久| 五月成人天| 久久色天堂| 日本黄色一级| 香蕉狠狠爱视频| 五月丁香啪啪激情| 色婷婷91| 九热视频| 色综合99| 色五月天天| 69人妻人人澡人人爽久久| 一区二区三区视频| 91操操操| 日韩不卡DvD| 男同色五月开心五月激情五月| 久久超视频| 亚洲婷婷丁香五月亚洲| aaaa.黄| 激情五月婷婷| 五月欧美丁香在线观看| 97亚洲色 torrent magnet| 亚洲天堂制| 婷婷五月天成人网| 五月婷婷官网色| 性爱在线播放av| 中文字幕黄色电影网址| 99热这里有精品| 久久色五月| 五月综合亚洲婷婷| 亚洲综合网区| 日本婷婷在线| 99在线视频操999| 婷婷五月天av| 天天干天天干天天干天天干天天干| 七七九九色色| www狠狠| 五月婷婷9| 久久久久久久久月丁| 五月婷婷色播| 久久aaaa片一区二区| 激情综合五月色在线| 99爱99操| 都市激情亚洲| 大香蕉伊然在亚洲90| 欧美日韩999| 亚洲超碰在线| 色哟哟www| 色五月综合激情| 五月丁香六月激情狠狠| 丁香五月性| 亚洲一区国产传媒| 婷婷丁香综合| 九九热9| 国产五月视频| 粉嫩AV久久一区二区三区| 婷婷天堂综合| 玖玖爱综合网| 91丁香五月| 婷五月天| 丁香五月Av| 久热这里精品免费| 只有精品视频在线观看| 丁香色色网| 日本久久爽| 超碰在线9| 一起草无码| 综合色婷婷| 2015超碰| 91精品91久久久中77777久久玖玖九九| 日韩aⅴ视频| 五月婷狠狠| 色播色丁香五月| 91久女| www.9色色色| 久久久久五月丁香| 亚州第一黄网| 亚洲韩国日产综合AV| 丁香六月激情综合| 日本色婷婷| 九九九九精品精| 久久久国产精品黄毛片| 精品少妇人妻AV无码专区偷人| 中文字幕 中文字幕明步| 五月婷婷激情| www.色五月| 九久九精品| 91呦呦呦| 国产小网站| 激情综合五| 中文字幕黄色片| 激情美女五月天| 日日射天天射| 丁香色五月婷婷91桃色| 婷婷噜噜| 类似婷婷激情综合网站| 狠狠狠色激情综合适合| 97干网站| www.久久| 久热在线中文字幕色999舞| 91久久国产自产拍夜夜91久久精品文字>91麻豆精品国产 | 91蝌蚪窝视频在线| 色久一| 色99色| 婷婷伊人无码| 伊人狠狠干| 五月色影院| 国产亚洲在线| 色五月激情五月| 大香蕉啪啪啪| 无码人妻一区二区一牛影视| 超碰电影在线播放| 久久网日本| 丁香婷婷五月天校园春色| 26UUU精品一区二区Com| 丁香五月停停av| 五月丁香五月综合欧美| 大香蕉综合网| 99久热视频在线| 六月激情丁香一道本7777| 色 免费网站视频| 热99热9| 玖玖婷婷综合| 国产特级毛片AAAAAAA高清| 五月丁香婷婷激情四射迷人| Av九九| 天天天日天天天干| 丁香六月久久| 色婷婷六月| 婷婷九月在线| 狠狠va| 丁香狠狠色婷婷久久无码视频| 色综合丁香| JlZZJlZZ8JlZZ亚洲熟女| 五月婷婷激情久久| 婷婷永久在线| 99.色| 26UUU欧美激情一区二区| 99在线观看精品视频| 婷婷五月丁香激情图片| 综合97五月| 天天插天天| 五月丁香婷婷色色| 日韩99无码| 啪啪日本欧美| AV色五月婷婷| 日本色五月婷婷| 人妻丰满精品一区二区A片| 国产精品岛国片在线观看免费| 五月色情婷婷开心五月天| www.激情| 亚洲妇女熟BBW| 久久久ww| 国产色色色色| 久热大香蕉| 色碰干| 日日夜夜久| 久久三级视频| 一区=区操屄高清大全av| www.精品99| 丁香婷婷性爱| 九久热| 三十路磁力链接| 色情五月综合婷婷| 亚洲在线成人| 丁香五月成人在线| 色色色网站| 九九成人精品免费视频| 婷婷五月激情视频| 国产又色又爽又黄又免费| 五月婷婷另类| 五月激情小说| 91久久精品视频| 99热精品9| 色五月婷婷久久| 丁香视频| 人人干人人操人人摸| 五月婷婷黄色网址| 99re思思| 91超级碰碰| 色婷天天| 丁香五月六月激情| 日韩AV在线影片| 开心婷婷五月花| 丁香婷婷久久| 丁香婷婷五月天激情四射| 国产九九一区二区三区| 婷婷色情五月| 六月婷婷狠狠做| 青草视频在线观看视频| 色波激情五月天| 亚洲综合色婷婷| 亚洲综合久| 91狠狠综合久久| www.超碰在线| 国产成人网址| 六月丁香中文字幕| 97se视频在线| 五月丁香激| 成人av在线网址| av在线中文| 97香蕉碰碰人妻国产欧美| 九洲一级A片| 日本激情91| 香蕉国产2013| 久热大香蕉| 人人人操Av| 五月丁香综合激情| 久久精品小视频|