欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Linux下Redis源碼編譯安裝與生產(chǎn)環(huán)境配置避坑指南

Linux下Redis源碼編譯安裝與生產(chǎn)環(huán)境配置避坑指南 1. 裝之前先把這幾件事想明白標(biāo)題叫“Linux安裝redis”但真正做過生產(chǎn)環(huán)境部署的人都知道安裝本身五分鐘能搞定真正拉開差距的是裝之前的思路。Redis這種內(nèi)存型鍵值數(shù)據(jù)庫(kù)安裝方式、配置參數(shù)、啟動(dòng)方式、安全策略每一步都直接決定它在你機(jī)器上能不能穩(wěn)定跑、能不能扛住業(yè)務(wù)流量。這篇內(nèi)容適合誰(shuí)剛接觸Linux服務(wù)器、準(zhǔn)備給項(xiàng)目配緩存的開發(fā)者或者已經(jīng)裝過Redis但想搞清楚配置細(xì)節(jié)、避免踩坑的運(yùn)維新手。我會(huì)把完整的安裝流程、關(guān)鍵參數(shù)、常見坑和排查思路都過一遍盡量讓你看完就能照著操作。先說句實(shí)在話不同Linux發(fā)行版、不同Redis版本、不同業(yè)務(wù)場(chǎng)景安裝細(xì)節(jié)會(huì)有差異。我這里以最常用的CentOS 7/8系和Ubuntu 20.04/22.04系為例版本選擇Redis 6.x/7.x穩(wěn)定版。你機(jī)器上如果環(huán)境不同原理是通用的操作上靈活調(diào)整就行。2. 安裝方式怎么選這是個(gè)判斷題Redis在Linux上的安裝方式主流就三種包管理器安裝、源碼編譯安裝、Docker容器安裝。沒有絕對(duì)的好壞全看你的場(chǎng)景。2.1 包管理器安裝快但版本由不得你CentOS用yum、Ubuntu用apt直接一條命令就能裝好。優(yōu)點(diǎn)是快、省事、自帶systemd服務(wù)管理。缺點(diǎn)也很明顯——版本往往偏舊而且有時(shí)候莫名裝出來(lái)的是閹割版。比如CentOS默認(rèn)源里的redis版本可能停留在3.x連多線程IO都沒有性能瓶頸明顯很多新特性也用不上。如果你只是本地開發(fā)、測(cè)試功能包管理器裝一下完全夠用。在生產(chǎn)環(huán)境尤其是對(duì)版本有要求或者需要特定編譯參數(shù)的時(shí)候我一般不建議走這條路。還有一個(gè)坑某些源里裝出來(lái)的Redis缺少systemd集成你想用systemctl管理還得自己寫service文件反而更麻煩。2.2 源碼編譯安裝最穩(wěn)也最可控這是我最常用的方式。從官網(wǎng)下載源碼包自己編譯、自己安裝、自己配置。好處在于版本完全可控Redis 7.x新特性想用就用。編譯參數(shù)可定制比如指定安裝路徑、開啟特定優(yōu)化。二進(jìn)制文件在自己手里出了問題好排查。缺點(diǎn)也很直接需要gcc等編譯工具編譯要花一兩分鐘對(duì)新手來(lái)說過程顯得“重”。但說實(shí)話多敲幾行命令換來(lái)完全掌控權(quán)這筆賬是劃算的。下面我會(huì)詳細(xì)介紹這種方式。2.3 Docker安裝隔離干凈但不是萬(wàn)能Docker跑Redis最大的優(yōu)勢(shì)是環(huán)境隔離、部署快速、版本切換方便。測(cè)試環(huán)境臨時(shí)起一個(gè)實(shí)例docker run后面加幾個(gè)參數(shù)就完事。但生產(chǎn)環(huán)境用Docker跑Redis有幾個(gè)問題你得想清楚數(shù)據(jù)持久化要掛載目錄配置不好數(shù)據(jù)說沒就沒。網(wǎng)絡(luò)模式要選對(duì)不然性能有損耗。容器重啟策略要設(shè)置好不然宕機(jī)后不會(huì)自動(dòng)拉起。內(nèi)存監(jiān)控、日志收集都比裸機(jī)部署麻煩一些。所以我的建議是開發(fā)測(cè)試用Docker確實(shí)香生產(chǎn)環(huán)境能裸機(jī)部署就裸機(jī)部署。當(dāng)然如果你公司基礎(chǔ)設(shè)施已經(jīng)全面容器化運(yùn)維體系成熟那另當(dāng)別論。3. 源碼編譯安裝的完整實(shí)操記錄這里我走一遍完整過程用的環(huán)境是CentOS 7.9Redis版本選擇當(dāng)前穩(wěn)定版7.0.x。整個(gè)過程我會(huì)把命令、參數(shù)、為什么這么做的原因都寫清楚。3.1 第一步裝編譯環(huán)境Redis是用C語(yǔ)言寫的源碼編譯必須要有g(shù)cc編譯器。另外make的時(shí)候需要用到一些基礎(chǔ)工具一并裝上。yum install -y gcc gcc-c make tclUbuntu/Debian系對(duì)應(yīng)的是apt update apt install -y build-essential tcl這里有個(gè)細(xì)節(jié)需要注意某些云廠商的CentOS鏡像里gcc版本特別老編譯Redis 7.x可能會(huì)報(bào)錯(cuò)提示你的gcc版本過低。遇到這種情況需要先升級(jí)gcc或者用scl源裝新版gcc具體后面排查章節(jié)會(huì)說。3.2 第二步下載并解壓源碼包源碼包去Redis官網(wǎng)下載就行。我習(xí)慣先下載到/usr/local/src目錄統(tǒng)一管理源碼包位置。cd /usr/local/src wget https://download.redis.io/releases/redis-7.0.14.tar.gz tar xzf redis-7.0.14.tar.gz cd redis-7.0.14下載鏈接里的版本號(hào)建議先去官網(wǎng)查一下當(dāng)前推薦的最新穩(wěn)定版。別像我之前有一次想當(dāng)然用了7.0.0結(jié)果編譯到一半發(fā)現(xiàn)有個(gè)已知bug在后續(xù)patch版本才修復(fù)又得重新下時(shí)間都浪費(fèi)了。3.3 第三步編譯并安裝make -j$(nproc) make install PREFIX/usr/local/redis第二行命令的PREFIX參數(shù)指定了Redis安裝目錄。如果不指定默認(rèn)會(huì)裝到/usr/local/bin下面bin文件散落在系統(tǒng)路徑里后續(xù)管理比較混亂。指定到獨(dú)立目錄比如/usr/local/redis所有相關(guān)文件都在這一畝三分地里卸載也簡(jiǎn)單整個(gè)目錄刪掉就行。make -j$(nproc)中的-j參數(shù)表示并行編譯$(nproc)自動(dòng)取CPU核數(shù)編譯速度快很多。在一臺(tái)8核機(jī)器上Redis編譯基本一分鐘出頭就完事。編譯過程偶爾會(huì)報(bào)錯(cuò)最常見的是jemalloc相關(guān)的問題。這是Redis的內(nèi)存分配器如果不兼容當(dāng)前系統(tǒng)環(huán)境需要在make時(shí)指定用libc mallocmake MALLOClibc -j$(nproc)什么時(shí)候會(huì)碰到這種情況常見于某些老版本gcc搭配新系統(tǒng)或者在某些ARM架構(gòu)的機(jī)器上。具體原因后面排查部分展開。3.4 第四步驗(yàn)證安裝結(jié)果/usr/local/redis/bin/redis-server --version能輸出版本號(hào)安裝就算成功了。此時(shí)Redis二進(jìn)制文件在/usr/local/redis/bin/目錄下但配置文件還沒準(zhǔn)備好Redis現(xiàn)在跑起來(lái)用的全是默認(rèn)配置監(jiān)聽127.0.0.1、無(wú)密碼、不持久化——這顯然不是生產(chǎn)環(huán)境想要的狀態(tài)下一步就是配置。4. 配置文件的四個(gè)關(guān)鍵維度Redis安裝完只是起點(diǎn)配置才是重頭戲。我把配置文件里最關(guān)鍵的幾個(gè)方面拆開講每一項(xiàng)都解釋為什么這樣配。4.1 網(wǎng)絡(luò)與訪問控制bind、port、protected-modeRedis默認(rèn)只監(jiān)聽本機(jī)回環(huán)地址127.0.0.1也就是只有本機(jī)能連。如果你需要讓其他服務(wù)器訪問——比如應(yīng)用服務(wù)器和Redis不在同一臺(tái)機(jī)器上——必須修改bind配置bind 0.0.0.0意思是監(jiān)聽所有網(wǎng)卡接口。這里必須潑一盆冷水bind 0.0.0.0和protected-mode no組合起來(lái)等于把Redis裸奔在公網(wǎng)上。如果有人掃描到你的6379端口而Redis沒有密碼惡意者可以直接讀寫你的緩存數(shù)據(jù)甚至通過Redis寫文件功能拿下服務(wù)器。這不是危言聳聽網(wǎng)上被刷的案例一抓一大把。安全的做法是bind指定內(nèi)網(wǎng)IP不要用0.0.0.0。requirepass設(shè)置強(qiáng)密碼長(zhǎng)度不少于16位字母數(shù)字特殊字符混搭。云服務(wù)器安全組、防火墻層面只對(duì)需要的IP放行6379端口。有條件就用Redis自帶ACL功能給不同業(yè)務(wù)分配不同權(quán)限賬號(hào)。protected-mode這個(gè)參數(shù)要重點(diǎn)說。默認(rèn)值是yes含義是如果Redis沒有設(shè)置密碼并且沒有顯式bind到具體非回環(huán)地址那么只有本機(jī)能訪問。一旦你配置了bind為0.0.0.0或某個(gè)具體IPprotected-mode就會(huì)失去保護(hù)作用。所以保護(hù)模式的本質(zhì)是個(gè)“保險(xiǎn)絲”而不是安全屏障真正扛事的是密碼和防火墻。# 配置示例 bind 10.0.0.5 port 6379 protected-mode yes requirepass YourStrongPassword123!4.2 持久化機(jī)制RDB和AOF怎么選Redis數(shù)據(jù)在內(nèi)存里一旦進(jìn)程退出或者機(jī)器宕機(jī)內(nèi)存數(shù)據(jù)就沒了。要恢復(fù)必須靠持久化。Redis提供了兩種持久化方式標(biāo)配是RDB和AOF同時(shí)啟用雙保險(xiǎn)。先看RDB全稱Redis DataBase本質(zhì)是定期把內(nèi)存數(shù)據(jù)全量快照到磁盤的dump.rdb文件。默認(rèn)配置長(zhǎng)這樣save 900 1 save 300 10 save 60 10000意思是900秒內(nèi)有1次寫入就觸發(fā)快照300秒內(nèi)有10次寫入就觸發(fā)60秒內(nèi)有10000次寫入就觸發(fā)。這種寫法的妙處在于按頻率動(dòng)態(tài)調(diào)整快照節(jié)奏避免頻繁全量寫盤。RDB的優(yōu)點(diǎn)是最多丟幾十秒的數(shù)據(jù)、恢復(fù)速度快缺點(diǎn)是快照生成瞬間會(huì)fork子進(jìn)程內(nèi)存占用短暫翻倍而且兩次快照之間的數(shù)據(jù)說丟就丟。再看AOF全稱Append Only File記錄每一次寫操作以日志形式追加到aof文件里。默認(rèn)配置appendonly yes appendfsync everysecappendfsync有三個(gè)取值always每次寫操作都刷盤不丟數(shù)據(jù)但性能最差。everysec每秒刷一次盤最多丟一秒數(shù)據(jù)性能和可靠性平衡。no交給操作系統(tǒng)刷盤性能最好但可能丟更多數(shù)據(jù)。生產(chǎn)環(huán)境建議everysec兼顧性能和數(shù)據(jù)安全。AOF文件會(huì)越來(lái)越大所以需要重寫策略auto-aof-rewrite-percentage 100 auto-aof-rewrite-min-size 64mb意思是AOF文件比上次重寫時(shí)增長(zhǎng)超過100%且文件至少64MB時(shí)自動(dòng)觸發(fā)重寫壓縮日志體積。我用一個(gè)表格把兩種持久化方式對(duì)比清楚方便你根據(jù)業(yè)務(wù)取舍對(duì)比維度RDBAOF數(shù)據(jù)恢復(fù)速度快慢數(shù)據(jù)丟失風(fēng)險(xiǎn)較高取決于快照頻率低取決于fsync策略文件大小小大對(duì)性能影響快照fork時(shí)較明顯寫日志有IO開銷適用場(chǎng)景緩存、可接受少量丟數(shù)據(jù)對(duì)數(shù)據(jù)一致性要求高的業(yè)務(wù)我的建議是默認(rèn)兩者都開。Redis重啟時(shí)優(yōu)先加載AOF因?yàn)锳OF數(shù)據(jù)更完整。如果對(duì)丟數(shù)據(jù)容忍度高、追求極致性能可以只開RDB如果對(duì)數(shù)據(jù)安全要求極高可以只開AOF甚至用always刷盤但要做好性能下降的評(píng)估。4.3 內(nèi)存與淘汰策略maxmemory和maxmemory-policyRedis內(nèi)存不是無(wú)限大的必須設(shè)置上限否則內(nèi)存泄漏或者數(shù)據(jù)膨脹能把整臺(tái)機(jī)器撐爆。這里有個(gè)常見的錯(cuò)誤認(rèn)知以為不設(shè)置maxmemoryRedis就用不完內(nèi)存。實(shí)際上操作系統(tǒng)有OOM Killer機(jī)制進(jìn)程內(nèi)存超過物理內(nèi)存時(shí)可能被直接殺掉。所以設(shè)置內(nèi)存上限是保命動(dòng)作。maxmemory 2gb maxmemory-policy allkeys-lrumaxmemory指定最大內(nèi)存可以寫成 512mb、2gb 等。maxmemory-policy指定內(nèi)存達(dá)到上限后的淘汰策略常見的有volatile-lru從設(shè)置了過期時(shí)間的數(shù)據(jù)中淘汰最近最少使用的。allkeys-lru從所有數(shù)據(jù)中淘汰最近最少使用的。volatile-ttl從設(shè)置了過期時(shí)間的數(shù)據(jù)中淘汰剩余存活時(shí)間最短的。volatile-random從設(shè)置了過期時(shí)間的數(shù)據(jù)中隨機(jī)淘汰。allkeys-random從所有數(shù)據(jù)中隨機(jī)淘汰。noeviction不淘汰內(nèi)存滿了直接拒絕寫入返回錯(cuò)誤。生產(chǎn)環(huán)境最常用的是allkeys-lru適合緩存場(chǎng)景——不重要的數(shù)據(jù)優(yōu)先被淘汰。如果是會(huì)話存儲(chǔ)、分布式鎖這種不能丟關(guān)鍵數(shù)據(jù)的場(chǎng)景用noeviction更安全寧可寫入失敗也不丟數(shù)據(jù)。這里還有一個(gè)重要認(rèn)知Redis在64位系統(tǒng)上maxmemory不設(shè)置時(shí)理論上可用內(nèi)存接近無(wú)窮大但這不是好事。比如你的緩存key沒有設(shè)置過期時(shí)間寫入量一直增長(zhǎng)Redis內(nèi)存就會(huì)一路飆升直到系統(tǒng)swap、性能雪崩、進(jìn)程被殺。我的習(xí)慣是每臺(tái)Redis實(shí)例的maxmemory設(shè)置為物理內(nèi)存的60%-70%留出余量給系統(tǒng)和其他進(jìn)程。4.4 日志與安全加固logfile、slowlog、ACL默認(rèn)Redis日志是輸出到stdout的也就是說前臺(tái)啟動(dòng)時(shí)打印在終端用systemd或后臺(tái)啟動(dòng)時(shí)輸出到j(luò)ournald。要把它寫到文件里logfile /usr/local/redis/logs/redis.log注意日志目錄要先創(chuàng)建Redis不會(huì)自動(dòng)建目錄。有幾個(gè)版本竟然DIRECTORY不存在直接啟動(dòng)失敗或者啟動(dòng)成功但日志丟失排查起來(lái)特別鬧心。后來(lái)我養(yǎng)成了習(xí)慣裝完Redis第一件事就是把logs目錄建好。慢查詢?nèi)罩疽彩桥挪閱栴}的一把利器slowlog-log-lower-than 10000 slowlog-max-len 128意思是超過10毫秒的命令都會(huì)被記錄下來(lái)最多保留128條。線上事故排查時(shí)SLOWLOG GET一下慢命令無(wú)所遁形。Redis 6.0之后引入的ACL功能顛覆了以前“一個(gè)密碼走天下”的模式??梢詾椴煌瑯I(yè)務(wù)創(chuàng)建不同權(quán)限賬號(hào)user default on nopass ~* all user biz_app_user on AppUserPassword123! ~cache:* get set del expire第一行保持默認(rèn)用戶超管權(quán)限本地運(yùn)維用第二行創(chuàng)建一個(gè)只能操作cache:前綴key的受限賬號(hào)。權(quán)限最小化原則在任何系統(tǒng)都適用Redis也不例外。5. 啟動(dòng)、守護(hù)與開機(jī)自啟安裝配置完就該讓Redis跑起來(lái)了。啟動(dòng)方式有很多種我建議使用systemd來(lái)管理好處是開機(jī)自啟、進(jìn)程守護(hù)、崩潰自動(dòng)拉起、日志統(tǒng)一管理。5.1 編寫systemd服務(wù)文件手動(dòng)創(chuàng)建一個(gè)/etc/systemd/system/redis.service文件內(nèi)容如下[Unit] DescriptionRedis Server Afternetwork.target [Service] ExecStart/usr/local/redis/bin/redis-server /usr/local/redis/conf/redis.conf ExecReload/bin/kill -USR2 $MAINPID ExecStop/bin/kill -SIGTERM $MAINPID Restarton-failure RestartSec3s Userredis Groupredis LimitNOFILE65535 [Install] WantedBymulti-user.target幾個(gè)參數(shù)解釋一下。Userredis用專用的redis用戶運(yùn)行避免用root跑服務(wù)。這是安全習(xí)慣。Restarton-failure進(jìn)程異常退出時(shí)自動(dòng)重啟生產(chǎn)環(huán)境很關(guān)鍵。LimitNOFILE65535提高文件描述符上限。高并發(fā)場(chǎng)景下Redis需要大量文件描述符默認(rèn)1024完全不夠用。創(chuàng)建完服務(wù)文件后用systemd命令操作systemctl daemon-reload systemctl start redis systemctl enable redis systemctl status redis不出意外Redis就以守護(hù)進(jìn)程方式跑起來(lái)了配置文件生效、開機(jī)自啟、異常自動(dòng)拉起。5.2 驗(yàn)證服務(wù)是否正常redis-cli -a YourPassword ping返回PONG說明服務(wù)正常。這里有個(gè)小坑命令行里用-a傳密碼會(huì)有 warning 提示密碼被明文記錄在shell history里。能接受但更好的方式是設(shè)置環(huán)境變量或用交互式連接。生產(chǎn)環(huán)境注意別把密碼留在腳本里明文內(nèi)嵌用配置文件或者Redis ACL更合適。另外別忘了驗(yàn)證持久化文件和慢日志功能/usr/local/redis/bin/redis-cli -a YourPassword info persistence /usr/local/redis/bin/redis-cli -a YourPassword slowlog get 10這兩條命令輸出的信息基本能確認(rèn)Redis的持久化、日志記錄工作正常。6. 性能壓測(cè)與基本調(diào)優(yōu)裝好不代表能打。Redis處理能力怎么樣壓一下才有數(shù)。自帶的redis-benchmark工具就能干這活。6.1 跑一輪基準(zhǔn)測(cè)試/usr/local/redis/bin/redis-benchmark -h 127.0.0.1 -p 6379 -a YourPassword -c 100 -n 100000 -t set,get,incr,lpush參數(shù)含義-c 100100個(gè)并發(fā)連接。-n 100000總共10萬(wàn)次請(qǐng)求。-t set,get,incr,lpush分別測(cè)試這幾種命令。一臺(tái)普通云服務(wù)器2核4G上跑完set/get的QPS通常能到5萬(wàn)-15萬(wàn)之間。如果結(jié)果遠(yuǎn)低于這個(gè)范圍依次排查網(wǎng)絡(luò)是不是有瓶頸、CPU是不是被打滿、Redis是否在swap、系統(tǒng)參數(shù)是不是沒調(diào)。6.2 幾個(gè)關(guān)鍵的調(diào)優(yōu)參數(shù)實(shí)際壓測(cè)和線上運(yùn)行中以下參數(shù)經(jīng)常需要調(diào)整tcp-backlog 511 timeout 300 tcp-keepalive 60 maxclients 10000tcp-backlogTCP連接隊(duì)列大小并發(fā)高時(shí)可以提高避免連接被丟棄。timeout空閑客戶端超時(shí)關(guān)閉時(shí)間0表示不關(guān)閉。如果客戶端連接池連接長(zhǎng)期空閑建議設(shè)300秒。tcp-keepaliveTCP keepalive探測(cè)周期及時(shí)發(fā)現(xiàn)死連接。maxclients最大客戶端連接數(shù)默認(rèn)10000但受系統(tǒng)文件描述符限制。如果報(bào)max number of clients reached除了調(diào)大這個(gè)參數(shù)還要同步調(diào)整系統(tǒng)級(jí)的ulimit -n。操作系統(tǒng)的幾個(gè)隱藏參數(shù)也需要順手調(diào)了sysctl -w net.core.somaxconn1024 sysctl -w vm.overcommit_memory1 sysctl -w net.ipv4.tcp_max_syn_backlog1024vm.overcommit_memory1這個(gè)很多人不理解。Redis持久化時(shí)fork子進(jìn)程需要預(yù)先申請(qǐng)等于當(dāng)前內(nèi)存大小的虛擬內(nèi)存。如果系統(tǒng)overcommit策略過保守fork會(huì)直接失敗導(dǎo)致持久化失敗。設(shè)置成1就是讓內(nèi)核允許超額分配內(nèi)存保證fork成功。需要把這些sysctl參數(shù)寫進(jìn)/etc/sysctl.conf才能永久生效net.core.somaxconn1024 vm.overcommit_memory1 net.ipv4.tcp_max_syn_backlog1024然后執(zhí)行sysctl -p使配置立刻生效。6.3 大key和熱key的治理意識(shí)壓測(cè)做的再好線上如果存在大key和熱key性能一樣崩。大key指的是單個(gè)key的value特別大比如幾MB甚至幾十MB的字符串或者千萬(wàn)級(jí)別的list、hash。操作這種key時(shí)網(wǎng)絡(luò)傳輸耗時(shí)高、內(nèi)存占用大還會(huì)阻塞Redis單線程執(zhí)行。排查用redis-cli --bigkeys能按類型找出大key清單。熱key指的是某個(gè)key被超高頻率訪問單臺(tái)Redis節(jié)點(diǎn)扛不住。排查用redis-cli --hotkeys需要開啟LFU策略或者通過monitor命令臨時(shí)觀察。處理方案不外乎幾種大key拆分成多個(gè)小key熱key做本地緩存或多副本。這塊內(nèi)容展開能寫一萬(wàn)字今天先把排查方法放進(jìn)意識(shí)里遇到問題知道從哪個(gè)方向查。7. 日常排查問題實(shí)錄匯總這部分是根據(jù)我實(shí)際踩過的坑整理出來(lái)的不敢說權(quán)威但真實(shí)有效。7.1 問題1編譯報(bào)錯(cuò)MALLOC: Jemalloc Unsupported可能原因當(dāng)前系統(tǒng)尤其某些ARM架構(gòu)、特定版本的gcc環(huán)境與Redis捆綁的jemalloc版本不兼容或者gcc版本過舊導(dǎo)致編譯階段宏判斷錯(cuò)誤。解決辦法使用make MALLOClibc指定使用系統(tǒng)的libc malloc輔以正常參數(shù)編譯安裝。二次建議如果一直報(bào)錯(cuò)先升級(jí)gcc。CentOS 7老版本自帶gcc 4.8.5阿里云源可以裝devtoolset或者用scl源裝gcc 8以上版本。提示編譯Redis 7.x完整要求gcc版本不低于4.8.5但實(shí)際推薦gcc 8尤其是Arm架構(gòu)上。升級(jí)gcc后再編譯絕大部分問題能解決。7.2 問題2Redis啟動(dòng)后外部訪問不通現(xiàn)象本機(jī)redis-cli連得上其他服務(wù)器連不上。排查步驟確認(rèn)Redis進(jìn)程在監(jiān)聽ss -tlnp | grep 6379確認(rèn)監(jiān)聽地址不是只有127.0.0.1redis-cli -a pass info server里看tcp_port。確認(rèn)防火墻狀態(tài)firewall-cmd --list-all或iptables -L -n把6379放行。確認(rèn)云服務(wù)器安全組策略這個(gè)經(jīng)常被忽略安全組沒放行端口你本地防火墻配得再好也沒用。最后檢查redis.conf里bind和protected-mode配置。一次線上事故的排查順序我印象很深當(dāng)時(shí)業(yè)務(wù)方說連不上Redis我先檢查systemd狀態(tài)——正常檢查端口監(jiān)聽——也正常檢查防火墻——放行了最后才發(fā)現(xiàn)云控制臺(tái)的安全組忘了加6379端口。這類問題一般就藏在最后一步。7.3 問題3Redis無(wú)緣無(wú)故被持久化數(shù)據(jù)拖慢現(xiàn)象某些時(shí)刻出現(xiàn)應(yīng)用卡頓redis-cli執(zhí)行命令延遲很高。排查過程redis-cli --latency觀察平均和最大延遲。查看CPU使用率如果達(dá)到100%大概率是RDB快照fork子進(jìn)程引起。查看RDB/AOF文件所在磁盤IO情況磁盤IOPS被打滿說明快照或AOF重寫太頻繁。解決辦法拉大RDB快照觸發(fā)條件或者調(diào)整save間隔。AOF重寫放到業(yè)務(wù)低峰期設(shè)置auto-aof-rewrite-min-size更大。持久化文件放獨(dú)立磁盤與系統(tǒng)盤分離避免互相影響。7.4 問題4Redis突然大量超時(shí)但CPU和內(nèi)存都不高這個(gè)隱蔽性很強(qiáng)。當(dāng)時(shí)排查了半天發(fā)現(xiàn)是swap問題——機(jī)器內(nèi)存不足Redis內(nèi)存頁(yè)被換到了磁盤上導(dǎo)致所有訪問Redis的操作都帶上磁盤IO延遲。排查方法看/proc/redis_pid/status里的VmSwap字段不為0就有問題。解決方向把Redis內(nèi)存上限調(diào)低給系統(tǒng)留足余量或者給機(jī)器加內(nèi)存最徹底。7.5 問題5AOF文件損壞導(dǎo)致啟動(dòng)失敗現(xiàn)象服務(wù)器異常斷電后重啟Redis直接起不來(lái)報(bào)AOF文件校驗(yàn)失敗。解決辦法redis-check-aof --fix /usr/local/redis/data/appendonly.aof這個(gè)工具會(huì)修復(fù)損壞的AOF文件把錯(cuò)誤的尾部截掉。修完再啟動(dòng)。注意修復(fù)過程可能丟失最后幾條寫入記錄但這是斷電場(chǎng)景下最好的結(jié)果。8. 我的一些經(jīng)驗(yàn)總結(jié)裝Redis這件事看起來(lái)是執(zhí)行幾條命令實(shí)際上是三個(gè)層面的方法論第一版本和安裝方式需要綜合評(píng)估。生產(chǎn)環(huán)境建議源碼編譯安裝部署路徑統(tǒng)一管理測(cè)試環(huán)境Docker快速拉起完全沒問題包管理器安裝更適合完全不追求版本和定制化的場(chǎng)景。選型時(shí)多花五分鐘想清楚后面運(yùn)維能省五小時(shí)。第二配置的重點(diǎn)不在于“能用”而在于“扛得住”。bind、密碼、maxmemory、持久化策略、文件描述符、swap這六個(gè)維度每一項(xiàng)都決定了Redis在故障場(chǎng)景下會(huì)怎么表現(xiàn)。尤其是maxmemory和持久化快照的配合線上壓測(cè)時(shí)看不出問題流量高峰期突然就出幺蛾子。合理設(shè)置內(nèi)存上限和淘汰策略不是隨便填個(gè)數(shù)字而是根據(jù)業(yè)務(wù)數(shù)據(jù)量和請(qǐng)求量估算出來(lái)的。第三排查問題的耐心和系統(tǒng)性。Redis出問題先看進(jìn)程在不在、端口通不通、狀態(tài)正常不正常然后看日志、看監(jiān)控、看參數(shù)最后才考慮網(wǎng)絡(luò)、硬件、系統(tǒng)層面。我曾經(jīng)遇到一次詭異的高延遲問題排查了兩天才確認(rèn)跟所在的物理宿主機(jī)有關(guān)是虛擬化層網(wǎng)絡(luò)調(diào)度造成的周期抖動(dòng)并不是Redis本身的問題。所以說定位問題的過程比自己亂猜重要得多。最后分享一個(gè)小技巧每次改完Redis配置務(wù)必用redis-server --test-memory或者直接重啟測(cè)試確認(rèn)配置語(yǔ)法沒寫錯(cuò)防止線上改完配置結(jié)果起不來(lái)。多一份驗(yàn)證少一次半夜救火。Redis是個(gè)好工具但工具越好用越要對(duì)它的脾氣秉性摸清楚。這篇內(nèi)容把安裝、配置、啟動(dòng)、調(diào)優(yōu)、排查全流程過了一遍希望你能少踩幾個(gè)我踩過的坑。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
激情五月婷婷六月丁香| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 人妻激情网| 性生活久久朋友人妻| 国産精品| 五月婷婷 欧美| 色婷婷综合视频| 狠狠香蕉| 日韩少妇内射免费播放| 成人色情五月天婷婷丁香| 午夜成人综合| 久这里只有精品99| 丁香五月天操B| 五月开心啪啪| 97超级碰碰碰| 天天综合色| 色色永久| 最新久久99视频网站| 五月天另类综合网| 超碰v| 99精品这里只有免费视频| 久久九九国产精品怡红院| 极品少妇XXXX精品少妇偷拍| 五月丁香六月欧美综合| 日本二级毛片二级毛片| 色婷婷五月网| 五月丁香大相交| 天天插天天爱| 亚洲亚洲永久无码777777| 特级西西4444www无码| 日本全黄一级999| 五月综合视频| 五月丁香六月婷婷亚洲| 国产伦理精品高清在线观看网站一区二区 | 成人在线视频一区| 婷婷五月丁香六月伊人网| 婷婷色色五月天| 国产VA播放| 狠狠爱青青草| 久久99综合| 天天婷婷天天| 五月天婷婷涩涩| 久久视频婷婷视频| 五月婷婷激情四月| 噜噜色天天开心| 亚洲亚洲人成综合网络| 色五月天成人在线| 五月综合激情网| 强伦轩人妻一区二区电影| 国产日韩av片| 狠狠爱成人综合网| 久久在线视频免费观看| 99热这里只有在线| www.射伊蕉婷婷| 激情五月天综合婷婷网| 五月激情影视| 婷婷香五月天| 五月丁综合在线观看| 中文字幕丰满孑伦无码专区| 丁香六月无码| 深情六月婷婷综合久久| 成人视频网| 五月天婷婷综合免费| 五月激情六月综合| 久9热视频在线观看| 国产xxxxx在线观看| 激情五月影院| 婷婷久久免费| 久久免费视频62| 天天操无码| 婷婷五月性感| 色色五月婷| www天天色天天射| 金桔一区二区ab地址| 久久丁香五月| 五月精品| 色五月婷婷久久| 一起草无码视频| 国产AV国片偷人妻麻豆| 九九色院| 成人草榴视频| 天天操天天插| 99热精品在线播放| 久9久成人精品视频| 99色干| 伊人五月婷| 色综合中文| 99精品爱| www.五月天婷婷姐姐| 五月婷九月| 婷婷91| 丁香婷五月天开心六月| AV激情五月| 婷婷热色| 97色 五月天丁香| 超碰99在线观看| 99热在这里只有精品| 亚洲不卡| www.五月婷婷| 热五月婷婷| 97亚洲精品| 中文字幕人成乱码在线观看| 超碰猛烈的性猛交| 停停五月色宗合| 日本操逼九九九九58日本操逼| 成人网站av免费网站推荐| 九九99精品视频在线观看| 狠狠色狠狠鲁| 精品综合久久久久久五月天| 五月丁香999| 黄色毛片精品| 九九热99热| 国产做A爰片毛片A片美国| 色婷婷XXXXX| se色综合网| 激情性爱五月天网页| 狠狠干在线| 色婷婷五月视频| 久久婷婷五月综合| 激情文学 综合 色| 五月天伊人av| 五月天婷婷色在线视频免费观看| 亚洲另类毛片| 色五月婷婷青娱乐| 9 1 A v久久久| 九九久久偷拍| 丁香五月综合无码趴趴| 色香蕉婷婷| 久久se 综合网 | 五月婷婷久久激情| 婷婷色五月噜噜| 热99这里只是精品| 久久丁香婷婷五月天| 91蜜桃婷婷狠狠久久综合9色| 婷婷涩五月天综合| 思思精品热在线| 中文字幕乱轮| 婷婷成人五月天成人文学| 免费精品66| 那里有AV网址| 婷婷操逼网| eeuss人妻| 4399在线日本A片| 美女天天爽| 五月天 无码| 5月婷婷激情6月| 天天爽人人爽| 婷婷六月激情综合| 色色色五月婷| 日韩啪啪网| 120分钟婬片免费看| 五月综合激情网| 五月婷婷影| 99er免费在线观看| 婷婷五月天电影区小说区| 久久天天天| 九月婷婷激情| 九九操操| 啪啪啪五月天| 五月丁香六月激情视频| 婷婷五月六| 亚洲中文字幕av| 四虎成人精品永久免费AV九九| 超碰国产一区| 五月天开心色情网| 亚洲色五月| 深爱婷婷网| 久久婷.com| 激情综合区| 欧美日韩国产伦精品日韩人妻一| 伊人在线视频| 成人视频网| 人妻日日日| 丁香六月综合激情| 综合久久十| 人人搡人人| 日韩AV片| 五月四色婷婷| www.精品99| www色色com| 丁香激情五月| 色色九九五月天 | 久热精彩视频98| 99久久久久久久| 国产激情在线| 五月天婷婷日日爱| 天天插天天爽| 欧洲色| 九九九九九999999| 操操碰| 久久这里99| 五月天激情网站| 婷婷中文在线| 玩熟女五十AV一二三区| 青青草免费公开视频| 国产午夜成人AV在线播放| 色狠狠色噜噜AV天堂五区 | 色噜噜婷婷| 五月开心婷婷| 五月丁香网av| 天天干夜夜欢| 色五月激情| 超碰免费人人肏| 欧日韩成人| 5月婷婷六月丁香| 涩涩网五月天| 欧美日综合| 免费在线a| 色五月婷婷天天干| www.色综合.com| 婷婷五月成人| 久99久精品| 天天综合天天玩夜夜玩天天玩夜夜玩| 日本欧美在线| 色色色五月婷| 天天爽天天爽视频| 五月丁香婷婷在线| 91av色色乱视频| 精品无码av丁香五月激情| 亚洲激情网站无码| 久操热线| 91久久五月天| WWW.色婷婷.COM| 婷婷五月天久久久| 99资源人人| 中文字幕av在线播放| 久久激情视频| 99久在线观看| 久婷自拍视频| 在热视频精品| 国产亚洲精品久久久久久久久动漫| 青青草免费公开视频| 9视频在线成人网站| ady狠狠入| 五月婷婷色欲| 天天干夜夜操A片| 亚洲五月天婷婷| 五月丁香婷久久| 五月婷免费视频久久久| 日本成人噜噜噜| 成人免费120分钟啪啪| 色色色丁香| 九九热这里精品| 色色色成人网| 色五月色五天色情网址| 9久久精品| 婷婷五月天偷拍| 亚洲爆乳无码精品AAA片蜜桃| 亚洲欧美国产A片免费观看| 久久婷婷色| 亚洲欧美丁香五月天亚洲欧美| 激情五月天网| 婷婷五月天AV在| A网在线欧洲| 亚洲V国产V欧美V久久久久久| av超碰在线| 婷婷久久久久久久| 成人精品一区日本无码网 | 五月天婷婷免费| 96丁香六月婷婷蜜桃综合久久| 丁香五月色| 久9免费视频| 26UUU精品一区二区| 日韩啪啪网| 国产亚洲色婷婷久久99精品91| 亚洲综合婷婷六月丁香五月| 91精品久久久久久综合五月天| 婷婷综合在线视频| 欧美影院| 99ER热精品视频| 热中文字幕| 国产激情综合五月久久| 综合色影院| 国精产品一区二区三区| 狠狠操天天干| 涩综合在线 | 激情五月综合亚洲另类| 亚洲第一影院高清无码网站| 日日噜狠狠色综合久久| 思思99热| 久久er+| 在线只有精品| 丁香五月婷婷综合网| 婷婷狠狠干| 久久99精品久| 欧美狠狠色| 久久丝袜婷婷| 婷婷久久五月| 婷婷六月伊人| 九九热9| 五月天婷婷爱| 99riAV国产精品视频| 九九热视频思思| 日本成人内射| 狠狠色狠狠| 色色丁香五月天| 六月丁香五月天| 九九热只有这里精品| 五月花亭亭| 91大操| 深爱五月激情五月| 色色激情网| 激情色色色| caobi四区| 五月丁香综合精品欧美| 五月丁香激情深爱婷婷| 亚洲天堂婷婷| 91无码视频| 亚洲婷婷视频| 日操夜操天天操不卡| 就爱干 在线| 亚洲无码性爱| 9久视频| 99久久精彩视频。| 思思精品视频| 五月丁香婷婷俺| 冬月かえでAV无码播放| 中文AV在线观看| 8区视频在线| 天天天天干| 九九婷婷五月天影视| 五月婷婷六月丁香| 五月综合视频| 五月婷无码| 97碰碰九九视频| 极品另类| 五月丁香色婷婷基地| 亚洲激情五月| 日韩无码色色| 色五月婷婷综合| 欧美99热| 五月综合激情| 亚州日本欧州韩美高青高潮一| 少妇搡BBBB搡BBB搡毛茸茸| 婷婷亚洲丁香五月| 99碰| 99久久综合狠狠综合久久| 中文字幕色色色| 亲子乱AV-区二区三区| 五月丁香在线婷婷蜜桃| 久草婷妨| 深爱五月天| 激情欧美五月丁香| 超碰精品手机在线| 国产精品成人在线| 黄色AAAA韩国guochansanji| 日韩久久色| 亚州视频九九99| 丁香九月综合激情| 91a片爽| 激情欧美五月丁香| 婷婷五月天电影网| 99热只有国产在线精品| 玖玖婷婷婷丁香五月| 婷婷九月综合| 这里只有精品99www| 精品婷婷丁香五| 色情五月综合婷婷| 九九性爱网| 五月婷婷干| 天天综合网站| 天天爽天天操| 囯产精品一品二区三区| 婷婷五月综合基地| 国产偷人爽久久久久久老妇APP| 99re这里只有精品在线观看| 日本色99| 超碰伊人碰婷婷五月| 色五月综合在线| 天天狠狠干| 五月婷婷五月天激情视频| 日操熟女| 亚洲色无码A片一区二区麻豆| 色色 亚洲| 99er这里只有精品| 日韩综合网络男女香蕉a片| 欧亚成人A片一区二区| 日日插日日干| 色五月天中文字幕| 青青草搞屄视频网站| 超碰人人在线观看| 六月成人网| 色五月激情综合网| 人妻内射视频| 超碰99在线观看| 色色A| 另类图片激情五月天| 五月天丁香啪啪啪啪| 99操逼| 狠狠干狠狠干狠狠干狠狠干| 激情图片婷婷| 久久婷婷网址| 亚洲电影中文字幕| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 日日噜噜夜夜狠狠久久丁香六月| 久久丁香五月天| 婷婷99狠狠躁天天躁| 五月丁香网中文字幕| 大香av| 丁香五月天大香蕉啪啪| 九久9精品| 深爱综合网| www99热| 婷婷五月天堂| 99re视频在线播放| 色播综合| 五月天成人在线视频网站| 国产一区男女| 日本成人噜噜| 五月天开心激情综合网| 婷婷六月久久| 久久人妻在线| 婷婷丁香成人五月天| 欧美群妇大交乱婬网| 日本黄色在线观看| 中文字幕AV在线| 91碰| 欧美五月丁香啪啪响视频| 婷婷色影音天| 欧美六月婷婷| 久Se视频在线观看| 色综合激情| 91狠狠综合久久| 日韩情色在线观看| 另类视频综合| 五月婷婷中字在线| 狠狠操在线视频| se色99| 久久网站免费亚洲| 99久久成人| 青青草婷婷综合五月| 日良久久| 啪啪啪大香蕉| 综合色五月天| 激情综合六月| 色婷婷五月综合在线| www.五月天。com| 激情五月婷婷视频| 刘玥av在线| 丁香五月色激情| 超碰精品国产首页| 9久久精品| 99热思思在线观看| 五月婷婷亞洲中文| 国产毛片精品一区二区色欲黄A片| 99久久婷婷国产综合精品青桔| 色五月色图| 色婷婷久久天天性爱| 色色五月天com| 欧美视频五区| 色噜噜,噜噜色| 激情综合网亚洲色图| www.狠狠狠狠| 丁香五月激情婷婷| 色色色999| 欧美成人精品A片免费一区99| 色婷婷电影| 国产欧美精品AAAAAA片| 丰满少妇猛烈A片免费看观看| 成人va在线播放| 久久一级AV| 日韩免费99| 婷婷五月四狠狠| 五月天狠狠干| 五月天啪啪视频| 青草视频在线播放| 超碰在线99热| 综合色天天| 丁香五月在线视频黑人| 色情激情五月| 思思热视频在线观看| 丁香五月婷久久| 久久久久9999| 99久热视频在线| 色婷婷激情| www.日韩艹| 久久这里只有精品视频26| 狠狠色狠狠色综合日日91| 天天干com| 五月天五月色婷婷综合| 日本婷婷丁香五月| 就爱啪啪婷婷| 久久免费婷婷视频| 极品少妇XXXX精品少妇偷拍| 人人摸人人干| 久热黄色| 99热这里只有精品最新网址| 97资源欧美日韩大香蕉超碰一区| 婷婷综合五月| 五月婷婷亚洲| 五月天成人小说网| 人妻体体内射精一区二区| 玖玖99婷婷| 噜噜色天天开心| 久久精品只有这| 一起草AV| 91精品久久久久久| 综合XX网| 五月婷中文娱乐综合| 色色五月婷婷久久| henhencao国产在线| 欧美亚洲999| 五月天久久综合| 婷婷9月天| 五月天婷综合网站| 久久怕怕视频| 婷香五月激情视频| 激情五月色婷婷| 五月丁香婷婷激激激综合网色播| 九九99香蕉在线视频播放| 性爱视频久久| 夜夜骑操AV| 亚洲综合99| 51成人| 激情五月天综合网| 久久日韩婷婷五月| 久久538| 伊人久久大香线蕉亚洲五月天,| 婷婷五月天堂网| 丁香五月香蕉| 欧美性爱五月天| 91黄操| 久久久99免费视频| 在线网黄| 亚洲激情网| www.zbzhongsen.com| 碰碰碰碰碰99| 激情深爱综合网| 超碰成人在线免费观看| 日韩五月天婷婷| 国自产拍偷拍精品啪啪一区二区| 欧美色99| 精品人妻一区二区三区四区不卡在| 99久久色| 99人妻碰碰碰久久久久视| 日韩熟女啪啪视频| 久草热视频在线观看| 四川BBB搡BBB搡多人乱亂| 超碰操网| 婷婷成人视频| 色婷婷婷综合五月天| 日本三级中国三级99人妇网站| txt五月激情四射网综合俺也来了| 狠狠夜夜五月丁香| 国产成人AV| 开心五月天激情| 色五月美女| 五月开心色| 久久丁香婷婷五月| 成人在线网址| 五月丁香网av| 激情综合网激情五月丁香五月俺也去| 激情五月综合网最新 | 成人中文字幕在线| 婷婷五月激情综合| 欧美色播综合在线观看| 色色色999| 五月天成人在线精品| 色婷婷电影网| 伊人五月网| 中文字幕高清av| 色五月五月天色婷婷色五月| 欧美在线视频9| 婷婷五月综合久久中文字幕| 久操干| 色5月婷婷| 一区二区中文字幕| 美女被操一区二区| AA久久| 激情五月黄色小说| 午夜微拍福利| 9精品在线| xxxx五月| 久久国产高潮白浆免费观看99| 欧美va欧美va差| 在线观看免费狠狠色丁香香综合| 久草视频一,二三四| 五月天婷婷綜合院| 成人午夜天| 伊人啪啪网| 九九综合九九| 婷婷色色亚洲| 丁香婷婷五月六月久久| 99色色网| 丁香五月婷婷国产av| 婷婷激情5月| 啪啪黄页网| 大香蕉啪啪啪| 日日天天干| 丁香五月网站| 中文字幕久久婷九女同| 婷婷五月天综合AV| 激情五月综合ì香亚洲| 碰碰碰97国产| 久久激情视频| www.亭亭五月天| 91色噜噜狠狠狠狠色综合| www久久久| 青草激情在线| 99色激| 亚洲AV成人精品网站在线播放| 91精品综合久久久久久五月丁香| 日熟女| 国产美女无遮挡裸体毛片A片| 就爱干 在线| 丁香花五月天婷婷成人社区| 综合网激情| 思思视频这里是精品| 大战熟女丰满人妻AV| 思思热久久爱| 婷婷色婷婷亚洲成人| 精品人妻伦九区久久AAA片| site:publishdd.com| AV六月丁香| 久热这里只有精品6| 日 日干 日日做| 99riAV国产精品视频| 色综合99| 九九在线精点品| 五月婷婷激情色情网| 1024成人免费看| 激情综合五| av人人干| 激情99在线视频| 久久婷婷的综合色丁香五月| 欧洲不卡视频| 色五月六月| 五月婷成人网| 伊人五月天综合网| 玖玖激情五月天| 色爱爱综合网| 超碰日韩成人| 涩涩五月天| 婷婷永久在线| 另类小说色婷婷| 久久机热这里只有 | 婷婷午夜综合| 中文AV网站| 99热日本| 99热精品网| 在线不卡视频| 99热亚洲| 久碰婷婷视频| 啪啪东京热| 97碰 在线视频观看| 婷婷久热| 丁香五月激情啪| 婷婷五月天天天| 亚洲经典小视频| 亚洲看av的网站| 99热免费网站| 久久综合丁香五月| 99久久99九九99九九九| 婷婷五月综合中文字幕| 五月丁香久久| 婷婷色五月天在线观看| 97色色综合| 亚洲色激情| 五月丁香六月综合激情网| 99自拍视频在线观看| 操逼电影免费看| 97色干在线观看| 亚洲亚洲人成综合网络| 丁香色色网| 欧美色99| 五月天婷婷av| AV大香蕉| 人妻中文在线| 欧美肉大捧一进一出免费视频| 色九月婷婷丁香| 狠狠五月天| 久久久噜噜噜久久人妻| 久久这里有精品99| 人人看人人草人人摸| 粉嫩AV久久一区二区三区| 性爱五月婷| 五月天成人在线播放| 亚洲超级碰| 玖玖婷婷五月天毛片| 久久精品99| 色播五月丁香| 亚洲性爱AV在线| 久久婷婷七月丁香| 婷婷99狠| 九九色区| 日韩九区| 另类图片激情五月天| 大香蕉婷婷色| 欧美群妇大交乱婬网| 色狠狠综合网| 天天综合激情| 激情亚洲婷婷六月| 色五月婷婷五月天激情综合| 99热九九在线| 99精品福利视频| 久久99热这里只频精品6学生| 日日夜夜爽| 色婷婷五月天激情在线观看| 97人人妻人人艹| 啪啪色激情五月天| 精品网站:999WWW| 久99热| 日本www五月婷婷| 日本色婷婷| 九九精品视频在线6| 亚洲成人网站在线观看| 五月婷色丁香| 久久人妻乱| av网址在线| 99∨VTV| 在线五月婷| 日本人人干| 天天日天天干天天爱| 色狠狠狠干| 丁香五月婷婷乱| 久久久精品人妻| 97色色视频| 九月激情婷婷丁香| 99伊人性爱在线影院| 国产综合婷婷| 五月丁香婷婷激情在线视频| 色五月aV| 激情网婷婷五月天| 精品久久99| 婷婷丁香婷婷97| 成人看片网站| 激情五月亚洲| 亚洲AV成人精品日韩在线播放| 嫩草综合网| 可以免费看AV网站| 色九月婷婷| 99九九这里有免费视频| 台湾无码A片一区二区| 婷婷色偷拍| 色色网站毛片| 久久AAAA片一区二区| 99热这里只有精品4| 99色在线视频| 四川操逼站| 色五月开心婷婷| 国产99视频永久免费| 夜夜骑天天玩天天日| 激情影院丁香五月| 午夜天堂一区人妻| 丁香婷婷五月色成人网站| 少妇激情基地| 亚洲另类视频| 国产av天堂| 26uuu丁香婷婷五月| 久久五月丁香婷婷| 丁香五月天综合| 中文毛片无遮挡高潮免费| 操逼电影免费看| 丁香婷婷六月激情文学 | 婷婷久久丁香五月| 婷婷五月天综合中文| 亚洲综合色网| 欧美三9久九观看| 激情五月天色网站| www.婷婷五月天,com| 久久五月天婷婷| 天天色综网| 伊人五月婷婷| 99久久综合| 婷婷五月色播天| 婷婷五月天受日本法律保护| 99免费视频精品| 开心五月网 | 五六月丁香激情视频| 婷婷激情五月综合| 99久久人妻精品无码二区| 六月丁香婷婷综合影院| 丁香婷婷激情综合五月激情| 久碰久| 99热99日…..| 99热精品在线| 婷婷午夜综合| 久久人妻久久| www.金莲av| 天天日狠狠| 99在线小视频| 91丨九色丨白浆秘| 激情六月色| 熟妇天天综合| 色五月婷婷激情五月| 碰97久久| 久久香蕉婷婷| 涩五月色婷婷| 丁香色色网| 丁香大香蕉| 五月丁香综合激情网| 99热亚洲| 色婷婷XXXXX| 九九视频热| 免费视频WWW在线观看网站| 国产女生爱爱AA| 思思精品久久艹| 另类少妇人与禽zOZZ0性伦| 99热热热国产超碰| 丁香六月婷婷综合缴| 日产精品久久久久久久蜜臀 | 噜噜狠狠色综合久| yiqicaoav| 婷婷色五月天在线| 婷婷综合伊人| 婷婷成人五月天成人文学小说| 色五月激情综合网| 99热免费精品热久久66| 色五月av| 狠狠狠狠狠狠草| 亚洲bt丁香五月天婷婷激情小说| 五月丁香综合啪啪| caopeng超碰| 亚洲色五月| 婷婷亚洲激情在线观看视频 | 樱花99视频| 99热这里只有精品8| 九九精彩久久| 91大神操美女| 99操中文视频| 91九色 婷婷| 九九成人高清视频| 日日.c| 五月亭亭开心网| 五月丁香狠狠爱婷婷综合| 日本的α片xxxwww| 青柠影视免费高清电视剧| 9l视频自拍9l九色成人| 婷婷五月天激情网| 99热国内精品| 欧美色色色色色| WWW丁香五月| 婷婷五月花| 婷婷五月天资源| 丁香伊人五月色婷婷五十路| 99re这里有精品手机在线| 激情五月天色色网| 色吧网91| 五月天六月婷| 91在线操| 热九九精品| 欧美成人无码一区二区三区| 在线视频你懂得| 五月六月丁香激情视频| 丁香六月啪| 欧洲婷婷五月天| 婷婷丁香中文字幕| 99免费在线| 国产精品成人AV在线| 99热精品在线| 色婷婷狠狠18禁| 美日韩成人| 婷婷色天香| 丁香婷婷综合喷| 先锋影音男人的天堂AV| 色丁香五月婷婷综合久久| 婷婷的色色五月天| 99热综合在线观看| 久久婷婷青青草| 色噜噜狠噜噜视频| 婷婷香香五月| 激情五月婷婷综合秋霞| 六月色色婷婷| 激情中文在线| 色五月亚洲| 丁香五月激情啪啪| 综合色色网| 热思思九九| 99只有精品| 丁香六月色香蕉视频| 久久曰曰| 《蜘蛛女》梁铮1995| 三级99热| 九热视频| 色婷狠狠| 丁香综合伊人| 中文字幕欧美精品久久| 婷婷丁香18| 激情啪啪五月天| 热婷婷av| 五月丁香成人网| 色婷婷丁香五月综合| 92久操视频| 婷婷五月天综合网| 看国产探花操逼三级片| 久久超级碰视频| 五月激情影院| 久久久天天啊| 色A网| 丁香五月停停基地| 色婷婷丁香五月色综合网| 五月婷婷丁香在线| 成人精品免费在线观看| 五月丁香综合啪啪| 亚洲激情另类| 欧美性爱特黄一级aaaassss| 七月丁香婷婷 色色| 久久99热这里只有精品| 991国产精选视频在线播放下载| 九九香蕉网| 夜夜做夜夜愛| 色婷婷婷av | 97干欧美| 深爱激情网五月天| 亚洲综合激情五月天婷婷| 成人无码精品1区2区3区免费看| 网色99| 超碰成人黄色网| 精品网站:999WWW| Va另类视频| www.久久爱.com| 三日本无码| 婷婷六月天| www.天天干| 日日操日日射| 五月丁色AV| 久99综合婷婷| 五月婷婷大香蕉| 变态另类9| se99视频| 婷婷伊在线| 99久久国产宗和精品1上映| 激情综合在线观看| www九九热| 99久久精彩视频。| 五月婷婷综合视频| 玖玖资源站中文| 天天射天天射一道本日本社区| 国产激情一区| 色玖玖爱| 婷婷在线激情| 婷婷五月图片小说网| av国产精品偷| 五月丁香六月婷婷激情四射| 99色婷婷| 成人免费在线电影| 婷婷噜噜| 无码人妻一区二区三区免费九色| 任你日视频| 综合久久久婷| 五月婷婷之综合激情在线| 天天干天干| 夜夜大香蕉婷婷丁香| 丁香五月六月婷婷自拍| 丁香六月婷婷综合啪啪| 国产AV一区二区三区最新精品| 天天弄天天操| 狠狠人人婷婷| 丁香婷婷视频| 男人的天堂五月丁香| 狠狠搞五月天| 97碰在线视频| 狼友视频在线观看18| 色九四色| 久久久一级AAA| 日本强伦片中文字幕免费看| www.91九色| 久久人人九| 可以免费观看的AV| 六月婷婷五月天| 久久这里都是精品| 五月天六月婷婷电影| 影音先锋xfplay资源男人网| www.久久9| 夜夜爱爱亚洲| 丁香五月网| 丁香婷婷五月香蕉91| 99热网站在线观看| 综久久久| 成人丁香| 日韩久久视频| 久久婷综合| 丁香六月激情国产| 五月六月婷| 色婷婷丁香| 色婷婷电影| 青青草激情网| 五月天 综合 在线| 久久天堂婷婷五月| 色婷五月| 亚洲成人av在线播放| 久久婷婷的综合色丁香五月| 色综合99| 天天爱天天做天天舔| 666555。COm毛片| 亚洲最大在线| 五月之婷婷| 综合激情五月四射婷婷| 青青青在线视频国产| 这里有精品| 日韩99视频| 99视频这里只有久久精品| 色99欧洲色19| 色婷婷电影网| 99干视频| 婷婷色狠狠| 婷婷丁香五月天综合网| 高潮毛片又色又爽免费| 99爱免费视频| 五月天婷婷午夜丁香| 亚洲熟妇AV乱码在线观看| 婷婷色色欧美| 天天草狠狠擦| 91色婷婷综合久久中文字幕二区| 99热亚洲| 色婷婷香蕉| 亚洲五月花| 亚洲mm色| 亚洲va日| 日本精品99| 欧美色片中文字幕久久久久| 精品久久99| 夜精品无码A片一区二区蜜桃| 亚洲操操操| 人人色人人弄人人操| 欧美性生交XXXXX无码小说| 天天色天天日| 亚洲黄色影视| 亚洲99热| 国产五月天婷婷| 婷婷欧美色| www.色擼擼.com| 久久伊人9| 丁香五月天色综合| 久久青青日本视频| 婷婷五月综合在线| 五月丁香婷婷婷婷综合网| 播五月婷婷开心| 天天草天天日| 9l视频自拍9l九色9l成人| 亚洲情色一区| 中文字幕丰满孑伦无码专区| 欧美日韩精品人妻狠狠躁免费视频| 婷婷五月天AV| 九九色情网五月天| 超碰在线看| 26uuu亚洲欧美| 99热最新精品| 日韩一区二区A片免费观看| 密着浓厚中出乚交尾GvG935| 久久人人妻| 色狠狠婷婷| 五月六月婷| 婷婷五月丁香基地| 俺也去在线视频| 常久最新免费的色吊丝| 成人在线视频网| 丁香五月香蕉| 日本一道久久| 五月丁香久人妻中文| 98色丁香五月婷婷综合网| 欧美激情中文字幕| 五月丁香在线国产 | 中文字幕在线免费观看视频| 激情六月综合| 涩婷婷视频快播人妻| 精品人妻在线| 激情五月丁香激情综合网| 久久er99| 日韩成人精品中文字幕| 骚货艹网站视频| 99热这里只有精品一| 人人草成人视频| 婷婷丁香五月激情综合站_久久五月丁香激情综合_开心五月综合激情综合五月_婷 | 久久久久人妻精品| 欧美Va婷色| www.色综合| 丁香五月婷久久| 九九色综合| 亚洲中文字幕在线观看| 久久丁香五月天| 99色视频| 97色射| 97性高潮久久久| 五月天停婷基地| 久久久潮喷-久久久九九-成人AV| 人妻内射一区二区在线视频| 中文字幕黄色片| 九九在线精品| 婷婷丁香成人色综合| 青草青草视频2免费观看| www.99热这里只有精品| 人妻久久婷婷| 六月丁香啪啪啪| 亚洲熟妇AV乱码在线观看| 五月综合色| 国产91资源在线| 色色综合热| WWW.99热| 色婷丨日丨天丨综合久久| 天天拍夜夜撸| 激情五月天www| 99无码| 97综合在线| 20253AV| 久久婷婷五月综合色奶水99啪| 五月五月婷婷| 99久久精| 岛国av电影网站| 丁香 亚洲 久久| 色色a| 美女久久天堂| 激情黄色小说色五月| 五月天激情图片| 五月亭亭六月激情| 欧美五月婷婷| 日日夜夜狠狠| ZpRSw| 伊人婷婷五月天| 区区欧美你爱| 91人人爽狠狠狠| 五月婷婷综合激情小说| 久久桃花网色婷婷| 亚洲熟女色| 新五月天婷婷激情电影| 国产精品蜜臀99| 欧美色色色色色| 五月天开心色色网| 8区视频在线| 婷婷五月天a| 久久性爱视频| 久久九九思思| 99re66热这里只有精品| 天堂爱爱| 99无码精品| 日韩成人无码| 9操在线| 99久久久国产精品免费蜜乳tv| 天天做天天爱天天玩夜夜爽| 六月婷婷日| 99久久久久久| 婷婷五月综合中文字幕| 天堂网色色| 婷婷五月天亚洲综合网| 婷婷五月综合网| 99热热热99精品婷婷| 亚洲无码免费看| 视频免费精品免费精品免费精品免费精品免费精品免费精品免费99 | 丁香六月婷婷综合缴| 最新久久网址| 婷婷九月久久| WWW丁香五月| 婷婷丁香九月| 亚洲色区17| 人人干天天操五月丁香| 可似看的AV| 国产又粗又大又爽又黄| 丁香六月综合| 色婷婷欧美在线| 婷婷永久在线| 婷婷五月天AV在| 热99精品视频| 免费看欧美成人A片无码| AⅤ在线播放网| 五月天欧美 另类小说| 激情五月,激情综合网| 翔田千里 50岁 无码| 欧美韩国日本| 操一区| 亚洲情色一区| 五月婷婷亚洲色图| 丁香五月23111| 国产亚洲99久久精品| 久久久久久久久久久久63| 亭亭色色五月天| 婷婷婷久久久| 色综合综合网| 中文字幕免费高清电视剧| 日韩无码专区| 丁香花色色网| 美女亚洲五月丁香| 高清一区二区三区日本久| 婷婷色偷拍| 久久在这里99| tingtingjiqingwuyue| 色噜噜狠狠色综合日日| 五月婷婷久久综合| 内射爽无广熟女亚洲| 天天日天天干天天爱| 九九黄色网| 五月天婷婷基地| 大伊香蕉精品视频在线| 六月色婷婷欧美| 永久天堂日本| 97碰啪啪| 五五月五月| 国产操逼网站| 99综合| 亚洲综合五月天综合| 任你躁XXXXX麻豆精品| 五月天激情国产综合AV| 99在线精品免费视频| 午夜不卡成人一区二区| 七月婷婷色香综合网| 久久成人天| 九月激情综合| 成人无码髙潮喷水A片| 国产色婷婷亚洲| 婷婷激情97| 久久99网| 激情五月狠狠| 操一区| 日操熟女| 色五月婷婷狠狠撸| 日日夜夜狠狠| 日本五月婷婷久久久六月丁香| 天天日天天爽| jiujiuxiangjiaowang| 性 色 婷婷| 超碰人人摸人人操| 久久九九大香蕉电院| 蜜桃人妻无码AV天堂三区| 综合久久久| WWW.婷婷| 色婷婷久久综合| 91久久国产自产拍夜夜91久久精品文字>91麻豆精品国产 | 伊人六月无码视频| 韩国19 主播内部福利vip免费播放| 最新av在线观看| 亚洲激情色色| 99热综合在线| 九九九激情网| 天天综合在线网| 人妻久久久久久久久久| 91嫩草久久| 久久精品A片777777| 五月播播| WWW.激情| 欧美日韩成人| 欧美婷婷五月激情| 婷婷五月综合中文字幕| 五月婷综合性中心| 日韩AV在线电影| 婷婷久久精品| 五月久久五月激情| 超碰成人黄色网| 丁香婷婷月| 五月天婷婷色色| 99热热热99精品丁香| 五月天激情网址| 任你搞在线观看视频| 99国产这里只有精品| 日本WwW色偷偷丁香花久久久京东热| 就爱啪啪婷婷| 丁香五月天婷婷大香蕉| 开心色五月天久久久久久久| 亚洲欧美成人在线观看| 色婷婷五月综合网| 婷婷色五月开心五月| 超碰资源在线| 思思99精品视频| 99精品丰满| av大香蕉| 99热这里只有精品 搜| 丁香五月综合狠狠| 一区二区乱码视频| 婷婷色播综合五月| 久久久欧美精品sm网站| 婷婷丁香亚洲色综合91| 丁香婷婷九月| 国产精产国品一二三在观看 | 极品少妇XXXX精品少妇偷拍| 开心婷婷五月花| 吊色AV男人的天堂| 欧美性生交XXXXX无码小说| 五月婷婷欲色|