欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

在線拍賣系統(tǒng)架構(gòu)設(shè)計(jì):Node.js+Socket.IO+Redis高并發(fā)實(shí)踐

在線拍賣系統(tǒng)架構(gòu)設(shè)計(jì):Node.js+Socket.IO+Redis高并發(fā)實(shí)踐 1. 這個(gè)項(xiàng)目到底要解決什么問(wèn)題拍賣業(yè)務(wù)和普通電商的差距在哪先說(shuō)個(gè)實(shí)際場(chǎng)景。我見(jiàn)過(guò)不少同學(xué)拿到“在線拍賣系統(tǒng)”這個(gè)題目后第一反應(yīng)是照抄電商系統(tǒng)的商品模塊商品列表、購(gòu)物車、訂單、支付然后換了個(gè)殼子叫“拍賣”。答辯時(shí)被問(wèn)了一句“拍賣截止時(shí)間到了但有人正在輸入出價(jià)你怎么處理”就卡住了。說(shuō)實(shí)話這是做拍賣系統(tǒng)最典型的誤區(qū)——拍賣的核心從來(lái)不是“賣東西的流程”而是競(jìng)價(jià)規(guī)則本身。普通電商的訂單狀態(tài)是線性流轉(zhuǎn)下單、支付、發(fā)貨、收貨。買個(gè)東西你付了錢東西就是你的邏輯很直接。拍賣則完全不同它有幾個(gè)電商沒(méi)有的特殊問(wèn)題時(shí)間敏感每個(gè)拍賣品有明確的起止時(shí)間“最后幾秒”往往決定成敗系統(tǒng)必須在毫秒級(jí)處理出價(jià)請(qǐng)求。狀態(tài)競(jìng)爭(zhēng)同一個(gè)拍賣品同一時(shí)刻可能有幾十個(gè)用戶同時(shí)在出價(jià)但只有價(jià)格最高的那個(gè)人能勝出其他人的出價(jià)要被拒絕或立刻被超出的新價(jià)格作廢。結(jié)果裁定拍賣結(jié)束后系統(tǒng)要自動(dòng)判定贏家如果有人在最后幾秒出價(jià)是否順延拍賣時(shí)間這個(gè)規(guī)則必須在后端嚴(yán)格控制不能靠前端倒計(jì)時(shí)來(lái)約定。可見(jiàn)性競(jìng)拍過(guò)程本身就是一個(gè)“實(shí)時(shí)直播”所有參與者的客戶端必須看到最新的出價(jià)記錄、倒計(jì)時(shí)和領(lǐng)先者變化這顆不是“刷新一下頁(yè)面”那種體驗(yàn)而是服務(wù)端推動(dòng)的實(shí)時(shí)更新。我當(dāng)時(shí)拿到需求文檔之后第一件事不是選技術(shù)棧而是先把拍賣的規(guī)則細(xì)化成一張可執(zhí)行的邏輯表。比如“加價(jià)幅度不低于多少”“同一用戶不能連續(xù)自加價(jià)”“大促場(chǎng)景下五萬(wàn)人圍觀一個(gè)拍賣品的實(shí)時(shí)瀏覽怎么支撐”——這些才是決定架構(gòu)的核心約束。順便也明確一下這個(gè)系統(tǒng)的目標(biāo)用戶和形態(tài)這是一個(gè)面向Web端的在線拍賣平臺(tái)管理員可以發(fā)布拍賣品、設(shè)置起拍價(jià)和保證金規(guī)則用戶通過(guò)瀏覽器參與競(jìng)拍系統(tǒng)自動(dòng)記錄出價(jià)歷史、判定成交并處理保證金退還。它適合做課程設(shè)計(jì)、畢業(yè)設(shè)計(jì)也能作為企業(yè)內(nèi)部“內(nèi)部資產(chǎn)拍賣”或“二手設(shè)備競(jìng)價(jià)”的原型系統(tǒng)。2. 技術(shù)選型的真實(shí)理由為什么是Node.js不只是因?yàn)樗鼘懼?jiǎn)單確定了業(yè)務(wù)邊界后第二步是選技術(shù)棧。當(dāng)時(shí)我選的是Node.js Express Socket.IO Redis MongoDB這個(gè)組合放到今天依然很能打。下面按“為什么選它”而不是“它多流行”的方式拆一下。2.1 Node.js的擅長(zhǎng)區(qū)間正好卡在拍賣系統(tǒng)的點(diǎn)上拍賣系統(tǒng)是一個(gè)典型的I/O密集、短連接高頻請(qǐng)求、高并發(fā)讀寫場(chǎng)景。每個(gè)用戶的出價(jià)動(dòng)作本質(zhì)上是一次快速的事件提交而系統(tǒng)需要把這個(gè)事件廣播給所有正在圍觀這個(gè)拍品的人。Node.js的異步事件驅(qū)動(dòng)模型天生適合這種“小而快”的任務(wù)。有人可能擔(dān)心Node.js是單線程的會(huì)不會(huì)在高并發(fā)下?lián)尾蛔?。?shí)際上普通拍賣系統(tǒng)的真實(shí)瓶頸很少在CPU計(jì)算而在數(shù)據(jù)庫(kù)連接數(shù)、Redis讀寫能力和網(wǎng)絡(luò)帶寬。Node.js單線程負(fù)責(zé)調(diào)度阻塞操作都丟給底層線程池配合Cluster模塊起多個(gè)進(jìn)程單機(jī)扛住一兩千并發(fā)連接問(wèn)題不大。我做壓測(cè)時(shí)8核機(jī)器上跑4個(gè)Node進(jìn)程每個(gè)進(jìn)程保持1萬(wàn)個(gè)Socket連接整體狀態(tài)很穩(wěn)定。再說(shuō)維護(hù)成本。整個(gè)系統(tǒng)前后端都用JavaScript部署時(shí)不需要多個(gè)運(yùn)行時(shí)環(huán)境寫業(yè)務(wù)邏輯的思路也連貫。對(duì)我這種做全棧的人來(lái)說(shuō)一套語(yǔ)言打通確實(shí)省了不少事。2.2 Socket.IO做實(shí)時(shí)推送選擇它的關(guān)鍵原因是容錯(cuò)而不是炫技拍賣頁(yè)面的核心體驗(yàn)是當(dāng)前價(jià)變了、領(lǐng)先者變了、倒計(jì)時(shí)變了所有在線用戶都能立刻看到。用傳統(tǒng)的HTTP輪詢也行但一是浪費(fèi)請(qǐng)求二是延遲不穩(wěn)定。WebSocket是正確答案但直接裸用WebSocket要處理斷線重連、心跳、連接狀態(tài)同步這些臟活。Socket.IO在這方面幫了大忙。它底層自動(dòng)選擇WebSocket、輪詢或其他可用方式實(shí)測(cè)中某個(gè)用戶網(wǎng)絡(luò)差時(shí)自動(dòng)降級(jí)成HTTP長(zhǎng)輪詢體驗(yàn)不至于崩掉連接斷開(kāi)后會(huì)自動(dòng)重連配合房間里的事件廣播斷線幾秒再回來(lái)狀態(tài)還能對(duì)得上。異步任務(wù)的部分我用了Redis輔助這一點(diǎn)后面單獨(dú)講。這里先記住一個(gè)結(jié)論Socket.IO不是可有可無(wú)的“聊天室工具”它承擔(dān)了競(jìng)拍系統(tǒng)“現(xiàn)場(chǎng)直播感”的全部責(zé)任。2.3 Redis在系統(tǒng)里的三副面孔R(shí)edis在這個(gè)項(xiàng)目里不是可有可無(wú)的緩存層它承擔(dān)了三個(gè)職責(zé)實(shí)時(shí)數(shù)據(jù)的存儲(chǔ)當(dāng)前價(jià)格、當(dāng)前領(lǐng)先者、倒計(jì)時(shí)截止時(shí)間戳這些更新頻率高、數(shù)據(jù)量小的狀態(tài)放在Redis里避免每次都查MongoDB。分布式鎖解決“同一時(shí)間多個(gè)進(jìn)程處理同一個(gè)拍品的出價(jià)”時(shí)的并發(fā)沖突。Socket.IO的適配器后端讓多進(jìn)程之間能互相廣播事件確??蛻舳诉B在不同Node進(jìn)程上也能收到同一件拍品的出價(jià)提醒。只要系統(tǒng)會(huì)面臨拍賣高峰期Redis幾乎就是標(biāo)配不是可選項(xiàng)。2.4 數(shù)據(jù)庫(kù)選型MongoDB適合這種“敏捷演變”的數(shù)據(jù)結(jié)構(gòu)拍賣品、出價(jià)記錄、用戶信息這幾類數(shù)據(jù)天然是文檔結(jié)構(gòu)。每件拍品的參數(shù)字段可能不一樣字畫有作者、古董有年代、電子產(chǎn)品有型號(hào)關(guān)系型數(shù)據(jù)庫(kù)里要搞一堆“規(guī)格擴(kuò)展表”而MongoDB允許直接嵌入一個(gè)動(dòng)態(tài)的屬性對(duì)象開(kāi)發(fā)效率高很多。另外出價(jià)記錄是典型的追加型數(shù)據(jù)MongoDB的寫入性能也優(yōu)于傳統(tǒng)關(guān)系庫(kù)的常規(guī)配置。為了讓出價(jià)記錄查詢快我給collection加了聯(lián)合索引{auctionId: 1, price: -1}。為了讓拍賣中的拍品能快速篩選加了{(lán)status: 1, endTime: 1}的索引。這是設(shè)計(jì)初就規(guī)劃好的不是等數(shù)據(jù)量大了才想起來(lái)補(bǔ)。3. 第一個(gè)核心難點(diǎn)拍賣狀態(tài)機(jī)與延遲機(jī)制的完整實(shí)現(xiàn)進(jìn)到具體實(shí)現(xiàn)階段后最復(fù)雜的其實(shí)是“規(guī)則邏輯”而不是“增刪改查”。建議先畫一張狀態(tài)圖把拍品的生命周期理清楚再寫代碼不然很容易在幾個(gè)狀態(tài)的邊界上兜圈子。3.1 狀態(tài)機(jī)pending到running到ending的三態(tài)流轉(zhuǎn)我把拍品的狀態(tài)定義得非常明確pending未開(kāi)始管理員創(chuàng)建拍品后等待到達(dá)開(kāi)始時(shí)間。running進(jìn)行中開(kāi)始時(shí)間到達(dá)或管理員手動(dòng)上架用戶可出價(jià)。ended已結(jié)束到達(dá)結(jié)束時(shí)間且無(wú)延時(shí)時(shí)系統(tǒng)自動(dòng)裁定結(jié)果。settled已成交在ended基礎(chǔ)上完成支付/保證金退還等后續(xù)動(dòng)作。這個(gè)狀態(tài)流轉(zhuǎn)我完整寫在服務(wù)端禁止前端直接改狀態(tài)字段只允許通過(guò)服務(wù)端接口觸發(fā)。這里有一個(gè)關(guān)鍵設(shè)計(jì)容易被忽略狀態(tài)的變更必須帶時(shí)間戳和操作人。比如用戶出價(jià)時(shí)發(fā)現(xiàn)拍品已經(jīng)ended就要明確記下“誰(shuí)在什么時(shí)候試圖出價(jià)被拒”這在糾紛處理時(shí)要查得清楚。3.2 截止時(shí)間到底怎么定不可逆的時(shí)間戳原則前端展示的倒計(jì)時(shí)是從服務(wù)端取到的endTime字段計(jì)算出來(lái)的。任何客戶端本地時(shí)間都不參與“是否截止”的判定攻擊者改系統(tǒng)時(shí)鐘對(duì)服務(wù)端毫無(wú)影響。這里有個(gè)細(xì)節(jié)數(shù)據(jù)庫(kù)里存的是絕對(duì)時(shí)間戳epoch毫秒而不是“剩余秒數(shù)”。因?yàn)椤笆S嗝霐?shù)”是一種相對(duì)狀態(tài)會(huì)隨著計(jì)算時(shí)刻不同產(chǎn)生漂移絕對(duì)時(shí)間戳則無(wú)歧義。前端拿到endTime后通過(guò)const remain Math.max(0, Math.floor((endTime - Date.now()) / 1000))計(jì)算顯示。3.3 最后幾秒的規(guī)則延長(zhǎng)拍賣時(shí)間而非簡(jiǎn)單拒絕這是拍賣系統(tǒng)最出彩、也最容易出錯(cuò)的地方。規(guī)則是在剩余時(shí)間不足X秒如3秒時(shí)如有人出價(jià)則拍賣結(jié)束時(shí)間自動(dòng)延長(zhǎng)Y秒如5秒。這個(gè)機(jī)制通常稱為“自動(dòng)延長(zhǎng)時(shí)間”作用是防止最后時(shí)刻的網(wǎng)絡(luò)延遲導(dǎo)致真實(shí)買家無(wú)法完成出價(jià)。實(shí)現(xiàn)時(shí)不能用“前端倒計(jì)時(shí)到了就鎖死”的方案必須由后端原子操作判斷。我用Redis的WATCH/MULTI事務(wù)來(lái)處理// 判斷并延長(zhǎng)截止時(shí)間 const redisClient require(./redis).getClient(); async function tryExtendAuction(auctionId, latestBidTime) { const key auction:endTime:${auctionId}; const result await redisClient.watch(key); if (!result) return; const currentEnd await redisClient.get(key); const remain currentEnd - Date.now(); const multi redisClient.multi(); if (remain EXTEND_THRESHOLD_MS remain 0) { const newEnd Date.now() EXTEND_DURATION_MS; multi.set(key, newEnd); multi.set(auction:status:${auctionId}, running); } const execRes await multi.exec(); if (!execRes) { // 有其他請(qǐng)求并發(fā)修改重試 return tryExtendAuction(auctionId, latestBidTime); } }這樣寫的核心是REdis的watch機(jī)制監(jiān)聽(tīng)endTime如果在我讀取之后、事務(wù)執(zhí)行之前這個(gè)key被別的進(jìn)程改了整個(gè)事務(wù)就取消重試。這保證了多人同時(shí)出價(jià)時(shí)只會(huì)有一個(gè)人成功延長(zhǎng)而不會(huì)被覆蓋成亂七八糟的時(shí)間。3.4 定時(shí)任務(wù)的坑setTimeout不是用來(lái)做拍賣結(jié)算的一開(kāi)始很多人會(huì)用setTimeout來(lái)做“到點(diǎn)自動(dòng)結(jié)算”??雌饋?lái)簡(jiǎn)單但服務(wù)器重啟后內(nèi)存中的timer會(huì)全部丟失。更穩(wěn)妥的做法是每個(gè)拍品結(jié)束時(shí)先把狀態(tài)標(biāo)記為“待結(jié)算”并寫入結(jié)算時(shí)間。然后用一個(gè)獨(dú)立的輪詢?nèi)蝿?wù)去掃描所有“running且endTime已過(guò)”的拍品執(zhí)行結(jié)算。這個(gè)輪詢?nèi)蝿?wù)可以用node-cron實(shí)現(xiàn)每秒鐘掃一次const cron require(node-cron); cron.schedule(* * * * * *, async () { const expiredAuctions await Auction.find({ status: running, endTime: { $lte: new Date() } }); for (const auc of expiredAuctions) { await settleAuction(auc._id); } });掃描頻率是1秒一次粒度足夠了。即便定時(shí)任務(wù)有1秒延遲用戶也感知不到。不過(guò)千萬(wàn)注意掃描任務(wù)必須設(shè)計(jì)成可重入的。也就是說(shuō)同一件拍品不能在兩次掃描中被同時(shí)結(jié)算。我給處理過(guò)程加了一個(gè)狀態(tài)位開(kāi)始結(jié)算前用Redis setnx寫入一個(gè)lock key成功才繼續(xù)否則跳過(guò)本次。4. 第二個(gè)核心難點(diǎn)競(jìng)價(jià)高并發(fā)下的數(shù)據(jù)一致性出價(jià)是拍賣系統(tǒng)的核心操作比普通的“寫入一條記錄”復(fù)雜得多。每次出價(jià)必須同時(shí)滿足出價(jià)價(jià)格大于當(dāng)前最高價(jià)并且加價(jià)幅度合法。拍品狀態(tài)為running。當(dāng)前時(shí)間還沒(méi)到endTime。不能是領(lǐng)先者自己再次出價(jià)防止自己頂自己刷價(jià)。這幾個(gè)條件任何一個(gè)不滿足都要拒絕這次出價(jià)。但如果判斷完再寫入期間又有別的請(qǐng)求插進(jìn)來(lái)就可能出現(xiàn)“兩個(gè)人同時(shí)認(rèn)為自己出價(jià)成功”的競(jìng)態(tài)條件。解決這個(gè)問(wèn)題的典型方法有樂(lè)觀鎖和Redis原子操作我兩個(gè)都用過(guò)說(shuō)說(shuō)實(shí)際的取舍。4.1 方案對(duì)比樂(lè)觀鎖 vs Redis原子操作給MongoDB的拍賣品文檔加一個(gè)version字段遞交出價(jià)時(shí)帶上讀出時(shí)的版本號(hào)更新時(shí)用findOneAndUpdate帶條件version 讀取的版本號(hào)如果更新結(jié)果為空說(shuō)明版本沖突重新讀取再試。這種樂(lè)觀鎖簡(jiǎn)單可靠但問(wèn)題是在高并發(fā)情況下重試次數(shù)會(huì)很多不僅浪費(fèi)體驗(yàn)也不好。改進(jìn)后我采用的方式是把“當(dāng)前最高價(jià)”放在Redis里用Redis的原子自增/范圍操作來(lái)裁決出價(jià)。const Script if redis.call(exists, KEYS[1]) 0 then return -1 end local currentPrice tonumber(redis.call(get, KEYS[2])) local requiredStep tonumber(ARGV[2]) if tonumber(ARGV[1]) currentPrice requiredStep then return 0 end redis.call(set, KEYS[2], ARGV[1]) redis.call(set, KEYS[3], ARGV[3]) return 1 ; const result await redisClient.eval(Script, 3, auction:status:${auctionId}, auction:currentPrice:${auctionId}, auction:leader:${auctionId}, newPrice, minStep, userId );Lua腳本在Redis里是原子執(zhí)行的這行命令在整個(gè)執(zhí)行期間不會(huì)被其他命令插入所以并發(fā)判斷和寫入是安全無(wú)競(jìng)態(tài)的。出價(jià)成功后再把出價(jià)記錄異步寫入MongoDB。這里Redis不是緩存而是數(shù)據(jù)的“合法裁決點(diǎn)”。4.2 MongoDB里的出價(jià)記錄異步落庫(kù)與補(bǔ)償Redis負(fù)責(zé)裁決MongoDB負(fù)責(zé)持久化。把出價(jià)記錄異步落庫(kù)時(shí)有兩種方案監(jiān)聽(tīng)Redis的鍵變化事件觸發(fā)寫入。每個(gè)Node進(jìn)程在收到業(yè)務(wù)層“出價(jià)成功”信號(hào)后自行寫庫(kù)。方案2更直觀但需要小心如果某一臺(tái)Node進(jìn)程在寫入期間崩潰出價(jià)記錄就丟了。解決方法是引入一個(gè)簡(jiǎn)單的補(bǔ)償任務(wù)定每隔一段時(shí)間比如每分鐘比對(duì)Redis中的當(dāng)前狀態(tài)和MongoDB中記錄的最高價(jià)是否一致如果Redis中的價(jià)格高于數(shù)據(jù)庫(kù)記錄就補(bǔ)插一條記錄。看起來(lái)有點(diǎn)笨但拍賣場(chǎng)景下極少出現(xiàn)這個(gè)不一致而且補(bǔ)償對(duì)賬能保證賬目可靠。4.3 加價(jià)幅度的校驗(yàn)放在哪一層出價(jià)不是隨意數(shù)字系統(tǒng)規(guī)定加價(jià)幅度必須高于當(dāng)前價(jià)的某個(gè)比例例如5%或固定階梯值。這個(gè)校驗(yàn)務(wù)必放在服務(wù)端不能依賴前端禁用按鈕。理由是顯而易見(jiàn)的任何人都能直接偽造請(qǐng)求。前端可以輔助展示“最低可出價(jià)”后端則必須嚴(yán)格判斷if (bidPrice currentPrice minStep) { throw new BizError(BID_PRICE_TOO_LOW); }這個(gè)currentPrice從Redis里讀而不是從數(shù)據(jù)庫(kù)讀因?yàn)镽edis值實(shí)時(shí)滾動(dòng)的頻率遠(yuǎn)高于數(shù)據(jù)庫(kù)持久化頻率。前端顯示出現(xiàn)微小延遲沒(méi)關(guān)系但后端裁決必須使用最準(zhǔn)的數(shù)據(jù)。5. 前端實(shí)時(shí)交互那些容易被忽略的體驗(yàn)細(xì)節(jié)頁(yè)面實(shí)現(xiàn)上我用服務(wù)端渲染出基礎(chǔ)結(jié)構(gòu)再用Socket.IO負(fù)責(zé)動(dòng)態(tài)區(qū)域的實(shí)時(shí)更新。不是所有地方都要實(shí)時(shí)只有這幾個(gè)關(guān)鍵區(qū)域需要當(dāng)前最高價(jià)與領(lǐng)先者昵稱。最新出價(jià)記錄列表。距離截止的時(shí)間倒計(jì)時(shí)。狀態(tài)橫幅“已結(jié)束”“已成交”。5.1 房間設(shè)計(jì)io.to(auctionId)只推相關(guān)用戶Socket.IO提供了房間room)能力。用戶進(jìn)入拍賣詳情頁(yè)時(shí)前端發(fā)一個(gè)joinAuctionRoom事件后端把socket加入到auction_${auctionId}房間內(nèi)。這樣出價(jià)成功時(shí)只需io.to(auctionRoomId).emit(bid:update, data)所有在線用戶都能收到不在這個(gè)頁(yè)面的人則不會(huì)被廣播干擾。有幾百萬(wàn)人在線時(shí)全局廣播會(huì)造成巨大壓力。按房間推送能把消息量限制在真正關(guān)注當(dāng)前拍品的用戶范圍內(nèi)。5.2 斷線重連與狀態(tài)同步保住用戶的“現(xiàn)場(chǎng)感”網(wǎng)絡(luò)抖動(dòng)是常態(tài)用戶刷新頁(yè)面也會(huì)觸發(fā)socket重新連接。Socket.IO默認(rèn)會(huì)自動(dòng)重連但重連后前端頁(yè)面上的價(jià)格和倒計(jì)時(shí)可能已經(jīng)過(guò)期。我寫了一個(gè)reqState事件socket連接建立后前端主動(dòng)請(qǐng)求當(dāng)前拍品的完整快照當(dāng)前價(jià)、截止時(shí)間、領(lǐng)先者、最近的出價(jià)記錄服務(wù)端從Redis Mongo組裝返回。這樣用戶不管什么時(shí)候進(jìn)來(lái)看到的都是準(zhǔn)實(shí)時(shí)狀態(tài)不會(huì)顯示一個(gè)過(guò)期的死頁(yè)面。5.3 倒計(jì)時(shí)的前端算法不要依賴服務(wù)端的“剩余秒數(shù)”前面說(shuō)了服務(wù)端返回絕對(duì)時(shí)間戳。前端用一個(gè)統(tǒng)一的時(shí)間源來(lái)做倒計(jì)時(shí)更新function formatRemain(endTime) { const remain Math.max(0, Math.floor((endTime - Date.now()) / 1000)); const h Math.floor(remain / 3600); const m Math.floor((remain % 3600) / 60); const s remain % 60; return ${h}:${String(m).padStart(2, 0)}:${String(s).padStart(2, 0)}; }這里有一個(gè)細(xì)節(jié)如果用戶本地時(shí)鐘和服務(wù)端差了幾秒倒計(jì)時(shí)顯示會(huì)不準(zhǔn)確。雖然不是嚴(yán)重的問(wèn)題但競(jìng)拍最后幾秒用戶會(huì)很敏感。嚴(yán)謹(jǐn)?shù)淖龇ㄊ沁B接建立時(shí)服務(wù)端下發(fā)一個(gè)serverTime前端計(jì)算本地時(shí)鐘偏移量之后用Date.now() offset作為時(shí)間基準(zhǔn)。5.4 出價(jià)按鈕的防誤觸設(shè)計(jì)出價(jià)操作是不可撤銷的誤觸一次就可能花冤枉錢。前端在按鈕點(diǎn)擊后要加一個(gè)確認(rèn)彈窗顯示本次出價(jià)后的新價(jià)格。同時(shí)按鈕在收到“出價(jià)成功”或“出價(jià)過(guò)低”的socket響應(yīng)前應(yīng)處于loading狀態(tài)防止快速連點(diǎn)造成沖突。后端也不怕連點(diǎn)因?yàn)閮r(jià)格裁決在Redis的Lua里是原子操作。即便前端快速發(fā)了兩次相同價(jià)格的出價(jià)第二次會(huì)因?yàn)椤皟r(jià)格未高于當(dāng)前價(jià)”被自然拒絕。6. 數(shù)據(jù)庫(kù)模型設(shè)計(jì)寧可多寫一點(diǎn)也不要留模糊地帶6.1 拍賣品集合的核心字段{ _id: ObjectId, title: String, // 標(biāo)題 description: String, // 描述 coverImage: String, // 封面圖URL startPrice: Number, // 起拍價(jià)單位分 currentPrice: Number, // 當(dāng)前價(jià)實(shí)時(shí)取Redis冗余存儲(chǔ) minStep: Number, // 最小加價(jià)幅度 deposit: Number, // 保證金分 startTime: Date, // 開(kāi)始時(shí)間 endTime: Date, // 截止時(shí)間 status: String, // pending / running / ended / settled leaderId: ObjectId, // 當(dāng)前領(lǐng)先者 bidCount: Number, // 出價(jià)次數(shù)統(tǒng)計(jì)用 actualEndTime: Date, // 實(shí)際結(jié)束時(shí)間可能因延時(shí)而變化 createdAt: Date, updatedAt: Date }注意我用了“分”作為貨幣單位。浮點(diǎn)數(shù)算錢在JavaScript里是災(zāi)難雖然MongoDB支持Decimal128但單位換算成整數(shù)更省心顯示時(shí)再除以100。加價(jià)幅度、當(dāng)前價(jià)、起拍價(jià)全部存整數(shù)分。6.2 出價(jià)記錄集合{ _id: ObjectId, auctionId: ObjectId, userId: ObjectId, price: Number, // 本次出價(jià)分 createdAt: Date, isAuto: Boolean, // 是否系統(tǒng)自動(dòng)出價(jià)預(yù)留 ip: String, // 操作來(lái)源審計(jì)用 source: String, // web / admin }這個(gè)集合只做追加不修改不刪除。用戶可以在詳情頁(yè)看到所有歷史出價(jià)也是后期審計(jì)的憑證。索引{auctionId: 1, price: -1}可以讓“最近出價(jià)列表”查詢走索引。6.3 用戶與保證金保證金設(shè)計(jì)上為了簡(jiǎn)化流程我初期用一個(gè)userDeposits集合記錄用戶為某個(gè)拍品繳納的保證金狀態(tài){ _id: ObjectId, userId: ObjectId, auctionId: ObjectId, amount: Number, status: String, // paid / frozen / returned / deducted paidAt: Date, returnedAt: Date }拍賣結(jié)束時(shí)贏家需要完成付款保證金可抵扣貨款輸家的保證金自動(dòng)原路退回。這是業(yè)務(wù)上比較合理的閉環(huán)。如果沒(méi)有支付渠道可以做成“模擬支付”但數(shù)據(jù)結(jié)構(gòu)上必須有這條鏈路。7. 部署架構(gòu)與橫向擴(kuò)展從單機(jī)到多進(jìn)程的平滑演進(jìn)前面的內(nèi)容主要集中在代碼層面。這部分把真實(shí)部署時(shí)的架構(gòu)設(shè)計(jì)講清楚因?yàn)楹芏嗤瑢W(xué)做完功能后就停了忽略了“系統(tǒng)能面對(duì)多少真實(shí)用戶”這個(gè)問(wèn)題。7.1 單機(jī)起步的最小架構(gòu)初期單機(jī)方案如下一臺(tái)云主機(jī)4核8G以上。Nginx做反向代理靜態(tài)資源走緩存。Node.js起4個(gè)進(jìn)程Cluster模式監(jiān)聽(tīng)同一個(gè)端口。Redis和MongoDB部署在同一臺(tái)機(jī)器上或者單獨(dú)實(shí)例。這個(gè)配置大概能支撐幾百到上千的并發(fā)在線用戶對(duì)課程設(shè)計(jì)和中小型內(nèi)部系統(tǒng)完全夠用。7.2 Socket.IO的跨進(jìn)程通信Redis Adapter是關(guān)鍵單機(jī)起4個(gè)進(jìn)程之后馬上會(huì)遇到一個(gè)麻煩用戶A連的是進(jìn)程1用戶B連的是進(jìn)程2A出價(jià)后進(jìn)程1只能給本進(jìn)程內(nèi)的socket廣播進(jìn)程2里的用戶收不到更新。解決方法是給Socket.IO配上Redis Adapterconst { createAdapter } require(socket.io/redis-adapter); const { createClient } require(redis); const pubClient createClient({ url: redis://localhost:6379 }); const subClient pubClient.duplicate(); io.adapter(createAdapter(pubClient, subClient));配好之后每個(gè)進(jìn)程的Socket.IO實(shí)例通過(guò)Redis互相傳遞廣播消息room的概念也自動(dòng)變成全局的。這樣“房間內(nèi)廣播所有在線用戶”是基于全集群的而不只限于單個(gè)進(jìn)程。7.3 Nginx的升級(jí)策略與負(fù)載均衡當(dāng)在線用戶數(shù)增長(zhǎng)到幾千、上萬(wàn)時(shí)單機(jī)肯定不夠了。擴(kuò)展思路是Nginx轉(zhuǎn)發(fā)請(qǐng)求到多臺(tái)Node服務(wù)器。Socket.IO長(zhǎng)連接必須開(kāi)啟ip_hash負(fù)載均衡或者使用sticky sessions否則同一個(gè)用戶的多次長(zhǎng)連接可能被分配到不同服務(wù)器重連后房間信息可能丟失。雖然Redis Adapter能解決跨進(jìn)程廣播但從用戶角度一個(gè)固定的連接能被路由到同一個(gè)后端進(jìn)程重連開(kāi)銷最小。Nginx配置里upstream node_app { ip_hash; server 10.0.0.1:3000; server 10.0.0.2:3000; }一個(gè)完整的生產(chǎn)級(jí)部署會(huì)涉及CDN、靜態(tài)資源分離、MongoDB副本集、Redis哨兵等但核心架構(gòu)和單機(jī)版本一脈相承。真正的門檻在“編排和監(jiān)控”不在“功能開(kāi)發(fā)”。7.4 性能瓶頸與優(yōu)化連接數(shù)比CPU更先到達(dá)上限壓測(cè)時(shí)最容易遇到的坑是EADDRNOTAVAIL或者too many open files。Linux默認(rèn)單進(jìn)程文件描述符上限是1024對(duì)一個(gè)支持幾千長(zhǎng)連接的Node進(jìn)程來(lái)說(shuō)根本不夠。必須調(diào)大ulimit -n 65535另外Socket.IO的心跳配置也需要按實(shí)際網(wǎng)絡(luò)情況去調(diào)。默認(rèn)心跳間隔和超時(shí)時(shí)間對(duì)弱網(wǎng)用戶不太友好我調(diào)整成const io new Server(httpServer, { pingInterval: 25000, pingTimeout: 20000, cors: { origin: [https://yourdomain.com] } });這兩個(gè)參數(shù)的含義是每25秒服務(wù)端發(fā)一次心跳若20秒內(nèi)客戶端沒(méi)有響應(yīng)則判定斷開(kāi)。太頻繁會(huì)增加無(wú)謂流量太慢會(huì)導(dǎo)致“用戶已經(jīng)斷網(wǎng)但服務(wù)端還掛著一堆僵尸連接”。8. 踩坑實(shí)錄那些文檔里不會(huì)寫的教訓(xùn)這個(gè)系統(tǒng)前前后后寫了兩三個(gè)版本踩過(guò)不少坑。挑幾個(gè)有代表性的分享出來(lái)。8.1 并發(fā)用戶出價(jià)后數(shù)據(jù)庫(kù)里的currentPrice和Redis不一致一開(kāi)始我把currentPrice放在Redis里做實(shí)時(shí)裁決但落庫(kù)時(shí)用的是Auction.updateOne({ _id }, { $set: { currentPrice: newPrice } })沒(méi)加版本控制。壓測(cè)時(shí)發(fā)現(xiàn)某個(gè)時(shí)刻數(shù)據(jù)庫(kù)里的價(jià)格低于Redis里的價(jià)格。原因很簡(jiǎn)單兩次并發(fā)更新在不同的進(jìn)程里執(zhí)行后到的寫庫(kù)請(qǐng)求可能讀到一個(gè)舊的Redis值把數(shù)據(jù)庫(kù)覆蓋成更低的價(jià)。我的修復(fù)方案是把MongoDB更新也改成條件更新只有當(dāng)傳入的新價(jià)格大于當(dāng)前數(shù)據(jù)庫(kù)價(jià)格時(shí)才更新const updateRes await Auction.updateOne( { _id: auctionId, currentPrice: { $lt: newPrice } }, { $set: { currentPrice: newPrice, leaderId: userId, updatedAt: new Date() } } );數(shù)據(jù)庫(kù)里的值就永遠(yuǎn)不會(huì)被低價(jià)格覆蓋。即便Redis和數(shù)據(jù)庫(kù)偶爾不一致數(shù)據(jù)庫(kù)對(duì)賬任務(wù)也能最終修正。8.2 服務(wù)器時(shí)鐘漂移導(dǎo)致倒計(jì)時(shí)提前清零我一開(kāi)始認(rèn)為服務(wù)器時(shí)間絕對(duì)準(zhǔn)確后來(lái)發(fā)現(xiàn)云服務(wù)器啟用NTP對(duì)時(shí)后極小概率會(huì)出現(xiàn)幾秒的時(shí)鐘跳動(dòng)。當(dāng)時(shí)有一場(chǎng)拍賣明明還有10秒前端倒計(jì)時(shí)直接歸零了。排查半天發(fā)現(xiàn)問(wèn)題出在“本地服務(wù)器時(shí)間和NTP校時(shí)瞬間跳變”上。這種偶發(fā)問(wèn)題很難復(fù)現(xiàn)但拍賣系統(tǒng)對(duì)時(shí)間極度敏感。我的做法是服務(wù)端多維護(hù)一個(gè)serverTimeOffset字段校時(shí)跳變時(shí)做平滑校正不讓倒計(jì)時(shí)顯示瞬間突變。8.3 Socket.IO的內(nèi)存泄漏分清日志級(jí)別的作用有段時(shí)間線上運(yùn)行幾天后內(nèi)存占用持續(xù)上升堆快照后發(fā)現(xiàn)是console.log在打印大對(duì)象??雌饋?lái)是個(gè)小事但生產(chǎn)環(huán)境每秒鐘幾百次出價(jià)廣播每次都打一大坨JSON日志系統(tǒng)自身就會(huì)成為性能瓶頸。優(yōu)化方案是log級(jí)別區(qū)分debug級(jí)別開(kāi)發(fā)環(huán)境打印完整對(duì)象。info級(jí)別生產(chǎn)環(huán)境只打印簡(jiǎn)要信息auctionId、price、userId、耗時(shí)。warn/error級(jí)別打印完整錯(cuò)誤堆棧。做技術(shù)的人容易忽視日志但日志其實(shí)是排障時(shí)的第一救命稻草。8.4 出價(jià)記錄查詢慢看懂explain()比瞎加索引管用有一個(gè)列表頁(yè)要顯示某件拍品的出價(jià)記錄數(shù)據(jù)量到了十萬(wàn)條后查詢?cè)絹?lái)越慢??磮?zhí)行計(jì)劃發(fā)現(xiàn)查詢走了全表掃描。加了聯(lián)合索引{auctionId:1, createdAt:-1}后速度從幾百毫秒降到個(gè)位數(shù)毫秒。這種問(wèn)題其實(shí)很基礎(chǔ)但真遇到了才知道索引設(shè)計(jì)不能靠直覺(jué)。9. 最后還想再聊幾句這個(gè)項(xiàng)目我從頭到尾做下來(lái)最大的感受是拍賣系統(tǒng)表面上是“一個(gè)帶倒計(jì)時(shí)的商品頁(yè)面”實(shí)際上是一套包含并發(fā)控制、實(shí)時(shí)通信、狀態(tài)機(jī)、資金流轉(zhuǎn)的完整業(yè)務(wù)系統(tǒng)。每個(gè)細(xì)節(jié)背后都有真實(shí)場(chǎng)景在推動(dòng)不是硬湊出來(lái)的功能。如果你想在這個(gè)項(xiàng)目基礎(chǔ)上繼續(xù)擴(kuò)展可以考慮這幾個(gè)方向增加代理出價(jià)功能——用戶設(shè)定最高預(yù)算系統(tǒng)代替自動(dòng)加價(jià)增加拍賣直播——把出價(jià)事件流和視頻流組合起來(lái)增加多幣種支持——后臺(tái)統(tǒng)一按分存儲(chǔ)前端按區(qū)域顯示。這些都是很自然的業(yè)務(wù)延伸。最后分享一個(gè)我做壓測(cè)時(shí)用的腳本思路不要只測(cè)“每秒能處理多少出價(jià)”更要測(cè)“最后10秒高并發(fā)下系統(tǒng)的數(shù)據(jù)一致性是否依然正確”。因?yàn)檎G闆r下可能只有幾十個(gè)請(qǐng)求但壓測(cè)如果只有高峰值的1/10很多并發(fā)問(wèn)題根本暴露不出來(lái)。每輪測(cè)試結(jié)束后跑一次對(duì)賬腳本對(duì)比Redis和MongoDB里的最終數(shù)據(jù)這樣測(cè)試的意義才完整。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
色婷婷激情视频| 久久久精品色| 国产婷婷婷| 天天做天天爽| 激情综合网亚洲色图| 亚洲第一成人无码A片| 色青青五月| 色情五月综合婷婷| 色五月婷婷DVD| 激情又色又爽又黄的A片| 丁香五月综合在线播放| 久777| 婷婷五月丁香激情色情| 亚洲无码九九九| 99热免| 五月丁香综合成人社区| 亚洲综合激情五月久久| 色播五月丁香| 色色色色色色色色色影院| 欧美综合五月丁香六月婷| 综合色色五月| 天堂久久婷婷| 先锋男人99资源| 色哟呦av| 亚洲无码11| 综合色99| 玖玖@三月天天丁香婷婷| 色五月六月| 婷婷五月中文字幕| 丁香五月激情五月| 五月婷婷激情五月| 欧美99热| 好色婷婷| 亚洲精品又粗又大又爽A片| 伊人激情网| www.成人婷婷综合| 九九色影院| 大香蕉五月天婷婷| 五月丁香六月婷婷欧美综合| 色婷婷五月天激情| 五月婷A V在线| 操日本色| 色色综合日韩| 婷婷午夜精品久久久| 成人精品视频99在线观看免费| 免费91久久精品| 丁香五月91| 日本一级淫| 精品久久久人妻| 久热99中文字幕| 超碰人妻在线| 五月天丁香婷婷社区| 久久精品这里只有精品免费首页| 99色网站| 182TV大香蕉| 凹凸7777操操操| 五月天激情婷婷丁香| 婷婷五月五月丁香| 婷婷色五月天在线| 思思热99热| 婷婷五月色情| 激情人妻蜜夜系列区| 中文字幕 中文字幕明步| www色婷婷久久综合久色| 麻豆忘忧草午夜| 激情六月综合| 夜夜操狠狠操天天操| 玖玖在线| 成人免费视频一区| 在线看片h站| 色九月婷婷丁香| 婷婷色5月天在线。| 久久九九九九| 成人国产网| 色五月激情五月天| 操碰99| 丁香无五月网| 天天肏夜夜肏| 99啪啪网| 香蕉99网| 天天干在线播放| 九九热AV| 天天爽综合| 久久三级视频| 亚洲成人中心| 亚洲国产另类av| 亚洲激情综合| 91超级碰在线视频| 色欧美影院| 色五月婷婷狠狠撸| 婷婷五月播| 婷婷之玖玖| 中文字幕免费高清电视剧| 久99热在线观看| 亭亭五月天成人| bbwcuckold精品熟妇| 97干婷婷| 丁香五月综合久久综合| 自拍视频在线观看9| 六月丁香啪啪| 中文字幕av在线| Www.狠狠| 国产婷婷五月天| 国内裸舞二区| 丁香大香蕉| 免费看欧美成人A片无码| 丁香五月花| 激情综合五月| 色播综合| 五月天激情国产综合婷婷婷| 久久九九99| 99热在线精品播放| 91狠狠综合久久| 久青操| 黄色99热| www.婷婷亚洲基地| 天天操天天日天天爱| 婷婷在线精品| 思思视频久久| 欧美精品中文字幕亚洲专区| 九九九九九九九热| 国产亚洲成人综合| 99超级碰碰| 91chinese 在线| 激情五月天小说网| 9福利性视频欧美| 久久九九国产精品怡红院| 日韩久操婷婷| 六月婷婷视频| 五月丁香六月激情综合网| 婷婷伊人| 久久婷婷五月草视频在线播放| 看片视频在线免费日产在线看| 婷婷五月天最新综合你懂的 | 。久久久久久久久久久久久久人妻| 成人国产欧美大片一区| 色吧五月婷婷| 色99自拍| 色婷婷电影网| 婷婷精品综合| 婷婷射图五月天| 色婷婷五月色| 九九av| 婷婷久久大香蕉| 色婷婷视频| 大香蕉色婷婷伊人在线| 亚洲va成人va成人va在线观看| 免费播放片大片| 99视频久久| 色综天天综合| 天天肏天天舔AV| 久久人妻乱| 99热热这里只精品996小说| 亚洲成人高清在线| 五月情四婷婷| 人人97操| www.久热| 天天色,天天日,天天做| 五月婷亚洲精品AV天堂| 琪琪色五月婷婷老师| 99re热久久| 96色婷婷| 天天爱天天秀天天做| 婷婷五月丁香综合| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 色娸娸综合网| 欧美内射AAAAAAXXXXX| 久久五月婷天天干| 91操片| 色婷婷成人做爰A片免费看网站 | 色婷婷a| 激情五月丁香五月| 十月丁香九月婷婷综合| 99精品在线播放| 中文字幕按摩做爰| 991国产精选视频在线播放下载| 99超级碰免费视频| 操逼电影免费看| 国产成人高清| 5月丁香六月婷婷| 五月天婷婷伊人| 天天插天天插| 五月婷在线观看| 99热r| 婷婷丁香五月天综合在线日韩| 五月天婷婷影院| tingtingjiqingwuyue| 五月丁香婷婷欧美色图视频五月丁香777电影| 丁香五月天成人网站| 97色色-99久久| 久久大香蕉| 激情综合五月婷婷六月丁香| 精品国产va久| 99热最新精品| 日本97在线看片| 色五月天在线观看| 另类视频五月天| VA婷婷| 97视频91| 国产婷婷五月色情综合| 色五月天综合| 91九色精品熟女内射| 婷婷无五月无码视频| 六月丁香综合| 天天日,天天射,天天舔| 日操五月婷| 91在线操| 丰满少妇猛烈A片免费看观看| 另类激情首页| 99热精品6| 国产欧美日韩性爱| 色老久久| 超碰永久在线| 超级碰碰97在线| 噜噜噜狠狠色综| 狠色狠色综合久久| www.夜夜夜| 九热免费视频| 182无码| 色色色综合| 激情第四色| 婷婷六月激情丁香| 国语对白性爱视频播放| 丁香五月婷婷狠狠色| 我想看国产大学生口爆吞精的视频| 99九九玖玖| 亚洲性爱日韩无码| 色综合久久88色综合天天人守婷| 婷婷开心深爱五月天| 亚洲激情五月| 日韩不卡123| 五月婷视频| 五月天婷婷AV| 五月天婷婷乱论小说| 五月婷丁香在线视频在线| 久久er99热精品一区二区 | 人妻中文在线| 五月色亚洲| 色五月欧美| 日日日影院| 婷婷六月爽| 婷婷综合色色| 五月丁香久久综合| 一起草aV| 五月综合丁| 中文字幕操比影片| 九月婷婷在线视频| 男人先锋久久| 91精品久久久久久77777| 91无码视频| 婷婷色色婷婷| 亚洲综合激情五月久久| 涩五月婷婷| 精品,99| 六月五月久久丁香| 思思热在线精品视频网站| 怡红院 久久| 亚洲AV日韩无码| 超碰97免费在线| 中文字幕+中文在线| www.婷婷com| 99干日日干| 黑人糟蹋人妻HD中文字幕| 五月丁香啪啪| 五月婷婷六月天| 91碰超| 思思热在线视频精品| 99热这里只有精品2| 亚洲综合色五月| 91婷婷五月天综合视频| 欧美97p| 热的国产,热的综合,热的有码| 26UUU| 九九综合色| 色香蕉影院| 丁香五月婷婷啪啪啪| 五月丁香琪琪| 久久久久久久丁香五月天婷婷| 超碰99在线观看| 九九综合精品| 99激情视频热| 久久视频婷婷视频| 婷婷五月色亚洲| 五月激情基地| 国产成人亚洲综合A∨婷婷| 激情五月天影院| 99热8| 99在线免费视频| 欧洲亚洲午夜| 伊人五月天在线| 天天日日夜夜| 日本精品人妻无码77777| 国产精产国品一二三在观看| 欧美日本不卡黄色片| 人人操婷婷| 久久大香蕉丁香| 久久成人亚洲欧美电影| 丁香五月婷婷Av| 天天色图| 一个色的综合| 色五狠狠| 狠狠色狠狠| 99爱视频在线观看| 激情婷婷狠狠干综合| 九九色网| 成人午夜无码视频| 九九热区一区二区三区| 五月婷婷av| 精品99在线观看| 超碰99在线观看| 婷婷综合激情| 五月天激情亚洲| 久久五月婷婷丁香| 99热香港| 五月婷婷中文| 五月婷婷激情综合网| 五月丁香成人网| 大香蕉 婷婷| 日韩情色在线观看| 色一区高清| 久久在线视频只有这里有精品| 五月丁香六月婷婷手机无线| 婷婷在线激情| 九九伊人网| www...com黄在线观看| av婷婷丁香| 国产熟女大叫受不了| 桃色五月婷婷| 亚洲综合丁香五月天| 秋霞成人毛片一级A片| 99热免费| 九九伦子片| 91精品91久久久中77777久久玖玖九九 | 天天色色天天| 久久丁香综合精品综合| 丁香激情久久| 亚洲 六月 综合| 色婷婷免费视频| 午夜天堂一区人妻| 大香av| 中文字幕在线免费观看视频| 久噜久噜| 激情久久久| 六月婷婷综合网2| 99热在线资源| 狠狠色噜噜狠狠狠888了| 亚洲婷婷激情综合激情999精品| 激情综合五月| 少妇婷婷五月天| 99久久66| EEUSS鲁片一区二区三区| 九月婷婷久久| 色欲婷婷五月天丁香| 亚洲五月天第一综合干| 婷婷五月色激情欧美激情| 色爱综合网| 婷香狠狠爱五月| 3pAV| 8区视频在线| 婷婷五月天天| 99久久免费性爱视频`| 亚洲久久婷婷| 婷婷爱五月| 欧美日本97| 色五月婷婷狠狠撸| 丁香伊人网| 午夜伊人大香蕉| 99热最新网址| 夜夜撸日日操| 婷婷九月久久| 热的国产,热的综合,热的有码 | 丁香五月Av| 9久热在线精品| 狠狠五月天婷婷| 欧美 日韩 成人 在线| 99热爆在线| 婷婷月五天在线在线看| 六月久久婷婷| 欧美色色色色色色色色| 蜜臀av在线成人电影| 色色色色色色色色综合网| 99精品久久久久久久久| 婷婷六月中文字幕| A久久| 超碰国产AV| 久久99色色| 青青草成人网| 无码啪啪| 人妻操逼视频| 日韩野外 无套| 九九色色| 伊人婷婷色| 一级内射毛片| 婷婷五月丁香成人| 99视频| 99视频色在线观看| www.色五月| 1999天天操夜夜操| 丁香五月天在线观看| 色香蕉精品五夜婷| 狠狠干2007| 亚洲综合婷婷| 9九热视频| 五月色色网| 69精品人妻不卡视频| 婷婷色成人| 黄桃AV无码免费一区二区三区| 激情图片99| 亚洲成人人人操| 伊人热在线大香蕉| 丁香五月婷婷成人网| www.狠狠操| 久久婷婷五月综合97色一本| 亚洲热热视频| 欧韩性爱| 日本99热| 色婷婷丁香五月高清在线| 色婷婷小说网| 丁香六月色婷婷欧美| 五月天婷婷色色| 色五月婷婷五月天激情综合| 中文AV在线观看| 婷婷玖玖丁香| 久久九精品| 婷婷色五月天色| 能直接看的av网站| 丁香婷婷婷五月综合色情| 天天天天天日| 99热在线爱| 思思热精品在线| 国产毛片操B| 亚洲久久婷婷| 久久丁香婷| 日日爱699| 日本操B片| 色爱五月天| 五月桃花网综合| 欧美天天干天天草| 亚洲人成网站999久久久综合| 99成人精品视频| 九九久久污| 五月亭亭狠狠| 91丨九色丨高潮丰满日本| 婷婷天堂综合| 99色婷婷视频| 日本综合色图| 2w在线视频| 先锋影音男人的天堂AV| 五月天婷久精视频| 六月丁香啪啪啪| 任你艹| 久久久久久xxxxx| 久操婷婷| 天天综合亚洲综合| 丁香综合久久| XX久久| 亚洲精品无码久久| 五月婷婷基地| 狠狠色激情在线| 色综合久久之分久久| 丁香六月天之亚州热女 | 99操无码视频观看| 成人操呦av| 亚洲综合五月天| 五月天全国最大成人网| 久热9热| 丁香五月天堂| 东京热免费视频| 九九热精品| 97色婷婷五月天| 五月婷婷激情日本| 五月丁香成人网| 五月天中文字幕在线婷婷| 久色大香蕉| 色五月激情网| 伊人丁香六月婷婷| 成人精品网站在线观看| 99九九久久| 色婷婷六月开心中文字| 色婷婷888| 中文成人在线| 丁香五月婷婷偷拍| 99热这里有精品24| 高清视频一区| 一级内射毛片| 久久久婷| 天天爽日日爽夜夜爽| 棕合影院色色| 99精品偷自拍| 国产成人AV在线播放| aaaaaa片| 国产色99| 99热免费| 射久久丁香五月| 精品色情一区二区三区四区| 婷婷五月天首页激情| 五月激情婷婷在线| 丁香五月五月婷婷五月天激情四射| 五月丁香啪综合| 亚洲精品白浆高清久久久久久| 久久金品黃色| 色亚洲视频| 色九综合| 亚洲愉拍99热成人精品| 五月婷婷三级| 俺去啦综合网| site:pzdcoin.com| 99热九九在线| 国产午夜精品一区二区三区四区| www.射伊蕉婷婷| 五月丁香六月停停| 热九九在线| 色色色色色五月| 日欧一片内射VA在线影院| 一区视频网站| 五月婷婷婷婷| 五月婷婷色情| caopeng超碰| 九九热99视频在线| 色五月色情| A片试看120分钟做受视频红杏| 五月综合激情| 99这里都是精品6| 97久久香草精品视频| 狠狠香蕉| 91视频五月丁香| 一本到不卡高清DVD| 中文字幕成人| 99热综合| av在线免费播放| 99热6这里只有精品| 五月综合在线婷婷图片| 五月天婷婷日日爱| 五月婷色| 99热国产精品| 狼人狠狠操| 丁香狠狠操| 九色在线五月婷婷网址| 国产AV一区二区三区最新精品| 67194国产| 97超碰在线免费观看| 婷婷五月天黄色小说| 丁香五月婷婷乱| 色婷婷五月天亚洲 | 丁香婷婷九月在线| 99ER热精品视频| 久热免费视频| 国产这里只有精品| 五月丁香综合| 色色色综合网| 丁香激情网| 色婷婷久久| 久久久久久激情| 五月婷在线| 深爱激情丁香| 激情五月婷婷开心网| 亚洲最大五月天成人网| 伊人9999| 深夜A片| 日日撸日日操| 99国产小视频| Www.狠狠| 可以直接看的av| 夜夜夜夜撸夜夜操| 色色色色热| 九九热这里只有精品6| 思思热精品在线观看| 开心五月天激情网站| 99在这里有精品| 狠狠色丁香久久婷婷综合五月| 米奇影视五月天| 亚洲婷婷激情888精品久| 天天碰天天插天天操| 婷婷六月网| 先锋男人99资源| 日 日干 日日做| 婷婷开心青青草| 五月色丁香婷婷中文字幕| 久久一热免费视频| 99在线视频免费| 天天日人人| 亚洲色爽| 欧美丁香六月激情视频| 五月之婷婷| 思思热国产| 天天色宗合| 99A片| 噜噜吧天天爱| 超碰免费人妻| 思思热精品在线视频| 婷婷五月天视频| 天天爽人人综合免费7799| 久久九九网| 久久精品99国产精品日本| 国产全是老熟女太爽了| 色www99| AV中文字幕夜夜操b天天摸bb | 人人爱人人草| 成熟妇人A片免费看网站| 综合AV网| 婷婷五月色花丁香社区| 黄色片精品| 大香蕉网站,大香蕉综合| 五月天综合久久| 超黄亚洲瑟瑟网站| 久久机只有这里精品| 99视频在线观看视频| 久久这里只有国产视频| 天天操人人干| www.五月.com| 免费看欧美成人A片无码| 免费在线观看av网站| 狠狠久久婷| 丁香五月六月综合激情| 青青草搞屄视频网站| 国产美女精品| 丁香五月AV| 五月激情偷拍| 一起草AV入口| 国产精品色婷婷久久久精品| 玖热精品综合视频| 热久久视频99| 逼里香不卡| 伊人久久大香线蕉av最新| 激情第四色| 日逼影音先锋男人资源站| 91丨九色熟女丨首页| 伊人久久婷婷| 色五月天视频| 在线观看欧美| 国产69精品久久久久999小说| 超级碰碰碰久久网站视频| 美女网黄| 热热久久久久久久久| 天天日夜夜帕| 婷婷五月天开心网| 91色性感五月婷婷丁香| 色婷婷免费观看| 青青热久精品视频在线观看| 久久这里只有精品无码| 日本三久久| 五月天精品| 久草网大香视频| 91久久久久久| 激情丁香图片| 天天玩夜夜操| 国产精品A片在线| 五月天丁香六月综合| 我要射综合| 九月丁香婷婷综合| av操B网站| 九色自拍| av五月天婷婷丁香| 夜夜谢天天干| 热婷婷久| 丁香五月六月婷婷自拍| 射区导航| 91呦呦呦| 国产色色在线| 91大屁股精品| 综合久久狠狠| 120分钟婬片免费看| 五月六月婷婷| 丁香激情五月天| 综合一区二区三区| 色色网站免费观看| 99亚洲视频| 色99视| 狠狠另类视频| 91精品久久久久久77777| 激情五月天。| 久久99激情| 激情九九六月激情免费视频| 五月丁香色停停啪啪啪| 91色婷婷综合久久中文字幕二区| 亚洲亚洲永久无码777777| 9色在线| 99久久.www| 五月婷婷花| 51国精产品自偷自偷综合| 91人碰| 99热精国产这里只有精品| 五夜婷婷| 《久久综合九色综合97婷婷| 79色色免费| 在线播放成人网站| 五月停停999| 亚洲成人噜噜| 国产古装妇女野外A片 | 99婷婷精品推荐在线视频| 婷婷色色五月| 久久伦乱| 69综合在线| 日韩欧美骚货| 女人高潮内射99精品| 色~性~乱~伦~噜| 五月婷婷之综合激情| 夜夜嗨一区二区三区直播内容 | 亚洲激情AV| 久久精品夜色噜噜亚洲a∨| 91无码一起草| 啪啪婷婷五月天激情| 色五月婷婷综合| 夜夜久久综合网| 美女五月天| 丁香,开心成人,久久| 99区视频| 丁香六月综合激情| 丁香婷婷六月激情文学| 成人欧美日韩| 67194中文字幕| 久久久这里有精品| 91丁香色五月| 色色COm| 久久人妻超碰一区| 很操日本7| 开心综合激情综合| 国产亚洲成AV人片在线观黄桃| 丁香 婷婷 激情 综合 五月| 色色99色色| 丁香六月婷婷久久综合| 96精品久久久久久久久| 国产超碰人人| 亚洲天堂aaaa| 亚洲婷婷丁香五月| 五月天激情无码| 一区操| 狠狠五月天婷婷激情网。| 久久99热网| 五月综合777| 国产AV一区二区三区最新精品| 五月花综合网| 亚洲人妻av伦理| 久婷婷五月丁香在线观看| 久久色情| 玖玖在线资源视频| 无码99| 狠狠五月丁香色婷| 精国产品一区二区三区A片 | 免费看欧美成人A片无码| 狠狠干在线视频| 欧美色综合天天久久综合精品| 插插插色综合网| 青草青草视频2免费观看| 很很干在线视频| 国产成人精品一区二区三区视频| 久久人妻系列| 超碰人人摸AV| 少妇达人正片在线播放_ikun_福利吧| 国产色视频网站2| 五月丁香婷婷综合| 激情五婷网| 亚洲超碰在线| 久久这里只有精品07 | 天天爽天天日| 伊人玖玖精品| 99热这里只有精品5| 婷婷五月天成人娱乐| 综合激情视频| 五月丁香综合伦理片| 日日噜噜夜夜狠狠久久丁香五月| 久热A| se.久久视频在线观看| 婷婷五月综合色拍| 色色色综合网| 欧美性猛交99久久久久99按摩| 亚洲性色XXXXX| 丁香五月www| 香蕉婷婷色五月| 五月婷五月婷伊人伊人五月婷| 性小说五月天| 日日操夜夜操中国无码| 久re热视频| 激情五月开心五月在线视频| 久久AAAA片一区二区| 国产精品A片| 色www.con| 99精品热| 亚洲综合五月天综合| 亚洲视频码| 色色五月天丁香| 天天骑日日爽| 91人妻九色大屁股| 超碰人人干| www.av视频xx999.com| 在线播放人妻| 综合狠狠干| 18av天堂| 色婷大香蕉| 丁香六月色婷婷| 六月婷伊人| 色婷婷四虎| 婷婷五月成人| 免费试看小视频 99| 人妻激情视频| 五月丁香激情综合网| 婷婷五月天电影区小说区| 人人妻人人澡| 夜精品无码A片一区二区蜜桃| 欧美婷婷精品激情| 五月丁香网站| 亚洲欧美在线观看| 天天色天天日| 思思久久精品视频| 人人操人人添人人摸97| 99性爱视频| 亚洲色婷婷五月| 狠狠干狠狠色| 五月天sesese| 91狠狠色丁香婷婷综合久久精品| 六月婷色六月| 无码激情| 五月天婷婷无码| 开心激情五月天网| 亚艹艹| 亚洲一个色| 任我肏视频精品| 99热这里只有精品青草| 久久婷婷五月综合伊人| 亚洲无码成人网| 七七久久婷婷| 99精品视频在线观看| 婷婷性色| 激情五月丁香色婷婷| 98永久精品| 五月婷婷啪啪啪啪| 狼人久草| 99久在线精品99re8| 激情婷婷内射| AV动漫不卡无码免费| 免看黄大片AA | 亚洲天堂热| 丁香婷婷久久综合在线| 99re思思热在线视频| 丁香五月综合狠狠| 亚洲AV成人在线| 综合激情视频| 开心五月天激情| 婷婷五月激情四月综合| 免费看片操逼| 老师高潮流白浆喷水的A片| 五月婷婷,六月丁香| 99精品视频免费观看| 丁香婷婷丁香五月欧美人| 色婷婷88| 婷婷五月综合色小姐小说| 婷婷色综合| 五月丁香六月激情综合| 激情小说视频图片| 丁香六月视频| 丁香五月激情宗合网| 亚洲成人九九九| 五月丁香亭亭激情操逼网| 天天精品视频免费观看| www.婷婷,com| 久久A V无码视频| se99在线| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 五月丁香婷庭在线| 五月丁香啪啪激情| 久久久久久久久久8888| 99WWW免费视频| 五月丁香亭亭A片| 丰满少妇乱A片无码| 色碰碰| 中文字幕 中文字幕明步| 丁香五月丐人妻| 99热超碰在线| 欧美日韩五月婷婷| 久9综合| 老妇六区| 五月婷在线| 日本婷婷| 五月婷婷久久综合| 性欧美日本| 婷婷五月免费视频| 婷婷开心五月| 婷婷五月天电影在线| 五月天色综合服务平台| 亚洲激情免费久久| 天天色·欧美| 五月婷成人| 91九九| 九色自拍| 五月婷婷色色色| 26uuu丁香婷婷五月| 婷婷九色| 久久免费高| 五月丁香久久综合91| 狠狠爱深色婷婷综合| 嫩草AV久久伊人妇女超级A | 天天草比天天爽| www.丁香黄色五月天人与| 天天射综合网天天插| 激情综合网,婷婷| 丁香五月天天日| 夜夜骑日日操| 色婷婷视频| 精品色情一区二区三区四区| 天天日天天干天天爱| 深爱婷婷基地| 婷婷5月色| 色六月天天激情综合网| 梁铮版蜘蛛女在线观看| 激情婷婷色小说| 五月天开心成人网| 人人添人人| 激情网站综合五月天| 思思热性操| 这里只有精品在线播放| 综合六月激情婷婷| 99爱精品视频| 亚洲操b| 99热最新| 中文字幕av在线播放| 日本一级特黄大片AAAAA级| 欧美va视频| 丁香婷婷性爱| 婷婷在线精品| 9色91视频| 91聚色综合网| www久久久久| 九九热99视频在线| 亚洲综合激情五月久久| 五月丁香六月激情综合网| 色五月婷婷少妇人妻| aaaaaa片| 天天噪夜夜爽| 影音先锋777xfplay色资源网站| 婷婷成人五月天成人文学小说| 天天操天天操天天操天天操天天操| 丁香五月婷婷AV在线| 精品人人操| 97香蕉碰碰人妻国产欧美| 99国产精品久久久久久久久久久 | 五月停停色色丁香| 亚洲色五月| 欧美 日韩 人妻 高清 中文| 玖玖色综合色| 五月天丁香综合在线| 久久免费操| 人人爽在线视频综合网| 久久在线人妻| 开心婷婷丁香五月| 狠狠色婷婷7777久| 97自拍视频在线| 91九色超碰| 久久亚洲天堂| 99热这里在线精品| 77799热| 99久久久| 久久久WWW| 天天干天天插| 五月色丁香婷婷综合| 超碰资源在线| 干婷婷五月天| 99er热精品视频| 免费AV播放| 人妻第九页| 久久9RE热视频精品98| 伊人网欧美在线男人天堂五月丁香 | 天堂婷婷综合| 六月丁香停| 婷婷丁香五月激情综合站_久久五月丁香激情综合_开心五月综合激情综合五月_婷 | 99色精品| 五月天婷婷色综合| 丁香久久综合| 婷婷5月开心6月| 99热这里只有精品22| 99欧美| 欧美大肥婆大肥BBBBB| 色色丁香五月天社区| sesesesezonghe| 六月丁香好婷婷| 男女99免费视频| 色婷婷亚洲六月婷婷中文字幕| 第四色激情网| 午夜伊人大香蕉| 婷婷六月视频| 丁香五月激情婷婷激情| 亚洲激情综合| 极品人妻VIDEOSSS人妻| 在线看黄色| 婷婷五月激情丁香激情| 天天干天天干天天干| 色色色热| 婷婷天堂视频| 婷婷丁香五月精品| 九九这里是免费的视频5| 午夜不卡久久精品无码免费| 丁香五月婷婷Av| 亚洲激情视频网| 91成人看片| 综合色图婷婷| 久久久久网站| 九九热视频免费的| 婷婷五月天精品| 超碰色碰碰| 狠色综合网| 99热精品中文字幕| 免费无码毛片一区二区A片| 99啪99| 婷婷色色播五月天| 97操操| 97超碰色| 成人婷婷五月天| 超碰91人人操| 综合久久五| 婷婷色五月婷婷姐妹| 一级性爱视频| 国产无遮挡又黄又爽免费网站| 亚洲在线操| 99re这里只有精品视频了| 色婷婷成人| 五月丁香色婷婷色| 婷婷五月视频| 欧美成人AAA片一区国产精品 | 69精品人人人人| 97久久久| 中文av网站| 丁香六月丁香婷婷激情| 秋霞黄色一级久久| 婷婷色在线视频| 丁香六月综合| 欧美精品久久久久久视频观看| 欧美综合五月丁香六月婷| 激情五月最新网址| 天天舔天天摸天天射| 成人短视频在线观看| 2021日韩无码| 国色天香伊人狠狠色| 99久热| 久久久www| www.夜夜| 淫视馆av三区| 五月丁香啪啪啪啪| 婷婷五月天色色| 午夜激情婷婷| 亚洲熟妇无码乱子AV电影| 日操熟女| 色五月天网| www.夜夜操| 亚洲精品无码久久| 午夜成人综合| 伊人大香久久| 国模淫穴色图| 丁香婷婷五月香蕉91| 久久婷婷五月国产激情综合片| 五月丁香婷婷久久| 久9视频免费播放| 成人综合伍月天| 亚洲综合网在线| 第二色AⅤ| 色综合五月| 婷婷五月天在线看| 大香蕉伊人99| 久久五月天视频| 97性视频| 丁香婷婷五月综合| 婷婷五月激情六月| 思思re最新视频| 色亚洲婷婷| 白人荫道BBWBBB大荫道| www.粉嫩av.com| 亚洲热视频| 欧美婷婷六月丁香综合色| 婷婷性爱网| 婷婷五月激情的图片| 五月婷婷综合丁香视频| 日韩精品VIP| 激情深爱五月| 欧美激情 日韩无码 婷婷 五月天| 97五月天婷婷| 久久密臀婷婷| 青青草原99热| 亚洲成人电影在线免费观看| 五月激情综合深爱| 丁香五月综合狠狠| 乱色色色| 激情婷婷黄色五月| 狠狠狠狠狠狠狠狠| 玖玖爱导航| 亚洲色综合性| 久久婷婷五月综合色天| 国产视频婷婷| 色色综合热| 亚洲婷婷欧美婷婷| 夜夜爱伊人| www.婷婷五月天| 丁香五月天堂| 中文字幕在线免费观看视频| 久久婷婷五月国产色综合激情| 久久98| 天天骑日日爽| 丁香五月AV| 思思热热久久| 亚洲成人日韩无码精品| 色五月六月| 国产成人在线不卡AV| 亚洲婷婷久久综合| 超碰亚洲天堂| 狠狠婷婷日韩| 婷婷五月天黄色小说| 5五月综合网亚洲| 超碰色综合| 色婷五月天| 综合久久99| 五月婷婷六月奇米网丁香| 西西4r午夜剧场| 亚洲va国产va天堂va综合va| 超碰无码318604| 五月激情站| 伊人六月无码视频| 五月婷婷黄色网址| 五月丁香777| 大香蕉五月婷婷| 色婷婷五月综合| 天天更新天天亚洲| 婷婷香蕉香| 丁香婷婷九月| 草综合网| 五月婷婷啪啪啪啪| 激情小说视频图片| 1024国产| 免费看欧美成人A片无码| 人妻操在线看| 色综合狠狠色| 日本va欧美va国产激情| 天天人人天天爽| 91fuliwang| 九九九九国产| 这里只有精品,日韩视频| 久久九九Com| www.久久爱.com| 区区久久妻| 天天插操| 成人版视频在线观看| 五月丁香六月久久| 激情小说色五月| 99视频网址| 天天开心婷婷丁香五月| 97碰精品| 九九热99视频| 欧美婷婷五月无砖| 五月丁香婷婷99| 99热精品中文字幕| 六月丁香婷婷开心综合基地| 成人AV网站在线| 天天干天天做| 伊人五月天婷婷| 九九热中文| 涩丁香| 精品99在线| 五月丁香AV、伊人业余、性色熟妇| 婷婷自拍| 激情五月影院| 激情五月综合网最新 | 成人午夜视频精品一区| 激情五月综合| 思思热思在线精品视频| 丁香六月激情综合网| 婷婷六月丁香五月| 九月丁香| 4438全国最大视频成人网站在线观看 | 国产白丝在线一区| 亚洲五月丁| 婷婷九月综合| 偷偷与邻居做爰完整视频| 免费看欧美成人A片无码 | 欧美黄色韩日网| 婷婷九月丁香| 在线看片h站| 日韩啪啪视频| 九九热经典视频在线观看| 久久9久| 久热精彩视频98| 国产精品色色| 99精品小视频| 婷婷丁香五月激情综合站_久久五月丁香激情综合_开心五月综合激情综合五月_婷 | 欧洲不卡视频| 热99只有里视频| 久色网| 久久婷婷色综合老司机| 国产精品VIDEOSSEX久久发布| AV操逼网| 人妻丰满精品一区二区A片| 亚洲六月色婷婷| 色色色.com| 色色婷婷五月| 色涩影院六月丁香| 亚洲精品又粗又大又爽A片| 丁香六月啪啪啪| 五月婷婷丁香在线| 婷婷丁香五月天在线视频| www.久久综合| 丁香婷婷浪潮AV久久综合 | 色色AV色色色东莞| wwccc久久久| 99综合视频一体| 99热色综合| 嫩BBB槡BBBB搡BBBB| 日本综合久久| 亚洲男女激情| 丁香五月综合图片在线观看| 九九99在线免费在线观看视频| 啪啪东京热| 99久久网站| 日日噜噜夜夜狠狠久久丁香六月| 六月色播| 六月婷婷亚洲| 丁香5月激情网| 91色噜噜狠狠狠狠色综合| 婷婷五月激情视频网| 国产精品a无线| 九九激情| 成人在线不卡| 欧美色五月| 操你av| 啪啪婷婷五月天激情| 亚洲婷婷视频| 国产成人AV在线播放| 日本欧美999久久久三级片| yazhoujiqingav| 激情丁香五月| 日本九九九九| 99在线视频精品| 思思热在线观看| www.色擼擼.com| 国产精品色色色色| 激情开心五月婷婷| 欧美丁香婷婷天天操| 五月天婷婷基地综合网| 97人人看一| 我想看国产大学生口爆吞精的视频| 久久五月婷综合| 免费看欧美成人A片无码| 亚洲综合婷婷| 99re这里只有| 99自拍视频网站| 狠狠色丁香婷婷久久综合| 色色色99| 久久这里有精品| 噜噜色com| 在线可以看的av网址| 色婷婷激情视频| 久久av电影| 丁香成人综合| 亚洲激情丁香五月基地| 激情的五月| 激情小说五月丁香在线视频观看视频| 亚洲欧洲另类| 激情五月综合网| 五月丁香六月色婷| 99视频久久| 超碰九色| 九九热精品| 久久精品爱爱| www.狠狠| 久热这里只有精品性色AV| 激情五月深爱五月观看| 影音先锋色色色资源色资源色| 伊九九三级区| 激情五月丁香婷婷夜夜操| 婷婷激情五月天天天开心| 91丨九色丨白浆| 成人 在线 日韩|