欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

軟件版本管理規(guī)范:版本號(hào)、分支、制品與發(fā)布臺(tái)賬

軟件版本管理規(guī)范:版本號(hào)、分支、制品與發(fā)布臺(tái)賬 剛接手一個(gè)中型項(xiàng)目的研發(fā)流程那會(huì)兒我做的第一件事不是翻代碼而是把近半年的發(fā)布記錄全導(dǎo)出來對(duì)了一遍。結(jié)果非常典型同一個(gè)功能在測試環(huán)境叫 v2.3.1到預(yù)發(fā)變成 v2.3線上又成了 release-20230417三個(gè)名字指向的是同一份代碼反過來更嚇人的是兩個(gè)完全不同的構(gòu)建產(chǎn)物都叫 v1.0.0線上跑的到底是哪一個(gè)誰也說不清。這就是軟件版本管理沒有統(tǒng)一規(guī)定的直接后果——不是沒人管而是每個(gè)人按自己的習(xí)慣管最后誰也拼不出完整的一張圖。軟件版本管理規(guī)定這件事聽起來像是寫文檔的活實(shí)際上它決定了你出事之后能不能在十分鐘內(nèi)定位問題、能不能安全回滾、能不能回答線上到底是什么。這篇內(nèi)容我打算按自己踩過的坑和后來落地的規(guī)則來講適合剛接手發(fā)布流程的研發(fā)、測試負(fù)責(zé)人也適合團(tuán)隊(duì)里那個(gè)被默認(rèn)管版本的人不管你現(xiàn)在用的是 Git 還是別的工具規(guī)則層面的東西是通用的。1. 版本號(hào)到底該怎么編從語義化版本到團(tuán)隊(duì)內(nèi)規(guī)1.1 三個(gè)數(shù)字各自承諾了什么很多人以為版本號(hào)就是給發(fā)布排個(gè)序漲上去就行其實(shí)版本號(hào)真正的作用是對(duì)外承諾兼容性。語義化版本那套 MAJOR.MINOR.PATCH 的約定之所以被廣泛采用是因?yàn)樗堰@次升級(jí)會(huì)不會(huì)弄壞我的代碼這個(gè)問題變成了可以提前判斷的事主版本號(hào)漲了意味著有不兼容的改動(dòng)調(diào)用方必須改代碼次版本號(hào)漲了意味著新增了功能但保持向后兼容修訂號(hào)漲了意味著只有修復(fù)接口沒動(dòng)。這個(gè)承諾一旦定下來就不能隨便破例。我見過最常見的破例方式是順手改一下。發(fā)布前發(fā)現(xiàn)一個(gè)小接口的參數(shù)名寫錯(cuò)了覺得反正沒人用直接改掉版本號(hào)只在修訂位上加一。結(jié)果下游某個(gè)服務(wù)正好用了這個(gè)參數(shù)上線當(dāng)晚就報(bào)錯(cuò)。所以團(tuán)隊(duì)內(nèi)規(guī)里必須寫清楚只要接口簽名、數(shù)據(jù)格式、配置項(xiàng)名稱發(fā)生了變化無論改動(dòng)多小都要往次版本號(hào)漲必要時(shí)甚至要往主版本號(hào)漲。判斷標(biāo)準(zhǔn)不看代碼行數(shù)看的是外部能不能感知到差異。還有一點(diǎn)容易被忽略版本號(hào)的數(shù)字段是有排序語義的不要塞入前導(dǎo)零也不要用字母去替代數(shù)字。像 v1.10 和 v1.9 這種字符串排序會(huì)得出錯(cuò)誤結(jié)論必須按數(shù)字段比較。如果團(tuán)隊(duì)里有人寫腳本去解析版本號(hào)這一點(diǎn)會(huì)直接導(dǎo)致灰度分批的邏輯出錯(cuò)。1.2 企業(yè)里通常要多加幾位純粹的語義化版本在內(nèi)部研發(fā)場景下經(jīng)常不夠用因?yàn)槲覀冃枰獏^(qū)分同一份代碼在不同環(huán)境下構(gòu)建出來的不同產(chǎn)物。所以大多數(shù)團(tuán)隊(duì)會(huì)在三段式后面追加構(gòu)建號(hào)或者日期流水號(hào)形成類似2.3.1.20240517.812或者2.3.1build.812這樣的形式。這里的關(guān)鍵是區(qū)分業(yè)務(wù)版本和構(gòu)建版本前三段是業(yè)務(wù)版本由人決定代表這一版包含什么后面的構(gòu)建信息由流水線自動(dòng)生成只用來唯一標(biāo)識(shí)一份產(chǎn)物。字段誰來決定含義是否重復(fù)出現(xiàn)主版本號(hào)研發(fā)負(fù)責(zé)人評(píng)審不兼容變更否次版本號(hào)研發(fā)負(fù)責(zé)人評(píng)審兼容性新增否修訂號(hào)開發(fā)自定兼容性修復(fù)否構(gòu)建流水號(hào)流水線自動(dòng)唯一標(biāo)識(shí)產(chǎn)物是每次構(gòu)建遞增預(yù)發(fā)布標(biāo)識(shí)發(fā)布同學(xué)標(biāo)記rc / beta 等階段同版本可多次預(yù)發(fā)布標(biāo)識(shí)也要有明確規(guī)定。rc 代表候選發(fā)布beta 代表公開測試alpha 代表內(nèi)部驗(yàn)證這些標(biāo)識(shí)只能出現(xiàn)在正式發(fā)布之前且同一個(gè) rc 編號(hào)只能對(duì)應(yīng)一份產(chǎn)物。如果 rc1 修復(fù)了問題重新構(gòu)建那就必須是 rc2不能覆蓋 rc1 的制品。這一點(diǎn)后面講制品管理的時(shí)候還會(huì)展開因?yàn)樗苯記Q定了回溯的可靠性。1.3 用日期做版本號(hào)這件事要謹(jǐn)慎不少團(tuán)隊(duì)喜歡用2024.05.17這種日期版本看著直觀實(shí)際用起來有兩類麻煩。第一是排序問題如果跨年月份和日期不足兩位就會(huì)亂序必須嚴(yán)格補(bǔ)零第二是并發(fā)問題同一天出兩個(gè)版本就沒法區(qū)分了得再掛一個(gè)流水號(hào)于是變成2024.05.17.2這時(shí)候它已經(jīng)不再是純?nèi)掌谡Z義而是日期序號(hào)那就干脆說明白別讓新同學(xué)誤以為它就是日期。我的建議是面向外部用戶的版本用語義化三段式面向內(nèi)部構(gòu)建的標(biāo)識(shí)用日期或構(gòu)建號(hào)。兩套并存但職責(zé)邊界必須在規(guī)定里寫死。最怕的是混著用一會(huì)兒 v2.3.1 一會(huì)兒 20240517臺(tái)賬里兩列數(shù)字沒法對(duì)賬。如果確實(shí)要給用戶展示一個(gè)更容易理解的版本比如手機(jī)應(yīng)用里的3.5 版那它和內(nèi)部版本號(hào)之間要有明確的映射關(guān)系表且這張表要跟代碼一起維護(hù)不能只存在某個(gè)人的腦子里。2. 分支模型與版本號(hào)的綁定關(guān)系2.1 主干開發(fā)和發(fā)布分支選哪個(gè)先想清楚分支模型和版本號(hào)是一體的光規(guī)定版本號(hào)卻不規(guī)定分支怎么切規(guī)定就是空轉(zhuǎn)。目前主流是兩條路線一種是主干開發(fā)、發(fā)布分支拉出后凍結(jié)另一種是長期維護(hù)多個(gè)版本分支。前者適合迭代快、只有一兩個(gè)在線版本的團(tuán)隊(duì)后者適合有客戶還在用老版本的場景比如企業(yè)軟件、交付類項(xiàng)目。主干開發(fā)模式下版本號(hào)的推進(jìn)點(diǎn)很清晰功能合并進(jìn)主干時(shí)次版本號(hào)已經(jīng)在規(guī)劃里鎖定了從主干切出release/2.4分支的那一刻2.4 這個(gè)版本號(hào)就凍結(jié)后續(xù)在這個(gè)分支上只允許修訂位遞增也就是 2.4.1、2.4.2 這樣往上走。凍結(jié)的含義是不再往這個(gè)分支合入新功能只能合修復(fù)。我見過發(fā)布分支被當(dāng)成第二個(gè)開發(fā)分支用的團(tuán)隊(duì)結(jié)果就是每次上線都要重新跑一遍全量回歸因?yàn)榉种系拇a跟測試過的不是同一份。多版本并行維護(hù)的情況下規(guī)則要再收緊一層每個(gè)維護(hù)分支對(duì)應(yīng)一個(gè)大版本線比如release/2.x、release/3.x兩條線上同一個(gè)修復(fù)要打兩次補(bǔ)丁版本號(hào)分別遞增且要在臺(tái)賬里注明同源修復(fù)。這里最容易出的問題是漏合修了 3.x 忘了 2.x客戶投訴之后才發(fā)現(xiàn)。規(guī)定里可以要求補(bǔ)丁類修復(fù)必須列出所有受影響的大版本線逐個(gè)確認(rèn)是否合入。2.2 熱修復(fù)的版本號(hào)怎么漲線上出問題從發(fā)布分支切一個(gè)hotfix/2.4.3分支修完合回發(fā)布分支同時(shí)必須合回主干否則下一次從主干切發(fā)布分支的時(shí)候這個(gè)修復(fù)會(huì)丟失問題會(huì)復(fù)發(fā)。這是我在實(shí)際項(xiàng)目里反復(fù)見到的坑因?yàn)闊嵝迯?fù)分支往往是在深夜臨時(shí)拉的人一累就只想著趕緊上線忘了往回合。版本號(hào)方面熱修復(fù)只動(dòng)修訂位從 2.4.2 變成 2.4.3。如果這次修復(fù)其實(shí)改了對(duì)外接口或者數(shù)據(jù)結(jié)構(gòu)那就不能只漲修訂位要按前面說的兼容性規(guī)則來處理必要時(shí)直接發(fā)一個(gè)次版本。判斷動(dòng)作只有一個(gè)改完之后調(diào)用方在不改代碼的情況下能不能正常工作。能就是修訂位不能就得往上漲。標(biāo)簽Tag的規(guī)則也要一起寫。每個(gè)正式發(fā)布的版本必須在對(duì)應(yīng)的提交上打一個(gè)不可變的 TagTag 名與版本號(hào)嚴(yán)格一致禁止移動(dòng)或覆蓋已存在的 Tag。我在早期項(xiàng)目里遇到過有人為了省事把 Tag 刪了重新打結(jié)果 CI 里緩存了舊的制品兩邊對(duì)不上排查了兩個(gè)小時(shí)才找到原因。Tag 一移動(dòng)所有基于它的溯源都失效了這個(gè)代價(jià)遠(yuǎn)比重新發(fā)一個(gè)版本號(hào)高。2.3 環(huán)境和版本的映射必須成表規(guī)定里必須有一張環(huán)境與版本的對(duì)應(yīng)表明確哪個(gè)環(huán)境允許出現(xiàn)什么形態(tài)的版本號(hào)。環(huán)境允許的版本形態(tài)是否允許重新構(gòu)建覆蓋版本號(hào)確定時(shí)機(jī)開發(fā)聯(lián)調(diào)快照版本如 2.5.0-SNAPSHOT允許不入臺(tái)賬功能測試rc 版本如 2.5.0-rc1不允許重建換編號(hào)提測時(shí)鎖定預(yù)發(fā)布rc 或正式版候選不允許上線前一日鎖定生產(chǎn)正式版如 2.5.0絕對(duì)不允許上線評(píng)審?fù)ㄟ^后這張表看著簡單執(zhí)行起來最難的是快照版本往外漏。開發(fā)階段圖方便用 SNAPSHOT提測時(shí)忘了換成正式編號(hào)測試環(huán)境跑著跑著代碼被覆蓋了測試結(jié)論直接作廢。規(guī)定里要明確寫一句快照版本只允許存在于開發(fā)聯(lián)調(diào)環(huán)境任何進(jìn)入測試環(huán)節(jié)的制品都必須有不可變的版本號(hào)。3. 提測、灰度、上線版本流轉(zhuǎn)的門檻3.1 什么樣的版本才允許提測版本管理規(guī)定里提測門檻是最容易寫虛的一條。我后來總結(jié)成幾個(gè)可檢查的硬條件版本號(hào)已確定且制品已歸檔到制品庫冒煙用例全部通過并留有記錄本次變更清單已經(jīng)填寫完整包含涉及的服務(wù)、配置、數(shù)據(jù)庫腳本發(fā)布說明的初稿已提交。這幾條只要有一條不滿足測試就不接。為什么要卡這么死因?yàn)榘姹净靵y的源頭大多在提測這一步。測試拿到的包和開發(fā)本地跑的不是同一個(gè)這種事一旦發(fā)生測試出一個(gè)問題開發(fā)說我這邊沒問題來回扯皮的時(shí)間比修問題還長。版本號(hào)加制品哈希值是唯一能終結(jié)這種扯皮的東西。提測單上除了版本號(hào)還要寫上制品的校驗(yàn)值測試下載后核對(duì)一下不一致就直接打回不需要討論。另外提測的版本號(hào)和最終發(fā)上線的版本號(hào)最好保持一致。中間如果需要修改就只能往上遞增新版本號(hào)重新提測不能就地修改。有些團(tuán)隊(duì)會(huì)想省事降級(jí)處理成這次改動(dòng)很小就不用重新走流程了但改動(dòng)小不小不由改動(dòng)者說了算得由影響面評(píng)估說了算。規(guī)定里可以留一個(gè)快速通道僅修改文案、配置且不涉及邏輯的允許走簡化評(píng)估但仍然要換版本號(hào)重新歸檔制品。3.2 灰度階段的版本怎么標(biāo)識(shí)灰度本質(zhì)上是同一版本在小范圍先跑所以灰度和全量應(yīng)該是同一個(gè)版本號(hào)而不是兩個(gè)。這一點(diǎn)常被搞混有人把灰度包和全量包當(dāng)成兩個(gè)版本結(jié)果臺(tái)賬里多出一條記錄對(duì)賬的時(shí)候找不到對(duì)應(yīng)關(guān)系。正確的做法是版本號(hào)保持一致用發(fā)布批次或者流量比例來區(qū)分階段臺(tái)賬里記錄的是2.5.0 在灰度批次 A、B 各發(fā)布一次?;叶绕陂g如果發(fā)現(xiàn)問題需要修復(fù)那就不能就地改灰度包而是從發(fā)布分支拉修復(fù)、漲修訂位、重新走提測和歸檔形成 2.5.1然后決定是繼續(xù)灰度還是全量。這個(gè)過程雖然麻煩但它保證了線上跑的每一份代碼都能在制品庫里找到對(duì)應(yīng)的不可變產(chǎn)物。我見過就地改包的做法改完之后線上版本號(hào)沒變出問題時(shí)按版本號(hào)去查制品查到的還是修改前的那份排查方向直接跑偏?;叶冗€會(huì)帶來一個(gè)隱蔽問題不同實(shí)例上跑的版本號(hào)不一致。發(fā)布過程中一部分機(jī)器先更新另一部分還沒更新這個(gè)時(shí)候如果去查線上版本答案是不唯一的。所以版本查詢接口要能返回實(shí)例粒度的版本分布而不是一個(gè)全局值。這個(gè)能力在排查灰度期問題時(shí)幾乎是剛需。3.3 回滾不是版本號(hào)減一回滾這件事我在規(guī)定里單獨(dú)寫了一節(jié)因?yàn)榻^大多數(shù)翻車都發(fā)生在這里?;貪L到上一個(gè)版本絕不等于把版本號(hào)從 2.5.0 退成 2.4.3 那么簡單它至少要考慮三件事數(shù)據(jù)結(jié)構(gòu)的兼容性、配置的回退、以及回滾動(dòng)作本身要不要記錄為一個(gè)版本。數(shù)據(jù)結(jié)構(gòu)這塊最要命。如果 2.5.0 上線時(shí)加了字段、改了表結(jié)構(gòu)回滾到 2.4.3 之后老代碼可能讀不懂新數(shù)據(jù)或者寫入了新代碼無法識(shí)別的內(nèi)容。所以規(guī)定里要有一條涉及數(shù)據(jù)庫結(jié)構(gòu)變更的版本必須同時(shí)提交回滾腳本和兼容性說明明確標(biāo)注該版本是否可回滾。不可回滾的版本要在發(fā)布評(píng)審時(shí)被單獨(dú)標(biāo)記出來上線決策也會(huì)因此不同。配置回退同樣容易被漏掉。代碼回退了配置中心里的參數(shù)還停留在新版本的狀態(tài)導(dǎo)致行為不一致。所以回滾清單里要包含配置項(xiàng)的回退動(dòng)作最好由配置中心支持按版本回退而不是人工改。至于回滾這個(gè)動(dòng)作本身我的做法是把回滾也當(dāng)作一次正式發(fā)布來記錄臺(tái)賬里新增一條記錄注明回滾至 2.4.3原因、操作人、時(shí)間而不是把原來那條 2.5.0 的記錄刪掉。歷史不能擦除只能追加這樣事后復(fù)盤才有據(jù)可查。4. 制品管理讓版本號(hào)真正對(duì)得上東西4.1 不可變制品是整條規(guī)定的地基如果說版本管理規(guī)定只有一條是必須執(zhí)行的我會(huì)選制品不可變。具體含義是一個(gè)版本號(hào)一旦歸檔對(duì)應(yīng)的制品就再也不能被覆蓋或刪除需要改動(dòng)就換新版本號(hào)重新構(gòu)建。這條規(guī)則看起來嚴(yán)苛但它是所有溯源能力的前提。如果制品可以被覆蓋那么版本號(hào)就失去了標(biāo)識(shí)意義等于一個(gè)隨時(shí)會(huì)變的別名。為了支撐這條規(guī)則制品庫里要禁止覆蓋推送重復(fù)推送同一個(gè)版本號(hào)時(shí)直接報(bào)錯(cuò)而不是靜默覆蓋。這個(gè)特性在多數(shù)制品倉庫里都能配置值得花時(shí)間打開。我見過因?yàn)闆]開這個(gè)開關(guān)流水線重跑一次就把已歸檔的包覆蓋了兩個(gè)月后排查線上問題時(shí)本地復(fù)現(xiàn)不出來因?yàn)橹破芬呀?jīng)變了。構(gòu)建信息要寫進(jìn)制品。至少在制品里包含一個(gè)描述文件記錄源碼提交哈希、構(gòu)建時(shí)間、構(gòu)建人、流水線編號(hào)、依賴清單的哈希值。這樣從版本號(hào)出發(fā)可以一路查到具體代碼而不是只能查到大概是那幾天的主干。這一步做起來不復(fù)雜但帶來的排查效率提升是數(shù)量級(jí)的出問題時(shí)先拿版本號(hào)查出提交哈希再用哈希去看變更兩分鐘就能圈定范圍。4.2 依賴鎖定不能靠自覺內(nèi)部服務(wù)之間的依賴如果用范圍版本比如[2.0,3.0)那構(gòu)建結(jié)果就不可復(fù)現(xiàn)。今天構(gòu)建和明天構(gòu)建可能拉到不同的依賴同一個(gè)版本號(hào)產(chǎn)出的東西不一樣這直接違背制品不可變的原則。所以規(guī)定里要寫明內(nèi)部依賴一律使用固定版本禁止在正式發(fā)布的制品中使用范圍版本或最新版本標(biāo)識(shí)。外部三方依賴同理鎖定文件必須提交到代碼庫不能放在忽略列表里。這個(gè)問題我在兩個(gè)項(xiàng)目里都遇到過表現(xiàn)是一樣的本地能跑CI 上跑不起來因?yàn)?CI 重新解析依賴時(shí)拉到了新版本。鎖定文件提交之后構(gòu)建結(jié)果才真正穩(wěn)定下來。還有一個(gè)細(xì)節(jié)依賴升級(jí)本身也要走版本號(hào)。比如某個(gè)公共庫從 1.2 升到 1.3使用方要做的是在自己的版本號(hào)上體現(xiàn)這次依賴變更而不是悄無聲息地跟著升。依賴變更屬于變更內(nèi)容必須寫進(jìn)發(fā)布說明否則出問題時(shí)沒人會(huì)想到是依賴引起的。4.3 制品保留策略要有明確規(guī)則制品庫不可能無限增長所以要規(guī)定保留策略。我的做法是按版本類型區(qū)分正式發(fā)布版本永久保留至少保留到該大版本線終止維護(hù)候選版本保留最近若干個(gè)超過數(shù)量的可以清理快照版本保留最近若干天。規(guī)則要寫進(jìn)制度而不是讓運(yùn)維憑感覺刪。清理動(dòng)作本身也要謹(jǐn)慎。清理前必須確認(rèn)該版本沒有被任何環(huán)境的臺(tái)賬引用尤其是那些還在灰度或者還有客戶在用的老版本。我經(jīng)歷過一次清理把某個(gè)老版本的制品刪了結(jié)果出了一次需要在這個(gè)老版本上打補(bǔ)丁的情況只能重新構(gòu)建而重新構(gòu)建出來的東西和當(dāng)年發(fā)布的并不完全一致依賴已經(jīng)更新最后只能如實(shí)向客戶說明差異。這個(gè)麻煩完全可以避免。5. 發(fā)布說明與版本臺(tái)賬出事后三分鐘定位5.1 發(fā)布說明寫什么、不寫什么發(fā)布說明不是營銷文案不需要把每個(gè)改動(dòng)都包裝得漂亮。它要回答的是運(yùn)維和排查人員關(guān)心的問題這次改了什么、影響哪些模塊、有沒有配置變更、有沒有數(shù)據(jù)庫變更、回滾怎么做。我建議用固定結(jié)構(gòu)寫不出來的地方填無而不是省略因?yàn)槭÷詴?huì)讓人無法判斷是沒有還是忘了寫。欄目內(nèi)容要求常見缺失變更清單按需求單號(hào)列出標(biāo)明類型只寫優(yōu)化若干問題影響范圍涉及的服務(wù)、接口、頁面漏寫下游依賴配置變更新增、修改、刪除的鍵及默認(rèn)值完全沒提數(shù)據(jù)變更腳本、是否可回滾只給腳本不說兼容性回滾方案步驟、預(yù)估耗時(shí)、決策人寫直接回滾優(yōu)化若干問題這種寫法我見一次打回一次。它的問題不在于不詳細(xì)而在于無法和代碼變更對(duì)應(yīng)出了問題想反查是哪次改動(dòng)引起的根本無從下手。變更清單里的每一項(xiàng)都要能對(duì)應(yīng)到具體的提交或者合并請(qǐng)求這是發(fā)布說明和版本臺(tái)賬能打通的關(guān)鍵。5.2 臺(tái)賬要記錄的是事實(shí)不是計(jì)劃版本臺(tái)賬和發(fā)布計(jì)劃是兩回事。計(jì)劃寫的是打算發(fā)什么臺(tái)賬寫的是實(shí)際發(fā)了什么。臺(tái)賬里每一條記錄至少包含版本號(hào)、制品哈希、發(fā)布環(huán)境、發(fā)布時(shí)間、操作人、對(duì)應(yīng)的發(fā)布說明編號(hào)、灰度批次或者流量比例、當(dāng)前狀態(tài)。狀態(tài)包括已發(fā)布、已回滾、已下線狀態(tài)是追加變更的不能直接改歷史記錄。為什么強(qiáng)調(diào)記錄事實(shí)因?yàn)槭潞髲?fù)盤時(shí)人們回憶的內(nèi)容往往和實(shí)際情況有偏差。我記得那次只發(fā)了后端結(jié)果臺(tái)賬一查前端也發(fā)了。有了臺(tái)賬爭論就變成了查表。我在項(xiàng)目里推行臺(tái)賬之后最直觀的變化是事故復(fù)盤會(huì)的時(shí)間縮短了一半因?yàn)椴辉傩枰〞r(shí)間確認(rèn)當(dāng)時(shí)發(fā)了什么直接看記錄。臺(tái)賬最好和發(fā)布系統(tǒng)聯(lián)動(dòng)能自動(dòng)寫入的就別讓人手填。手填的數(shù)據(jù)必然會(huì)漏、會(huì)錯(cuò)而且填的人覺得這是額外負(fù)擔(dān)。自動(dòng)采集加上人工補(bǔ)充關(guān)鍵字段比如回滾原因、影響范圍是可持續(xù)的做法。5.3 版本一致性要能自動(dòng)校驗(yàn)前面所有的規(guī)則最終都要落到三個(gè)地方對(duì)得上線上實(shí)際運(yùn)行的版本、制品庫里的制品、臺(tái)賬里的記錄。這三個(gè)地方任意兩個(gè)對(duì)不上就意味著有一環(huán)失控了。所以規(guī)定里要包含定期校驗(yàn)的要求最好做成自動(dòng)化任務(wù)。校驗(yàn)邏輯并不復(fù)雜從線上采集實(shí)例版本去制品庫查詢?cè)摪姹臼欠翊嬖谌ヅ_(tái)賬查詢是否有對(duì)應(yīng)記錄且狀態(tài)一致。不一致就告警。這條告警的價(jià)值在于它能在問題爆發(fā)之前發(fā)現(xiàn)流程漏洞。比如某次有人繞過流水線手工發(fā)包線上版本和臺(tái)賬就對(duì)不上校驗(yàn)任務(wù)當(dāng)晚就會(huì)報(bào)出來。我在一個(gè)項(xiàng)目里加上這個(gè)校驗(yàn)之后第一次運(yùn)行就發(fā)現(xiàn)了三個(gè)歷史遺留的不一致其中一個(gè)已經(jīng)存在了半年多誰也不知道那份代碼是怎么上去的。校驗(yàn)結(jié)果的處置也要有規(guī)定發(fā)現(xiàn)不一致必須在規(guī)定時(shí)間內(nèi)處理處理方式只有兩種要么補(bǔ)齊記錄要么把線上版本糾正到與記錄一致。不允許先放一放因?yàn)榉乓环潘蜁?huì)變成一個(gè)沒人敢碰的歷史遺留。6. 制度怎么推下去模板、流水線和例外登記6.1 從最小可行的模板開始制度推不動(dòng)十有八九是因?yàn)橐婚_始就寫得太全。我見過幾十頁的版本管理規(guī)定發(fā)下去沒人看因?yàn)槔锩嬉话氲膬?nèi)容和當(dāng)前團(tuán)隊(duì)的實(shí)際流程無關(guān)。更可行的做法是先做最小版本規(guī)定版本號(hào)格式、規(guī)定 Tag 不可變、規(guī)定制品不可覆蓋、規(guī)定發(fā)布必須有發(fā)布說明。就這四條覆蓋了最常見的混亂來源而且執(zhí)行成本低。模板比文字規(guī)定更能約束行為。把版本號(hào)格式做成提單模板的必填字段并帶格式校驗(yàn)把發(fā)布說明做成固定表單把回滾方案做成必填項(xiàng)這些東西比寫十頁應(yīng)當(dāng)如何如何有用得多。人在填表的時(shí)候被動(dòng)遵守規(guī)則比讀完文檔再主動(dòng)遵守的成功率高得多。起步階段允許有例外但要登記。規(guī)定里寫清楚例外的申請(qǐng)方式、審批人、以及事后要在多少天內(nèi)補(bǔ)齊。例外不是違規(guī)而是有意識(shí)的偏離登記了就能追蹤不登記就成了失控。6.2 把規(guī)則嵌進(jìn)流水線而不是寫在文檔里這是我踩過最大的一個(gè)認(rèn)知坑。早期我以為只要文檔寫得清楚大家就會(huì)照做。實(shí)際情況是人在趕進(jìn)度的時(shí)候文檔永遠(yuǎn)排在最后。后來我把能自動(dòng)化的規(guī)則全部嵌進(jìn)流水線分支名不符合規(guī)范流水線直接失敗版本號(hào)格式不對(duì)構(gòu)建階段就攔下來嘗試往制品庫推送已存在的版本直接報(bào)錯(cuò)單獨(dú)構(gòu)建正式版本而不關(guān)聯(lián)發(fā)布說明編號(hào)不允許歸檔。規(guī)則一旦變成流水線的失敗條件它就有了強(qiáng)制力。文檔負(fù)責(zé)解釋為什么流水線負(fù)責(zé)保證必須做兩者分工明確。這樣做還有一個(gè)好處新同學(xué)不需要通讀文檔就能上手因?yàn)樗峤坏拿恳徊蕉紩?huì)被系統(tǒng)校驗(yàn)出錯(cuò)時(shí)的提示就是最好的培訓(xùn)材料。當(dāng)然攔截規(guī)則要一次加一條加完觀察一段時(shí)間。一次性加太多正常發(fā)布全被攔住大家就會(huì)想辦法繞過反而破壞了制度的權(quán)威性。我一般是在某類問題連續(xù)出現(xiàn)兩次以上之后再把它變成自動(dòng)攔截這樣每次攔截都有現(xiàn)實(shí)依據(jù)團(tuán)隊(duì)也更容易接受。6.3 例外和復(fù)盤要形成閉環(huán)再完善的制度也會(huì)遇到例外比如緊急故障需要立刻修復(fù)。規(guī)定里要留一條快速通道但這個(gè)通道的代價(jià)是必須在限定時(shí)間內(nèi)補(bǔ)齊全部記錄包括發(fā)布說明、臺(tái)賬和回滾方案。緊急不是豁免記錄的理由緊急只是允許你先做后補(bǔ)。每隔一段時(shí)間要復(fù)盤一次版本相關(guān)的問題看看是規(guī)則缺失還是執(zhí)行不到位。如果是規(guī)則缺失就補(bǔ)規(guī)則如果是執(zhí)行不到位就看看能不能自動(dòng)化攔截。這個(gè)循環(huán)跑起來之后制度才會(huì)慢慢貼合團(tuán)隊(duì)的實(shí)際而不是一份寫完就沒人碰的文件。我個(gè)人的體會(huì)是版本管理規(guī)定最忌諱一次成型、長期不變它應(yīng)該像代碼一樣被維護(hù)和迭代每次出事都是它進(jìn)化的機(jī)會(huì)。最后分享一個(gè)我一直在用的小技巧把當(dāng)前各環(huán)境的版本號(hào)做成一頁隨時(shí)可查的面板放在團(tuán)隊(duì)最常打開的地方。這一頁不需要復(fù)雜的權(quán)限所有環(huán)境、所有實(shí)例的版本一目了然。很多關(guān)于版本的爭論本質(zhì)上是因?yàn)樾畔⒉煌该饕坏┐蠹铱吹亩际峭环輸?shù)據(jù)討論就會(huì)從你說是多少變成數(shù)據(jù)上是多少溝通成本一下子就降下來了。這件事我做了之后最明顯的變化是再也沒人問我線上現(xiàn)在是什么版本了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
99热一本久道| 天天婷婷天天| 日本人人xxx| 超碰AV成人| 日韩在线视频中文字幕| 国产成人综合电影| 丁香婷婷影院| 99热免费18| 丁香五月婷婷在线观看| 狠狠爱综合| A片试看50分钟做受视频| 国产激情久久久| 91精品激情9| 久久99大全| 99日韩网站| 天天视频亚洲| 欧美操人| 1024成人在线观看| 九九综合五月欧美| 婷婷六月激情| 久久99综合网| 九九热视频精品| 亚洲综合九九| 99在线精品视频| 狠狠婷婷色综合| 97人人操在线| 综合色影| 婷婷成人AV| 这里只有精品,日韩视频| www.99操.com| 色色综合视频| 久久这里只有精品视频26| 波多野结衣AV无码Porn| 另类亚洲视频| 国产九九一区二区三区| 91综合在线观看| 日韩在线看AV| 亚洲激情久久| 日韩国产在线精品| 蜜乳av一级av| 国产黄大片在线观看画质优化 | 天天搽天天射| www.刺激色网站www.| 成人短视频在线观看| 激情五月婷婷开心网| 伊人丁香六月婷婷| 嫩草综合网| 超碰大香蕉网| 99熟女| wwwav大香蕉| aaaaa不卡| 99色.com| 操日视频| 最新色色五月天| 91xxxx九色| 五月综合久久| 婷婷丁香六月天| 日本91在线| 99精品福利视频| 天天粽合合合合| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 97亚洲视频在线| 婷婷五月天电影网| 丁香五月婷婷色情综合| 狠狠色综合网站久久久久| 婷婷六月亚洲综合| 秋霞性爱AV| 激情综合区| 免费播放片大片| 亚洲另类婷婷五月综合| 色吧五月婷婷| 97色婷婷| 天天色情站| 少妇高潮A片无套内谢麻豆传| 五月婷婷激情刺激| 高清不卡一区| 99热99网| 五月天久久丁香| 热99热9| 无码人妻一区二区三区免费九色| 六月丁香中文字幕| 色婷婷电影网| 91久久18| 久久99网站| 国产成人综合网| 色婷婷久久| 久久这里只有精品5| 五月天色狠狠| 综合啪啪| 人妻熟人中文字幕一区二区| 久久网婷婷| 影音先锋一区| 亚洲热综合网在线观看| 六月丁香中文字幕| 久久久com| 超碰日韩人妻在线| 婷婷综合网| 九九成人视频| 久久五月天激情| 欧州色色| 五月丁香综合激情| αV电影| 丁香五月婷婷99| 五月丁香色婷婷久久| 丁香六月色婷婷| 天天肏高清在线| 五月天色导航婷婷资源婷婷| 色婷婷五月天视频网站| 97碰碰碰免费公开在线视频| 奇米色大香蕉| 99色激| 丁香六月毛片| 久热只有精品| 91丁香五月| 操笔无码| 亚州操人在线视频| WWW99视频| 亚洲国产精品五月天| 日日肏夜夜干| 99国产精品久久久久久久久久久| 97操碰碰无码视频| av在线免费网站| 色五月亚洲| 亚洲精品视频在线| 亚洲激情在线| 婷婷久久五月天| 亚洲精品久久久久久久久久吃药| 久热 91| 久久婷婷操| www.9797国产| 伊人影院久久网| 热99国产精品| 久久综合九九| 国产在线中文字幕| 日本3级片一区2区| 五月婷婷丁香网| 五月婷婷播| 五月天婷爱综合| 噜噜色天天开心| 精品久久久人妻| 国产精品久久久久久久久久| 久久6这里只有精品| 欧美日韩成人在线网站| 在线看黄色| 婷婷丁香五月天亚洲| 日日夜夜狠狠| 国产激情av| 九九99一区| 丁香五月色情| 狠狠肏综合网| 9色91视频| 丁香五月首页| 大香蕉婷婷| 啪色综合| 91人妻人人做人碰人人爽九色| 色色色色色色色色色色色色色色,网站| 涩涩涩,com| 丁香婷婷五月| 好吊操这里只有精品| 97色婷婷成人综合在线观看| 欧美日韩91| 91超级碰碰| 五月天之色情综合网| 99成人网站| 婷婷五月天堂| 天天肏屄夜夜爽| 婷婷伊人五月天| 日韩AV在线免费观看| 国产成人99久久亚洲综合精品| 久久婷婷五月天激情新地址| 婷婷五月18永久免费视频| 爽tv | 丁香婷停五月激情综合深爱| 色综啪啪| 五月丁香久久网| www.henhenl| 五月天社区婷婷丁香社区| 久久精品五月| 日日噜噜夜夜狠狠久久丁香六月| 高清无码.com| 爱爱网址9| 米奇影视资源婷婷狠狠色激情欧美五月丁香 | 亚洲乱码成人| 久久人操-久草婷婷-成人AV| 综合大香蕉| 9久精品视频| 91精品综合久久久久久五月丁香| 日本婷婷综合精品| 五月婷婷色白丝| 爱草人视频| 日韩AV在线影片| 99热中文字幕久久| www.精品99| 五月色婷婷综合| 亚洲激情 久久| 五月天激情国产综合婷婷婷| 色婷婷综合视频| 91互操| 婷婷伊人中文字幕| 丁香五月激情无码视频| 亚洲第一黄网| 天天日日| www.婷婷.com| 丁香亚洲婷婷五月| 九九热re99re6在线精品| 色色色9| 5五月综合网亚洲| 日韩在线视频网站| 激情丁香淫荡婷婷| 色色五月天婷婷丁香| 92久久| 五月天久久婷婷婷| 色婷精品91| 欧美日韩中文国产一区发布| 日本色婷婷| 天天做天天爰天天爽天天无遮挡| 丁乡久久| 蜜桃人妻无码AV天堂三区| 99热99re6国产在线播放| 91se在线视频| 成人一区在线观看| 北条麻妃伊人| 久久婷婷亚洲| 99热这里只有精品中文字幕| 天天日天天做天天操| 欧美日韩国产一区| 96精品国产综合久久久久久| 精品国产一区二区三区四区阿崩| 91一起操| 五月天激情网图片| 99国产性感视频| 五月婷婷影院| 六月婷婷综合久久| 99色视| 成人午夜无码视频| 五月婷婷人人人操| 噜噜吧天天爱| 丁香五月激情性色郤| 五月丁香啪啪激情| 亚洲性爱电影| 第五婷婷伊人丁香| 人人草碰| 爆乳熟女-区二区三区| 久久五月视频| 深爱激情综合| 成人在线视频网| 思思精品久久艹| 久99热| 日本丁香久在线| 亚洲无码影音| 日韩一级淫乱片一区二区三区| 日韩 中文 欧美| 天天天综合网| 久久五月婷综合网| 五月丁香六月婷婷色| 激情综合5| 亚洲婷婷五月| 欧美一级色| 六月丁香婷婷大香蕉| 色色色五月天婷婷| 殴美97色| 婷婷五月丁香综合桃花色网| 一本九九色| 桃色五月婷婷| 久久久亚洲成人无码A片| 狠狠狠狠狠| 啊v视频在线观看| 99热在线观看免费精品| 五月丁香花视频| 深爱激情综合网| 一级性爱视频| 婷婷五月综激情| 婷婷六月色开 | 中文久久婷婷| 色婷另类| 婷婷五月天改成什么了| 人人人人人人人人人草| 激情色视频| www.26uuu.com亚洲电影| 久久视网36| 婷婷导航| 91啪级电影| 啪啪干伊人婷婷| wwccc久久久| 丁香婷婷射| 色狠狠综合网| 丁香五月天色婷婷| 大香蕉五月天婷婷| 九九精品免费| 色婷青青| 久久婷婷亚洲无码一起| av大香蕉| 婷婷网五月| 99热无码| 九九综合| 欧美97超碰| 婷婷五月综合网激情| 亚州激情九月| 深爱 五月天| 热无码A∨| 99热综合在线观看| 9久热免费视频99| 日本色五月| 牛牛澡牛牛爽| 综合激情在线| 26UUU欧美激情一区二区| jizzdr| 伊人激情综合网| 五月天激情影院| 丁香五月大香蕉| 五月婷婷碰碰| 婷婷久草| 久久婷婷六月综合| 亚洲激情网| 91人人爽人人操| 九九热色视频| 九九热最新| 天天色视频| 丁香情色五月| 久久 婷婷 五月天| 婷婷金品综合视频| 精品一二三区久久AAA片| 欧美图片丁香五月天| 99热精品在线播放观看| 99视频在线| 91视频久久久| 深爱五月激情| www91色网站| 五月天五月色婷婷综合| 综合久久综合| 欧美啪啪五月天| 五月丁香激情片| 26uuu在线观看| 激情五月丁香五月| 婷婷激情综合色五月久久图片| 五月激情精品视频| 亚洲操操| 91碰碰视频| www,婷婷五月天,com| 色一情一乱一乱一区91Av| 日日夜夜九九| 性色欲情 网站| 五月丁香婷婷视频| 日韩久久欧亚| 99亚洲无码| 五月天激情四射| 亚洲无码成人| 丁香五月欧美色综合| 91玖玖| 女性自慰系列第五页| 色五月婷婷91| 久久婷婷亚洲| 99精品在线| 久久综合中文| 亚洲男女激情| 国产Va视频| 中文字幕在线日亚州9| 国产片天天爽夜夜爽| 97色婷婷成人综合在线观看| 色六月丁香婷婷啪啪啪| 国产av天堂| 狠狠色噜噜狠狠色噜噜噜999| 26uuu精品一区二区| 无码人妻激情| 激情五月天网站| 日本本土色网第一区| 日本婷婷五月天| 另类的婷婷| 激情第四色| 内射激情在线| 日本高清不卡免费一区二区三区| 九九热精品视频在线观看| 91日视频| 99热这里只有精品22| 91超级碰碰碰| 午夜不卡久久精品无码免费| 色XX综合网| 丁香六月青青草| 婷婷色操| 五月婷婷天天色| 色135综合网| 人人人人人人人草| 色色激情网| 久久婷婷六月综合| 激情五月丁香六月| 日韩色色色色色| 国产成人网| 激情小说之五月| 激情五月天第四色| 久操大香蕉| 色五月婷婷久久大| 色婷婷中文在线| 九九99久久| 日韩久久这里只有精品| 99热这里有精力| 爱穴久久| 中文字幕成人| 五月开心深爱激情网| 色婷婷啪啪啪啪啪啪| 激情五月天色播| 热久久视频99| 久久婷婷热| 日日操夜夜擼| 99亚洲视频| 天天摸天天舔天天爽| 丁香五月婷婷老师网站| www.色婷婷.com| 99久久大片| 九九亚洲综合| 91熟妇大香蕉| 成人片黄网站色大片免费毛片| 五月婷婷香| 99婷婷五月天| 色综合久久88色综合天天看| 超碰在线日夜| 日韩操人| 99热碰碰热| 99在线视频精品| 在线观看av网站| 操操操97| 亚洲色五月| 五月激情婷婷国产精品久久久久久| 99精品久久| 91精品久| 久久久久久五月天| 天天操综合网| 99热在线观看精品| 99这里都是精品| 激情五月婷婷综合网| 五月丁香精品| 亚洲人妻电影| 热日韩欧美| 热久久91| 深爱激情五月网| 久久久久综合激动五月天| 99热线观看9| 激情都市另类| 欧类av怡春院| 五月婷丁香| 五月婷婷丁香大陆免费| 丁香六月婷婷色播| 五月激激激情综合网| 激情精品久久| 91热er| 婷婷丁香五月亚洲欧美| 99操逼| 91色逼| 成人AV网站在线| 99在线资源视频| 少妇高潮A片无套内谢麻豆传| 午夜丁香婷婷| 五月婷婷片| 激情久久久久久久久久| 色五月婷婷五月天| 婷五月天| 欧美色97| 色欲丁香| 99热综合| 51精品国自产在线| 婷婷五月丁香综合亚洲| 97在线天堂| 色色999三级片| 婷婷丁香五月天综合在线日韩| 性做久久久久久久免费看| 在线播放中文字幕| 无码激情AAAAA片-区区| 六月婷综合| 色婷婷激情Av久久久| 丁香五月婷婷社区| 在线91日韩| 婷婷性爱综合| 91久久九久久九久久九久久九久久| 九九99在线| 高清成人综合| AA丁香综合激情| 婷婷丁香射射| 99色在线观看| 五月婷婷深深爱| 久大香蕉| 五月天婷婷色| 99热黄| 97在线/日本| 五月婷婷六月丁香首页| 丁香五月色情| 五月天激情无码高清| 天天舔天天操| 99婷婷| 八戒青柠影视剧在线观看| 国产毛多水多女人A片| 51精品国自产在线| 百度4399有码精品V在线观看| 色九亚洲| 婷婷激情综合色五月久久,色婷婷丁香花,丁香婷婷五月情天,久久婷婷五月综合色 | 久久婷婷网站| 天天人人天天爽| 99日这里只有精品| 97av在线视频| 婷婷五月天97干| 婷五月天丁香婷五月| 久久久久9| 2020久久婷婷五月| 五月天久久网站| 超碰av在线| 色婷婷啪啪综合网| 色狠狠狠干| 亚洲第一色区| 俺去也综合| www超碰com| 91婷婷在线| 色五月天成人在线| 色婷婷av在线观看| 91精品综合久久久久久五月天| 超碰在线精品| 久久人妻伊人| 这里只有精品久久| 91青娱乐青青草| 亚洲色婷婷99一9|| 国产伊人五月天| 婷婷开心青青草| 天天看夜夜看| 日本欧美成人片AAAA| 久草免费福利视频| 婷婷色五月综合丁香| 开心婷婷五月| 99久99久| 26uuu四色| 九九热最新| BBWCUCKOLD精品熟妇| 综合99视频| 精品一区二区三区木瓜| 99re这里只有| 91操在线视频| 99热8| 欧美成人AAA片一区国产精品| 成人五月天丁香婷| 99视频在线观看网址| 亚洲亚洲人成综合网络| 99精品无码视频| 五月天成人在线播放| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 色情五月天首页| 色色五月婷婷久久| 色色色999| 五月天大香蕉| 婷婷成人在线| 天天爽夜夜爽夜爽精品| 五月婷婷香| 五月婷婷九九热| www.五月天色色.com| 婷婷五月色播网| www.99色| 日日干干天天干| 激情五月亚洲| 激情五月五月婷婷| 国产激情视频在线观看| 99热免费| 成人在线不卡| 国产白丝在线一区| 99精品无码| 国产亚洲成AV人片在线观黄桃| 影音先锋91在线资源站| 五月婷免费视频| 婷婷99中文字幕| 婷婷色婷婷亚洲成人| 翔田千里aV中文字幕| 先锋av性爱成人电影| 99热6色| 色播婷婷大香蕉| 日韩一级片| 午夜天天精品视频| 色玖玖玖| 激情婷婷五月天网址| 婷婷五月天在婷| 五月综合视频| 国产一级片| www.1024久久| 如何安全看伊人婷婷| 五月丁香六月婷婷手机无线| 91丨九色丨熟女| 五月丁香久久| 婷婷玖玖丁香| 欧美在线骚货| 夜夜撸日日操| 国产肥白大熟妇BBBB视频| 日逼影音先锋AV男人资源站| 亚洲人成网亚洲欧洲无码久久| 五月丁香六月综合激情网| 色色色五月婷| 日韩人妻AV在线| 色噜噜五月天| 精品怡红九九九| 亚韩在线视频| 丁香五月伊人| 天天爽爽日日做做| 91久久综合| www.sd-xiangsu.cpm| 免费不卡狠操美女视频网| 五月丁香六月激情在线| 五月丁香久久综合色| 五月婷婷开心爱| 六月丁香网| 中文字幕日本最新乱码视频| 人人摸人人操人人爽| 色偷偷狠狠| 婷婷深爱五月| a在线观看| 国产婷婷色五月| 99aese| 婷婷九月激情| 99re久热| 亚洲激情高潮| 操一区| 九九色黄色| 五月色丁香综合| 久久精品系列| 丁香九月激情在线视频| 99在线观看视频蜜臀| 色婷婷五月综合在线| 天天射天天操天天干| 激情丁香婷婷六月天| 久久精彩视频| 国产精品 的国产| 午夜精品777| 深爱五月激情| 99久在线观看| 亚洲秘 无码一区二区三区妃光/1| 曰韩五月丁香色婷婷无码| 久久五月视频| 婷婷五月天亚洲| 中文字幕,综合,91| 激情综合网色播五月| av五月天婷婷丁香| WWW.99热| se色婷婷视频| 日日撸天天干| 屁股翘好撅高迎合跪趴| AV中文网| 青草久久五月婷伊人| 五月丁香六月在线| 操B五月天| 伊人色综合久久久| www.99热精品| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 久久女伦| 色婷婷综合网站| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 嫩草视频观看| a久久| 七月激情六月婷婷综合在线播放| 六月丁香五月天| 丁香婷婷久久五月天| 日日操,夜夜爽| 综合色色五月| 狠狠色综合五月| 9热成人在线视频| 日日日影院| 99热 日韩| 亚洲经典小视频| 啪啪五月婷婷| 丁香五月六月综合欧美| 97亚洲婷婷| 外国碰视频网站97| 亚洲激情在线| 婷婷综合五月| 婷婷五月天伊人网在线观看视频| 久久综合26p| 天天色天天色天天色天天色天天色| 亚洲综合色成丁香五月色| 激情综合六月| 国内久久亭亭| 婷婷久久大香蕉| 色色色色欧洲| 最近中文字幕大全免费版在线 | 99 这里只有精品| 久久免费高| 丁香六月久久| 久久五月丁香| 久久婷婷色五月| 婷婷六月成人| 亚洲色五月| 99色人| 久久图色4| 在线观看的av| 丁香六月狠狠| 亚洲欧美成人在线观看| 中文在线成人| 人妻性爱av网站| 午夜无码熟熟妇丰满人妻 | 91色在线| 丁香激情五月天| 五月丁香欧美综合免费视频| 丁香六月青青草| 五月婷婷综合激情网| 亚洲日韩人妻操逼| 亚洲国产另类av| 亚洲国产成人在线| 中国AV性爱观看| 日韩无码91| 夜夜干夜夜操| 亚洲成人va| 人妻AV在线观看| 野战J办公桌椅H| 第四色婷婷丁香五月| 欧洲电影在线观看免费版英语版| 人人摸人人摸| 狠狠色噜噜狠狠色噜噜噜999| 在线视频婷婷| 六月丁香综合| 天天日天天做天天操| 亚洲欧洲午夜成人精品av| 婷婷色中文字幕| 五月婷婷免费看| 伊人激情| 99综合成人视频在线观看| www.婷婷.com| 亚洲热综合| 99爱欧美| 激情婷婷久久| 婷婷六月天国产综合| 日本一道久久| 综合激情五月天六月婷免费视频| 97人人干。| 色婷婷综合久久| 啪啪 综合网| 激情激情激情网| 人人插9| 成人无码精品1区2区3区免费看| 婷婷五月天伊人| 99在线观看| 九九色婷婷Av| 综合色播| 成人版视频在线观看| 久久久区区一久久久久久| 99久久99九九99九九九| 激情丁香五月天图片| 精品国产AV色一区二区深夜久久| 久久色亭亭五月天| 五月涩涩网| 天天噜天天插| 亚洲 视频 导航 一区| 爱iii做iiii日| 五月婷婷六月丁香| 婷婷涩涩五月天| 婷婷丁香五月综合激情视频| 婷婷久久五月天亚洲欧美国产日韩在线观看 | 国产又黄又爽又激情不遮挡视频在线观看| 另类激情五月| 丁香色影院| 亚洲色99综合天堂| 丰满少妇猛烈A片免费看观看| 91九色视频| 久久久久久久人妻| 79精品视频| 综合六月激情婷婷| 五月色导航| 欧美天天爽| 99久久婷婷| 九九re精品视频在线观看| 97sese婷婷| 久久综合站| 5月丁香美女影院| 欧美搡BBBBB摔BBBBB| 操骚货在线| 色婷婷久久| 色碰碰视频| 亚洲AV人人操| WWW99热| 天天爽夜夜操| 天天爽天天| 久久a热| 噜噜国产| 五月激情六月丁香| 成人丁香五月天Av| 97碰人人操| 婷婷成人AV| XX久久| 亚洲婷婷丁香| 五月婷婷与六月丁香图片激情| 久久五月婷婷丁香| 91丨九色丨熟女丰满| 日韩精品一区二区亚洲AV观看 | 四虎婷婷五月天| 无码中文一区二区三区| 天天插天天很| 26UUU精品一区二区Com| av人人操| 亭亭五月色男人| 操一操干一干| 97热这里精品在线视频| AV在线免费播放| 五月丁香六月激情欧美综合| www.五月激情.com| 久色网五月| 毛片色五月| 久婷五月| 大香蕉AV在线| 亚洲妇女熟BBW| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 天天日,天天射,天天舔| 色婷婷久久| www.久久久久| 婷婷激情五月| 影音 五月 婷婷 久久| 五月天色色色网| 婷婷色情五月| 色五月婷婷综合| 亚洲综合视频天天精品| 人人干Av| 免费亚洲婷婷五月| 九九这里都是精品| 国产FREESEXVIDEOS性中国| 激情综合五月丁香六月婷婷| 99亚洲精美视频在线观看| 丁香色色网| 丁香六月婷婷高清| 少妇达人正片在线播放_ikun_福利吧| 九九99精品视频| 九九亚洲视频| 精品九九久久| 91热久久| 综合视频五月| 五月丁香成年黄色| 久久xxxx| 久草视频大香蕉99| 97人人超| 伊人网色婷婷五月天| 99爱视频| A片试看50分钟做受视频| 婷五月天| 婷婷色女| 激情五月天综合| 五月婷婷六月色| 操逼电影免费看| 97人人干人人操| 亚洲九九在线| 丝袜人妻| 丰滿爆乳一区二区三区| 中美日韩成人在线| 99久久精品网| 激情五月婷婷综合| 久久五月热| 丁香婷婷激情综合五月激情 | 色女人久久| 欧美成人猛片AAAAAAA| 久久五月婷| 亚州欧美黄色电影| 色愛综合网| 国产精品色婷婷AV综合色色| 日本综合久久| 亚洲色图81p| 密乳视频| 一起草性爱不卡视频| 91成人看| 精品无码色欲AV| 五月婷婷偷拍| 久热精彩视频98| 色婷丁香五月| 综合一区二区三区| 狠狠操狠狠色| 99色视| 超碰高清在线| www.一区二区三区| 亚洲色情免费网| 九九99香蕉在线视频播放| 大色鬼综合| 91chinese在线| 五月婷婷五月天在线| 丰满少妇乱A片无码| 欧美日朝成人| 日日干日日| 五月天小说激情| 国产精品五月丁香| 99热在线只有精品| 91色在线| www激情婷婷com| 香蕉AV777XXX色综合一区| 丁香5月激情网| 97精品在线| 99色.com| 丁香五月综合在线观看| 亚洲精品又粗又大又爽A片| 成人精品在线观看| 丁香婷婷五月色成人网站| 五月久久| 九九无码视屏| 久草婷婷网 | aaa久久| 婷婷社区五月天| 九月性爱网| 婷婷色五月天综合网| 婷婷色综合| 五月丁香六月激情综合网| 综合久久影院| 国产激情在线| WWW.17C亚洲精品| 婷婷激情啪啪| 日日色综合| 大香蕉娱乐| 免费观看的婷婷五月视频在线| 丁香五月天大香蕉啪啪| 久久天堂色| 久热a| 91|疯狂丨高潮丨对白| 五月天婷婷激情干干| 欧美三级A做爰在线观看| 丁香五月天激情婷婷丁香六月| 五月花免费视频| 色婷婷av在线观看| 日日操日日撸| 在线五月婷婷小电影| 婷婷激情六月| 亚洲亚洲激情| 日韩成人无码| 欧美天天性| 色综合99无码| 99热免费精品| 四月婷婷五月丁香| 99综合一区| 天天久久狠狠色综合| 这里只有精品视频99| 五月噜噜噜色综合| 色欲一区二区三区精品A片| 亚洲性爱99在线| 色色五月婷婷网| 色狠狠综合| 97人妻人人| 久久久无码精品成人A片小说| 五月丁香久人妻中文| 三级黄网站| 天天舔天天插天天爱| 性无码专区无码| 99成人无码| 色开心五月婷婷丁香HD| 99久久网站| 久操大| 操人91| 午夜爱爱爱成人| 色播激情| 亚洲综合草草| 免费成人va| 五月婷婷综合激情小说| 泰州成人视频| 亚洲啪啪啪啪| 丁香网站| www99热| 激情婷婷丁香五月天| 亚洲精品成人| 天天爽夜夜爽天天爽夜夜爽| 婷婷丁香五月激情密臀av| 婷婷综合在线| 色色婷婷综合网| 91精品啪| 可以直接看的av| 五月婷婷伊人久久| 亚洲视频国产一区| 五月婷在线| 五月天激情www| 婷婷五月激情网| 国产一级片色色| 欧美Va婷色| 无码一区二区三区四区五区| www.99操| 99热这里有精力| 五月天伊人手机在线播放AV| 国产激情在线| 亚洲丁香网| 91网站黄| 国产高清av黄色看片| 色香久久| 综合激情五月丁香| 91久久九久久九久久九久久九久久| 五月天色色网站| 丁香五月天AV| 888精品福利地址| AV在线二十六页| 久久这里都是精品| 99色色色色| 久久婷婷五月国产激情综合片| 五月丁香婷久久| 婷婷九月| 五月婷婷六月丁香在线视频| 日日干五月天婷婷| 久草五月婷| 国产乱妇无乱码大黄AA片| 五月婷婷六月丁香| 婷婷五月天激情小说网站| 色婷婷9| 日韩五月婷婷久久| 天天爱天天操| 殴美日韩成人| 丁香色五月婷婷91桃色| 大香蕉AV在线| 国产色视频网站2| 成人美女网| 日本三级黄色大片| 深爱开心激情| 久婷婷久草| 婷婷伊人中文字幕| 黄页免费一级视频懂色| BBWCUCKOLD精品熟妇| AV在线免费网站| 99精色| 深爱开心激情网| 久婷婷| 美欧成人视频| 丁香五月综合网| 9色在线| 九九久久五月天| 婷婷五月激情五月激情| 五月丁香成人| 综合五月草 | 99啪啪网| 丁香六月婷婷一区二区三区| 五月丁香激情婷婷综合字幕| 色九区| 99热99极品观看| 另类图片五月天婷婷| 夜夜嗨一区二区三区直播内容 | 99激情网| 99网99热| 婷婷五月天精品| 欧美日本一区二区三区| 日日干综合| 爱性综合网| 丁香六月婷婷综合激情欧美| 日本乱论99| 久久青草国| 丁香五月激情五月色综合| 亚洲精品无人区| 六月丁香五月婷婷| 激情五月天婷婷| 91欧美| 九九色人| 久久视屏这里只有久久| 久久婷婷色| 色婷婷久久综合| 久久久精品AV| www.99热在线观看| 中文字幕综合| 97九色视频| 99狠狠操一| 亚洲顶级VA在线观看-高清完整版在线影院观看-S022AV | 九 九九九AV| 久久丁香网| 九九色黄色| 精品国产a| 狠狠干狠狠操狠狠爱| 97操女视频| 综合99在线| 看逼中文字幕| www,色综合| 婷婷综合影院| 99ri精品在线| 婷婷月综合| 婷婷综合色色| 天天干,天天舔| 欧美狠狠一在草| 丁香五月婷婷少妇| 视频免费精品免费精品免费精品免费精品免费精品免费精品免费99 | 丁香色啪综合| 热久久国产视频| 五月丁香青草综合啪啪| 婷婷情色激情| 亚洲另类视频| 99热| 六月婷婷激情图片| 亚洲激情五月天| 伊人无码高清| 99热8在线| 96丁香六月婷婷蜜桃综合久久| 午夜爱爱网站| 五月婷婷香| 嫩草AV久久伊人妇女超级A| av高清无码| 1024在线视频| 色色五月婷婷久久| 亚洲激情四射| 久婷婷久草| 五月婷婷综合精品| 香蕉视频91| 俺去也婷婷| http://www.com久久久精品一区| 国产高潮白浆一区二区| 色天堂在线| 开心六月丁香五月婷婷| 激情五月天之五月婷婷| 丁香五月五婷| 中文字幕丰满人妻无码专区| 日日色综合| 丁香久久在线| 先锋资源婷婷| 久久综合这里只有精品1| 五月丁香婷婷人体| 亚洲五月停停| 久久婷婷五月| 丁香五月天堂婷婷| 狼人婷婷综合| 综合久色五月| 五月婷av| 色插综合网| 五月天婷婷影院影院观看| 二色av| 欧美色男人网站| 六月丁香婷婷色狠狠久久| 婷丁五月| 五月婷婷六月丁香色| 大香蕉五月丁香| 中国女人做爰A片| 大香蕉大香蕉在线影院| 天天日夜夜高潮| 噜噜网免费视频| 天天操比比| 婷婷五月丁香成人网| 五月婷婷六月天| 欧美Va在线| 在线成人网站| 日本综合99| 色婷婷基地| www激情五月天| 激情综合网五月婷婷| 五月天大香蕉视频| 丁香六月AV| 五月激情影视| 人妻久久久| 99碰| 久久婷婷五月草视频| 天天射美女| WWW、99热| 五月久久五月激情| 色婷婷久久综合中文久久一本| 色婷网| 丁香五月婷婷亚洲另类| 开心五月丁香综合久久| 七七九色| 大香蕉福利导航| 久久色五月天| 色婷婷综合影院| 色一色综合| 99这里有精品视频3| 色色色热热热| 丰满少妇猛烈A片免费看观看 | AV中文字幕夜夜操b天天摸bb| 欧美激情五月综合| 伊人玖玖婷婷| 男女av免费看| 国内裸舞二区| 色狠狠色| 91|九色|动漫| 天天干com| 国产成人精品一区二三区熟女在线| 五月丁香91| 九九热精品| 色婷婷在线视频观看| 翔田千里aV中文字幕| www.激情| 综合激情肏逼网| 精品国产va久久久| 成人无码髙潮喷水A片| 婷婷六月丁香激情| 97资源欧美日韩大香蕉超碰一区| 日韩有码一区| 婷婷综合在线观看视频| 开心五月激情网| 婷婷综合五月| 久久免费操| aV欲望人妻中文字幕| 丁香5月婷婷| 中文字幕无码人妻少妇免费视频| 91操碰| 丁香六月久久| 啪啪夜久久| 99视频这里有精品| 色婷婷第四色| 天天干com| 国产免费一区二区三州老师F1……| 五月综合激情图片| 激情五月综合婷婷| 日本人妻A片成人免费看片| 久久92| 99久超碰| 成人免费高清在线播放| 97色视频网| 色五月在线播放| 色婷狠狠| 五月婷婷丁香网| 91性高潮久久久久久久久| 丁香激情五月天| 婷婷五月精品中文字幕| 午夜天天精品视频| 亚洲综合干| 北京熟妇搡BBBB搡BBBB| 天天拍天天做视频| 一点色成人网| 色欲五月天| 午夜天堂一区人妻| 丁香五月婷婷88在线| 免费无码毛片一区二区A片 | 五月婷婷导航| 另类小说五月天| 热99免费在线| 久久久91| 91丨九色丨大屁股| www.夜夜| 五月天激情网图片 - 百度| 久久精品国产一区二区三区四区| 桃色激情婷婷伊人网| 青草视频在线播放| 国产成人va在线| 99热黄| 日狠狠| 大香蕉久热| 色播五月婷婷| 五月天开心激情网色欲无码| 亚洲妇女熟BBW| 色五月婷婷啪啪五月| 国内9l视频自拍老熟女九色| 噜噜吧天天爱| 另类精品视频在线观看| 亚洲色综合| 丁香五月 综合| 丁香五月天天久久综合小说| 人人爱人人添| 亚洲久久日| 天天插天天爽| 亚洲AAAA网| 婷婷伊人五月丁香天堂网| 五月天操逼网| 99热乎| 五月婷婷久久大片| 综合网五月| 色色五月婷| 久久精品99国产精品日本| 婷婷开心久久| 影视av久久久噜噜噜噜噜三级| 婷婷天天日婷婷| 99色热视频| 91日精品| 久久99综合| 婷婷综合激情五月综合| 婷婷 丁香 久久| 婷婷色五月天在线| 丁香五月婷婷天激情| 色五月婷婷1| 激情五月婷| 五月停停丁香| 色九亚洲| 国产毛多水多女人A片| 十月色综合| 天天五月丁香五月| 色色色五月天婷婷| 影视av久久久噜噜噜噜噜三级| 玖玖资源部在线播放| 九热视频免费观看| 五月天激情国产综合婷婷| 五月天婷婷深深爱| 综合激情在线| 免费无码毛片一区二区A片| www.五月天婷婷| 丁香五月 综合| 天天透天天干| 综合久久婷婷| 六月丁香六月婷婷欧美| 丁香婷婷综合精品六月初| 五月婷九九草| 婷婷五月天AV| 影音先锋天天日|