欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網運營的一線實戰(zhàn)洞察。

Ethernet幀完整性校驗:從FCS原理到CRC-32故障排查實戰(zhàn)

Ethernet幀完整性校驗:從FCS原理到CRC-32故障排查實戰(zhàn) 做網絡這一行“Ethernet幀完整性校驗”這串詞平時未必天天掛在嘴邊但真遇到網絡上莫名其妙的丟包、誤碼、延遲抖動繞來繞去最后總會撞到它身上。我第一次對它產生強烈印象是在一次聯(lián)調現(xiàn)場客戶反映兩套系統(tǒng)之間偶發(fā)通訊卡頓接口統(tǒng)計面板里某個計數(shù)在緩慢上漲業(yè)務卻感知不到太多異常。查了好幾天換線、換模塊、重啟設備都試過最后才有人點了一句“你怎么不去看看FCS錯誤率”。也正是從那一次開始我把幀完整性校驗的原理、計算方式、排查套路徹底過了一遍后面再遇到類似問題基本都能在半小時內找到方向。這篇文章里的內容我會從原理講到實操包括CRC-32到底怎么算、為什么抓包工具看不見幀尾的FCS、FCS異常增長時該怎么由表及里定位故障最后再總結一些我用過、踩過、后來養(yǎng)成的排查習慣。適合剛接觸網絡協(xié)議分析的開發(fā)者也適合在網絡一線做過一段時間、想系統(tǒng)梳理一下這類知識的朋友。1. 一次聯(lián)調里的意外發(fā)現(xiàn)抓包看不見幀尾FCS1.1 現(xiàn)場現(xiàn)象與第一反應那次聯(lián)調的環(huán)境并不復雜兩臺服務器通過交換機互通中間走了一段雙絞線再看一眼光模塊轉接。業(yè)務流量本身不大但每天總有那么幾個時段出現(xiàn)重傳。起初我沒太在意因為應用層有重試機制偶發(fā)重傳也正常。真正引起警覺的是某臺交換機端口統(tǒng)計里兩個字段在緩慢增長一個和CRC錯誤相關另一個和入方向丟棄相關。雖然增長幅度不大對業(yè)務暫時沒有明顯影響但這類計數(shù)一旦出現(xiàn)說明鏈路里一定在做“無用功”。我第一反應是懷疑線纜和光模塊。按照常規(guī)做法先換了一根跳線又把兩端的收發(fā)模塊重新插拔看是否能匹配成功。結果并不理想CRC錯誤計數(shù)并沒有停。后來又試著把兩條鏈路的速率協(xié)商狀態(tài)改為固定模式同樣沒有明顯改善。這時候我才意識到一個問題我一直在“猜”是物理鏈路的問題但我根本沒有真正搞清楚這個錯誤計數(shù)到底是在什么時候產生的。換句話說我該先弄懂“FCS”是什么它校驗的是什么才能知道該懷疑誰。1.2 以太網幀結構里FCS到底在哪里IEEE 802.3標準定義的基礎以太網幀結構從發(fā)送端的角度來看大致是這樣一個順序前導碼7字節(jié) 幀起始定界符SFD1字節(jié) 目的MAC地址6字節(jié) 源MAC地址6字節(jié) 長度/類型字段2字節(jié) 載荷46到1500字節(jié) 幀校驗序列FCS4字節(jié)前導碼和SFD是物理層同步用的接收端把它們識別出來之后就知道“幀數(shù)據(jù)從這兒開始了”。目的MAC、源MAC、長度/類型字段和載荷是真正被協(xié)議棧解析的內容。而FCS這4個字節(jié)就是我今天要重點聊的“Ethernet幀完整性校驗”機制的核心。FCS的校驗范圍是從目的MAC地址開始一直覆蓋到載荷結束不包含前導碼、SFD也不包含F(xiàn)CS本身。發(fā)送端對這一段數(shù)據(jù)算出一個32位的結果并按固定字節(jié)序填到幀尾。接收端收到整個幀之后用同樣的算法對同樣的范圍重新計算一次再把計算結果和收到的FCS做比較。如果一致就認為這一跳傳輸過程中數(shù)據(jù)沒有發(fā)生比特級的變化如果不一致接收端會把這個幀直接丟棄。有一點值得注意如果幀里帶了VLAN標簽802.1QFCS的校驗范圍會從目的MAC一直算到VLAN Tag和載荷結束這部分額外字段同樣受保護。無論是私有VLAN還是其他擴展標簽只要在幀頭里作為數(shù)據(jù)結構存在、接著載荷發(fā)送它們都會被納入CRC計算范圍。實踐中我見過不少人在用抓包工具查看帶VLAN幀時下意識只盯著源目MAC和IP完全沒意識到FCS覆蓋范圍已經發(fā)生了變化。1.3 為什么抓包工具“看不見”FCS很多第一次接觸抓包的朋友都會問同一個問題我抓出來的幀里明明能看到MAC頭能看到IP頭為什么找不到文檔里說的那4字節(jié)FCS答案和抓包工具的采集位置有關。抓包工具讀取的是主機協(xié)議棧里某個“鉤子”位置這個位置通常位于網卡驅動把報文上拋給系統(tǒng)網絡棧之后。而絕大多數(shù)網卡在硬件收幀時會先做一遍CRC校驗校驗不過的幀直接丟棄不往上拋校驗通過的幀再把尾部的4字節(jié)FCS剝離掉只把有效載荷部分交給驅動。所以應用層抓包工具拿到的幀天然就少了尾部這4個字節(jié)。這就帶來一個很重要的實操認知用抓包工具抓到的幀“看起來都是好的”并不能證明鏈路就是干凈的。因為真正帶FCS錯誤的幀在網卡硬件這一層就已經被處理掉了。你如果想驗證“這一跳有沒有出錯”不能只看抓包文件里的幀內容而是要看網卡驅動或者對端交換機的底層計數(shù)統(tǒng)計比如常見的rx_crc_errors、rx_fcs_errors這類字段。在不少網卡驅動里FCS錯誤是單獨計數(shù)的也有驅動把它并入CRC錯誤一類這取決于具體實現(xiàn)但整體思路一致它是物理層和MAC層之間的事件普通抓包工具默認是看不見的。當然也有例外。部分網卡驅動支持關閉CRC剝離功能或者抓包工具配置為“保留壞幀”模式這時你可能會在抓包里看到尾部帶FCS的完整幀甚至看到CRC校驗失敗的幀。但這種模式不是默認行為而且開啟之后抓包工具本身也容易把壞幀當作正常幀顯示反而誤導判斷。所以我個人并不建議在日常分析中開這種模式除非你明確知道自己想要抓壞幀做實驗。2. CRC-32幀完整性校驗的數(shù)學底子2.1 為什么以太網選擇CRC而不是簡單校驗和如果只是想讓接收端確認數(shù)據(jù)沒被改過最直覺的做法是“把所有字節(jié)加起來存一個和”。IP協(xié)議頭部的校驗和就是這么干的。但以太網這種鏈路層技術面對的是實實在在的物理信道電磁干擾、線纜衰減、連接器氧化、信號反射都會造成比特錯誤而且這些錯誤往往不是孤立的單個比特翻轉而是連續(xù)的突發(fā)錯誤。簡單求和這種方式對突發(fā)錯誤的識別能力很差。CRC循環(huán)冗余校驗的核心思想是把數(shù)據(jù)看成一個龐大的二進制數(shù)用這個數(shù)去除以一個固定的“生成多項式”得到的余數(shù)就是校驗值。接收端拿到數(shù)據(jù)和校驗值之后再做一次同樣的除法如果余數(shù)不為零就說明數(shù)據(jù)在這條鏈路上發(fā)生了改動。這個“除法求余”的過程聽起來復雜但在硬件上用移位寄存器實現(xiàn)非常順而且可以通過查表法提升速度這就是它在通信領域被廣泛采用的原因。IEEE 802.3選擇的CRC-32并不是隨便挑了個多項式。它背后對應了突發(fā)錯誤檢測能力的數(shù)學保證可以檢測出所有長度不超過32比特的突發(fā)錯誤可以檢測所有奇數(shù)個比特錯誤并且在數(shù)據(jù)長度足夠短的情況下雙比特錯誤的漏檢率也極低。對于一條物理鏈路上常見的噪聲擾動來說這套保證已經非常夠用。所以別看FCS只有4字節(jié)它在鏈路層協(xié)議里承擔的角色比很多剛入門的人想象中重要得多。2.2 IEEE 802.3 CRC-32的參數(shù)細節(jié)很多朋友試過自己實現(xiàn)CRC-32卻發(fā)現(xiàn)自己算出來的值和抓包工具或設備上的FCS對不上。真不是你代碼寫錯了而是CRC存在多種“變體”IEEE 802.3使用的CRC-32有自己特定的參數(shù)組合。我整理成一張速查表參數(shù)項IEEE 802.3 CRC-32取值生成多項式普通寫法0x04C11DB7生成多項式反射寫法0xEDB88320初始值0xFFFFFFFF輸入數(shù)據(jù)是否反射處理是輸出結果是否反射處理是最終異或值0xFFFFFFFF這里面的“反射”指的是對參與計算的每個字節(jié)先做位序反轉或者對整段數(shù)據(jù)處理時按位反序操作。用業(yè)界常見的話說802.3的CRC-32是“反射輸入、反射輸出、初值全1、結果異或全1”。如果你的CRC計算工具或者算法實現(xiàn)沒有配齊這套參數(shù)算出來的結果自然和真實FCS對不上。新手最容易栽的坑有三個一是多項式寫法搞混普通寫法和反射寫法之間的二進制位序正好相反二是忘記處理初始值不置為全1的話算出的結果只在空數(shù)據(jù)時恰好一致一旦有實際數(shù)據(jù)就會出現(xiàn)偏差三是漏掉最終異或導致差一個固定掩碼。還有一點FCS在網絡上的字節(jié)序也要注意常見網卡把CRC結果按小端序填到幀尾如果你按大端讀出來再比較一樣會不匹配。2.3 用生活化的例子理解“多項式除法”我知道“除以多項式”這個概念對非數(shù)學背景的讀者容易勸退。換個說法可以理解為你有一串特別長的數(shù)字然后有一個固定的“模子”發(fā)送端拿著這串數(shù)字去除以模子得到的余數(shù)就是蓋章。接收端收到數(shù)據(jù)之后也拿著同一個模子去除如果余數(shù)和發(fā)過來的章對不上說明數(shù)字在運輸途中被改過。為什么它能檢測出“改了哪個位”因為模子本身有精心設計的數(shù)學性質。任意一個比特錯誤等價于原數(shù)據(jù)加上了某個“誤差向量”。如果這個誤差向量恰好不是模子的倍數(shù)除法余數(shù)就會改變就會被識別出來。CRC能保證一定長度范圍內的所有突發(fā)錯誤都會被識別正是因為這個模子的數(shù)學設計讓這些誤差向量都不會“正好整除”。實際做鏈路分析時我不需要去手推多項式除法但理解這一層之后你會明白一個關鍵道理CRC不是加密不是哈希它不承諾防偽只承諾“傳輸過程有沒有擾動”。它也不會告訴你錯誤發(fā)生在哪個比特只會告訴你“這一幀壞掉了”。這一點在后面的故障排查里非常重要——FCS異常說明問題出在這條鏈路的某個環(huán)節(jié)但具體是哪一段還需要進一步定位。3. 手寫一個幀完整性校驗工具3.1 構造最小以太網幀并計算FCS要說對Ethernet幀完整性校驗的理解光看書肯定不夠。我當時為了讓自己徹底搞明白FCS的計算過程寫了一個很小的腳本去“造幀”自己拼一個最小以太網幀算出CRC-32再模擬接收方校驗一遍。整個過程不到幾十行代碼但對理解校驗邏輯非常有幫助。思路很簡單拼一個目的MAC是全FF廣播地址、源MAC是某個本地地址的幀EtherType字段填入0x0800載荷就放46個字節(jié)的測試數(shù)據(jù)。算一下FCSimport zlib import struct def build_frame(dst_mac, src_mac, ethertype, payload): frame dst_mac src_mac ethertype payload crc_val zlib.crc32(frame) 0xffffffff fcs struct.pack(I, crc_val) return frame fcs def verify_frame(frame): fcs frame[-4:] body frame[:-4] expected struct.pack(I, zlib.crc32(body) 0xffffffff) return fcs expected dst bytes.fromhex(ffffffffffff) src bytes.fromhex(001122334455) etype b\x08\x00 payload bytes(range(46)) full_frame build_frame(dst, src, etype, payload) print(frame length:, len(full_frame)) print(fcs bytes:, full_frame[-4:].hex()) print(verify result:, verify_frame(full_frame)) # 模擬傳輸過程中一個比特被翻轉 bad_frame bytearray(full_frame) bad_frame[20] ^ 0x01 print(verify result with flip:, verify_frame(bytes(bad_frame)))這里用到了Python內置的zlib.crc32它的底層實現(xiàn)恰好就是IEEE 802.3這套CRC-32參數(shù)多項式反射寫法是0xEDB88320初始值是全1輸入輸出都帶反射最后再做異或。所以不用自己寫查表邏輯。代碼里定義了兩個函數(shù)build_frame負責構造完整幀verify_frame負責把幀尾4字節(jié)當成FCS重新計算并比較。運行之后你會看到正常幀校驗返回True而把第20個字節(jié)翻轉一位后校驗立刻返回False。這個“翻轉一位就翻車”的效果正是CRC-32在鏈路層的務實價值它不保證你不被攻擊但能保證你不會把壞數(shù)據(jù)當成好數(shù)據(jù)繼續(xù)往上拋。3.2 離線驗證真實抓包數(shù)據(jù)自己造完幀之后我接下來做的一件事是拿一批真實的抓包文件做離線校驗。想直接從抓包文件里驗證FCS首先要面臨一個現(xiàn)實問題多數(shù)抓包文件保存的幀里根本沒有FCS字節(jié)。如果抓包時啟用了“完整幀保存”或者某些設備明確保留了幀尾FCS那么離線文件里的每一幀會包含完整4字節(jié)。需要逐幀解析pcap記錄pcap全局頭通常是24字節(jié)之后每一條記錄頭16字節(jié)記錄頭里的incl_len告訴你這條記錄實際捕獲了多少字節(jié)orig_len則告訴你網絡上的原始長度。如果incl_len比正常最小幀頭加最小載荷還要多出4字節(jié)或者和你已知的載荷長度對不上就值得去讀取最后4字節(jié)做校驗。import struct import zlib def parse_and_verify_pcap(file_path): with open(file_path, rb) as f: global_header f.read(24) while True: rec_header f.read(16) if len(rec_header) 16: break ts_sec, ts_usec, incl_len, orig_len struct.unpack(IIII, rec_header) packet_data f.read(incl_len) if incl_len 64 and orig_len 64: fcs packet_data[-4:] body packet_data[:-4] expected struct.pack(I, zlib.crc32(body) 0xffffffff) if fcs ! expected: print(ftimestamp {ts_sec}.{ts_usec:06d}: FCS mismatch)這段代碼只是示意不同鏈路類型比如帶VLAN Tag、帶元數(shù)據(jù)封裝會有差異但整體結構差不多。我實際跑批處理時發(fā)現(xiàn)一部分抓包確實能驗證通過另一部分文件里的幀尾4字節(jié)并不是有效FCS而是某些網卡驅動填充的占位數(shù)據(jù)這時候直接按FCS校驗就會出現(xiàn)大量“誤報”。所以離線校驗前最好先確認抓包工具到底有沒有存儲FCS別對著一堆占位數(shù)據(jù)空跑。3.3 單跳校驗通過之后的事從FCS角度看每經過一條鏈路、一臺交換機幀都會被重新計算一次FCS。也就是說端到端抓包時你看到的FCS已經是被中間設備“重新蓋過章”的版本而不是最初發(fā)送端蓋的章。這是理解幀校驗和上層校驗關系的關鍵。交換機從入端口收到一幀先校驗FCS通過之后再查轉發(fā)表修改某些字段比如TTL或MAC等涉及三層轉發(fā)的場景再重新計算一個新的FCS發(fā)出去。這個過程保證了“每一跳”的可靠性但每一跳都獨立完成上下游之間沒有狀態(tài)關聯(lián)。所以只靠鏈路層FCS沒辦法保證端到端的數(shù)據(jù)完整性應用層數(shù)據(jù)跨越多個網絡節(jié)點中間只要有一個節(jié)點軟件內部出問題就可能改掉數(shù)據(jù)后重新計算一個合法的FCS。這也是為什么TCP層還要有自己的校驗和到了更高層有些協(xié)議還會再做一次完整性摘要。鏈路層FCS是一道重要的防線但它只是縱深防御體系里的一道而不是唯一一道。實際排查問題的時候不要把“FCS校驗過了”當作“整條鏈路沒問題”的結論要理解每一層校驗各自保護的范圍。4. 從FCS異常反推鏈路故障4.1 CRC錯誤到底是在哪個環(huán)節(jié)產生的FCS異常的本質是“接收端算出來的校驗值和發(fā)送端寫的不一致”。那這個不一致通常在哪里被引入首當其沖是物理層雙絞線過長導致信號衰減、連接器氧化造成接觸電阻增大、網線內部線對絞距被破壞導致的串擾、電磁干擾源靠近線纜、光模塊老化導致光功率下降、光纖彎曲過大導致反射這些都會讓比特位在傳輸過程中“翻轉”。另一個常見來源是鏈路雙方的工作狀態(tài)不匹配。比如一端協(xié)商到了全雙工另一端卡在半雙工這種狀態(tài)在低速以太網上會出現(xiàn)大量沖突嚴重時幀會被截斷、撕裂接收端的FCS校驗自然過不了。尤其是強制雙工模式的時候風險更大因為雙方完全放棄了自動協(xié)商的握手確認過程。還有一個容易被忽視的環(huán)節(jié)網卡或交換芯片內部的處理邏輯。比如芯片收到一個長度異常的短幀Runt可能還沒來得及完整接收就已經把不完整的數(shù)據(jù)提交給上層模塊又比如交換機緩存不足時某個隊列被丟棄或部分丟棄也會表現(xiàn)為CRC錯誤或對齊錯誤。這類問題的物理鏈路本身可能是健康的。我自己的經驗是遇到FCS異常先不要急著懷疑線纜質量而是先看錯誤計數(shù)的分布特征。如果錯誤零散分布在多個端口那更像環(huán)境干擾或設備共有問題如果錯誤集中在一條鏈路的兩端那重點懷疑這條物理路徑如果只有一端報錯另一端完全干凈那可能是接收端硬件或驅動的問題。4.2 一套可以照抄的排查順序下面這套順序是我后來固定下來的排查流程不算特別復雜但每一步都有明確目的先收集兩側端口統(tǒng)計把CRC錯誤、FCS錯誤、對齊錯誤、短幀錯誤、丟包計數(shù)全部記下來。不要只看其中一個字段它們組合起來會給出更多線索。觀察錯誤增長速率和負載的關系。如果只在業(yè)務高峰時快速增長說明大概率是信號質量問題在高負載下被放大如果空載也在漲那問題可能很穩(wěn)定比如硬件損壞或接觸不良。做一次“物理層替換法”換線、換模塊、換端口。每換一個環(huán)節(jié)觀察一段時間計數(shù)。替換法最忌諱一次換好幾個東西那你就永遠不知道是哪個環(huán)節(jié)治好了問題。檢查協(xié)商狀態(tài)。確認兩端速率、雙工模式一致關閉強制的“非標準”配置再做對比。如果是在僅跑少量流量的測試環(huán)境可以嘗試顯式固定速率看錯誤是否消失。在鏈路兩端同時抓包并打時間戳比對兩端收到的幀數(shù)量和數(shù)據(jù)內容。如果入口流量正常、出口出現(xiàn)突發(fā)錯誤問題很可能在中間設備如果兩端都干凈但交換機計數(shù)在漲也可能是交換機內部統(tǒng)計口徑問題。如果錯誤只在某個特定網卡上出現(xiàn)更新驅動、固件并檢查網卡是否啟用了某些卸載特性比如接收側合并、Large Receive Offload這些特性在驅動實現(xiàn)有bug時會引發(fā)奇怪的數(shù)據(jù)異常。如果以上都做完了還沒找到原因再考慮設備硬件故障比如交換芯片的背板問題。這種情況通常需要換一臺設備或換一個板卡做隔離驗證。這套流程看起來基礎但能覆蓋絕大多數(shù)場景。尤其第3步的“每次只換一個環(huán)節(jié)”聽起來像廢話恰恰是無數(shù)現(xiàn)場工程師最容易因為急躁而犯的錯誤。4.3 故障速查表現(xiàn)象、原因與驗證手段為了隨時查閱我整理了一張速查表也算是對上面排查順序的一個濃縮現(xiàn)象可能原因先驗證什么可能的動作單端口CRC計數(shù)緩慢增長業(yè)務無明顯感知線纜老化、連接器接觸電阻、輕微電磁干擾端口協(xié)商狀態(tài)、線纜長度、兩端功率更換跳線、重新壓接水晶頭高負載下CRC計數(shù)快速上升信號衰減、光模塊劣化、雙工不匹配光功率、錯誤增長速率與負載關系更換光模塊、調整協(xié)商策略CRC錯誤伴隨對齊錯誤出現(xiàn)鏈路沖突、物理層幀截斷雙工狀態(tài)、線對序強制全雙工一致或更換線纜多端口同時出現(xiàn)CRC錯誤公共環(huán)境干擾、設備供電異常設備側電源、周邊大功率設備干擾整改布線路徑、調整電源更換模塊后計數(shù)短暫清零又復漲硬件插槽或背板鏈路問題換一個端口或設備對比進一步隔離硬件層級這里有一條通用原則CRC計數(shù)是一個“果”不是“因”。你從它著手去查問題沒錯但最終修復的一定是導致它的環(huán)境、物理鏈路、協(xié)商狀態(tài)或者硬件故障。神化統(tǒng)計字段容易把自己帶偏。5. 常見誤區(qū)和幾個實戰(zhàn)心得5.1 誤區(qū)一看到CRC上升就斷定是線纜質量差這類判斷太絕對了。很多情況下CRC錯誤來自驅動或設備內部的異常。我遇到過一次很典型的例子兩端口之間CRC計數(shù)持續(xù)上漲但把線纜、模塊全部換了一遍問題依舊。最后發(fā)現(xiàn)是某塊板卡內部背板鏈路的數(shù)據(jù)通路故障換了整塊線卡后才恢復。如果當時只盯著“換線”這一條思路根本走不到真正的根因。另一個容易被忽略的是虛擬化環(huán)境。虛擬交換機和虛擬網卡驅動在統(tǒng)計CRC時很多實現(xiàn)只是把宿主機物理網卡的統(tǒng)計原樣暴露出來并不代表虛擬鏈路上真的發(fā)生了比特錯誤。如果在虛擬化平臺上看到CRC上漲第一件事應該是確認這個計數(shù)到底來自物理網卡還是虛擬數(shù)據(jù)通路否則你容易把平臺自身的問題嫁禍給底層物理網絡。5.2 誤區(qū)二抓包工具顯示無錯鏈路就一定干凈這個誤區(qū)在上文已經提到過但它真的太常見了值得單獨拿出來再說一次。抓包工具默認拿到的幀是網卡剝離FCS之后的版本壞幀在進入?yún)f(xié)議棧之前就被丟棄了。所以抓包結果里每一條記錄都“光鮮亮麗”根本不能說明物理鏈路上沒有噪聲。想看鏈路健康度必須配合網卡底層計數(shù)否則你會被自己的抓包文件欺騙。反過來如果抓包工具里真的出現(xiàn)了CRC錯誤標記某些工具在捕獲引擎保留了壞幀時會有提示那說明這已經很嚴重了鏈路質量可能差到了一定程度。但普通場景下抓不到CRC錯誤反而是常態(tài)不要因為抓包結果好看就放松警惕。5.3 把CRC計數(shù)當作長期健康度指標排查完一個具體問題之后就可以建立一套自己的觀察習慣。我對接口統(tǒng)計的處理方式不是看某一個時間點上的絕對數(shù)值而是看趨勢。比如某端口的CRC錯誤計數(shù)今天比昨天多了300這個數(shù)量級在業(yè)務負載變化范圍內是否正常相比硬件報錯我更關心它是不是持續(xù)、單調地增長。持續(xù)增長意味著某個劣化過程正在發(fā)生可能是光模塊的激光器在緩慢衰老也可能是連接器在逐漸氧化。建議每隔一段時間把關鍵端口的統(tǒng)計拉出來存一份基線等變更發(fā)生后做對比。這個辦法成本極低但對解決問題幫助很大。真到問題爆發(fā)那一刻你能立刻判斷出“這個錯誤是什么時候開始變多的”“最近改了什么東西”遠比現(xiàn)場抓瞎要強。對于光口順帶關注光模塊的收發(fā)光功率變化趨勢光功率下降往往比CRC計數(shù)增長提前幾天就發(fā)出預警這算是我自己比較受用的一個小技巧。還有一個小習慣拿到一臺新設備或者新網卡先做一次短時間高負載收發(fā)測試把錯誤統(tǒng)計清零再觀察。每個硬件對誤碼的容忍度不一樣過早做基線反而容易在基線里埋入大量背景噪聲。等確認鏈路在干凈狀態(tài)下跑穩(wěn)了再開始記錄正?;€之后每一次統(tǒng)計異常都會很有參考價值。做鏈路分析做得時間長了我對“Ethernet幀完整性校驗”這串詞的感受已經從“一個CRC寄存器”變成了一整套觀察鏈路健康度的視角。自己動手寫校驗腳本、跑真實數(shù)據(jù)、被虛驚嚇過、也被真正的根因折磨過這些過程確實是把知識變成能力的最好方式。如果你下次再遇到CRC相關告警不妨先冷靜下來把統(tǒng)計字段、抓包位置、物理鏈路狀態(tài)這三樣東西擺到桌面上再決定要不要動手拆線纜。我個人的體會是絕大多數(shù)FCS異常都能通過一張清晰的排查順序表快速收斂真正難的從來不是修而是判斷該修哪里。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
色婷婷丁香| 99er6热在线观看精品6| 人妻综合网| 2050人人操免费工开爱| 91九色中文字幕女在线观看| 亚洲超碰青涩| 五月天开心网| 亚洲激情五月天| 五月婷六月丁香| 殴美激情综合网| 乱岳熟女50岁| 五月色丁香| www.亚洲激情| 99精品在| 538在线| 99视频啪啪| 欧美人妻一区二区| 97色色综合| 在线综合婷婷| 色婷婷综合视频| 99热综合| 久久九九色| 天天爽,夜夜爽| 色婷婷最爱五月| www.97干视频| 777久久久| 成人精品视频99在线观看免费| 婷婷激情六月| 五月天色丁香| www.五月.com| 人人草开心五月天| 色日本五月天| 丁香六月久久| www.99热这里精品| 婷婷五月综合体验看| 久久99热精品a片在线观看| 99九九久久| 五月天久久激情| 超碰人人色| 日本超碰在线| 色人久久| 99视频内射三四| 激情综合激情综合| 五夜丁香| 99热这里只有精品国产首页| 天天操电影院色狼性av| 色婷婷激情五月天| 99热免费在线| 夜夜久久综合网| 丁香婷婷成人网站| 天天爽天天摸天天爱| 色色啊| 亚洲综合网区| 激情网第四色| 日日夜夜狠狠干| www.minyis.com【JT】国内CDN落地页保证转化QQ2101460746 | 啪啪色区| 99热天堂| 在线中文字幕视频| 热久久91| 日本色婷婷| 色综合久久天天综合网| 另类激情中文| 婷婷丁香六月| jiujiuxiangjiaowang| 在线看的免费网站| 国产99久9在线+|+传媒| 在线超碰精品| 一级二级色大片| 婷婷欧美激情| 99热这里只有99| 欧美噜噜久久久XXX| 色婷婷内射| 伍月激情天| 久久五月网| 日本色99| 五月 丁香 欧美| 爱草视频在线| 99热都是精品| 亚洲精品无码久久| 99精品国产在热久久| 丁香五月成人| 五月天婷婷在线播放| 欧洲亚洲精品| 99九九精品视频推荐| 日本操B片| 欧美激情 日韩无码 婷婷 五月天| 色综合久久88色综合天天| 婷婷免费视频| 天天操夜夜爽天天操| 亚洲色婷婷婷婷人人爽| 9色免费网| 香蕉99网| www.xtbsty.cn.com蜜乳AV| 色天天狠狠干| 五月狠狠| 乱乱av| 丁香操逼| 激情六月丁香综合| 色五月天成人| 国自产拍偷拍精品啪啪一区二区| 亚洲乱码日产精品BD| 九月婷婷激情| www.色色色色| 51国精产品自偷自偷综合| 99热久| 欧美交换配乱吟粗大25P| 激情丁香五月婷婷| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 国产古装妇女野外A片| 天天干天天日蜜臀av| 激情骚五月| 99九九综合久久九九| 91碰在线| se99视频| 日韩无码专区| 五月婷婷在线视频免费观看| 婷婷五月天综合AV| 九九综合影音先锋| 五月天婷婷色五月天| 日日狠夜夜狠| 中文字幕 码精品视频网站| 热久综合| 97人人干| AV成人在线播放| 婷婷丁香五月精品| 婷婷综合网| 色婷婷玖玖影院| 五月丁香在线视频观看| 亚洲综合五月天婷婷丁香| 7EzOBIhNq85TO| 9久热在线精品| 欧亚洲在线高清视频| 激情九九这里只有精品| 99热这里只有精| 91九色超碰正在播放| 蜘蛛女免费观看完整版高清电影 | 99爱爱| 开心五月婷婷在线视频免费观看| 综合色五月| 99在线小视频| 国产,欧美,日韩,性爱| www.99视频| 日本99婷婷| 草美女在线观看视频在线播放 | 久99久在线观看| 99视频在线观看地址| 超碰人人射| 日本久久爱| 1000部毛片A片免费观看| 婷婷久久免费| 性爱视频久久| 人人操婷婷| 色色综合日韩| 九久9精品| 九九色逼| 99热最新精品| 99热碰碰热| 人妻丰满精品一区二区A片| 美女精品一级不卡视频| 91久久精品无码一区二区三区| 久久综合55| 亚洲看av的网站| 99色网站| 天天免费成年人视频| 日韩黄黄| 日日夜夜狠狠婷婷色| 色情五月天丁香社区| 六月丁香婷婷综合影院| 色五月丁香婷婷久草| 亚洲a片免费观看| 99久久成人| 五月丁香| 色情免费视频播放| 99草在线免费观看视频| 五月草视频| 丁香婷婷五月综合欧美另类| 五月丁香综合久久| 99欧美精品99日本精品| 亚洲色在线观看| 激情 久久 婷婷| 狠狠色激情综合| 亚洲精品又粗又大又爽A片| 激情五月图| 99啪啪| 久久色在线视频| 激情五月婷婷网| 五月天激情综合网俺也去| 人妻无码精品一区| 精品综合久久久久久五月天| 久久这里只有国产视频| 变态另类色图 | 亚洲综合色网| 狠狠狠五月婷婷六月丁香| 99精品视频免费观看近期发布| 激情五月亚洲综合网| 99精品国产在热久久| 五月综合激情图片| 久99精品视频| 天天干天天做| 狠婷婷五月| 丁香五月天激情四射网络不好| 可以直接看的AV| 九月激情综合婷婷| 丁香五月婷婷啪啪| 色丁香婷婷| 一区二区三区XXXXXX| 99热综合色图| 日本成人噜噜噜噜噜| 大香蕉 婷婷| 五月丁香亚洲婷婷| 亚洲精品视频在线| 五月天丁香色色| 五月天婷婷激情综合| 成人在线网站| 欧美性猛交 XXXX 乱大交| 5月婷婷性视频| 久久全色| 天天操夜夜操| 久久婷婷五月天蜜桃| 六月婷婷色色色| 色播五月天激情| mmm1717.6dbm人人爱人人操| 丁香六月欧美| 亚洲色婷婷99一9|| cao视频,现在观看| 亚洲天堂久久| 激情网婷婷五月天| www。五月天。com| 九九色99| 丁香9月婷婷| 97操在线视频| 人人草人人视| 亚洲激情亚洲激情| 五月丁香综合中文| 丁香五月五月婷婷欧美大香蕉| 91人人爽久久涩噜噜噜| 久一这里有精品国产| 色五月人妻| 人人色人人摸人人看| 影音先锋男人AV资源站| 丁香五月激情网| 丁香五月激情视频| 激情小说五月丁香在线视频观看视频| 小色小蛇伊人婷婷色香五月| ..真实国产乱子伦毛片| 色色a| 可以观看的AV| 色婷婷六月综合| 九九亚洲综合| 97在线日本| 人妻少妇色综合| 能看的av| 狠狠干夜夜干| 婷婷综合网站| 丁香六月婷婷综合| 97人操人免费视频| 在线超碰精品| 琪琪色五月婷婷老师| 超碰免费人妻| 五月综合色| 五月天影院婷婷在线观看| 色婷婷先锋| 五月天婷婷色播综合在线| 婷婷激情五月视频| av超碰在线| 久久综合九九| 天天爽天天操| 天天色色天天| 成人短视频在线观看| 丁香五月天色婷婷| 天天日夜夜帕| 激情色情五月天| 五月天色婷好好| www.91婷婷| 久99热| 激情六月丁香| 九九99香蕉在线视频播放| 六月婷婷亚洲| 艾小青av| 五月丁香激情深爱婷婷| 色色色欧美色色| 欧美激情五月天婷婷| 色婷婷免费观看| 婷婷色五月天色色| 婷婷色情五月| 激情伊人网| 99久久婷婷五月| 成人久碰| 五月天久草| 亚洲精品第一国产综合亚AV| 激情综合网激情五月婷婷| 图片区 小说区 区 亚洲五月| 婷婷综合五月| 欧美色婷婷| 淫视馆aV二区一区| 五月婷婷综合在线| 日本精品人妻无码77777| 婷婷五月天激情网| 色五月天天| 欧美日韩成人在线| 99这里的视频都是精品| 色狠狠伊人久久五月丁香| 五月激情四射婷婷丁香| 天天做天天爰天天爽天天无遮挡| 久久这里只有精品视频26| 婷婷伊人激情婷婷| 六月丁香婷婷五月| 操九色| 99热精品观看| 婷婷色婷婷| 中文毛片无遮挡高潮免费| 丰满女老板BD高清A片| 五月丁香激情综合网| 天天日天天干天天操| 九九成人| 久久久久9久无码视频| www.婷婷久久五月天| 香蕉五月婷婷| 色综合久久88色综合天天99| 丁香五月狠狠在线观看| 99色 色| 天天爽天天摸天天爱| 成年人丁香五月| 亚洲在线综合| 免费看欧美成人A片无码| 这里只有精品96| 91婷婷丁香五月亚洲| 99热国品| 激情色情五月天| 岛国资源站| 丝袜激情网| 九九综合久久| 这里只有精品视频一区| 五月久久婷婷丁香| 国产美女无遮挡裸体毛片A片| 亚洲中文字幕AV在线| 亚洲激情六月| 九九热最新| 五月天综合在线| 99青青草99| 97碰成超视频免费视频| 九九热这里有精品23| 久久这里有精品在线观看| 色婷婷亚洲婷婷在线观看| 亚洲综合视频在线| 综合色五月亭亭| 婷婷自拍| 五月丁香在线婷婷蜜桃| 碰碰女| 欧美成人AAA片一区国产精品| 五月婷婷丁香| 国产成人AV在线播放| 丁香五月婷婷深爱综合激情| 热99这就是精品视频| www.婷婷五月| 综合久久十| 色激情综合| 五月丁香亚洲综合网| 九九热最新| 亚洲九九夜夜| 97久人人| 婷婷色成人| 五月丁香黄色视频| 日本97久久久精品| 伦99热| 国产婷婷五月天| 97热91| 日韩精品999| 99热精品9| 自拍偷窥99热| 九九热在线视频观看免费10| 五月激情偷拍婷婷| 五月婷婷av| 一区操| www.av视频xx999.com| 思思热热久久| 天天摸,天天爽| www.成人婷婷综合| 爱久久小说下载网| 99色视频| 成人欧美日韩| 91九色欧美| 五月婷婷丁香av| 久久狠狠干| 丁乡久久| 婷婷五月视屏| 婷婷五月丁香青青草在线| 久久xx| 99网99热| 婷婷玖玖丁香| 日本五月婷婷| 色婷狠狠| 久久A V无码视频| 天天干天天干天天| 九九视频免费| 99热国产这里只有精品| 99啪| 97干97色| 色综合激情| 久久天天| 吊色AV男人的天堂| 偷偷操99| 久久久久久久久99精品| 婷婷六月色开 | 99在线精品视频观看免费下载| 久久激情网| 99ri精品在线观看| 99热精品9| 激情第四色| 激情综合色网| 26uuu精品国产| 五月婷婷中文字幕| 婷婷五月天色色| 婷婷综合精品| 久久久网站| 欧美97色| 天天色天天日| 青青草搞屄视频网站| www.91婷婷| 久久999久久999久久999久久| 婷婷五月综合亚洲| 99热99| 色欲一二三| 操操熟女| 玖玖午夜视频| 91久久久久久| 九九亚洲视频| 婷婷播播五月天| 精品人妻伦九区久久AAA片| 欧日韩AV| 99色色网| 国产欧美日韩一区二区三区| 99热草草| 中文字幕婷婷五月天在线观看| 色九四色| 99.N在线视频| 丁香五月婷婷久久综合激情网 | 九九色之九九色之88| 五月婷婷综合在线| 九色婷婷| 国产精产国品一二三在观看| 狠狠操婷婷| 久久人视频| 久久久精品色色色| 超级碰碰91| 天天在线XXX| 五月丁香六月婷婷啪啪| 色色无码| 久热这里只有精品99re| 婷婷网影院| 开心激情网在线| 青青草搞屄视频网站| 熟妇内谢69XXXXXA片| 丁香激情婷婷网| 99re在线免费视频| 色综合色综合网| 久热这里只有精品在线观看| 国产精品久久久爽爽爽麻豆色哟哟| 五月丁香六月婷婷手机无线| 综合激情肏逼网| 丁香色五月天| 六月婷婷日| 色约约视频一区二区三区四区五区 | 97人人看| 激情综合网,婷婷五月天| 婷婷五月综合基地| 91精品久久久久久77777| 人人亚洲| 五月天激情综合网| 色色婷婷丁香| 婷婷五月天电影网| 欧美成人无码高清一区二区三区| 成人无码精品1区2区3区免费看 | 欧美噜噜久久久XXX| 91狼友视频在线观看| 激情视频综合| 天天爽天天爽夜夜爽| 99热性色| 中文字幕婷婷9月天| 精品久热69| 九月婷婷| 一级二级色大片| 99无码精品| 操操操Av| 伊人丁香花综合影院| 成人在线网站| 日本色啪| 欧美激情综合| 久草五月婷婷| 91wwmm导航| 五月丁香六月综合情在线观看| 99久久超级| 久久五月视频| 五月天久久综合婷婷| 婷婷性爱| xxxx久| 久热A片| 婷婷五月激情小说| 久久这里只有欧美| WWW.桔色成人.COM入口| 91久久久久久久| av一区免费看| 艳妇野外情欲放荡HD| 色五月综合在线| 九九精品视频在线6| 天天天久久久| 在线观看中文字幕亚洲| 久热re在线视频| 国产精品涩涩涩视频网站| 久久久精品AV| 久久思思热| 第四色26uuu| 久久久久久久丁香五月天婷婷| www.99热这里精品| 爆乳熟女-区二区三区| 精品无码久久久久久久久 | 深夜婷婷 丁香| 综合激情站| 99丁香五月婷| 操操操AV| 色婷婷色婷婷五月| 婷婷综合网站| 五月天激情.com| 五月天欧美 另类小说| 俺来也综合网精品一区| 亚洲AV成人精品日韩在线播放| 五月天婷婷激情网| 人人叉久| 做爰丰满少妇1313| 亚洲人人操| 九九热最新| 秋霞性爱AV| 伊人玖玖婷婷| 午夜婷婷久久| 99在线观看视频| 色婷婷AV在线| 噜噜视频| 久久丁香综合| 超碰色综合| 伊人www22综合色| 婷婷的色色五月天| 99色热视频在线| 九九这里有精品| www.色婷婷.com| 丁香六月成人网| 伦99热| 五月天婷婷导航| 激情文学天天| www免费在线视频| 婷婷激情在线| 亚洲无码99| 乱码操操| 9色91视频| 久久精品视频99| 色九九九九| 99精品热| 久热这里只有精品3| 婷婷精品| 五月丁香好婷婷姑娘综合网| 丁香亭亭久久| 五月亭亭六月激情| 激情五月少妇| WWW免费视频碰碰碰碰| 大香蕉天堂| 综合五月婷婷| 中文字幕乱码亚洲精品一区| 九九九九九九九热| 久久人妻视步| 日韩AV片| 五月激情影院| 色九月综合| 日韩免费99| 五月色婷婷中文字幕| 91婷婷丁香五月天免费视频网站| 丁香六月激情综合网| 激情q青青草在线婷婷| 国产精品噜噜在线视频| 五月情色天| 狠狠干综合网| 亚洲无码99| 国产精产国品一二三在观看| 亚洲精品444久久久久久| 女操碰| 开心五月激情| 久久丁香五月婷| 综合色五月| 国产FREESEXVIDEOS性中国| 91精品刘玥| 97人人搞| 俺去也在线www色官网| 丁香五月天堂网| 99热这里全都是精品| 丁香五月天大香蕉啪啪| 色情丁香五月婷婷精品| www.丁香黄色五月天人与| 久热免费视频| 开心激情网在线| 婷婷色色综合| 九月丁香| 狠狠婷婷爱| 99热99干| 九九激情| 99国产欧美视频| 天天插综合在线| 天天天久久人人人合| 丁香五月五月婷婷| HD久久精品视频| 婷婷五月综合婷婷| 天天天天干| 麻豆AV一区二区三区| 超碰国产av| 婷婷天天综合| 夜夜骑夜夜撸| 欧美成人在线观看| 亚洲色色色色色| 激情图片五月天| 男妓跪趴把舌头伸进我的嘴巴| 婷婷五月色惰| 婷婷涩五月天综合| 激情丁香九九五月综合网| 懂色av粉嫩av蜜臀av| 激情五月天视频| 丁香五月天在线| 大香蕉久久| 精品爆操| 五月婷婷丁香瑟瑟视频| 国产成人精品一区二三区熟女在线| 肏屄色播伊人97婷婷| 五月天色网站| 色色无码| 九九伊人网| 五月婷婷激情日本| 日韩天堂久久| 婷婷五月色综合| 噼里啪啦在线观看免费完整版视频| 影音先锋91| 六月丁香影院| 久草婷婷网 | 婷婷精品在线| 中文字幕成人| 综合激情五月四射婷婷| 丁香婷婷六月男男| 久色大香蕉| 亚洲中文乱字字幕线在永久| 婷婷五月丁香五月| 天天插天天玩天天干| 丁香六月婷婷色XXXXX| 婷婷丁香中文字幕| 颜射 精品性爱av| 九九色综合| 婷婷激情五月吧| 在线播放中文字幕| 久久九九囯产| 婷婷性爱五月天| www.夜夜爱.com| 俺去也在线www色官网| 免费无码毛片一区二区A片| 五月天婷亚洲天综合网综合| 色五月激情五月天| 国产片天天爽夜夜爽| 午夜丁香| 99热只有精品在线播放| 91一起操| 久久99这里| 中文幕无线码中文字蜜桃| www.91色| 色婷婷亚洲婷婷| 一起草无码视频| 99热主页日本| 久久婷婷激情| 五月丁香啪啪网| 美女天天艹人人爽| 大学生高潮无套内谢视频| 婷婷综合网在线| 国产成人精品123区免费视频 | 九九激情视频| 婷婷色五月激情强奸四射| 色婷婷a v| 超碰国产在线观看| 碰碰女| 人妻熟妇国产精品| 日日干日日| ...婷婷国产成人亚洲日韩| 色五月激情五月| 二人电影免费版在线观看| 99热伊人| 丁香婷婷人妻综合网| 婷婷丁香熟女| 婷婷五月天色播| 99自拍视频网站| 激情综合一| 天天肏天天插| 色九九一二| 久久98热re| 久久久网站| 99精品视频在线观看| anquye五月| 久久一级片| 性爱综合网| 婷婷五月天性| 五月天婷婷社区久久综合| 我爱大香蕉| 成人网站免费sxj| 碰超在线九色| 开心深爱激情网| 免费试看小视频 99| 影音先锋91男人资源在线播放| 91精品综合久久婷婷九色| 狠狠摸狠狠摸| 人人亚洲| 91综合网| 99精品综合视频| 婷婷精品性性性性性性性| 久热精彩视频98| 婷婷五月天堂| 台湾佬天天日丁香婷婷五月天| 狠狠干在线| 91婷婷在线| 97成人丁香婷婷| 97超级碰| 五月婷婷激情综合网| 丁香无五月网| 婷婷国产欧美97| 337p大胆噜噜噜噜噜91Av| 五月天综合影院| 无码色色色色色| 婷婷丁香色女人| 婷婷色在线| 五月丁香六月婷婷综合| 噜噜色五月| 婷婷久久18| 99热在线观看| 91精品在线看| 五月播播| AV电影在线播放| 婷婷综合国产| 色综合99| 五月丁香久久网| 丁香六月激情网C0W| 99视频这里只有免费精品| 色色五月丁香| 色婷婷免费观看| 六月丁香社区| www.狠狠操.com| 超碰在线免费| 美女久久婷婷| 丁香五月激情啪啪| 91视频精品99| 久久偷拍综合五月天| 五月婷婷亚洲综合网| 激情六月丁香| 五月婷婷六月丁香玖玖玫瑰91| 香蕉久久国产AV一区二区| 久久丁香五月婷婷| 亚洲另类日本| 啪到高潮激情丁香五月| 国产又粗又大又爽又黄| 亚洲av网站在线观看| 婷婷色五月色| 九色视频这里只有精品| 中文精品久久久久人妻不| 99资源在线视频| 久久婷婷五| 雪千夏麻豆| 中文字幕乱码亚洲精品一区| 91热爆在线| 337p大胆噜噜噜噜噜91Av| 亚洲第一综合| 婷婷五月天播播| 五月婷婷久草在线视频综合| 丁香六月高清视频| 午夜成人天堂久久无码日韩久久| 久久狠婷婷| 久久久潮喷-久久久九九-成人AV| 黄色国久久| 国产午夜精品AV一区二区麻豆| 丁香六月啪啪| 91色婷婷综合久久中文字幕二区| 狠狠色大香蕉| 五月婷婷丁香六月| 99在线观看精品视频| 丁香六月无码播放| www.色五月.com| 色五狠狠| 色久天| 噜噜精品| 久久性爰视频这里只有精品| 激情都市五月天| 99精品7| 色婷婷狠狠色| 极品五月天| 好激情在线综合网| 狠狠色噜噜狠狠| 色综合色综合色综合| 91婷婷五月天综合视频| 天天爽天天爽天天爽天天爽天天爽| 婷婷五月成人| site:pzdcoin.com| 亚洲99激情| 日在线V视频在线播放| 欧美狠狠草| 99久久国产成人精品| AV美美午夜| 丁香婷五月| 婷婷五月丁香六月天亚洲综合| 五月开心深深爱激情综合| 五月激情六月宗合| 97色操| www超碰| 99热综合| 琪琪布丁香社区激情五月天| 亚洲综合碰| 区欧美日韩成人| 超碰在线播放免费观看| 久久久久久久久99精品| 91五月天| 九九九午夜影院成人| 凹凸操Av| 大香蕉人人网| www.日韩国产| 久久亚洲A| 欧美色色色| 婷婷亚洲五月| 久久五月天色婷婷| 99A级片| 五月激情影院| 亚洲网在线观看| www.金莲av| 色哟哟性爱av| 99热这里只有精品268| 6080av| 久久精品视频在这里有| 超碰成人在线观看| 最近免费中文字幕大全高清大全1| www.一区二区三区| 亚洲乱码在线观看| 丁香五月香蕉在线| 久热只有这里精品| 色五月超碰| 欧洲色区| 操久久精| 婷婷六月婷婷| 五月丁香五月综合欧美| www.精品99| 成人精品视频99在线观看免费| 91窝窝| 激情五月天婷婷直播| 五月天色网站| 亚洲中文字幕网| 久久se 综合网| 91趴趴| 色婷婷婷av| 综合色色色色色色| 99亚州综合精品成人网| 97干资源在线观看| 久久草人妻| 五月天开心激情综合网| 色综合色| 狼人婷婷综合| 天天色天天舔天天爱天天爽| 日本久久婷| 五月激情综合网婷婷| 色久99| WWW五月天| 丁香九九九九| 变态另类色图| 1024人妻| www.五月丁香| 91无码色色| 91狠狠综合久久久久久| 久久久性爱视频| 北京熟妇搡BBBB搡BBBB| 色五月色图| 色色色国产| 五月天色五月| 丁香婷婷基地| 天天日综合| 日韩ww| 在线国产精品色| 99热资源在线| 婷婷丁香大香蕉| 丁香五月1页| 狠狠99| 日本nghangse中文字幕| 丁香五月AV综合激情| 97色在线观看视频| 五月色情婷婷| 国产VA播放| 另类图片激情五月| 婷婷伊人綜合中文| 婷婷色丁香五月| 99re在线精品视频| 男人視頻站| 日本AAAAAAAAAAAAAA片| 国产亚洲精品AAAAAAA片| 激情色色| 强伦轩人妻一区二区电影| 五月婷在线播放| 久久免费精彩视频| 看婷婷五月天网| 91婷婷色 | www,久久久| 99热亚州综合| 日日撸日日操| 逼特逼在线免费播放| 五月天天天综合| 五月天六月色| www.久久99| 色五月天激情| 97操碰视频| 五月丁香激| 夜夜躁婷婷AV| 网站免费一站二站| 日韩精品无码AV| 91精品综合久久久久久五月丁香 | 天天免费日日夜夜夜夜| www夜夜| 六月丁香停| 日本天天色| 97人妻碰碰碰久久久久-最近国语高清| 丁香五月天在线视频| 五月婷婷激情久久| 婷婷综合久久| 在线观看免费狠狠色丁香香综合| XX色综合| 丁香五月激情性色郤| 99热这里只有精品9| 天天插天天插天天日| 婷婷精品综合| 久久久免费图片视频| 婷婷激情五月综合基地| 大色鬼综合| 午夜婷婷五月天在线| 大香蕉久久综合网| 这里只有精品免费视频在线观看 | www. 五月. com| 六九色综合婷婷五月天| 4399伦理午夜| 色综合com| 五月天婷婷综合久久| 色婷婷丁香五月| 激情丁香五月激情婷婷| 久久XX日本综合| 婷婷五月天激情综合网| 亚洲av成人一区二区电影在线| 丁香六月在线| 免费97碰碰| 亚洲精品大片| 人妻五月天激情开心网| 亚洲午夜成人av电影网| 亚洲日日操| 日韩黄色网络| 婷婷色五月天在线观看| 久久新地址| 午夜婷婷| 五月婷婷开心丁香| 综合久久综合五月天婷婷| 大香蕉久久婷婷精品综合| 欧美 日韩 成人 在线| 五月婷婷啪啪| 99精品网站| 99啪在线| 天天拍天天操| 人人色性网| 99九九99九九九视频精品| 婷婷五月丁香超碰| 美女va| 8050一级网| 五月宗合激情网| 亚洲天堂啪啪| 日本一道久久| 婷婷色五月久久| 日本无码专区| 99视频网址| 亚洲精品乱码久久久久99| 丁香五月婷婷国产在线| 97干欧美| 丁香五月激情澎湃一区| 99视频在线观看网址| www久久艹| 六月婷五月丁香| 99热99日天天干| 91色色色| ,99视频久久| 色玖玖玖| 风流少妇A片一区二区蜜桃 | 欧美精品狠狠色丁香婷婷| 99福利导航| AⅤ色区| 中文字幕不卡+婷婷五月| 欧美大片免费观看| 日本一道久久| 丁香六月婷月91婷月| av超碰在线| 狠狠精品干练久久久无码中文字幕| 丁香五月天激情视频| 婷婷激情五月天在线视频| 日亚二欧美| 亚洲亚洲人成综合网络| 婷婷六月久久| 中文字幕在线aⅴ免费观看| 成人版视频在线观看| Va另类视频| 97干欧美| 激情五月天情色| 五月天偷拍| 丁香五月婷婷色情综合| 秋霞学生妹一二级| 92久操视频| 99re6在线视频精品免费| www.91在线观看| 99热视| 日韩综合天堂| 激情五月丁香五月综合| 色婷婷丁香五月| 九九热精品视频| 九九这里精品| 五月丁香六月综合情在线观看 | 99久久综合| 综合五月婷婷| 国产熟女日日骚五月丁香爱| 五月婷婷丁香啪啪| 偷拍九九热| 99热在线播放| 婷婷香五月| 色婷久久| 色在线99| 色爱综合五月| 97人碰人操| 国产乱妇无乱码大黄AA片| 97av在线视频| 色九亚洲| 五月丁香婷婷激情澎湃四射| 热99国产精品| 99精品视频偷拍| 精品九九网| 色婷婷精| 男人大jjc女人免费视频| AV九九| 欧美猛片| 综合狠狠干| av在线资源| 久久婷婷五月天激情四射| 亚洲精级| 67194线路二在线观看| 91丨九色丨熟女|新版| 五月激情综合深爱| 免费视频舔| 99这里只有精品视频免费| 五月天婷婷久久视频| 日韩精品999| 丁香五月综合激情啪啪| 婷婷娌伦网| 五月婷婷官网色| 99久久玖玖| 青草少妇激情| 人人播| 色综合五月天| 噜噜噜久久| 99啪99| 成人片在线播放| 九色视频91| 五月天综合婷婷| 91狠狠综合久久| 天天肏夜夜肏| 精品少妇人妻AV无码专区偷人| 超碰9799| 99热人人艹| av在线不卡播放| 婷婷激情啪啪| 亚洲av电影网站| 亚洲精品九九| 丁香六月婷| 狠狠色综合网| 婷婷丁香五月av| 亚洲五月丁| 欧美丁香五月天| 亚洲成人va| 激情六月天| 成人 在线 日韩| 99久久网站| 丁香五月天啪啪| 97日韩无套内| 欧美三级巜人妻互换| 激情综合网激情五月婷婷| 五月色激情综合网| 丁香五月网| 色就是色婷婷五月亚洲激情| 日韩av干| 99成人精品视频| 97人人操| 国产日比| 91人人爱| 五月丁香在线观看国产| 色色影院黄大片| 91刘玥视频在线观看| 亚洲情色一区| 成人五月天色天堂| 九九热精品6| 九月婷婷激情| 精品无码久久久久久久久| 欧美日韩婷婷五月天| 久久青青日本视频| 色噜噜狠狠色综合无码久久欧美| 五月婷伊人| 开心五月深爱五月丁香五月激情五月 | 在热视频精品| 国产成人高清| 噼里啪啦完整版中文在线观看 | 99精品7| 五月天婷婷丁香基地在线观看| Av大香蕉| 国产99久| 在线观看的av| 丁香五月六月激情| 五月天久久综合| 国产精品第一国产精品| 操久久精| 婷婷五月天激情综合婷婷五月天激情综合| 五月天婷婷色综合| 91啪啪视频| 中文中文在线| 97影院一级片| 亚州视频九九99| 91碰在线| 95精品区一区二| 丝袜激情网| 久久这里只有精品16| 99只有这里有精品在线视频| 国产成人网址| 99色在线观看视频| 欧美婷婷六月丁香综合色连续高潮抽搐| 伍月婷丁香花全集| 丁香婷婷激情| 色婷婷最新域名 | 色色色色热| 大香伊人婷婷影院| 色色热99| 五月激情天| 操操综合网婷婷| 五月婷婷激情综合| www.狠狠艹| 97在线观视频免费观看| 婷婷五月色综合| 五月天另类图片| 超碰人人射| 久久综合久色欧美综合狠狠| 色五月天丁香| 色婷婷五月视频| 中文字幕精品无码一区二区| 日韩在线视频网站| 久久久久久五月天| 精品一二三区久久AAA片| www.99久| 色在线视频网2025| av在线播放网站| 99在线观看视频免费| 五月天偷拍| 亚洲影院婷婷色| 日日干夜夜撸夜夜骑| 99ri精品| 色天堂操| 五月天欧美激情| 国产国产乱老熟女视频网站97| 99丝袜精品视频网站| 久久狠狠色| 久99热| 五月丁香猫咪久久婷婷综合视频激情四射网入口 | 久久伦乱| 涩 五月 婷婷 狠狠| 九九热99精品在线| 无码人妻少妇色欲AV一区二区| AV九九| 97在线/亚洲| 五月色亚洲| 天天干天天干天天干天天干天天干| 4399啪啪视频| 久久久久久草黄色片AV在线观看| 五月丁香六月婷婷啪啪| 成人午夜天| 丁香六月婷婷综合激情欧美| 99精品久久| 美女黄频aⅴ视频| 亚洲网站999| 色五月婷婷激情基地| 日韩99色99| 大香蕉久久久久久久久| 色婷婷久久综合丁香五月| 无遮羞AV| 国产精品久久久60086| 大香蕉220| 丁香五月老师| 97自拍视频在线| 在线成人av播放| 伊综合蕉| 色五月天.con| 91色久| 欧美色色色| 5月丁香啪啪啪| 色婷婷五月天中文字幕| 丁香五月91| 99久在线观看| AV大香蕉| 538在线| 激情婷婷| 开心婷婷五月天综合| 六月色婷婷| 十月丁香婷婷| 开心五月婷婷| 激情黄色五月天| 99热最新国内| 五月丁香婷婷成人综合网| 婷婷成人av| 99热这里是精品| 91人人操| 激情五月综合网| 色色综合成人网| 婷色五月天| 91小黄书网址在线观看| 色综合久久无码| 免费视频99| 丁香五月婷婷黑人妻黄色电影院| 五月天综合| 五月丁香亭亭成人电影| 国产精品A成V人在线播放| 丁香五月激情鲁| 综合狠久久| 久色视频| 琪琪色五月天| 婷婷五月天激情四射| 91视屏在线观看com.wwwvv| 色婷婷亚洲综合天堂| 26uuu精品一区二区| 欧美久久网| 91超级碰碰| 五月天久久丁香| 婷婷激情五月天小说| 丁香五月性| 国产美女最新VA在线免费观看| 婷婷五月天小说| 六月婷婷日| 丁香花婷婷五月天| 夜夜操天天干| 激情小说五月天中文字幕| 久久婷婷东京热大香樵| 婷婷丁香激情综合色情| 激情四射五月天偷偷看婷婷| 日日噜噜夜夜狠狠久久丁香五月| 99这里只有精品视频| 激情综合色网| 91妻人人爽人人看片| 99久久久久久www| 色亚洲视频| 超碰免费电影| 五月婷综合| 激情五月狠狠| AV网站免费在线| 日本4399天堂中出| 天天骑天天操| 熟女激情网| 啪啪视频99| 婷婷五月天av| 婷婷五点亚洲| 99色热| 久9热插入|