欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

MySQL到BigQuery數(shù)據(jù)同步:CDC如何彌補周期同步的漏失

MySQL到BigQuery數(shù)據(jù)同步:CDC如何彌補周期同步的漏失 MySQL 到 BigQuery 的數(shù)據(jù)同步最容易被低估的問題就是時間窗口。無論是定時導(dǎo)出還是按updated_at增量拉取本質(zhì)上都屬于 periodic syncs。它們的共同點是數(shù)據(jù)庫里的變化并不會等待調(diào)度任務(wù)開始也不會按周期整齊地落入邊界。一次刪除、一條字段被改回舊值、一張表在夜間被大批量 UPDATE 后又改回來這些事件都可能發(fā)生在兩批同步任務(wù)的間隙最終 BigQuery 里的數(shù)據(jù)既不是源表的真實狀態(tài)也不是任何歷史時刻的真實狀態(tài)。CDCChange Data Capture通過讀取 MySQL binlog把每一條數(shù)據(jù)變更作為事件流送到 BigQuery正好從機(jī)制上補上了這個缺口。這篇文章圍繞周期同步會漏什么、binlog 為什么能避免漏、落地時要注意什么展開適合正在設(shè)計數(shù)據(jù)管道、給數(shù)倉接增量數(shù)據(jù)或者被批量任務(wù)數(shù)據(jù)不一致問題困擾的開發(fā)者與數(shù)據(jù)工程師。1. 周期同步在 MySQL 到 BigQuery 場景下到底漏了什么1.1 常見的三種周期同步寫法先看最常用的三種同步方式它們并不只是實現(xiàn)細(xì)節(jié)不同能捕獲的數(shù)據(jù)變化粒度也完全不同。第一種是全量導(dǎo)出覆蓋。直接把 MySQL 表導(dǎo)出成文件或通過 SQL 拉取寫入 BigQuery 臨時表再覆蓋目標(biāo)表。這種方式能保證目標(biāo)表最終狀態(tài)一致但同步窗口很長且 BigQuery 做覆蓋時下游可能讀到一半數(shù)據(jù)。數(shù)據(jù)量一旦上億這個方案基本不可持續(xù)。第二種是按自增 ID 增量拉取。記錄max(id)每次只拉大于該 ID 的行像這樣SELECT * FROM orders WHERE id :last_max_id ORDER BY id;這個方案只能捕獲新增數(shù)據(jù)。業(yè)務(wù)表一旦發(fā)生 UPDATE主鍵 ID 不變增量 SQL 永遠(yuǎn)拉不到這一行。DELETE 更不會出現(xiàn)在結(jié)果里。第三種是按更新時間戳增量拉取SELECT * FROM orders WHERE updated_at :last_sync_ts;這是目前最常見的周期同步方案前提是業(yè)務(wù)表有updated_at字段并且所有寫入路徑都正確更新這個字段。實際項目里這個前提經(jīng)常被破壞某些批量導(dǎo)入腳本沒有更新updated_at某些框架寫入時沒有映射該字段于是出現(xiàn)數(shù)據(jù)明明變了增量 SQL 卻查不到的問題。1.2 周期同步一定會錯過的幾類變更物理刪除是最典型的一類。DELETE 之后這條記錄不再存在于表中任何基于當(dāng)前表狀態(tài)的 SELECT 都無法發(fā)現(xiàn)它曾經(jīng)存在過。全量對拍能發(fā)現(xiàn)問題但只能事后補救而且對拍本身在大表上成本極高。沒有更新時間字段或者更新時沒有寫入時間戳也是一類。訂單表如果通過第三方系統(tǒng)直接改庫或者 DBA 手工執(zhí)行 UPDATE 時沒有維護(hù)updated_at那么增量邊界從一開始就是錯的。同周期內(nèi)狀態(tài)回跳同樣會被掩蓋。假設(shè)訂單在 00:00:10 從pending改為paid00:00:20 又改回pending。周期任務(wù)在 01:00 運行拉到的最終狀態(tài)還是pending。從業(yè)務(wù)角度看中間那次paid狀態(tài)也曾經(jīng)是真實數(shù)據(jù)但周期同步完全感知不到。高頻更新更不用說。一張促銷表每秒更新幾千行周期任務(wù)每隔 5 分鐘拉一次單行在周期內(nèi)被反復(fù)更新后最終拉到的只是最后一次值中間所有取值全部丟失。1.3 為什么不是多跑幾次就能解決周期同步的失敗模式是邏輯性漏數(shù)據(jù)不是漏跑任務(wù)。把調(diào)度頻率從小時改成分鐘只是縮小時間窗口并沒有改變讀取當(dāng)前表狀態(tài)的本質(zhì)。一張表在周期內(nèi)發(fā)生了 100 次更新周期同步只能看到最后一行binlog 能看到 100 個事件并且每個事件都保留前鏡像和后鏡像。這就是原理層面的差異。周期同步試圖通過查詢結(jié)果反推變化而 binlog 是 MySQL 自己記錄的寫操作流水賬。流水賬不會因為業(yè)務(wù)表沒有updated_at就缺頁也不會因為 DELETE 后記錄消失就抹去歷史。1.4 三種方案的能力對比維度全量快照增量字段輪詢binlog CDC刪除事件全量對拍后才發(fā)現(xiàn)通常無法發(fā)現(xiàn)每條 DELETE 都有對應(yīng)事件更新歷史只有最后狀態(tài)只有最后一次變更每次 UPDATE 都有前鏡像和后鏡像對業(yè)務(wù)表要求無必須有updated_at等字段無binlog 與業(yè)務(wù)表結(jié)構(gòu)獨立實時性取決于調(diào)度周期取決于調(diào)度周期秒級到分鐘級可配置對源庫壓力大全表掃描代價高中等取決于索引較小讀取日志而不是反復(fù)掃描表從這張表能看出周期同步不是慢而是漏。CDC 的價值不是讓同步更快而是讓變化過程本身可見。2. binlog 為什么能捕捉每一次變化CDC 的原理2.1 binlog 是什么binlog 是 MySQL 的二進(jìn)制日志記錄所有改變數(shù)據(jù)庫內(nèi)容的操作包括 INSERT、UPDATE、DELETE以及部分 DDL。MySQL 主從復(fù)制、崩潰恢復(fù)、數(shù)據(jù)恢復(fù)都依賴它??梢岳斫鉃?MySQL 把每一次寫操作按順序?qū)懙揭槐玖魉~上。binlog 并不是默認(rèn)可用的。MySQL 5.7 中l(wèi)og_bin默認(rèn)關(guān)閉8.0 默認(rèn)開啟但不同發(fā)行版和云廠商的默認(rèn)值可能不同落地前必須先確認(rèn)。如果 binlog 沒有開啟后續(xù)所有 CDC 方案都無從談起。2.2 ROW 格式給 CDC 提供了什么binlog 有三種格式STATEMENT、ROW、MIXED。STATEMENT 格式記錄的是 SQL 語句本身例如UPDATE orders SET statuspaid WHERE id1001;。這種格式日志量小但無法可靠還原每一行在語句執(zhí)行前后的具體值。MIXED 格式是兩者的混合MySQL 會根據(jù)語句類型自動選擇但對于 CDC 場景依然不夠穩(wěn)定。CDC 要求使用 ROW 格式。ROW 格式下binlog 直接記錄行的變化包括字段級的前鏡像和后鏡像。具體來說INSERT 事件包含插入后的完整行數(shù)據(jù)。UPDATE 事件包含變更前的整行數(shù)據(jù)和變更后的整行數(shù)據(jù)。DELETE 事件包含刪除前的整行數(shù)據(jù)。這意味著 CDC 消費者不僅能知道某張表發(fā)生了變化還能拿到 哪一行的哪個字段從什么值變成什么值。2.3 CDC 連接器如何消費 binlogDebezium、Flink CDC 這類工具在原理上會偽裝成 MySQL 從庫。它們通過 MySQL 的復(fù)制協(xié)議從主庫拉取 binlog并把 binlog 里的二進(jìn)制事件解析成結(jié)構(gòu)化的 JSON 變更事件。連接器需要記錄自己的消費位點。傳統(tǒng)方式是記錄 binlog 文件名加偏移量例如mysql-bin.000023的position 45123。更可靠的方式是使用 GTID即全局事務(wù)標(biāo)識符。GTID 能唯一標(biāo)識每個事務(wù)即使 binlog 文件被清理只要 MySQL 實例保留了完整的事務(wù)歷史連接器也能定位到正確的起點。CDC 連接器通常具備先快照再增量的能力。首次啟動時它會先讀取一次源表全量數(shù)據(jù)記錄當(dāng)時的 binlog 位點之后繼續(xù)從該位點消費增量從而保證從啟動那一刻起不遺漏后續(xù)變更。2.4 從 binlog 到 BigQuery 的完整鏈路一個常見的生產(chǎn)架構(gòu)是MySQL master - binlog - CDC Connector (Debezium / Flink CDC) - Kafka Topic - 流處理或?qū)懭氤绦?- BigQuery Storage Write API / Load Job - BigQuery Table也可以簡化為MySQL master - Flink CDC - BigQuery 目標(biāo)表無論采用哪種架構(gòu)核心都是從日志讀取變化而不是定時查詢表。這也決定了后面的環(huán)境準(zhǔn)備、配置、驗證和排錯方式。3. 前期準(zhǔn)備MySQL、BigQuery 和權(quán)限一項都不能省3.1 版本與前置條件在配置 CDC 之前先確認(rèn)環(huán)境是否滿足基本條件組件要求說明MySQL5.7 或 8.0開啟 binlog5.7 建議顯式開啟8.0 確認(rèn)默認(rèn)配置BigQuery數(shù)據(jù)集、目標(biāo)表、服務(wù)賬號建議單獨建服務(wù)賬號避免共用管理員賬號CDC 工具Debezium 或 Flink CDC版本需要與 MySQL 和 Kafka 版本匹配網(wǎng)絡(luò)源庫與數(shù)倉側(cè)連通私網(wǎng)優(yōu)先公網(wǎng)場景需要做好傳輸加密如果源 MySQL 是云數(shù)據(jù)庫還需要查看云廠商是否允許開啟 binlog 保留策略、是否開放復(fù)制賬號權(quán)限。有些托管數(shù)據(jù)庫默認(rèn)不開放REPLICATION SLAVE這是接入 CDC 前最容易發(fā)現(xiàn)的阻塞點。注意開啟 binlog 并切換為 ROW 格式后binlog 日志量通常會變大磁盤占用和復(fù)制延遲都會上升。生產(chǎn)環(huán)境切換前需要評估磁盤余量。3.2 修改 MySQL 配置下面是一份最小可用的 MySQL CDC 配置示例[mysqld] server_id 1001 log_bin /var/log/mysql/mysql-bin.log binlog_format ROW binlog_row_image FULL expire_logs_days 7 # MySQL 8.0 可用以下參數(shù)控制 binlog 保留時長 # binlog_expire_logs_seconds 604800每個參數(shù)的作用server_idMySQL 實例在復(fù)制拓?fù)渲械奈ㄒ粯?biāo)識。CDC 客戶端也會占用一個 server-id不能與主從庫中其他節(jié)點重復(fù)。log_bin開啟 binlog并指定日志文件路徑。binlog_formatROW讓 binlog 記錄行級變更。CDC 必須使用 ROW 格式。binlog_row_imageFULL讓 UPDATE 事件包含整行前鏡像和后鏡像。如果設(shè)置為 MINIMALbinlog 只包含被修改的字段和主鍵CDC 拿不到完整舊行和新行。expire_logs_days控制 binlog 文件保留天數(shù)。保留太短CDC 位點落后時可能追不上保留太長磁盤占用過大。常見建議是 3 到 7 天具體要結(jié)合源庫寫入量和磁盤容量調(diào)整。修改配置后需要重啟 MySQL。重啟前確認(rèn)max_allowed_packet等參數(shù)不會限制大事務(wù)的 binlog 傳輸。3.3 創(chuàng)建 MySQL CDC 賬號建議為 CDC 單獨創(chuàng)建一個賬號避免使用 rootCREATE USER cdc_user% IDENTIFIED BY strong_password; GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO cdc_user%; FLUSH PRIVILEGES;三個權(quán)限的含義SELECT用于 CDC 工具首次啟動時的全量快照以及讀取表結(jié)構(gòu)信息。REPLICATION SLAVE允許該賬號通過復(fù)制協(xié)議讀取 binlog這是 CDC 的核心權(quán)限。REPLICATION CLIENT允許執(zhí)行SHOW MASTER STATUS、SHOW BINARY LOG STATUS等命令用于確認(rèn)位點信息。不要把ALL PRIVILEGES都授出去。CDC 賬號只需要讀取能力不需要寫源庫。3.4 BigQuery 側(cè)準(zhǔn)備BigQuery 側(cè)需要準(zhǔn)備數(shù)據(jù)集、目標(biāo)表和服務(wù)賬號。在 Google Cloud Console 中先創(chuàng)建數(shù)據(jù)集例如analytics。目標(biāo)表建議在接入 CDC 之前就定義好字段類型盡量與 MySQL 類型對應(yīng)。如果后續(xù)依賴 BigQuery 自動加列容易遇到 schema 不一致導(dǎo)致寫入失敗。服務(wù)賬號需要授予 BigQuery Data Editor 或更細(xì)粒度的角色。把服務(wù)賬號的 JSON 密鑰下載到寫入服務(wù)所在機(jī)器并通過環(huán)境變量GOOGLE_APPLICATION_CREDENTIALS指向密鑰文件。BigQuery 是列式存儲目標(biāo)表 schema 在寫入前就要對齊。CDC 事件字段如果比目標(biāo)表多需要做過濾如果少目標(biāo)表多出的列會使用默認(rèn)值或 NULL。4. 最小落地鏈路Debezium 捕獲 binlog程序?qū)懭?BigQuery4.1 兩種常用的技術(shù)選型常見方案有兩種方案鏈路適合場景Debezium KafkaMySQL - Debezium - Kafka - 寫入程序 - BigQuery已有 Kafka 基礎(chǔ)設(shè)施需要多消費方Flink CDCMySQL - Flink CDC - BigQuery Sink團(tuán)隊熟悉 Flink希望用 SQL 處理流下面以 Debezium Kafka Python 消費者為例把鏈路拆開看。這樣更容易理解每個環(huán)節(jié)的職責(zé)。Flink CDC 只是把 Debezium 和流處理合并到一個框架里原理一致。4.2 Debezium connector 的配置Debezium 通過 Kafka Connect 運行一個典型配置如下{ name: mysql-orders-connector, config: { connector.class: io.debezium.connector.mysql.MySqlConnector, database.hostname: 10.0.0.10, database.port: 3306, database.user: cdc_user, database.password: xxxx, database.server.id: 5400, database.include.list: ecommerce, table.include.list: ecommerce.orders, database.history.kafka.bootstrap.servers: kafka:9092, database.history.kafka.topic: schema-changes.ecommerce, topic.prefix: mysql, include.schema.changes: true } }關(guān)鍵參數(shù)database.server.idDebezium 會占用一個 server-id。它必須與 MySQL 現(xiàn)有主從庫、其他 CDC 實例的 server-id 不沖突否則連接會被 MySQL 拒絕。database.include.list/table.include.list限定監(jiān)聽的庫表。只同步需要的表能顯著減少 binlog 解析壓力。database.history.kafka.topicDebezium 用這個 topic 記錄表結(jié)構(gòu)歷史。binlog 里的舊事件在解析時可能依賴歷史 schema因此這個 topic 不能隨意刪除。topic.prefix生成 Kafka topic 名稱的前綴。最終 topic 名稱一般是{topic.prefix}.{database}.{table}。4.3 變更事件長什么樣Debezium 輸出的變更事件是一段 JSON核心結(jié)構(gòu)如下{ before: { id: 1001, status: pending }, after: { id: 1001, status: paid }, source: { db: ecommerce, table: orders, server_id: 1001, ts_ms: 1719900000123 }, op: u }op字段表示操作類型op 值含義事件內(nèi)容cINSERT只有afteruUPDATE有before和afterdDELETE只有beforer快照讀取類似 INSERTafter為快照行注意DELETE 事件沒有after。寫入 BigQuery 時如果目標(biāo)表要反映刪除必須自己定義刪除策略比如寫入一條帶刪除標(biāo)記的記錄或者通過主鍵 MERGE 刪除目標(biāo)行。4.4 寫入 BigQuery 的示例程序下面是一個最小 Python 消費者示例從 Kafka 讀取 MySQL 變更事件批量寫入 BigQueryimport json from google.cloud import bigquery from kafka import KafkaConsumer PROJECT my-project DATASET analytics TABLE orders client bigquery.Client(projectPROJECT) table_ref client.get_table(f{PROJECT}.{DATASET}.{TABLE}) def process_event(msg): payload json.loads(msg.value()) op payload.get(op) if op in (c, r): return payload[after] if op u: return payload[after] if op d: before payload[before] before[_is_deleted] True return before return None consumer KafkaConsumer( mysql.ecommerce.orders, bootstrap_serverskafka:9092, group_idbigquery-sync, auto_offset_resetlatest, enable_auto_commitFalse, ) rows [] batch_size 500 for message in consumer: row process_event(message) if row is not None: rows.append(row) if len(rows) batch_size: errors client.insert_rows_json(table_ref, rows) if not errors: consumer.commit() rows [] else: print(errors)這個示例說明的是思路不是完整生產(chǎn)代碼。insert_rows_json適合小規(guī)模驗證生產(chǎn)環(huán)境更推薦使用 BigQuery Storage Write API并配合監(jiān)控、重試和死信隊列。enable_auto_commitFalse是為了避免消息未成功寫入就提交位點減少丟失風(fēng)險但代價是重復(fù)消費因此目標(biāo)表必須容忍重復(fù)。4.5 如果團(tuán)隊已經(jīng)用 Flink可以考慮 Flink CDCFlink CDC 可以把上面的鏈路壓縮成一個 SQL 和一套連接器。用 Flink SQL 創(chuàng)建 MySQL CDC 源表CREATE TABLE mysql_orders ( id INT, user_id INT, amount DECIMAL(10, 2), status STRING, updated_at TIMESTAMP(3), PRIMARY KEY (id) NOT ENFORCED ) WITH ( connector mysql-cdc, hostname 10.0.0.10, port 3306, username cdc_user, password xxxx, database-name ecommerce, table-name orders, server-id 5400-5406, scan.incremental.snapshot.enabled true );scan.incremental.snapshot.enabled在較新版本默認(rèn)開啟。它讓 Flink CDC 以分片方式并行快照大表不需要像舊版本那樣先對全表加鎖再讀取對大表更友好。源表創(chuàng)建后可以再創(chuàng)建 BigQuery Sink 表通過INSERT INTO完成同步。具體 Sink 類名和參數(shù)取決于連接器版本落地前要以當(dāng)前使用的 Flink 和連接器文檔為準(zhǔn)。5. 怎么驗證 binlog 同步?jīng)]有漏數(shù)據(jù)5.1 先確認(rèn) binlog 真的開了進(jìn)入 MySQL 命令行執(zhí)行SHOW VARIABLES LIKE log_bin; SHOW VARIABLES LIKE binlog_format; SHOW VARIABLES LIKE binlog_row_image;預(yù)期結(jié)果中l(wèi)og_bin為ONbinlog_format為ROWbinlog_row_image為FULL。還可以執(zhí)行SHOW BINARY LOG STATUS;如果輸出包含當(dāng)前 binlog 文件名和 position說明 binlog 文件正在正常寫入。5.2 驗證 Kafka 收到了哪些變更先用 Kafka 自帶的控制臺消費命令觀察 MySQL 變更是否進(jìn)入 topickafka-console-consumer.sh \ --bootstrap-server kafka:9092 \ --topic mysql.ecommerce.orders \ --from-beginning然后在 MySQL 中分別執(zhí)行一次 UPDATE 和一次 DELETEUPDATE orders SET status paid WHERE id 1001; DELETE FROM orders WHERE id 1002;正常情況下消費端會看到op為u和d的兩條事件。這一步直接驗證了周期同步最難做到的能力刪除和更新都能被捕獲。5.3 驗證 BigQuery 目標(biāo)表觀察 BigQuery 目標(biāo)表是否有新數(shù)據(jù)寫入。可以通過控制臺查詢也可以執(zhí)行SELECT COUNT(*) FROM my-project.analytics.orders; SELECT MAX(updated_at) FROM my-project.analytics.orders;必須注意一個容易誤判的地方BigQuery 目標(biāo)表不會因為收到了 DELETE 事件就自動刪除對應(yīng)行。如果寫入程序只是把after或before以追加方式寫入刪除事件只會變成一行帶標(biāo)記的數(shù)據(jù)。要真實反映刪除目標(biāo)表需要按主鍵做 MERGE或者通過分區(qū)覆蓋實現(xiàn)。驗證時先明確自己的目標(biāo)表語義是追加明細(xì)還是鏡像源表。5.4 延遲監(jiān)控指標(biāo)從 binlog 到 BigQuery 的同步不是一次性的必須持續(xù)監(jiān)控。常見指標(biāo)包括指標(biāo)含義告警建議Kafka consumer lag消費程序落后的消息數(shù)持續(xù)增長則告警Debezium 位點與當(dāng)前 binlog 的文件間隔連接器是否在追趕超過 binlog 保留期則高風(fēng)險端到端延遲事件寫入 MySQL 到進(jìn)入 BigQuery 的時間差根據(jù)業(yè)務(wù)要求設(shè)置閾值BigQuery 寫入錯誤率schema 不匹配等寫入失敗立即告警把位點落后和consumer lag 持續(xù)增長作為關(guān)鍵告警能提前發(fā)現(xiàn)大事務(wù)、網(wǎng)絡(luò)抖動或消費程序故障。6. 數(shù)據(jù)到達(dá) BigQuery 后模式映射、DDL 和冪等才是真正的坑6.1 MySQL 與 BigQuery 類型映射字段類型映射是 CDC 鏈路里最容易踩坑的部分。下面是常見映射關(guān)系MySQL 類型BigQuery 類型注意事項INT / INTEGERINT64無符號 INT 可能超過 INT64 有符號范圍BIGINTINT64超過 2^63-1 的數(shù)據(jù)要改用 NUMERIC 或 STRINGDECIMAL(p, s)NUMERIC / BIGNUMERIC金額字段不要用 FLOAT精度會丟失DATETIMEDATETIME無時區(qū)語義按原值寫入TIMESTAMPTIMESTAMP建議統(tǒng)一按 UTC 存儲VARCHAR / TEXTSTRING長度和編碼要注意JSONJSONBigQuery 需要字段模式為 JSON 或先轉(zhuǎn)成 STRINGTINYINTINT64 / BOOL看業(yè)務(wù)語義確定最容易出問題的是 DECIMAL。MySQL 中的DECIMAL(10, 2)如果映射成 BigQuery 的 FLOAT640.1 這樣的值可能出現(xiàn)精度誤差。正確做法是映射為 NUMERIC。TIMESTAMP 也容易出問題。MySQL 的TIMESTAMP有會話時區(qū)概念CDC 事件里的ts_ms可能是 UTC 時間而業(yè)務(wù)字段本身可能是本地時間。建議在寫入端統(tǒng)一規(guī)范避免目標(biāo)表同一列混入不同時區(qū)的數(shù)據(jù)。6.2 DDL 變更會打斷 CDC當(dāng) MySQL 表結(jié)構(gòu)變化時CDC 鏈路會面臨兩個層面的問題。第一Debezium 需要依賴database.history.kafka.topic中的 schema 歷史來解析 binlog 里的舊事件。如果這個 topic 被刪除或清理連接器可能無法反序列化舊的 binlog 事件。第二BigQuery 目標(biāo)表的 schema 不會自動跟隨 MySQL DDL 變化。MySQL 加了一列CDC 事件里出現(xiàn)了新字段但 BigQuery 目標(biāo)表沒有這一列寫入就會報錯。處理建議是把 DDL 納入變更流程先審查 MySQL DDL 對同步鏈路的影響。先在 BigQuery 目標(biāo)表補充或調(diào)整 schema。再在 MySQL 執(zhí)行 ALTER TABLE。同步完成后核對事件是否正常。對于大表的 ALTER TABLE還可能導(dǎo)致源庫鎖表和復(fù)制延遲。生產(chǎn)環(huán)境做主從切換時要評估 DDL 對 binlog 位點的影響。注意不要依賴 BigQuery 自動加列來處理所有 DDL 變更。自動加列在不同版本和連接器里行為不一致且不能處理列重命名、刪除、類型變更等復(fù)雜操作。6.3 至少一次語義下重復(fù)是正常的binlog CDC 鏈路通常提供 at-least-once 語義。網(wǎng)絡(luò)閃斷、消費程序重啟、位點提交失敗都可能導(dǎo)致同一事件被重復(fù)消費。因此目標(biāo)表必須能接受重復(fù)。常見做法按主鍵去重寫入前先判斷目標(biāo)表是否已有該主鍵。使用 BigQuery MERGE按主鍵更新目標(biāo)行。在記錄中增加事件版本字段如event_ts_ms或 GTID寫入時取較新的事件。下面是 BigQuery MERGE 的簡化思路MERGE my-project.analytics.orders AS t USING changes AS s ON t.id s.id WHEN MATCHED THEN UPDATE SET status s.status, amount s.amount WHEN NOT MATCHED THEN INSERT (id, user_id, amount, status, updated_at) VALUES (s.id, s.user_id, s.amount, s.status, s.updated_at);MERGE 在處理刪除事件時還可以加一個WHEN MATCHED AND s._is_deleted TRUE THEN DELETE分支。但 MERGE 的成本比流式追加高適合對一致性要求高、更新頻率可控的場景。如果表更新量極大需要考慮分區(qū)覆蓋、冷熱分離等方案。6.4 亂序事件怎么處理同一個主鍵的多條變更在 Kafka 中如果分布到不同分區(qū)消費程序收到的順序可能和源庫事務(wù)提交順序不一致。比如先提交了statuspaid后提交了statuscancelled亂序可能導(dǎo)致目標(biāo)表最終停在paid。處理方式Kafka Topic 按主鍵 hash 分區(qū)保證同一主鍵路由到同一分區(qū)。寫入端使用 binlog 里的ts_ms或 GTID 做排序只接受更新的事件。如果業(yè)務(wù)允許短暫延遲可以在寫入端做窗口緩沖按主鍵排序后批量提交。如果源表存在刪主鍵后重新插入同一主鍵的場景還需要區(qū)分刪除后插入和舊 UPDATE 后到否則可能出現(xiàn)舊數(shù)據(jù)覆蓋新數(shù)據(jù)的現(xiàn)象。這種情況下GTID 或事務(wù) ID 是更可靠的順序依據(jù)。7. 常見問題排查從現(xiàn)象倒推 binlog 鏈路故障7.1 現(xiàn)象連接器啟動時報權(quán)限不足或無法讀取 binlog可能原因MySQL 賬號缺少REPLICATION SLAVE權(quán)限。連接器配置的 server-id 與現(xiàn)有從庫沖突。binlog 未開啟或者binlog_format不是 ROW。排查命令SHOW VARIABLES LIKE binlog_format; SHOW GRANTS FOR cdc_user%; SHOW PROCESSLIST;處理方式核對 MySQL 配置和賬號權(quán)限修改后重啟連接器。server-id 沖突通常會在 MySQL 錯誤日志里看到A slave with the same server_uuid/server_id as this slave has connected to the master之類的信息。7.2 現(xiàn)象任務(wù)運行一段時間后Kafka 里有歷史事件但新事件遲遲不來可能原因Kafka Connect 或連接器進(jìn)程掛掉后位點沒有正確恢復(fù)。MySQL 實例重啟導(dǎo)致 binlog 文件名變化連接器找不到舊位點對應(yīng)的文件。table.include.list配置了大小寫敏感的表名實際表名大小寫不一致。排查方式kafka-consumer-groups.sh --bootstrap-server kafka:9092 --describe --group bigquery-sync重點看CURRENT-OFFSET、LOG-END-OFFSET和LAG。如果 consumer lag 為 0 但新數(shù)據(jù)沒進(jìn)來檢查連接器日志里 binlog offset 是否還在推進(jìn)。必要時做一次 重新快照 增量 的初始化。7.3 現(xiàn)象BigQuery 寫入報錯字段不存在或類型不匹配可能原因MySQL DDL 新增了列BigQuery schema 沒有同步。DECIMAL 字段映射成了 FLOAT64導(dǎo)致精度丟失或?qū)懭胧?。MySQL JSON 字段映射到了 BigQuery STRING但事件里是 JSON 對象。排查方式SELECT column_name, data_type FROM my-project.analytics.INFORMATION_SCHEMA.COLUMNS WHERE table_name orders;處理方式定位是哪一列不匹配先同步 schema再重放失敗事件。不要直接丟棄報錯事件否則會在對賬時發(fā)現(xiàn)數(shù)據(jù)缺口。7.4 現(xiàn)象同步延遲持續(xù)增長可能原因源庫執(zhí)行了大事務(wù)例如一次 UPDATE 超過十萬行binlog 事件量巨大。消費程序單線程寫入 BigQuery寫入速度跟不上源庫變更速度。網(wǎng)絡(luò)帶寬不足或者 BigQuery 寫入配額受限。處理方式在源庫側(cè)避免一次性更新超大范圍拆成小事務(wù)。寫入端改用批量并行寫并啟用 Storage Write API。增加監(jiān)控觀察 binlog 保留時間是否充足。如果消費端位點落后太遠(yuǎn)而 binlog 文件已經(jīng)過期可能需要重新快照。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
www.色五月| 久操操| 夜夜AVV| 色婷婷丁香五月色综合网| 色激情五月天| 国产另类综合| 人人爽欧美婷婷久久久五月丁香 | 丁香五月婷婷啪啪| 人妻VideOssS人妻| 好色婷婷| 永久免费视频| 五月天伊人av| 一级内射毛片| 伊人婷婷大香蕉| 日本婷久久| 婷婷永久在线| 欧美噜噜久久久XXX| 99无码精品| 六月婷婷狠狠| 丁香五月婷婷激情蜜桃| 亚洲激情视频在线观看| 青青五月天婷婷| 思思久日精品视频| 丁香伍月婷电影全集| 九九操综合网| 亚洲成人网站在线| www.yw尤物| 日本婷久久| 激情网婷婷五月天| 综合五月草 | 五月天激情播播网| 九九色婷婷五月天| 五月天婷婷综合免费| 99久久久久久久| 51国精产品自偷自偷综合| 丁香五月很很肏| 色综合丁香婷婷| 成人电影一区| 婷婷丁香久久网| 日韩aaa| 成人av在线网站| 天天日天天摸| 五月天激情无码| 青青草轻轻操| 婷婷伊人| 五月丁香五月综合欧美| 伊人婷婷五月天| 丁香五月婷婷动漫视频| 久狠狠| 啪精品| 婷婷五月无码| 情久久综合五月天| 日韩一区二区在线播放| 玖玖精品婷婷| 色色色色色色综合网| 思思热精品在线观看| 激情四射婷婷色色色| 色婷婷电影| 成人小说 五月天 婷婷| 99热精品99| 99热99色| 91激情五月开心| 九九综合视频在线观看| 日韩淑女人妻luan伦激情精品一区二| 极品少妇高潮啪啪AV无码| 五月丁香婷婷激情澎湃四射| 色婷婷五月天天天天天| 91久久九久久九久久九久久九久久| 天天弄天天操| 日本激情91| 久久婷婷六月综合资源| 免费亚洲婷婷中文字幕| 伊人大蕉香| 五月天色区| 丁香色五月婷婷| 亚洲视频在线观看| 色婷婷888| 色五月天综合| 婷五月丁香俺| 一起草Av| 天堂网啪啪| 亚洲视频一区| 精品一二三区久久AAA片| 丁香五月激情综合| 五月丁香啪啪伦理电影| 五月丁香成人| 99热99日…..| 91欧美| 一区二区三区XXXXXX| 做爰丰满少妇1313| 99热免费观看| 婷婷香蕉| 大香蕉五月天婷婷| 日韩av在线电影| 久久五月网| 九九RE视频在线精品| 91伦| 超碰成人在线免费观看| 国内久久婷婷| 婷婷丁香精品视频在线观看| 啪啪日本欧美| 中文字幕中文有码在线| 亚洲精品久久久无码| 久久er免费视频| 综合五月丁香六月婷婷| 久久久色情| 99国产精品久久久久久久久久久| 五月天婷婷综合网| 99这里只有精品视频| 激情五月天网站| 日韩十国产极品久久| 亚洲色色图片| 五月丁香六月婷婷在线小说视频| 久久婷婷色| 五月天婷婷丁香花| 98永久精品| 99久久五月婷婷| 国产午夜精品一区二区三区四区| 密着浓厚中出乚交尾GvG935| 91蝌蚪窝视频在线| 亚洲丁香五冃97色| 91在线97视频| 高清 码 免费看片短视频| 一区操| 综合色在线| 精品夜夜澡人妻无码AV| 极品人妻VIDEOSSS人妻| 成人免费黄色短视频| 超碰99在线观看| 天天干天天插| 搡BBBB搡BBB搡18| 性色欲情 网站| 另类精品视频在线观看| 99色在线视频| 日韩成人五月天| 久久久思思热| 五月丁香六月欧美综合| 婷婷五月丁香久久| 激情五月综合| 99亚洲天堂| 自拍偷窥99热| 亚洲婷婷五月天| 色五月激情五月| 91狠狠色丁香婷婷综合久久精品| 99ER热精品视频| 99国产精品久久久久久久久久久| 99婷婷狠狠成为人免费视频| 天天色凹凸| 97干在线免费| 成人av播放| 大香蕉婷婷丁香视频在线| 99色在线观看视频| 色色网站免费在线视频| 天天干夜夜操A片| 亚洲激情五月婷婷日日| 日本五月天一页| 99热6精品| 桃色五月天| 久草五月婷婷| 丰满老熟妇BBBBB搡BBB| 热久91| 这里只有精品96| 5Www色5夜| www.久9| 日本美女上人| 中文aV网| 人人草开心五月天| 五月丁香综合啪啪| 超碰只有精品在线| 色九月婷婷丁香| www.久久久久| 五月天欧美激情| 亚洲色无码| 激情五月天婷婷| 色五月天激情| 99超碰欧美| 最新日韩久热免费视频看看| 桃色Av色哟哟| 伊人丁香花综合影院| 五月婷婷说| 五月天丁香婷婷社区| 国产精品久久..4399| 色五月成人| 国产毛片精品一区二区色欲黄A片| 五月天激情美女久久| 久久日九九| 五月天色色激情综合| 五月婷婷之六月丁香| 日本五月婷婷| 五月天激情无码高清| 婷婷五月色天| 成熟妇人A片免费看网站| 97色五月丁香婷婷| 99热99ai| 99热| 婷婷丁香成人色综合| www,com,五月色色| 色久免费| 日本欧美成人片AAAA| 婷婷丁香六月天激情四射网| 丁香五月天人体| 噜噜狠狠色综无码久久合欧美| 天天干天天插| 激情啪啪五月| 婷婷色五月综合| 欧美色婷婷| 欧美十二区| 色色色婷| 久久激情五月天| 亚洲精品亚洲人成人网| 色色色色色色色色色色色色色色,网站| 亚洲综合色色| 玖玖热视频| 丁香六月激情综合| 99热老司机| 激情九九这里只有精品| 激情网五月天| 99操逼| 天天操天天爱天天玩| 五月香蕉综合| 成人在线网| 九月丁香婷婷网| 热的五码久久精品| 色婷婷激情| 婷婷五月欧美综合| 天天操天天操综合| 色色色欧美| 8区视频在线| 五月婷婷丁香俺日污视频| 日本猛少妇色XXXXX猛叫| 日韩AV片| 97碰| 婷婷永久在线| 六月丁香久久| 九九RE视频在线精品| 婷婷五月综合网| 大香蕉在九| 99这里的视频都是精品| 丁香五月天堂网| 亚洲精品亚洲人成人网| 国产99久久久| 久久xxxx| 开心五月激情网| 丁香五月欧美激情| 日韩啪啪视频| 色综合色色| 九九99热| 91尤物九色在线| 久久五月婷婷丁香| 99ri久久| 五月天色丁香| 乱女乱妇熟女熟妇综合网站| 极品少妇XXXX精品少妇偷拍| 亚洲看av的网站| 蜜桃人妻无码AV天堂三区| 亚洲一个色| 五月香婷婷| 九九AV在线| 另类激情综合| 久久97| 九九九九这里只有精品| 无码激情AAAAA片-区区| 日韩av干| 精品视频网| 婷婷激情社区| 小骚穴电影| 亚洲秘 无码一区二区三区妃光/1| 大香伊人婷婷| 久久六月天| 久久女婷| 国产真实乱了老女人视频| 天天爱天天做天天舔| 亚洲精品久久久久久久久久吃药| 激情小说之五月| 婷婷综合中文字幕| 日韩色色视频| 激情小说五月天| 99热精品在线在线| 婷婷丁香激情| 91视频综合网| 五月激情六月丁香| 婷婷涩五月天综合| 色情婷婷。| 黄色AV日韩| 婷婷色激情网| 亚洲岛国电影| 五月婷婷久久大香蕉| 91精品无码| 五月丁香色综合| 另类图片 五月激情| 欧美怡红院黄站| 色婷亚洲| 久久久久久激情| 久久久久婷婷| 久久这里只有欧美| 五月玖玖| 刘玥av在线| 亚洲第一精品网站| 久久综合激情| tingtingcaobi| 婷婷成人五月天成人文学小说| 99热99操| 国外亚洲成AV人片在线观看| 五月性色| 激情五月激情综合网一级丸片 | 丁香五月婷婷六月婷| 99九九这里有免费视频| 六月丁香啪啪啪| 婷婷97狠狠干| 91无码高清| 99免费在线| 日日噜狠狠色综合久久| 一起草Av| 琪琪狠狠干| 大香蕉精品视频| 婷婷九月激情网| 97成人超碰免| 久久久天堂国产精品女人| 日本三级第一页| 久久无码成人| 影视av久久久噜噜噜噜噜三级| 91丨九色丨高潮丰满日本| 婷婷五月六月| 色播五月丁香婷婷| 99男人天堂| 国产av天堂| 激情小说婷婷| 91狠狠综合久久久久久| 9久热精品在线视频| 天天视频精品9| www,色婷婷| 六月激情久久婷婷| 亚洲最大视频| 五月天婷婷久久| 久久激情四射| 婷婷丁香五月天综合AV| 啪啪六月婷婷| 日韩成人网址| 色婷婷文字幕| 综合色天天| 丁香五月综合在线观看| 能直接看的av网站| 在线sebiav精品视频| 色综合久久44| 能直接看的AV网站| 欧美成人va| 色九月综合| www.99热视频| 五月天激情AV| 亚洲色五月| 99国产欧美视频| 狠狠操狠狠爱| 欧美色色色色色| 久色网| 九月av在线| 色天天综合天天综合频道。| 婷婷五月成人| 激情6月| 99热1| 麻豆AV一区二区三区| 色综合久久天天综合网| 五月婷婷在线观看黄| 色综合网综合| 激情五月婷婷综合视频| 激情婷婷五月天网址| 欧洲免费视频色| 激情人妻综合| 91综合网| A片试看120分钟做受图片| 色情五月综合婷婷| 久久色天堂| 人妻内射视频| 婷婷五月情天| 婷婷五月18永久免费视频| 十月丁香婷婷| 九九视频这里是精品五月| 亚洲精品无码久久| 国产 亚洲 在线| 五月丁香综合成人社区| 狠狠爱夜夜| 最新日韩AV中文字幕| 操操操97| 九九婷| 婷婷大香蕉| 久久婷婷五月综合啪| www超碰com| 丁香五月综合婷婷| 天天色色天天| 色五月五月婷婷| 热九九九九| 色播五月综合网| 国产FREESEXVIDEOS性中国| 好好干av| 第四色五月激情网| 69五月天视频| 思思热热久久| 丁香九月婷婷色| 亚洲九九在线| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 日本成人噜噜噜噜噜| 日本人妻丁香婷婷久久寝取熟女五月| 永久99免费视频网站| 丁香五月六月久久综合| 五五月丁香花激情综合网| 午夜av网| 亚洲十月婷婷综合| 色综合激情图区| 爱草视频在线观看| 亚洲国产精品VA在线看黑人 | 激情五月婷婷她| 五月丁香狠狠| 狠狠色噜噜狠狠亚洲A∨| 五月天婷婷深深爱| 久久99激情五月天| 久久黄色片| 97超喷视频在线观看| 五月丁六月婷| 激情色情五月天| 99精品视频网站| 色播激情婷婷| 九九99在线免费在线观看视频| 五月99久久| 久久女人天堂| 激情久久久| 激情婷婷丁香五月| 丁香综合久久| 激情六月婷婷| 亚洲免费99| 色色色欧美| 丁香九月综合| 2013AV天堂| 97色97干| Av性爱网| 激情性五月天免费小说视频| 婷婷内射视频在线| 丁香五月婷婷啪啪| 另类国产欧美视频| 99九九久久| 婷婷性爱无码视频| 免费视频无码| 欧美日韩成人在线| 国产色香蕉精品五夜婷| 色色激情| 久久久精品色色色| 五月天婷婷色| 亚洲午夜国产成人电影VA国产欧…| www.婷婷| 99热精这里只有精品| 天天操天天插天天射| 色色日本欧美| 丁香五月婷婷久久综合激情网| 久久久妻人人人| 五月婷久久在线| 亚洲无码11| 99只有精品| 97干在线免费| 成人无码精品1区2区3区免费看| 妻久久久久| 色婷婷AV久久| 五月丁香六月婷婷网| 春色激情第四色| 丁香婷婷久久综合在线| 狠狠色狠狠操| 深爱激清网| 色玖玖爱| 激情五月天.色网| 97干97色| 婷婷开心六月| 天天干,天天舔| 天堂在线伊久| 色综合五月天| 五月丁香六月婷婷色日| 久久婷五月综合色| aaa久久| 夜精品无码A片一区二区蜜桃| 日韩九九| 深爱激情小说五月婷婷| 人人摸人人操人人爽| 五月婷婷爽爽爽| 国产97色在线 | 日韩| 高清无码.com| 激情深爱综合网| 九九综合| 久久婷婷色情7777网站| 婷婷五月天激情五月天深爱五月天| 久热这里只有精品6| 婷婷五月综合网激情| 性爱在线播放av| 欧美超级视频97| 人妻日日日| 99综合视频一体| 五月天婷婷激情综合| 久久精品国产一区二区三区四区| 婷婷视频网| 五月天婷婷综合免费| 日韩成人无码| 久久婷婷激情五月天一区二区| www.五月婷| 天天干天天干天天操| 五月天精品视频| 丁香五月婷婷动漫| 精品五月视频婷婷在线观看| 这里有精品99| 婷婷九九| 丁香五月婷婷av| 激情综合色婷婷六月天| 日韩一级一片内射视频4K| 无码九九| 99啪99| 日本熟妇乱妇熟色A片蜜桃| 色婷婷亚洲| 日韩AAAAAAAAAAA片| 丁香五月婷婷激情123| 精品国产va久久久久| 九九久久五月天| www久久久久| 99视频啪啪| 伊人网色婷婷五月天| 九九亚洲| 欧美丰满熟妇BBB久久久| 亚洲精品午夜国产va久久成人| 欧美 日韩 成人| 婷婷久久丁香| 狠狠色五月天| 在线网黄| 五月激情视频| 深爱激情六月天| 久久人操| 99成人在线观看| 色播五月婷婷| 91久久久久久久久18| 99热国产免费| 五月丁香综合伦理片| 久久婷婷丁香六月天| 九色婷婷| 婷婷五月天亚洲色| 91久久久久久久久久18| 婷婷五月天第四色| 97伦色婷婷| 中文字幕乱轮| 日亚二欧美| 亚洲啪啪网| 综合一区二区三区| 在线播放成人网站| 久久色在线视频| 国产精品成人在线| 少妇久久诱惑视频| 97超喷视频在线观看| 五月天综合在线观看| 伊人大香蕉综合在线| 五月天成人小说| 97超级碰碰碰| 久久综合激情| 综合欧美五月婷婷| 免费观看亚洲AV片| 亭亭色网| 五月激情天| 天天草人人摸| www色色色com| 激情开心五月亚洲| 激情五月婷婷老师| 婷婷射图五月天| 色婷婷视频在线| 久久久性爱视频| 国产成人亚洲综合A∨婷婷| 九九热免费视频| 风流少妇A片一区二区蜜桃| www.91五月| 另类图片五月天婷婷| 久久一操| 久久丁香五月综合六月激情红杏视频| 色五月天中文字幕| 色婷婷丁香五月在线观看| 99这里只有精品| 91狠狠色| 亚洲中字AV电影在线网站| 九九精品9| 91九色 婷婷| 国产亚洲99| 中文无码精品一区二区三区| 日韩黄色电影| 色五月首页| 婷婷五月综合中文字幕| 五月丁香啪啪综合网| 成人色五月天婷婷| 亚洲激情综合免费| 日韩成人av在线| 夜夜操加勒比| 中文字幕综合| 高清无码一区二区三区四区| 色玖玖爱| 国产精产国品一二三在观看| 九九色video| 操逼毛片国语对白| 婷婷中文字幕版| 影音先锋91| 国产精品18久久久| 91岛国片| 激情五月丁香色婷婷| 色小说五月天| 国产亚洲成AV人片在线观黄桃| 91热久| 五月五婷婷网| 99视频只有精品| 九九Av| 九九九九九九九九九九九九九九九九九九九在线视频 | 五月丁香综合| 色99婷婷五月天| 亚洲色爽| 色婷婷五月在线| 3p九色在线| 九九九九国产| 丁香五月天堂| 天天操天天日天天爱| 五月丁香久久激情综合| 婷婷亚洲天堂| 婷婷综合五月| 9这里只有精品| 久久五月激情| 久草婷妨| 777精品久无码人妻蜜桃| 天天操夜夜操| 婷婷久久视频| 日本三级韩三级99久久| 无语停婷丁香网| www.色99| 狼人狠狠操| 婷婷五月天深爱| 久久99激情| 九九操屄| 99噜噜噜在线播放| 丁香五月欧美激情| 久久99网| 色婷婷色五月综合| 五月婷婷色播视频| 五月婷婷丁香综合,亚洲天堂| 婷婷的99视频网站| 国产精品国产| 99超级碰免费视频| 亚洲综合碰| 亚洲精品又粗又大又爽A片| 色婷婷影院| 天天精品视频免费观看| 操逼电影免费看| 黄色99网| 97 天堂| 热热久久精品视频| 99热最新| 丁香5月激情网| 婷婷丁香五月综合| 99色网站| 97资源欧美日韩大香蕉超碰一区| 丁香五月婷婷亚洲色图| 天天久| 狠狠爱丁香婷| 婷婷五月天色| 亚洲啪啪精品| 狠狠干夜夜干| 成人AV综合在线| 日本成人噜噜噜| 亚洲无码九九九| 成人精品99| 1024人妻无码中文字幕| 五月天激情子轮| 亚州第一黄网| 婷婷五月丁香六月综合网| 涩五月婷婷| 日韩一区二区三区无码| 亚洲乱码日产精品BD| 夜夜做天天爽| 蜜臀综合久草| 韩国激情五月天综合网| 99人妻碰碰碰久久久久视| 亚洲激情婷婷| 色偷偷色婷婷| 久久伊人大香蕉| 色五月xxx| 丁香五月婷婷五月| 日撸夜撸日操| 久久久久五月丁香| 天天色99| 久久这里只有精彩| 精品无码久久久久久久久| 丁香五月婷婷乱| 老师高潮流白浆喷水的A片| 激情九九这里只有精品| 五月天婷婷激情在线色图| 色五月大| 国产永久一二一起草| 中文字幕 中文字幕明步 | av在线色五月丁香婷区久| 丁香丁香激情网| 色五月激情问网站| 色婷婷六月激情| 第一区久久网站| 日日狠夜夜狠| 婷婷久久丁香| 99在线资源| 婷婷97| 91日本在线观看| 人人操AV| 亚洲啪| 99热九九在线| 久久久18| 婷婷在线五月天观看| 欧美综合五月丁香五月天| 五月丁香六月婷婷综合网缴情| 99这里只有精品在线观看| 免费观看的婷婷五月视频在线| 色五月婷婷亚洲最大| 91人妻人人做人碰人人爽九色| 亚洲五月婷婷| AA片在线观看视频在线播放| 在线看AV| 日韩一级A片黄色| 狠狠色婷婷色| 五月性色| 日日鲁鲁夜夜爽爽| 丁香五月六月久久综合| 亚洲婷婷丁香五月天激情小说| 婷婷五月天手机版视频| 五月婷婷无码| 久久视频在线视频| 99热99久久| 六月丁香婷啪射| 91久久精品无码一区二区三区| 婷婷大香蕉| 五月丁香成人视频| 九九热思思热| 久久人人看| 久久天堂女人| 疯狂做受XXXX高潮A片| 天天爱天天秀天天做| 国产色色网址网站| 色婷婷久久天天性爱| 亚洲中字AV电影在线网站| 色99日韩| 婷婷夜夜操| 视频综合网| 丁香五月婷婷激情尤物| 欧美 色婷婷| 色爱综合网| 五月开心网| 久久99成人性爱高清视频| 亚洲区,视频区,视频区免费| 丁香花成人区| 丁香狠狠干| 99热这里只有精品8| 91久久九久久九久久九久久九久久| 亚洲综合狠狠艹| 丁香五月天黄色片| 九九婷| 91丨九色丨熟女高潮| 色综合日日| 97干在线| AV网址大全在| 久久久久久久久久久久久久人妻视频| 五月丁香六月激情欧美综合| 亚洲中文字幕在线观看| 天天综合色丁香| 天天干天天操天天上| 91超碰在线观看| 国产露脸150部国语对白| 久久 婷婷 五月天| 五月天婷婷激情春色小说| 五月激情婷婷在线| 久久日韩婷婷五月| 五月四色色| 久久婷综合| 丁香五月婷婷综合91| 久热这里只有精品在线观看 | 天天操B| 丁香五月天婷婷大香蕉| 色综合久久久久| 久操婷婷| 五月丁香婷婷久久| 婷婷六月激情| 青草视频在线播放| 妇激情基地| 亚洲人成色A777777在线观看| 97深爱伊人综合| 五月丁香六月色婷婷综合五月天| 日韩在线视频网站| 色婷婷操逼| 在线天堂9| 99碰碰视频| 黄色精品五月婷婷| 综合啪啪| 狠狠色丁香| 激情综合五月激情XXXX| 天天想夜夜爽天天爽| 性爱网久久| 人妻久久做| 婷婷AV丁香| 五月丁香久久久日婷婷久久婷婷日| 99热这里只有精品国产免费| 丁香五月婷婷婷婷欧美综合| 我要色综合五月婷婷| 婷婷激情六月综合| 亚洲视99| 日日干干天天干| 伊人五月人妻精品| Www.激情| 五月开心久久| 97干97色| 午夜一区| 久久久精品婷婷五月天| 婷婷五月另类网站| 久久狠狠干| 亚洲成人网站在线观看| 91久久免费| 亚洲色激情| 丁香婷婷五月色综合| 伊人狠狠狠综合| 亚洲成av人影院| 琪琪理论片| 激情综合亚洲| 色五月丁香五月激情五月激情| 成人日韩欧美| 99操碰| 色婷婷www| 超碰免费成人| 99热亚洲精品| 婷婷午夜激情| 亚洲成人AV在线播放| 青青草色在线视频观看| 久久九九@| 99A级片| 99热99久久| 在线观看的av| 五月婷婷综合激情网| AV电影在线播放| 国产精品大香蕉| 丁香五月花婷婷开心| 色久天| 激情综合4月| 91超碰人人操| 久久午夜理论| 六月婷婷综合激情| 99热这里只有精品22| 粉嫩AV久久一区二区三区| 色色色色色色五月婷婷| 色激情综合狠狠婷婷| 99这里有精品| 色五月天天| 嫩模草| 日本色色影片| 97干视频在线| 婷婷五月天视频在线观看| www夜夜操| 成人综合网站| 色婷成人狠干| 婷婷六月丁香激情综合| 婷婷五月天激情网| 国产伦亲子伦亲子视频观看| 午夜成人在线免费视频| 国产夫妻操逼内射视频| 色五月婷婷影院| 五月婷婷五月天| 99热热热国产超碰| 国产五月婷| 激情床戏| 操b视频在线观看一区二区| 99热最新网址| 99精品免费| 开心激情站| 久青操| 深爱激情网综合| 啪啪啪大香蕉| 久久免费丁香| 婷婷五月天性| 色色五月婷婷| 五月婷婷偷拍| 美国色五月天婷婷资源站| 欧美在线干| 五月丁香婷婷啪啪综合| 五月天堂在线| 色婷婷综合网站| 综合色色网| 激情五月久久| 深爱五月日韩| 色婷精品91| 99热热热99精品丁香| 激情五月婷婷开心网| www.婷婷| 性爱激情五月| 亚洲综合99| 97干婷婷五月天| 在线视频另类| 南京搡BBBB搡BBBB| 日韩精品成人在线| 欧美槡BBBB槡BBB少妇| 人人操五月天| 丁香六月中文| 正宗黄色毛片| 亚洲欧洲中文日韩久久AV乱码 | 亚洲激情精品| 五月丁香免费视频| 性爱技巧五月| 欧美色五月| 色婷婷社区| 天天日天天添| 99日在线观看视频| 免费看欧美成人A片无码| 久久爱婷婷| 九九视频这里是精品五月| 99在线爽| 久草热8精品视频在线观看| 思思热精品在线视频| 色色色五月婷| 99热这里有精品2| 精品人妻在线免费观看| 美女婷婷六月色| 疯狂做受XXXX高潮A片| 丁香六月久久| 男同91 | 777米奇影视第四色| 另类激情码| 婷婷色色丁香五月天| 亚洲成人无码片| 婷婷婷婷婷开心无码播放| 成人小说色图婷婷五月| 婷婷日日夜夜| 日韩av高清| 久热这里| 五月天婷婷社区久久综合| 婷久久| 五月香婷婷| 婷色五月| 夜夜骑日日操| 被强行糟蹋的女人A片| 久久综合伊人综合在线| 国产乱人偷精品人妻A片| 免费观看的AV| 日本色99网站| 丁香无五月网| 久久五月婷婷视频| 婷婷色色网站| 2018国产大陆天天弄| 婷婷午夜激情| 噜啊噜在线| av在线色五月丁香婷区久| 九九99视频精品| www.婷婷五月天| 99精品高潮| 3DAV亚洲香蕉久久 一区二区| av九九| 第四色五月天| 日本精品99| 99精品在线观看视频| 五区毛片七区毛片| 激情5月婷婷狠狠干| 久久免费精品小视频| 久久五月婷婷视频| 日逼影音先锋AV男人资源站| 亚洲精品国产熟女久久久| 人人操av| 色色com| 婷婷永久在线| 一起草Av| 操日视频| 久久精品夜色噜噜亚洲a∨| 综合五月丁香六月婷婷| 丁香五月婷婷欧美成人色图| 五月婷婷免费| 久色成人| 婷婷丁香一月| 五月天激情网图片 - 百度| wuyuedingxiang99| 欧亚洲在线高清视频| 婷婷久久大香蕉| 五月激情六月丁香| 丁香五月婷婷成人色区| 偷偷操九九| 91精品综合久久久久久五月丁香 | 欧美人人草草| 人妻丰满精品一区二区A片| 天天爽成人综合网站| 国产免费一区二区三州老师F1……| 五月丁香六月激情综合欧美| 99色视| 丁香五月电影| 五月婷婷六月少妇激情| 日韩成人AV在线| 潘金莲AAAAAAAAAA| 婷婷五月天小说网| 久久久久人妻精选| 99久久九九| 九九婷婷五月天| 婷婷久久久| 天天操,天天插| 色婷婷免费视频| 五月婷婷玖玖综合玖玖爱| 九色七七| 狠狠狠狠操| 丁香五月日韩| 人妻有码乱操| 色色婷婷五月| 综合五月天完整| 日日操夜夜操狠狠操| 五月色婷丁香| 99国产精品久久久久久久久久久 | 五月香蕉综合| 久久91久久91色欲精品| 91性交在线播放| 成人视频一区| 久久99网| 婷婷五月天a| 婷婷久久综合久| 91丁香| 国产婷伊人| 日本九九九九| 丁香五月色色| 丁香婷婷激情网站| 立川无码av| 天天综合色丁香| 亚洲男人的天堂婷婷色五月| 99爱视频在线| 99日本在线| CHINESE熟女老女人HD视频 | 99视频这里有精品| 综合九九日本| 4399亚洲视频| 亚洲精品乱码久久久久久综合| 亚洲激情视频网| 综合激情站| www.夜夜| 天天综合网站| 日韩AV在线免费| 狠狠色97| 丁香五月成人论坛| 色五月丁香五月| 伊人婷婷五月天| 国外亚洲成AV人片在线观看| www久久久久久久| 色一情一乱一乱一区91| 婷婷五月天深爱| 开心激情网在线| 97人妻碰碰中文无码久热丝袜| 九九视频在线观看视频6 | 亚洲天堂有码| 丁香色五月直播| 丁香色情五月综合网站| 色狠狠综合网| 三男玩一女三A片| 色久99| 深爱 五月天| www,婷婷| 可以看的av| 桃色成人网| 日本啪啪网| 天天色天天爱天天爽| 丁香五月色网| 热99精品视频观看| 91操色| 欧美成人无码高清一区二区三区| 狠狠五月激情在线| WWW.天天日| 欧美成人精品A片免费一区99| 九九热10| 天天色综合综合| 色五月丁香五月激情五月激情| 伊人91| 五五月丁香花激情综合网| 色色aⅤ網| 五月丁香久久久日婷婷久久婷婷日| 欧美日韩999| 五月色亚洲| 婷婷激情中文综合| 天天天天天天操| 精品成人在线观看| AA片在线观看视频在线播放| 天干夜夜操| 超碰在线国产| 亚洲成人av在线观看 | 五月婷婷久久网| 色噜噜狠狠色综合网| www。五月天。com| 婷婷五月天黄色网址| 日本99热| 久久婷婷内射| m色激情网| 激情综合五| 蜜乳AV成人| 五月天婷婷激情小说电影| 99热费观看| 就99这里只有精品| 97人妻碰碰碰久久| 色婷网站| 日本三级日本三级99| 五月婷亚洲精品| AV美美午夜| 密视AV综合在线| 99热国品| 五月婷在线观看| 婷婷开心五月| 超碰精品手机在线| 亚洲婷婷视频| 色五月自偷自拍婷婷婷婷| AA片在线观看视频在线播放| 日日夜夜狠狠| 另类图片激情五月| 青青青在线视频国产| www.99操.com| 五月婷婷色播| 五月丁香好婷婷姑娘综合网| 久久久精品色色色| 久久艹99| 亚洲亚洲人成综合网络| 亚洲成AV人片在线观看| 色婷婷中文在线| 青青草蜜臀| 天天狠狠夜夜狠狠2023| 夜夜操夜夜操| 狠狠色婷| 久久精品63| 综合色色婷婷| 网色99| 丁香婷婷综合激情五月色| 伊人色五月| 婷婷色五月激情| 国产精品热搜丁香五月婷婷| 色色色欧美| 丁香婷婷浪潮AV久久综合 | Www.狠狠| 日韩色色视频| 在线五月婷| 亚洲色涩视频| 综合网五月| 天天做天天爽| 久久九⑨| 婷婷五月天激情在线观看| 五月丁香六月情| 色五月激情五月| 五月深情久久| 日韩五月婷婷| 色五月五月天色婷婷色五月| 丰满少妇猛烈A片免费看观看| 婷婷丁香综合| 婷婷五月欧美综合| 激情四射网| 亚洲日比视频| 五月婷婷黄色| 色XX综合网| 日日影院 | 丁香五月天黄色片| 永久AⅤ1| 99热亚洲| 丁香五月婷婷久久综合激情网 | 电影《战争与艾拉》免费观看| 色色影院aaaav| 亚韩在线视频| 五月天五月婷五月激情网| 99色热| 狠狠人人婷婷| www五月婷婷| 免费日韩99| 日韩在线观看亚洲| 五月丁香A片| www.色色色com| 桃色成人网| 日逼影音先锋AV男人资源站| 色吊丝永久访问网址| WWW色色色COm| 天天看片日日夜夜| 日本在线噜噜| 天天干狠狠| 色播婷婷五月天| 丁香五月天激情| 久久99国产综合精品免费| 九月婷婷人人操人人舔人人爱| 婷婷色在线播放| 26uuu精品一区二区| www.一起草av| 亚洲av成人在线| 加勒比色色| 精品网站99| 丁香婷婷激情网站| 色5月婷婷色| 99久久婷婷国产综合精品草原| 播播网色播播| 丁香婷婷影院| 婷婷丁香成人| 五月亭亭六月激情| 99只有精品| 久久伊人大香蕉| 婷婷色五月大香蕉在线| 亚洲成人网站在线播放| AV天堂淫乩| 91精品综合久久久久久五月丁香| 特黄三级片| 大香蕉久久视频久久视频 | ..真实国产乱子伦对白在线_欧| 五月婷婷玖玖综合玖玖爱| 情色婷婷五月天| 婷婷六月插屄激情| 天天艹夜夜爽| 国产AV影片| 亚洲色综久久五月| 亚洲V国产V欧美V久久久久久| 五月香蕉婷婷| 日本不卡高字幕在线2019| 91精品久久久久久| 99色色网| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 67194线路二在线观看| 五月丁香花激情综合网| 男女激情久久| 五月丁香WWW| 在线中文AV| 久久精品亚洲一级牲爱综合| 丁香五月天激情四射网络不好 | 久久久人妻不卡| 国产成人+综合亚洲+天堂| 丁香婷婷久久| 五月丁香啪啪啪| 丁香六月毛片| 久久九九热re6这里有精品| 五月第四色| 欧美图片丁香五月天| 免费黄色片子| 99色6爱9热| 激情合网婷婷| 丁香五月天AV在线 | 丁香午夜天| 国产色色网址网站| 国自产拍偷拍精品啪啪一区二区| 亚洲亚洲人成综合网络| 亚洲不卡| 欧美狠狠色| www.91av.com| 久色姿源| 日韩色色视频| 婷婷六月天国产综合| 99热这里只有免费| 五月天三级久久| 亚洲婷婷五月天| 69午夜成人影片| 色综啪啪| 久久多色| 99视频久久| 人妻VideOssS人妻| 99热这里有精品| 国产永久一二一起草| 99久在线| 免费婷婷| 黄网免费观看| 丁香五月婷婷激情尤物| 五月丁香婷婷成人综合网| 亚洲无码影音| 99精品7| 人人操AV| 日韩欧洲亚洲| 大香蕉综合| 日本熟妇精品99| 五月丁香亭亭| 怡春院久操| 久久激情五月婷婷| 久碰久操| 九艹在线| 99日本在线| 大香蕉手机视频| 看婷婷五月天网| AA丁香综合激情| www.91.com处女在线直播| 六月丁丁香|