欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

機(jī)器學(xué)習(xí)大作業(yè)高分攻略:選題、代碼與實(shí)驗(yàn)報(bào)告全指南

機(jī)器學(xué)習(xí)大作業(yè)高分攻略:選題、代碼與實(shí)驗(yàn)報(bào)告全指南 簡介這是一份面向高校機(jī)器學(xué)習(xí)課程期末大作業(yè)與課程設(shè)計(jì)的高分項(xiàng)目合集包含多組可運(yùn)行的Python源碼與配套實(shí)驗(yàn)報(bào)告覆蓋決策樹、聚類、回歸、分類等常見實(shí)驗(yàn)題目代碼中帶有詳細(xì)注釋新手也能讀懂并快速部署使用。壓縮包整體約2.94MB共15個(gè)文件其中10個(gè)py文件為核心實(shí)現(xiàn)腳本2個(gè)csv為實(shí)驗(yàn)數(shù)據(jù)另含txt說明、data數(shù)據(jù)文件及docx格式的實(shí)驗(yàn)報(bào)告結(jié)構(gòu)清晰便于按章節(jié)或題號查閱。當(dāng)前已有382人瀏覽學(xué)習(xí)適合需要參考完整思路、完成課程作業(yè)或提升項(xiàng)目實(shí)踐能力的學(xué)生使用。資源源自西安電子科技大學(xué)機(jī)器學(xué)習(xí)大作業(yè)實(shí)驗(yàn)報(bào)告與代碼一一對應(yīng)詳細(xì)注釋覆蓋數(shù)據(jù)讀取、模型訓(xùn)練和結(jié)果可視化等關(guān)鍵環(huán)節(jié)。整體功能完整、界面簡潔可直接作為期末提交或課程設(shè)計(jì)的優(yōu)質(zhì)模板。1. 機(jī)器學(xué)習(xí)大作業(yè)拿高分先搞清楚評審在找什么機(jī)器學(xué)習(xí)大作業(yè)不像期末考試沒有標(biāo)準(zhǔn)答案評分盯的是流程完整度、結(jié)果可信度和報(bào)告解釋力。所謂“項(xiàng)目合集”就是把你交的東西拆成三份選對題目、寫好代碼、把報(bào)告做成能照著復(fù)現(xiàn)的實(shí)驗(yàn)冊子。高分項(xiàng)目往往不是模型最深的那個(gè)而是每步都有據(jù)可查的那個(gè)。很多人把時(shí)間全砸在調(diào)參上最后卻栽在報(bào)告沒有對比基線、代碼換臺機(jī)器就跑不動(dòng)。這篇文章就按沖高分的路線把項(xiàng)目選題、代碼規(guī)范、實(shí)驗(yàn)報(bào)告和常見扣分點(diǎn)一次講清楚適合想拿高分、或想把課程項(xiàng)目收進(jìn)簡歷的讀者。2. 高分項(xiàng)目怎么選題與搭基線三類必做項(xiàng)目與數(shù)據(jù)選型選對題是投入產(chǎn)出比最高的一步。機(jī)器學(xué)習(xí)的應(yīng)用流程其實(shí)就是數(shù)據(jù)理解、建模、評估、解釋四步課程大作業(yè)不管寫成什么樣評審都在這四步上找分?jǐn)?shù)。常見大作業(yè)能歸成幾類表格分類、回歸與時(shí)序預(yù)測、聚類降維再往外一點(diǎn)還有文本分類和圖像分類。但課程時(shí)間有限評審更在意“把一個(gè)題做完整”而不是“同時(shí)開三個(gè)題全部爛尾”。所以我一般把“項(xiàng)目合集”當(dāng)成一個(gè)項(xiàng)目庫來用先按難度和興趣各挑兩三個(gè)候選題再用三條標(biāo)準(zhǔn)過濾數(shù)據(jù)能不能輕松拿到、baseline 能不能半小時(shí)內(nèi)跑通、題目有沒有可解釋空間。三條都滿足才值得往下走。2.1 分類題從結(jié)構(gòu)化數(shù)據(jù)到圖像先定難度階梯最常見也最穩(wěn)妥的是結(jié)構(gòu)化表格分類這類題數(shù)據(jù)量小、訓(xùn)練快特別適合撐起“數(shù)據(jù)清洗 特征工程 模型對比”的完整流程。我習(xí)慣把分類題分成三檔。第一檔用 sklearn 內(nèi)置數(shù)據(jù)集比如鳶尾花、乳腺癌、手寫數(shù)字幾分鐘跑完適合只剩一天的情況但缺點(diǎn)是太常見開題容易撞車。第二檔從公開渠道下載真實(shí)業(yè)務(wù)數(shù)據(jù)比如銀行營銷、電信客戶流失、垃圾短信特征是類別不平衡或缺失值嚴(yán)重寫“機(jī)器學(xué)習(xí)中的數(shù)據(jù)處理是什么”這個(gè)環(huán)節(jié)時(shí)就有真實(shí)材料可用。第三檔是 Kaggle 上幾十萬行的大數(shù)據(jù)能寫最豐富但也最容易讓人陷在調(diào)參里出不來作業(yè)反而爛尾。多數(shù)高分項(xiàng)目的位置在“第二檔任務(wù) 認(rèn)真做實(shí)驗(yàn)對比”而不是第三檔。選數(shù)據(jù)時(shí)還有一個(gè)容易忽略的硬件問題如果課程機(jī)房的機(jī)器只有 4GB 內(nèi)存就不要選動(dòng)輒幾百 MB 的特征矩陣。我見過一個(gè)小組選了 Kaggle 上幾十萬行的點(diǎn)擊率預(yù)測數(shù)據(jù)預(yù)處理跑了一個(gè)通宵最后報(bào)告只能寫“由于內(nèi)存不足實(shí)驗(yàn)未完成”這等于直接放棄評分點(diǎn)。圖像分類這邊MNIST 或 CIFAR-10 的子集都是安全選項(xiàng)。如果課程允許 PyTorchMNIST 用 LeNet 半小時(shí)就能訓(xùn)完再用 SVM 做 baseline報(bào)告里就有傳統(tǒng)算法與深度網(wǎng)絡(luò)的完整敘事。下面這個(gè)分類代碼骨架用 load_digits 而不是 MNIST因?yàn)樗谡n堂演示時(shí)加載最快、不依賴外網(wǎng)適合做作業(yè)起點(diǎn)from sklearn.datasets import load_digits from sklearn.model_selection import train_test_split from sklearn.ensemble import RandomForestClassifier from sklearn.metrics import classification_report, confusion_matrix # 加載數(shù)據(jù)先看形狀和類別這一步寫進(jìn)報(bào)告的“數(shù)據(jù)理解” digits load_digits() print(digits.data.shape) # (1797, 64)8x8 圖像展平 print(digits.target_names) # 類別 0-9 # 分層劃分保證訓(xùn)練/測試?yán)飻?shù)字類別比例一致 X, y digits.data, digits.target X_train, X_test, y_train, y_test train_test_split( X, y, test_size0.2, random_state42, stratifyy ) # baseline隨機(jī)森林默認(rèn)參數(shù)先出一個(gè)底線分?jǐn)?shù) rf RandomForestClassifier(random_state42) rf.fit(X_train, y_train) print(test acc:, rf.score(X_test, y_test)) # 輸出混淆矩陣報(bào)告里放這張圖能直接撐起一頁 print(confusion_matrix(y_test, rf.predict(X_test)))這里有兩個(gè)容易出錯(cuò)的操作。train_test_split 的 stratify 參數(shù)表示按類別比例分層劃分如果某個(gè)數(shù)字本身樣本少不做分層就可能出現(xiàn)訓(xùn)練集里有 0 但測試集沒有 0混淆矩陣畫出來缺一行random_state42 讓劃分結(jié)果固定否則每次運(yùn)行訓(xùn)練集都不一樣報(bào)告里的準(zhǔn)確率就成了不可復(fù)現(xiàn)的數(shù)字。RandomForestClassifier(random_state42) 里的隨機(jī)種子最好也固定這棵樹雖然在作業(yè)里只是 baseline但后面所有對比實(shí)驗(yàn)都要以它為準(zhǔn)。baseline 的意義是提供一個(gè)最低參照線之后 SVC、xgboost 這些模型的改進(jìn)幅度全部由它襯托出來。如果你是第一次做這類題建議把代碼按“讀數(shù)據(jù)、劃分、訓(xùn)練、評測”四步組織。讀數(shù)據(jù)段打印 shape 和類別數(shù)量劃分段寫明 test_size 和 random_state訓(xùn)練段用同一個(gè)固定種子評測段輸出準(zhǔn)確率、F1 和混淆矩陣。把四段都寫進(jìn)報(bào)告對應(yīng)的小節(jié)評審不看完整代碼也知道你做了什么。第二個(gè)常被忽略的細(xì)節(jié)是類別分布打印 y_train 的 value_counts如果發(fā)現(xiàn)某一類比另一類多好幾倍報(bào)告里就自然引出一段類別不平衡的討論哪怕只是用 class_weightbalanced 跑一次對比也說明你想到了這個(gè)問題。2.2 回歸與時(shí)序題可解釋性比精度更值錢回歸題里波士頓房價(jià)數(shù)據(jù)集因?yàn)橛忻舾袑傩誀幾h已經(jīng)不適合再作為課程項(xiàng)目常見替代是加州房價(jià)、Kaggle 二手房數(shù)據(jù)或超市銷售額預(yù)測。時(shí)序題里電力負(fù)荷、氣象溫度、電商銷量都比較安全而股票預(yù)測看起來炫酷但對課程作業(yè)是個(gè)坑——股價(jià)噪聲強(qiáng)、特征語義弱老師追問“你的特征依據(jù)是什么”時(shí)很難講清楚。我的選型邏輯是回歸和時(shí)序題優(yōu)先選特征有明確業(yè)務(wù)含義的數(shù)據(jù)因?yàn)檫@類作業(yè)的價(jià)值不在把 RMSE 壓到多低而在你能解釋誤差來自哪里。線性回歸、隨機(jī)森林和 XGBoost 的對比在結(jié)構(gòu)化數(shù)據(jù)上很容易出圖表再配上 SHAP 或 feature_importances_報(bào)告的可信度一下子就能上去。import pandas as pd from sklearn.datasets import fetch_california_housing from sklearn.model_selection import train_test_split from sklearn.ensemble import RandomForestRegressor from sklearn.metrics import mean_squared_error, r2_score housing fetch_california_housing() X, y housing.data, housing.target X_train, X_test, y_train, y_test train_test_split( X, y, test_size0.2, random_state42 ) model RandomForestRegressor(n_estimators100, random_state42) model.fit(X_train, y_train) pred model.predict(X_test) print(RMSE:, mean_squared_error(y_test, pred, squaredFalse)) print(R2:, r2_score(y_test, pred)) # 特征重要性導(dǎo)出成 csv報(bào)告里做成直方圖 importance pd.Series(model.feature_importances_, indexhousing.feature_names) importance.sort_values(ascendingFalse).to_csv(feature_importance.csv)這里的兩個(gè)指標(biāo)要一起看。RMSE 是均方根誤差單位與目標(biāo)一致能說明預(yù)測偏離真實(shí)值多遠(yuǎn)R2 是決定系數(shù)表示模型解釋了目標(biāo)方差的百分比。只放 RMSE 會(huì)被問“這個(gè)數(shù)對業(yè)務(wù)意味著什么”只放 R2 會(huì)被問“離群點(diǎn)是不是被忽略”兩個(gè)都放基本能堵住這兩個(gè)問題。n_estimators100 是隨機(jī)森林的起點(diǎn)作業(yè)數(shù)據(jù)集通常只有幾萬行繼續(xù)加到 300 回報(bào)很小訓(xùn)練時(shí)間卻翻三倍。feature_importance.csv 導(dǎo)出后不要只貼在報(bào)告里最好畫一張排序條形圖并在圖注里寫一句最明顯的結(jié)論比如“MedInc 是預(yù)測房價(jià)最重要的特征”。就算這是常識輸出它說明你做了歸因而不是只會(huì) print 分?jǐn)?shù)。如果題目要求必須用深度學(xué)習(xí)LSTM 是最常被抄的模型。網(wǎng)上“l(fā)stm模型代碼”絕大多數(shù)是股票預(yù)測 demo結(jié)構(gòu)相同換數(shù)據(jù)就能跑但報(bào)告只貼代碼、不寫清輸入窗口長度、預(yù)測步長和損失函數(shù)評審大概率直接判為代跑。用自己的話說清楚一件事就夠了你是如何把原始序列切成滑窗樣本的?;伴L度太長會(huì)讓樣本數(shù)量變少太短則學(xué)不到周期多試幾個(gè)窗口長度做對比報(bào)告里寫“窗口 24 小時(shí)的誤差比窗口 6 小時(shí)低 8%”這段話比模型結(jié)構(gòu)值錢得多。2.3 基線先行sklearn pipeline 必須先跑通大作業(yè)翻車的一個(gè)共性原因是跳過 baseline上手就訓(xùn)練高級模型跑了半天發(fā)現(xiàn)被線性回歸打敗心態(tài)崩了不說報(bào)告也寫不出對比。我一般強(qiáng)制自己的流程是“先讓最樸素模型跑通、打印出指標(biāo)、存下日志再考慮改進(jìn)”。所謂 baseline 不一定是最差模型而是邏輯上最簡單、幾乎不可能出錯(cuò)的方案分類用邏輯回歸或決策樹回歸用線性回歸圖像任務(wù)用原始像素加 SVM。它存在的意義是證明你的數(shù)據(jù)管線沒問題也證明后續(xù)模型的提升不是玄學(xué)。from sklearn.pipeline import Pipeline from sklearn.preprocessing import StandardScaler from sklearn.svm import SVC pipe Pipeline([ (scaler, StandardScaler()), (svm, SVC(kernelrbf, C1.0, gammascale, random_state42)), ]) pipe.fit(X_train, y_train) print(SVM baseline acc:, pipe.score(X_test, y_test))Pipeline 在這里有兩個(gè)作用。第一把預(yù)處理和模型綁定成一個(gè)整體fit 時(shí)只學(xué)習(xí)訓(xùn)練集的均值方差predict 時(shí)自動(dòng)對測試集做同樣的 transform從結(jié)構(gòu)上杜絕數(shù)據(jù)泄漏第二和 GridSearchCV 配合時(shí)參數(shù)網(wǎng)格可以直接寫成 pipe.get_params() 的形式預(yù)處理參數(shù)和模型參數(shù)可以同時(shí)搜索代碼只需要維護(hù)一張參數(shù)表。gammascale 是 sklearn 對 RBF 核的默認(rèn)啟發(fā)式值會(huì)按特征數(shù)量自動(dòng)調(diào)整作業(yè)階段幾乎不需要手動(dòng)指定C1.0 是正則強(qiáng)度的起點(diǎn)后續(xù)網(wǎng)格搜索一般從 0.1、1、10 這幾個(gè)量級里選。注意這里接的是前面分類題的變量如果重新打開腳本單獨(dú)運(yùn)行必須先把數(shù)據(jù)加載和劃分的代碼也保留在同一文件里。baseline 跑通之后第一個(gè)該做的改進(jìn)實(shí)驗(yàn)不是換模型而是把特征標(biāo)準(zhǔn)化加上再看一遍效果。很多同學(xué)直接跳到網(wǎng)格搜索卻不清楚標(biāo)準(zhǔn)化對 SVM、邏輯回歸這類基于距離的模型影響有多大。標(biāo)準(zhǔn)化的對比實(shí)驗(yàn)只需要三行代碼卻能在報(bào)告里貢獻(xiàn)一條“預(yù)處理對精度的影響”曲線這是一道送分題不做非??上АO旅娴牡?3 章會(huì)講如何把這份能跑的代碼升級成一份能提交、能復(fù)現(xiàn)、能答辯的工程化代碼。3. 把代碼寫到“可復(fù)現(xiàn)”訓(xùn)練腳本、隨機(jī)種子與實(shí)驗(yàn)記錄代碼部分的高分標(biāo)準(zhǔn)不是“能跑”而是“別人能跑出和你一樣的結(jié)果”。一份可復(fù)現(xiàn)的作業(yè)代碼在提交時(shí)應(yīng)該滿足三件事執(zhí)行入口明確、隨機(jī)性可控、實(shí)驗(yàn)結(jié)果落盤。做到這三點(diǎn)答辯時(shí)老師按 README 跑一遍能復(fù)現(xiàn)你的數(shù)字項(xiàng)目就已經(jīng)進(jìn)入“工程合格”的評分檔做不到算法再花哨也容易被當(dāng)成黑匣子處理。下面按這三個(gè)目標(biāo)分別給最小實(shí)現(xiàn)。3.1 訓(xùn)練腳本的最小結(jié)構(gòu)argparse config 日志最常見的翻車現(xiàn)場是老師拿到你的 .py雙擊運(yùn)行ModuleNotFoundError 或路徑報(bào)錯(cuò)。這不是算法問題是入口和配置寫得不夠嚴(yán)格。我給自己定的紀(jì)律是任何項(xiàng)目保留一個(gè) train.py 作為唯一入口所有可調(diào)參數(shù)從命令行或配置文件注入不在代碼里寫死文件夾路徑。這樣不管是自己復(fù)盤還是老師復(fù)跑一行命令就能重現(xiàn)實(shí)驗(yàn)。下面這個(gè)骨架雖然短但結(jié)構(gòu)是完整的import argparse import time def parse_args(): parser argparse.ArgumentParser(descriptionML homework experiment) parser.add_argument(--data, defaultdata/digits.csv, helpdataset path) parser.add_argument(--model, defaultrf, choices[rf, svm, xgb]) parser.add_argument(--seed, typeint, default42) parser.add_argument(--out, defaultresults/, helpoutput dir) return parser.parse_args() def main(): args parse_args() t0 time.time() # 你的訓(xùn)練邏輯寫在這里不要散落在全局變量里 print(f[INFO] model{args.model}, seed{args.seed}, cost{time.time()-t0:.2f}s) if __name__ __main__: main()這套結(jié)構(gòu)的核心是 argparse。它把數(shù)據(jù)路徑、模型名、隨機(jī)種子全部變成運(yùn)行時(shí)參數(shù)這意味著你可以在命令行里做這樣的事同一份數(shù)據(jù)換一個(gè) --seed 跑三遍把三組數(shù)字都記在報(bào)告里證明結(jié)果不是一次性運(yùn)氣。--out 參數(shù)指定結(jié)果目錄實(shí)驗(yàn)日志和 CSV 都往這個(gè)目錄寫避免每次運(yùn)行覆蓋上次記錄。我的習(xí)慣是把每次實(shí)驗(yàn)用的命令行原樣保存在 results 下的 run_cmd.txt 里答辯被問起就能直接調(diào)出來看不需要翻聊天記錄。參數(shù)維護(hù)上少量參數(shù)用 argparse 夠用參數(shù)超過十個(gè)時(shí)換成 yaml 文件管理方向是一樣的參數(shù)不散落在代碼里。3.2 隨機(jī)種子和劃分順序讓三次運(yùn)行能跑出同一個(gè)數(shù)機(jī)器學(xué)習(xí)實(shí)驗(yàn)天然帶隨機(jī)性數(shù)據(jù)劃分的隨機(jī)、模型初始化的隨機(jī)、SGD 的采樣順序隨機(jī)。如果不固定這些隨機(jī)源同一個(gè)腳本跑兩次得到兩個(gè)精度報(bào)告里的任何數(shù)字都缺乏說服力。相反固定種子之后跑三次結(jié)果幾乎一致報(bào)告寫“準(zhǔn)確率 97.1%”就變成了一個(gè)可驗(yàn)證的聲明。固定種子相當(dāng)于給實(shí)驗(yàn)買后悔藥以后發(fā)現(xiàn)報(bào)告里某個(gè)數(shù)字可疑還能用同一條命令重新跑一遍來核實(shí)。種子問題的坑在于它不是全局設(shè)置一次就完事numpy、random、torch 各有各的隨機(jī)源漏掉其中一個(gè)在簡單模型上可能看不出來換到神經(jīng)網(wǎng)絡(luò)就明顯。import random import numpy as np def set_seed(seed: int 42): random.seed(seed) np.random.seed(seed) try: import torch torch.manual_seed(seed) torch.cuda.manual_seed_all(seed) except ImportError: pass # 沒裝 torch 時(shí)不影響其他任務(wù)邏輯說明set_seed 統(tǒng)一設(shè)置三個(gè)隨機(jī)庫的種子并把 torch 相關(guān)的 CPU、GPU 隨機(jī)源也固定避免數(shù)據(jù)加載和網(wǎng)絡(luò)初始化在不同機(jī)器上產(chǎn)生偏差。參數(shù)說明seed 取值在作業(yè)里用 42 就夠真正做研究時(shí)才需要跑多組種子取均值你在報(bào)告里只需注明種子值和設(shè)置函數(shù)的調(diào)用位置。PyTorch 的 DataLoader 還有一個(gè)細(xì)節(jié)shuffleTrue 時(shí)如果不給它顯式傳入 generator它內(nèi)部仍會(huì)使用全局隨機(jī)源光調(diào)用 set_seed 不一定夠最穩(wěn)妥的寫法是給 DataLoader 傳一個(gè)固定的 torch.Generator。另外set_seed 要放在任何隨機(jī)操作之前調(diào)用最好在 import 數(shù)據(jù)之前就調(diào)而不是在模型初始化前才調(diào)。提示固定隨機(jī)種子后如果兩次運(yùn)行結(jié)果仍有明顯差異先檢查數(shù)據(jù)讀取順序是否穩(wěn)定再檢查是否有并行操作引入了額外隨機(jī)性。dict 的遍歷順序在部分自定義代碼里也可能影響實(shí)驗(yàn)結(jié)果。3.3 訓(xùn)練過程落盤把指標(biāo)存成 CSV 而不是 print每個(gè) epoch 的 loss、準(zhǔn)確率、F1 只 print 到控制臺等于沒記錄關(guān)掉窗口就再也找不回來了。正確做法是把訓(xùn)練歷史逐行寫進(jìn) CSV再做可視化。CSV 的好處是既可以用 pandas 讀也可以直接在 Excel 里打開還能作為報(bào)告的附錄數(shù)據(jù)。我常用的記錄方式是這樣的import pandas as pd history [] # 每次 epoch 或每次實(shí)驗(yàn)追加一條 for epoch in range(10): # 這里的 train_loss 和 val_acc 要從真實(shí)訓(xùn)練循環(huán)里算出來 train_loss 0.35 - 0.02 * epoch val_acc 0.70 0.03 * epoch history.append({epoch: epoch, train_loss: train_loss, val_acc: val_acc}) df pd.DataFrame(history) df.to_csv(results/rf_seed42.csv, indexFalse)實(shí)際訓(xùn)練時(shí)train_loss 和 val_acc 要在訓(xùn)練循環(huán)里從 dataloader 或驗(yàn)證集計(jì)算這段代碼只是把記錄邏輯獨(dú)立出來。關(guān)鍵點(diǎn)是“記錄”這一步不能省。有了 CSV 之后報(bào)告里的訓(xùn)練曲線就不要用截圖了直接從這個(gè)文件畫圖表區(qū)間一致、數(shù)據(jù)真實(shí)。epoch 次數(shù)在表格數(shù)據(jù)集上建議取 20 到 50圖像任務(wù) 50 到 100超過這個(gè)范圍收益很小結(jié)果文件名建議帶模型名和種子如 rf_seed42.csv避免多組實(shí)驗(yàn)互相覆蓋。如果答辯時(shí)老師要求現(xiàn)場重跑你只需要讓他看這個(gè) CSV 文件的修改時(shí)間證明這是這臺機(jī)器上剛生成的而不是從別處找來的。4. 實(shí)驗(yàn)報(bào)告按評分點(diǎn)組織摘要、數(shù)據(jù)、方法、結(jié)果一個(gè)都不能少實(shí)驗(yàn)報(bào)告本質(zhì)上是給評審的一份證明文件證明你讀懂了數(shù)據(jù)證明你的方法有依據(jù)證明你的結(jié)果是真實(shí)實(shí)驗(yàn)出來的。評審看一份大作業(yè)報(bào)告的時(shí)間通常只有幾分鐘動(dòng)作不外乎三個(gè)先讀摘要再翻圖表最后查參數(shù)表。所以報(bào)告的結(jié)構(gòu)應(yīng)該按這三個(gè)動(dòng)作設(shè)計(jì)而不是按你寫代碼的順序。下面按六個(gè)段落展開每段都有明確的交付目標(biāo)。4.1 問題定義與數(shù)據(jù)理解寫清“為什么選這個(gè)題”摘要控制在 150 字以內(nèi)寫清三件事就夠了用了什么數(shù)據(jù)、做了什么任務(wù)、最好結(jié)果是多少。比如“基于銀行營銷電話數(shù)據(jù)集構(gòu)建客戶定期存款認(rèn)購預(yù)測模型通過邏輯回歸、隨機(jī)森林與 XGBoost 的對比實(shí)驗(yàn)最優(yōu)模型在測試集上 F1 達(dá)到 91.2%”。如果你用的算法比較多摘要里只提最有說服力的一個(gè)其余讓實(shí)驗(yàn)部分去說明。具體數(shù)字換成你自己實(shí)驗(yàn)跑出來的即可格式照抄。數(shù)據(jù)理解段要回答四個(gè)問題數(shù)據(jù)從哪來、字段含義是什么、樣本量有多少、類別是否平衡。這四件事用一段文字加一個(gè)字段表就能講完不需要長篇大論。字段表要像論文里的 Table 那樣寫字段名、類型、缺失率、處理方式占四列。數(shù)據(jù)處理那一節(jié)被很多同學(xué)跳過但“機(jī)器學(xué)習(xí)中的數(shù)據(jù)處理是什么”這個(gè)問題的答案恰好就是報(bào)告里最容易拿分的一段。標(biāo)準(zhǔn)化、缺失值填充、類別編碼、離群點(diǎn)處理每一行處理都要寫“為什么這么做”。比如“age 字段存在 5 個(gè) 999 的異常值視為缺失并填充中位數(shù)”這個(gè)粒度就夠了。不要把所有處理混成一句“對數(shù)據(jù)進(jìn)行了標(biāo)準(zhǔn)化”那等于沒說。表格示例如下字段類型缺失率處理方式age數(shù)值0%標(biāo)準(zhǔn)化job類別2.1%眾數(shù)填充y二分類0%無需處理4.2 方法描述與參數(shù)表把“調(diào)了什么”寫成人話方法段最常見的錯(cuò)誤是大段貼代碼。代碼對評審沒有信息量他要看的是一張“方法參數(shù)”對照表。模型名加關(guān)鍵參數(shù)、訓(xùn)練時(shí)間、測試指標(biāo)四列一表基本覆蓋所有疑問。寫參數(shù)時(shí)要避免兩種極端一個(gè)參數(shù)不寫或者把所有參數(shù)全部抄一遍。只寫那些會(huì)影響結(jié)果的參數(shù)比如 SVM 寫核函數(shù)、C、gamma隨機(jī)森林寫 n_estimators、max_depth神經(jīng)網(wǎng)絡(luò)寫學(xué)習(xí)率、batch size、epoch。表格里加一列訓(xùn)練時(shí)間能反映你對計(jì)算代價(jià)的考慮這在模型對比時(shí)尤其重要。模型的選型理由也要寫一句不是從網(wǎng)上抄的定義而是基于數(shù)據(jù)特性的一句話。比如“數(shù)據(jù)維度較高且可能線性不可分因此使用 RBF 核 SVM”“特征間可能存在交互隨機(jī)森林對這種結(jié)構(gòu)更魯棒”。這句話不需要非常嚴(yán)謹(jǐn)被追問時(shí)有你自己的思考就行。方法段末尾要交代評價(jià)指標(biāo)和劃分方式比如“采用 8:2 分層劃分以準(zhǔn)確率和加權(quán) F1 作為評價(jià)指標(biāo)”。劃分方式?jīng)Q定結(jié)果能否橫向比較不寫清楚的話后面所有數(shù)字都懸空。參數(shù)表的參考樣式模型關(guān)鍵參數(shù)訓(xùn)練時(shí)間測試準(zhǔn)確率邏輯回歸C1.00.2s92.3%SVM-RBFC10, gamma0.011.8s96.5%隨機(jī)森林n_estimators200, max_depth103.2s97.1%4.3 結(jié)果對比與結(jié)論差 0.5% 也要解釋原因結(jié)果段用一張總表開頭列出每個(gè)模型在測試集上的指標(biāo)隨后用一張訓(xùn)練曲線圖說明收斂情況??偙淼母袷街苯記Q定評審耐心模型名、準(zhǔn)確率、F1、訓(xùn)練時(shí)間四列足夠。這里有個(gè)小原則所有結(jié)果必須是同一次劃分、同一個(gè)測試集上跑出來的不能模型 A 用在 8:2 劃分、模型 B 用在交叉驗(yàn)證上兩種結(jié)果放進(jìn)同一張表是不可比的。如果用了交叉驗(yàn)證就在表里寫 mean±std例如 96.8%±0.4%這比單一數(shù)字有力得多。結(jié)論段不要說“模型表現(xiàn)良好”要解釋“為什么這個(gè)模型最適合這個(gè)數(shù)據(jù)”。哪怕是“SVM 在這個(gè) 64 維特征空間里找到的分隔面比隨機(jī)森林更干凈”這種不完全嚴(yán)謹(jǐn)?shù)脑捯舱故玖朔治瞿芰ΑH绻麅蓚€(gè)模型精度只差 0.5%更需要解釋是隨機(jī)波動(dòng)還是確實(shí)提升了你可以寫“兩者差異小于交叉驗(yàn)證的標(biāo)準(zhǔn)差因此認(rèn)為性能相當(dāng)”這句話既誠實(shí)又能防止被追問。報(bào)告最后還可以加一小段“不足與改進(jìn)”寫“數(shù)據(jù)量較小導(dǎo)致深度模型優(yōu)勢不明顯后續(xù)可以收集更多數(shù)據(jù)微調(diào)預(yù)訓(xùn)練模型”這比硬吹自己的模型好很多。5. 大作業(yè)避坑指南五個(gè)讓分?jǐn)?shù)腰斬的典型問題5.1 數(shù)據(jù)泄漏訓(xùn)練集里混進(jìn)了測試集現(xiàn)象訓(xùn)練準(zhǔn)確率正常但測試集分?jǐn)?shù)高得離譜比如 99.8%或者老師重跑時(shí)你的分?jǐn)?shù)完全對不上。原因數(shù)據(jù)劃分之前就做了標(biāo)準(zhǔn)化或缺失值填充讓測試集的信息提前進(jìn)入了訓(xùn)練過程。比如對整個(gè) X 調(diào)用 fit_transform再從結(jié)果里切分訓(xùn)練測試集這屬于教科書級泄漏。解決把預(yù)處理放進(jìn) Pipeline或者嚴(yán)格按“先劃分再對訓(xùn)練集 fit_transform、對測試集只 transform”的順序?qū)?。自查方法是全文搜?fit(X_all) 和 fit_transform(X_all)出現(xiàn)基本就是泄漏。5.2 報(bào)告貼了代碼但沒貼結(jié)果現(xiàn)象實(shí)驗(yàn)報(bào)告一半篇幅是代碼翻到最后一頁沒有評估表、沒有曲線、沒有日志輸出。原因把“代碼能跑”當(dāng)成“實(shí)驗(yàn)完成”結(jié)果只存在于控制臺窗口關(guān)了就沒了。解決訓(xùn)練腳本必須寫 CSV報(bào)告里引用 results 目錄下的實(shí)際文件。答辯時(shí)被問“你這個(gè)準(zhǔn)確率哪來的”你的回答應(yīng)該是“rf_seed42.csv 里的第五行測試集 10 折平均”而不是“好像之前跑出來過”。5.3 畫圖不標(biāo)軸、不標(biāo)單位現(xiàn)象圖上只有兩條彩色折線沒有橫軸名、沒有縱軸名、沒有圖例標(biāo)題叫“Figure 1”。原因matplotlib 的默認(rèn)風(fēng)格太樸素而大家普遍覺得“能顯示就行”。解決統(tǒng)一畫圖模板每個(gè)圖至少包含 title、xlabel、ylabel、legend需要對比時(shí)再加 grid保存 dpi 不低于 150。寫一個(gè) plot_results(file) 工具函數(shù)所有實(shí)驗(yàn)共用它風(fēng)格一致省去逐個(gè)調(diào)圖的時(shí)間。圖里曲線描述也要寫清楚比如“實(shí)線是訓(xùn)練損失虛線是驗(yàn)證損失”不要只丟一張圖。5.4 超參數(shù)全靠猜現(xiàn)象SVM 參數(shù)寫成 C100、gamma0.001被問為什么選這個(gè)時(shí)回答“試出來的”。原因沒有系統(tǒng)搜索試了兩三組就挑了訓(xùn)練集分?jǐn)?shù)最高的后面報(bào)告也無法解釋。解決用 GridSearchCV 跑一個(gè)小范圍網(wǎng)格比如 C 取 0.1/1/10gamma 取 0.01/0.1/125 組組合在小數(shù)據(jù)集上幾秒跑完。把網(wǎng)格搜索結(jié)果放進(jìn)報(bào)告至少包含“最優(yōu)參數(shù)”和“搜索范圍”兩行這比“試出來的”可信太多。搜索范圍不要太大作業(yè)不是競賽你能解釋清楚為什么搜這幾組比搜幾百組更有價(jià)值。5.5 全篇只有一個(gè)模型、一組默認(rèn)參數(shù)現(xiàn)象報(bào)告三千字實(shí)驗(yàn)部分只有“隨機(jī)森林默認(rèn)參數(shù)準(zhǔn)確率 95.3%”沒有對比只有結(jié)論。原因時(shí)間不夠或者認(rèn)為模型越高級分越高忽略了“對比實(shí)驗(yàn)”本身就是評分點(diǎn)。解決保證至少三個(gè)模型參與對比其中一個(gè)是樸素 baseline。邏輯回歸、SVM、隨機(jī)森林是整個(gè)機(jī)器學(xué)習(xí)課程里最常涉及的三個(gè)算法覆蓋三種不同的建模思路報(bào)告結(jié)構(gòu)天然成立。有余力再補(bǔ)一個(gè)網(wǎng)格搜索后的最優(yōu)模型對比表和討論就完整了。6. 比分再往上提一檔交叉驗(yàn)證與消融實(shí)驗(yàn)的寫法6.1 用 K-Fold 替代單次劃分單次 train_test_split 在作業(yè)里夠用但有個(gè)明顯隱患這次劃分恰好容易或恰好難你的結(jié)論就被偶然綁架。課程項(xiàng)目里我一般用 5 折分層交叉驗(yàn)證替代輸出 mean±std報(bào)告的結(jié)論立刻從“某個(gè)劃分下的表現(xiàn)”變成“模型在這份數(shù)據(jù)上的穩(wěn)定表現(xiàn)”。實(shí)現(xiàn)只要幾行from sklearn.model_selection import StratifiedKFold, cross_val_score cv StratifiedKFold(n_splits5, shuffleTrue, random_state42) scores cross_val_score(rf, X, y, cvcv, scoringaccuracy) print(facc: {scores.mean():.4f} ± {scores.std():.4f})StratifiedKFold 在分類問題里保證每一折的類別比例和全量數(shù)據(jù)一致不會(huì)出現(xiàn)某一折恰好缺一類的極端情況shuffleTrue 配合 random_state 讓折的劃分可復(fù)現(xiàn)。scores.mean 和 scores.std 對應(yīng)報(bào)告表里的“96.8%±0.4%”如果兩組模型的均值差小于標(biāo)準(zhǔn)差結(jié)論就寫“性能相當(dāng)”不要硬說某個(gè)模型更強(qiáng)。回歸題上把 StratifiedKFold 換成 KFold 即可邏輯完全一樣。6.2 消融實(shí)驗(yàn)讓報(bào)告的每個(gè)設(shè)計(jì)都有存在理由比交叉驗(yàn)證更能拉高印象分的是消融實(shí)驗(yàn)。做法很簡單每次從你的方案里去掉一部分看指標(biāo)掉多少。比如隨機(jī)森林方案里有標(biāo)準(zhǔn)化和特征篩選兩步就分別做“去掉標(biāo)準(zhǔn)化”和“去掉特征篩選”兩個(gè)變體。結(jié)果用一張三行表呈現(xiàn)設(shè)置準(zhǔn)確率/F1變化完整方案97.1%—去掉標(biāo)準(zhǔn)化95.8%-1.3%去掉特征篩選96.4%-0.7%哪個(gè)部分去掉后指標(biāo)掉得最多哪個(gè)就是你的主要貢獻(xiàn)點(diǎn)。這張表放在結(jié)論前面比任何文字都說明問題。我當(dāng)年交大作業(yè)時(shí)模型本身只比 baseline 高了兩個(gè)點(diǎn)但消融表證明這兩個(gè)點(diǎn)來自特征篩選而不是來自運(yùn)氣最后拿到的分?jǐn)?shù)比同組那些“模型更復(fù)雜”的同學(xué)都高。這個(gè)習(xí)慣我一直保留到現(xiàn)在每次做完實(shí)驗(yàn)先問一句“哪個(gè)模塊真的有用”希望幫到你。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
99re这里只有精品视频了| 欧美爆乳一区二区三区| 91女人18毛片水多国产| 日日操夜夜撸| 久久婷婷五月丁香网| 天天操夜夜啊| 噜噜操操| 涩涩婷婷五月| 五月天大香焦| 亚洲AV成人一区二区在线观看| 五月花婷婷| 97色五月天| 丁乡久久| 日韩无码系列| 秋霞网在线免费基地五月婷婷丁香| 人人操AV| 男人的天堂五月丁香| 天天干夜夜欢| 色操b| 日韩啪啪视频| 中文无码婷婷| 久操人妻| 婷婷丁香六月| 九九香蕉网| 五月婷婷亚洲天堂97色婷婷| 婷婷五月丁香五月基地| 超碰在线观看三级片| 激情五月婷婷网| 天天干天天做| 精品色色| 91成人视频| 另类综合婷婷五月天欧美视频| 99热欧| 97操视频| 激情网第九色| 六月激情婷婷色| 久草视频一,二三四| 婷婷色五月大香蕉在线| 91919191919久久成人视频| 99热这里只有精品4| 99色色网| 99热老网站| 影音先锋天天日| 999热成人在线综合网| 色婷婷丁香六月| 六月婷婷综合| 99热这里有精品6| 午夜亚洲国产精品av一区二区| 人人操人人看97干| 伊人干综合| 六月丁香综合| 噜综合| 99色这里| 色丁香久久久| 波多野结衣AV无码Porn| 91久久婷婷| 天天噜日日噜综合无码| 9久久精品| 婷婷五月婷婷| 九九精品9| 色五月婷婷丁香凹凸| 欧美成人一区二区三区在线视频| av婷婷丁香| 婷婷五月丁香亚洲| 丁香五月婷婷综合精品素人| 婷婷丁香社区网| 91久久久久久| 人妻尝试久久久久久久久久久久| enecarbon-materials.com污K127封锁请涟系@wip1688 | 久久人人九九| 天久综合91综合首页| 国产成人精品一区二三区熟女在线| 九九伊人网| 啪啪啪大香蕉| 婷婷伊人视婷婷婷| 欧美日韩大黄| 日本高清综合网五月丁香| 丁香成人五月天| 伊人网啪啪| 啪啪激情综合| 9|人妻人人操| 99开心五月五月丁香激情| 丁香婷婷综合精品六月初| 精品久久人妻热| 五月丁香婷婷伊人| 久久99久久99精品免视看婷| 9|人妻人人操| 永久的网站AAAA| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 国产成人精品一区二区三区视频| 任你干嘛免费视频播放| 丁香五月天色综合| 久草a片| 99操逼| www,奇米影视| 亚洲色婷婷| 婷婷天天综合| 亚洲婷婷激情综合激情999精品| 五月天久久www| 日韩欧美一区二区三区四区| 这里只有精品视频在线| 婷婷丁香日韩五月| 熟女激情网| 九九热视| 丁香色婷婷色手机免费在线| 久热这里只有精品3| dingxiangtingtingliuyue| 9999热在线免费观看| 99区视频| 91操碰| 99超碰欧美| 五月天丁香婷婷社区| 国产日产成人亚洲欧美国产VA| 色五月婷婷丁香婷婷| 国产激情在线| 日韩美一级毛卡片| 噜噜噜噜噜色| 九九九九精品精| 久久性视频| 六月综合在线| 亚洲国产网址| 国产精品汇聚精彩第二页 - 高清完整版在线 - 青蛙AV | 色丁香五月天射婷婷爱婷婷| 激情五月婷婷视频一区二区三区| 天堂呦 呦百度搜索-百度搜索| 天堂久久精品| 婷婷综合色| 色婷婷啪啪综合网| 五月花综合视频| 在线理论片| 丁香婷婷久久| 色婷婷丁香五月| 九色无码| 超碰人人操在线| 久久9热综合| 五月色精品| 激情小说五月天| www.99热在线| 午夜丁香综合婷婷| 97香蕉久久超级碰碰高清版| 超碰成人av| 国产色香蕉精品五夜婷| 激情综合网五月天| 九九www| 色婷婷精品| 全部老头和老太XXXXX| 99在线观看亚洲| 欧美日韩成人一区二区| 99热主页日本| 五月天小说激情| 大地9中文在线观看免费高清| 国产成人在线精品| 九热视频| 成人色站,在线视频,看片-SS1AV| 97精品人人A片免费看| 色色色777| 丁香五月电影| 99热这里只有精品国产免费| 丁香花社区av| 淑女丝袜bi操逼123| 国模狼狼| 激情婷婷五月天| 4399伦理午夜| 五月婷婷六月激情| 开心激情站婷婷五月天| 日韩美一级毛卡片| 91精品久久久久| av在线中文| 99re视频在线播放| ji'qing'luan'ren'lun| 日本人妻操| 亚洲操操操| 亚洲爱婷婷| 天天爽天天干| 久久五月天合网| 五月综合久久| 日韩99精品| 免费看成人747474九号视频在线观看| 九九aV| 狠狠色五月激情| 日本乱子人伦在线视频| 亚洲va欧美va天堂v国产综合| 美女91一起草| 天天玩天天摸| 嫩草极品| 九九色人| 婷婷丁香五月综合激情小说| 无码激情| 日本丰满久久| 99精品视频在线观看| 五月婷婷五月天天| 九色91美女| 亚洲色五月| av网站中文| 婷婷丁香五月91| 五月天色婷婷综合| 九九热这里只有精品6| 久久激情五月天| 99日韩| 婷婷亚洲在线| 99热婷婷| 亚洲成人无码免费| 日韩操逼小电影| 久久久九九视频精品18| 亚洲人妻av伦理| 秋霞三及片| 青青草轻轻操| 婷婷综合干| 欧美久热| 天天干天天干天天干| 欧亚色色| 五月婷婷婷综合网| 天天婬色综合| 日本一级淫| 久艹大香蕉| 夜夜操少妇| 丁香密臀AV激情网| 丁香五月婷婷综合激情啪啪啪啪啪啪啪 | 久久伦乱| 五月丁香五月丁香五月丁香五月丁香91| 亚洲99热| 九九精品99| 丁香五月中文字幕久色| 欧美激情五月天在线观看| 丁香五月天堂网AV| 九九无毛| http://www.com久久久精品一区| 久久久com| 人妻少妇色综合| 免费精品99| 天天天天天久久久久久| 亚洲日韩26uuu| 色五月综合网| 久久综合激情| 久久婷婷综合网| 91成人看| www.一起草av| 九九九九中文字幕| 亚洲啪啪精品| 99精品超在线播放| 在线观看亚洲视频影院| 色七七九九| 久久99热这里只有| 激情综合久久| 五月综合激情网| 特黄三级片| 九色啦蜜臀| 99视频网| 六月丁香六月婷婷欧美| www.婷婷五月| 五月婷六月| 婷婷丁香18| 丁香婷婷视频一区二区| 五月激情五月婷婷五月天在线| 丁香五月亭亭六月综合激情网| 色色色干| www色婷婷久久综合久色| 伦乱天堂| 成人羞羞啪啪 全 视频| 另类图片五月天婷婷| 激情五月天婷婷| 亚洲AV网站| 亚洲 视频 导航 一区| 欧美精品A片一区在线观看| 欧美日本99| 97热超碰| 亚洲av网站| 激情综合五月天| 久久久久婷婷| 五月丁香激情综合六月涩涩爱| 久久99热免费| 热成人网| 丁香五月综合婷婷| 日本天天色| 夜夜爽77777妓女免费下载 | 影音先锋色色色资源色资源色| 婷婷五月色| 天天色综合天天| 天天爽成人综合网站| 丁香色六月婷婷| 日韩欧美四五区| 五月天色五月天| 欧美视频在线观看噜噜| 亚洲va欧美va天堂v国产综合| 亚洲人成色A777777在线观看| 91色噜噜狠狠狠狠色综合| 97人人干人人操| 亚洲国产99| 97精品人人A片免费看| 丁香六月婷婷操逼网| 啪啪色激情五月天| 99热99在线| 天天爽天天透天天爱| 色五月丁香伊人五月| 日韩色久| 超碰69天堂| 欧美激情中文字幕| 丁香婷婷啪啪啪| 久狠狠狠| 国产精品涩涩涩视频网站| 97久久精品视频| 婷婷五月天综合网| 色五月激情婷婷| 97操视频| 色色色色色色色色色色色色色色,网站| 停停六月 综合| 日本啪啪天堂| 99爱在线精品视频免费观看| 超碰精品在线| 超碰猛烈的性猛交| 色婷婷激情五月天| 人妻丰满精品一区二区A片| 婷婷九九色| 六月婷婷av| www.日日日.com| 免费精品99| 99国产精品白浆在线观看免费| 91碰免费视频| 天天日人人| 九九亚洲| 久久综合综合综合| 青青福利网| 国产成人av在线| 激情五月丁香五月色| 丝袜人妻| 综合一区二区三区| 婷婷五月丁香综合桃花色网| www开心激情网| 婷婷深爱五月天| 99色.com| 曰日爽日日操| 五月婷婷黄网站大全| 欧亚色色| 99热这里精品| 丁香九九九九| 激情五月婷黄版| 国产肥白大熟妇BBBB视频| 色五月婷婷1| 综合久久五月| 日韩二区搞逼插逼毛片| 丁香婷婷六月激情| 色色婷| jiujiujiuwuyuetian| 99热精这里只有精品| 久碰视频| 热99这里只是精品| www.婷婷五月| 狠狠色色| 色播五月| 色婷婷婷av| 五月天婷婷色综合| 激情宗合哪里能看| 激情五月婷婷| 色综合五月婷婷狠狠干| 日本乱子人伦在线视频| 色婷婷AV五月天| 精品亚洲国产成人A片在线鸭王| 天天色图| 天天操比比| 久草性爱| 欧美性丁香色色五月天干干| 婷婷色五月婷婷姐妹| 久久婷色| 最新午夜理论片| 99无码视频| 亚洲视频色婷婷| 丁香六月欧美| 99热在线精品观看| a色色片| 九九久久网| 爱性综合网| 日日夜夜干| 丁香五月综合图片在线观看| 亚洲精品a成人在线播放| 99热这里只有精品33| 国产露脸150部国语对白| 五月天色五月天| 九九99九九精品免费| 五月丁香天堂网婷婷| 国产又爽又猛又粗的视频A片| 深爱激情九九五月天 | 九九热只有精品| 欧洲永久精品| ai97re99一本| 超碰人人操人人干| 色婷婷国色天香综合| 98国产精品综合一区二区三区| 影音先锋 91工厂| 99热99精品在线观看| 激情五月婷婷六月丁香| 久久久99久久| 182tv992tv人之初午夜免费观看| 五月天激情小说网| 婷婷五月天成人娱乐| 久草丁香婷婷1024| 五月天激情久久| 久久草人妻| 欧美情色一区| 九九re精品视频在线观看 | 中文AV在线播放| 久久这里只有国产| wwww.色婷婷| 成人国产综合| 亚洲行行色色| 91色五月| 五月婷婷欧洲| 激情五月激情综合网| 五月丁香激情婷婷综合| 日日干天天射| 97涩婷婷婷婷基地| 大香蕉五月天婷婷| 五月天激情综合网| 五月四色婷婷| 香蕉综合网| 日韩不卡123| 五月婷色色| 激情五月天免费视频| 婷婷五月综合色拍| 超碰人人摸AV| 五月天综合| 夜夜爱网站| 天天日日人| 亚洲国产色婷婷| 丁香桃色网| 日日夜夜婷婷| www.丁香黄色五月天人与| 中文字幕九九九九| 超碰97色| 婷婷综合中文字幕| 日本久久网| 另类小说五月天| 激情www.98com| 97香蕉久久超级碰碰高清版 | 日韩有码一区| 少妇AB又爽又紧无码网站| 婷婷九月在线| 熟女激情五月天| 色婷綜合网| 99re热在线视频| 色情五月天导航| 欧美性猛交 XXXX 乱大交| 91九色欧美| 毛片毛片毛片毛片| 开心综合激情综合| 俺去也在线官网| 六月婷婷网| 九九久久五月天综合伊人| 伊人久久大香线蕉亚洲五月天,| 婷婷色色五月天| 成人在线网| 九九热在线精品| 久久视频九九视频| 色婷婷色五月丁香| 丁香五月天精品| 五月天开心激情网色欲无码| 日日爱678| www.婷婷五月天| 操久久精| 玖玖爱综合网| 超碰在线99| 亚洲乱码在线观看| 色婷婷六月天| 91人妻色色网| www色婷婷久久综合久色 | 97色色在线视频| 99爱无码| 色婷狠狠| 五月天丁香成人| 九九热精品视频在线观看| 欧美成人色婷婷| 丁香成人五月天| 成人开心五月天| 99精色| 人妻无码精品一区| enecarbon-materials.com污K127封锁请涟系@wip1688 | 91人人爽久久涩噜噜噜| 香蕉人在线香蕉人在线 | 99热这里只有精品青草| 亭亭色网| 九九热这里| 九九综合久久| av首页在线| 人人操人人添人人摸97| 一区二区乱码视频| 日日夜夜狠狠婷婷色| 婷婷五月丁香在线观看| 九九性视频| 66色在线日韩| 亚洲99综合| 国产精品美女| 婷婷丁香五月综合久久| 激情婷婷丁香五月天| 思思久久网| 婷婷五月天深爱| 丁香六月无码| 久久综合性| 久热无码| 日hao1区| 五月婷婷色播视频| 5月婷婷6月六月丁香| 中文字幕在线不卡| 99久久户外勾搭| 9色免费网| 婷婷永久在线| 五月丁香激情深爱婷婷| 欧美精品999| 亚洲精品V天堂中文字幕| WWW色色色COM| 婷婷五月天激情四射五月天激情| 狠狠狠夜夜夜| 五月天婷婷激情| 六六久久黄色| WWW.天天日| 免费播放99性爱视频| 在线观看免费狠狠色丁香香综合| 北京熟妇搡BBBB搡BBBB| 九月婷婷色色| 成人电影丁香六月天| 久久东京热婷婷五月| 亚洲色无码A片一区二区麻豆| 碰超在线九色| 五月丁香六月综合激情网| 丁香五月婷婷在线| 色欲久久99精品久久久久久| 99亚色色色| 久久人妻www| 婷婷和五月天| 日韩黄色电影| 综合久久五| 色婷婷五月天中文字幕| 国产日韩欧美性爱| 国内精品99| 婷五月天天| 婷婷爱五月天| 五月丁香亭亭A片| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 天天色99| 丁香六月色婷婷| 国产做爰视频免费播放| www色色色com| 五月婷婷偷拍| 婷婷六月激情在线视频| www.色五月| 久久久久久99精品无码| 亚洲第79页| 91人在线观看| 另类图片激情五月天| 五月丁香综合中文| 丁香五月激情综合婷综| 俺去啦综合网| 欧美婷婷丁香社区在线播放| 亚洲五月天天| 人妻中文在线| 很很操96| 欧美在线视频99| 97色婷婷成人综合在线观看| 亚洲综合色色| 亚洲六月色婷婷| 四色五月婷婷| 丁香六月婷婷开心婷婷网| 色五月视频,小说| 亚洲精品字幕| 色五月婷婷激情五月| 91精品91久久久中77777| 五月丁香婷婷色| 久久9视频| 黄网在线免费播放| 无码人妻激情| 色10月婷婷视频| 九热久| 天天摸天天做天天爱天天爽| 五月久久| 精品人妻伦一二三区久久| 人妻免费网站| 性色五月天| 狠干综合| 91精品国产99久久久久久天美| 91 九色 入口| 色久九| 思思热这里只有精品视频666| 欧美日韩91| 丁香九月婷婷| 黑人糟蹋人妻HD中文字幕| 99爱这里只有精品| 琪琪色网在线| 日本五月天激情| 九九99热| 婷婷五月成人| 激情五月com| 五月色丁香婷婷综合| 99色网站| 97天堂| 欧美色五月| 五月天激情中文字幕| 亚洲天堂制| 超碰人人干| 91色久| 欧美经典片免费观看大全| 襙逼网| 奇米四色五月天| 国产成人av在线| 五月丁香六月欧美综合| 亚洲av成人一区二区电影在线| 激情视频综合| 99热思思在线观看| 激情淫乱男女| 久久久久人妻| 天天插综合| 97综合在线| www,婷婷,com| 超碰人人操在线| 亚洲激情五月婷婷日日| 丁香六月激情毛片| 在线观看国产高清视频免费网站| 久机视频这只有精品| 成人网站在线观看视频| 亚韩精品视频1区| 日韩在线视频中文字幕| 婷婷五月丁香久久| 久久之人妻| 日本丰满久久| 深爱女色婷婷丁香五月亚洲图区| 996黄色片| 五月激情婷婷在线| 亚洲精品大片| 人色五月天婷婷| 黄久久久| 丁香五月天AV在线| 大香蕉婷婷| 亚洲99精品欧美一区| 黄色aaaaa| 五月色亚洲| 97超碰免费超级在线观看| 久大香蕉| 六月丁香五月天| 99超在线| 欧美激情综合| XX久久| 嫩模草| 狠狠操天天干| 色天堂在线| 婷婷五月六月激情| 99色色热| 激情九月综合| 男人視頻站| 蜜臀久久99精品久久久久久酒店| 五月丁香色综合| 五月丁香啪| 婷婷色爱| 影音先锋人妻出差| 九九这里精品| 日韩狠狠色婷婷| www久久久| 大香线蕉伊人| www一起操| 七七久久婷婷| 久久综合55| 丁香久久在线| 久久精品国产AV一区二区三区 | 丁香五月色情| 桃色五月天| 丁香婷婷五月| 色婷婷狠狠| 黄色AV日韩| 六月婷婷av| 婷婷五月色播| 丁香五婷婷| 激情五月丁香五月| 婷婷五月天AV| 无码色| 五月天综合色| 少妇人妻人伦A片| 激情婷婷六月天| 丁香婷婷六月男男| 五月天丁香成人社| 97碰在线视频| 99热这里只有精| 久热这里| 99re6在线视频精品免费| 色色com| 亚洲婷婷五月天| 五月丁香婷婷色| 大香蕉九九| 欧美精品XXXXBBBB| 婷婷丁香红五月91C| 丁香婷婷五月香蕉91| 久久免费高| 六月丁香啪| 九九色院| 思恩热国产视频右线观看| 99在线爽| 丁香五月欧美激情| 99人妻碰碰碰久久久久视| 性生活视频98791| 噜噜五月天综合| 久久97| 天天爱天天天射AV| 成人在线日韩欧美| 97亚洲色 torrent magnet| 色五月婷婷五月丁香五月激情五月视频 | 天天狠狠干| 国产色网站| 超碰人妻在线| Av免费网站在线| 激情久久久久久久久久久| 激情网站五月| 婷婷色av| 久久久久久久久久8888| 91av传媒高清在线视频网| 综合99在线| 狼人久草| 狠狠狠狠狠操| 玖玖爱综合网| 香蕉97碰碰碰欧美| 婷婷五月丁香超碰| 色播五月丁香婷婷| 婷婷激情综合| 丁香六月婷婷久久综合| www.精品久9| 亚洲va日| 5月婷婷6月六月丁香| 丁香五月手机在线| 91丨人妻丨国产丨丝袜| 色五月xxx| 丁香五月婷婷影院| 丁香五月天啪啪| 超爽内射| 色婷婷激情小说网| 在线天堂9| 亚洲性爱AV在线| 亚洲六月色婷婷| 热这里| 综合色五月| 人操91在线| 欧洲婷婷五月天| 日日操天天操| 68热超碰在线| 激情综合青草| 99色在线观看视频| 九九伦子片| 免费99情趣网视频| 欧美va视频| 狠狠色婷婷色| 26uuuu精品一区二区| 久久婷婷色| 国产超碰av| 婷婷五月永远18免费久久久| 99视频精品| 婷婷丁香综合| 日日日天天干| 99超超碰| 五月丁香六月欧美综合| AA丁香综合激情| 婷婷大乡焦噜噜| 婷婷婷婷色| 女人被躁到高潮嗷嗷叫小| 婷婷五月天色色| 天天干天天爽| 九九偷拍网| 五月丁香六月婷婷视频| 久久婷婷五月综合色丁香花| www.91.com处女在线直播| 色色色五月婷婷| 狼人婷婷久久| 午夜婷婷久久 | 嫩草AV久久伊人妇女超级A| 久久HD| 97九色视频| 婷婷丁香五月激情密臀av| 天天爽天天日天天舔| 欧美 色婷婷| 婷婷五月天视频在线观看| 国产精品18久久久| 婷婷色五月偷拍| 91超级碰碰| 亚洲中文无码成人| 天天爽天天操| 美女婷婷六月色| 五月丁香综合| 全国最新疫情| 五月婷婷av在线| 五月婷婷婷自由综合| 久久久天堂国产精品女人| 这里只有精品99www| 国产欧美性成人精品午夜| 五月激情婷婷开心五月| 亚洲熟妇AV乱码在线观看| 六月丁香婷婷天堂| 蜜臀综合久草| 噜噜五月天综合| 91pornav在线| 99热这里都是精品| 婷婷五月天成人在线视频| 色色色热热热| www.日韩艹| 色九月综合| 99热只有| 中文字幕永久在线| 色婷婷成人做爰A片免费看网站| 亚洲综合丁香婷婷六月天| 激婷网| 99热只有这里有精品| 99热新网址| 五月丁香综合激情| 丁香丝袜五月| 丁香五月开心亚洲| 色香欲综合| 亚洲AV无码久久精品色欲| 中文婷婷狠狠| 91碰超| 色色色99韩| 丁香六月天婷婷色| 美国十月色婷婷在线观看| 久99视频| 婷婷五月综合国产精品| 婷婷 色 丁香 夜| 人人操插| 日日操夜夜擼| 夜色综合网| 婷婷久久五月| 日本少妇AA一级特黄大片| 久久五月激情综合| 日本精品。999| 99干在线| 天天干,夜夜爽| 激情婷婷五月天日本系列| 99久久精品国产色欲| 五月天婷婷社区| 中文字幕色色| 99在线观看视频免费| 九九精品9| 大香网伊人久久综合| 婷婷丁香五月天亚洲| 狠狠色噜噜狠狠狠狠综合| 超喷97免费在线视频| 久综合| 婷婷久久六月费| 97视频91| AV在线不卡网站| 久99视频| 五月天狠狠色| 色性日本| 就要去操亚洲成人精品五月天丁香婷婷| 婷婷在线日韩综合| 色婷婷五月在线| 亚洲这里只有精品| 就爱啪啪婷婷| 九九aV| 99ri视频在线观看| 国外亚洲成AV人片在线观看| 激情婷婷色色| 五月天网站亭亭| 婷婷五月开心中文字幕色| 玖玖在线视| 丁香花操逼| 国产午夜伦鲁鲁| 国产成人99久久亚洲综合精品| 可以免费看的AV网站| 丁香五月骚喷水视频| 五月丁香综合| 99熟女啪啪视频| 色婷婷激情视频| 三级毛片视频| 97精品综合| 综合婷婷| 亚洲综合视频网| 六月丁香啪啪啪| 久久久久久五月天| 激情丁香五月激情婷婷| Av性爱网站| 五月五婷婷网| 色婷婷色99国产综合精品| 五月天另类图片区99| 久久九九囯产| 婷婷综合在线网| 影音先锋日本三级资源| 天天射影院| 亚洲欧洲另类| 99热66| 丁香色婷婷五月天| 国产成人+综合亚洲+天堂| 色日本综合| 亚洲成人av在线播放| 天天天天天天操| 五月婷婷第四色| 久久婷婷六月综合| 六月合五月婷| 亚洲这里只有精品| 五月丁香五月综合欧美| 激情五月天偷拍综合网| 99视频在线精品| 六月丁丁香| 日韩av在线免费观看| 九九干视频| 日本久久婷婷| 一起草AV| 国内外色色色色色成人视频| 桃色五月天| 婷婷亚洲综合| 欧美大肥婆大肥BBBBB| 国精产品一区一区三区免费视频| 亚洲精品久久久久久久久久飞鱼| 图片区 小说区 区 亚洲五月| 性按摩玩人妻HD中文字幕| www.97视频| 猫咪伊人AV| 久久中国毛毛片爱久久| 丁香六月婷婷综合啪啪| 色五月婷婷内射| 99视频这里有精品| 色伊人婷婷| 色色色999| www.91av.com| aV欲望人妻中文字幕| 久9免费视频| 久久久18| 爱草视频在线| 色五月婷婷色五月婷婷色五月婷婷| 五月精品| 婷婷五月天小说网| 人人爽网| 色噜久| 91欧美| 丁香五月天欧美| 啪啪小说五月天| 日韩成人无码人妻| 日本少妇裸体做爰高潮片| 操b视频在线观看一区二区| 九色七七| 夜夜爽日日躁| 人人爱人人草| 五月婷婷色| 三日本无码| 婷婷99视频精品| www.狠狠色.com| www.久热| 九九性视频| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 日日杆天天| 97干在线视频| 久9热视频在线| 91操片| 欧美综合激情五月丁香| 天天干天天操天天爽| 在线成人网站| 婷婷五月天久草在线| 国产老熟妇亲子乱对白| 亚洲丁香五月综合| 婷婷爱五月天| 狠狠精品干练久久久无码中文字幕| 中文AⅤ大全| 色很很96| 亚州精品久久久久AV无码| 婷婷五月天激情网| 久久久91精品| 人人爱操| 噜噜狠狠色综无码久久合欧美| 99操逼| 亚洲国产网站| 综合五月亭亭9| 欧美黄色韩日网| 久久精品99国产精品日本| 91色在线| 丁香六月婷婷色XXXX| 99啪啪| 新激情综合| 26uuu国产色| 五月丁香自拍| 九九综合九| 色婷五月婷婷| 日本美女上人| 婷婷综合九色伊人| 怕怕av| 色婷婷导航| 97亚洲精品| 色婷婷五月天成人网| 久久久五月婷婷| 在线观看国产高清视频免费网站| 4399在线日本A片| 久婷狼色诱惑在线| 热热久久精品视频| 日韩无码成人电影| 激情国产综合| 婷婷五月天美女视频| 拍真实国产伦偷精品| WWW.婷婷五月天.COM| 婷婷香五月天| 综合色色五月| 六月丁香五月激情网| 婷婷综合久久| 五月色网| 97久久超碰| 99热在线精品播放| 五月天色丁香| 99在线综合视频| 91wwmm导航| 九九热123| 婷婷 亚洲图片 丁香| 青青草成人网| 丁香五月天AV在线| 91狠狠综合久久| 六月婷婷视频| 日本色五月婷婷| 97碰碰碰| 五月天婷婷影院影院观看| 久久婷婷大香蕉| 天天爽,夜夜爽| 大香蕉视频婷婷| 九九热国产| 91人人妻人人操| 丁香五月婷婷色偷偷| 五月婷婷9| 九九热99热| 精品五月花| 色色射| 激情伊人网| 色五月偷偷| 好看的国产精品| 91中文在线| 97人人干| 亚洲无AV在线中文字幕| 激情四射五月天偷偷看婷婷| 99热97| 久久小视频免费| 亚洲综合婷婷| 丁香五月AV综合| 亚洲亚洲人成综合网络| 天天干,噜噜色,狠狠色| 日本久久激情| 天天日,天天干,天天操| 97国产精品女人碰碰| 99这里只有精品| 激情综合五月| 亚洲操操操| 夜夜夜叫天天天做| 超碰在线观看caop| 66成人网| 五月丁香激情综合网| 国产精品国产成人国产三级| 日韩av干| 丁香视频| 99热综合网| 五月婷婷六月激情在线| 日本色99网站| 一区二区乱码视频| 伊人久久婷婷| 五月日韩中文字幕| 亚洲激情综合| 丁香九月婷| 99热个人在线| 色婷婷六月| 久久五月视频| 人妻第九页| 天天干天天操天天射| 色婷婷在线播放| 第四色在线观看| 激情五月天综合婷婷网| 色狠狠综合网| 韩国中文字幕91| 97热在线精品| 天天干夜夜操A片| 色综合中文综合网| 色五月天电影| 欧美成人无码高清一区二区三区| 天天色五月婷婷91久久久久久久| 亚洲网视屏| 欧美激情凹凸丁香网| 亚洲午夜电影| 久久色大香蕉| 91在线日| 天天日夜夜操五月| 99riAv1国产在线观看| 在线看九一V图片| 99色在线| 狠狠干狠狠干狠狠干狠狠干| 日韩操逼大片| 日韩av手机在线观看| 91操片| 婷婷.com| 婷婷五月色播网| 日本人妻操| 人与禽A片啪啪| 亚洲久久激情| 狠狠另类视频| 翔田千里 50岁 无码| 色欲AVV| 91狠狠综合久久久久久| 久久人妻久久| 五月天色婷婷小说| 在线资源av-超碰中文在线-成人AV | 狠狠色狠狠爱| 婷婷丁香日韩五月| 久久五月天综合| 97超碰在线免费观看| ji'qing'luan'ren'lun| 综合色图区| 97久操视频| AⅤ网站在线看| 色欲天天综合网| 久99视频在线观看| 婷婷丁香五月天中文字幕| 99精品视频在线免费观看| www.婷婷六月天| 大香蕉伊然在亚洲90| 国产肥白大熟妇BBBB视频| 五月婷婷色五月| 久久只有18视频| 97婷婷丁香五月天激情图片| 丁香五月影院| 国产 亚洲 在线| 激情五月婷婷啪啪| 91精品综合久久久久久五月天| se色婷婷视频| 丁香五月天啪啪| 99久在线精品99re8| 五月婷婷啪啪网| 亭亭色网| 激情五月天视频| 五月天色婷婷网| 91久久婷婷人人澡草 | 五月亭亭综合五码| 五月天开心成人网| 五月天婷婷一起草| 99久久99视频只有精品| 任你擦免费视频| 成人午夜免费电影| 大香蕉九九热| 97久人人| 婷婷丁香五月色偷偷| 人妻激情视频| 手机旧版看人妻1025| 91精品丝袜久久久久久久久粉嫩| 草久私拍| 久操人| 狠狠色五月| 婷婷五月色色| 色色色婷婷五月| 婷香五月| 伊人婷婷五月天| 久久色在线视频| 有码人妻久久| 玖玖九九99| 丁香婷五月| 四色AVwww| 丁五月激情视频免费| 26UUU精品一区二区Com| 五月婷婷福利| 舔色婷婷| 最新色色五月天| 久久草大香蕉| 天天操夜夜操| 91碰人人| 99ri精品在线| 女同激情久久av久久| 成人噜噜网| 天天综合天天做天天综合| 综合激情综合啪啪| 亚洲aV写真天天综合网久久| 激情五月天婷婷五月天| 婷婷成人在线| 久久a热| 一起草无码| 国产 亚洲 在线| 色九九九九| 色婷婷视频| 精品夜夜澡人妻无码AV| 亚洲婷婷免费| 国产精产国品一二三在观看| av亚洲国产小电影| 伊人大香蕉爱聚| 丁香五月天婷婷91| 超碰日日操| 五月婷婷六月丁香激情深爱| 99热精品9| 婷婷色在线视频| 日韩人妻无码专区| 成人国产欧美大片一区| www综合久久| 五月激情五月丁香| 六月久久狠狠| 狼人婷婷久久| 人妻体体内射精一区二区| 久热精品9999| 永久无码色| 五月婷婷综合色拍| 天天爱天天狠天天透| 欧美性爱五月天| 久久久人人操A V| 九九色婷婷| 99久久九九| 99热这| 日韩一级淫乱片一区二区三区| 丁香五月婷婷欧美激情-中文天堂最新版在线观看| 婷婷大香蕉| 日韩五月丁香| 26uuu欧美日本| 大香蕉天堂色| 婷婷久久婷婷色五月| 日本婷色| 亚州操操| 色综合综合综合| 婷婷综合在线| 人人爽天天爽| 五月婷婷六月丁香在线视频免费在线观看| 日本色婷婷| 日韩肏屄网| 五月天电影网| 九九色影视| 九九99九九精品视频| 99热精品10| 久久久激情视频| 少妇搡BBBB搡BBB搡毛茸茸| 久久综合五月婷婷| 婷婷中文字幕版| 色99在线| 99re资源在线视频导航| 五月婷丁香| 丁香五月色五月| 奇米四色五月天| 婷婷中文字幕版| 少妇高潮一区二区三区99欧美| 九九色黄色| 伊人久久婷婷五月天激情四射| 天天爽人人综合免费7799| 99九九99九九九视频精品| 思思视频精品| 99免费| 全高清无码视頻| 久久婷婷五月综合色和| 精品欧美性爱超级爽| 婷婷的激情五月| 97色色色色色| 夜色综合网| 天天日,天天干,天天操| 97色射| 天天久久综合| 国产精产国品一二三在观看| www.色五月.com| 欧美超级视频97| 色色色色区| 激情五月丁香亭亭| 亚洲日韩操B| 亚洲性爱干干| 超碰av在线| 久热九九| 狠狠色婷婷7777久| 99热在线精品播放| 久久久性爱视频| 性爱七区| 五月婷婷激情综合av| 中文av在线观看| 日日夜夜婷婷| 99热有精品在线观看| 色婷婷五月天综合网| 久久大国产香蕉| 狠狠狠狠狠草| 婷婷丁香六月天激情四射网| 丁香五月婷婷亚洲综合精品在线| 日日操天天操| 99亚洲精品视频在线观看| 国産精品| 欧美在线看| 婷婷五月花丁香| 亚洲正能量欧美| 日韩十国产极品久久| 中文字幕在线视频播放|