99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Go錯(cuò)誤處理實(shí)戰(zhàn):掌握%w與errors.Is/As,避免錯(cuò)誤鏈?zhǔn)Э?/h1>

每年Go社區(qū)的“錯(cuò)誤處理大戰(zhàn)”一開打吵到最后的焦點(diǎn)幾乎都落在同一個(gè)問(wèn)題上到底要不要Wrap錯(cuò)誤就拿我的團(tuán)隊(duì)來(lái)說(shuō)代碼評(píng)審上最常見(jiàn)的一條評(píng)論就是“這里為什么沒(méi)加%w”而回復(fù)也高度統(tǒng)一“加了怕鏈太長(zhǎng)不加又怕斷鏈?!边@種擰巴其實(shí)很正?!狦o的錯(cuò)誤處理設(shè)計(jì)哲學(xué)與真實(shí)業(yè)務(wù)系統(tǒng)之間隔著太厚的膠水層語(yǔ)言本身只給了你一個(gè)極簡(jiǎn)接口type error interface { Error() string }可一條錯(cuò)誤從數(shù)據(jù)庫(kù)底層一路被拋出API網(wǎng)關(guān)中間還要穿過(guò)repository、service、handler好幾個(gè)層次每一層都得做一次莎士比亞式的選擇題To Wrap or Not to Wrap。這篇文章不打算站隊(duì)說(shuō)“必須全部Wrap”或者“最好別Wrap”我想結(jié)合這些年寫Go的實(shí)際感受把%w、errors.Is、errors.As這些工具到底解決了什么問(wèn)題、什么時(shí)候加Wrap是真的有信息增益、什么時(shí)候純屬自嗨式包裝講清楚。如果你正在為團(tuán)隊(duì)的錯(cuò)誤處理規(guī)范頭疼或者剛被代碼評(píng)審問(wèn)住“這里為什么不Wrap”這篇應(yīng)該能給你一個(gè)相對(duì)可落地的判斷框架。1. 老生常談的“err ! nil”怎么就成了社區(qū)年經(jīng)貼1.1 為什么Go寧愿啰嗦也不引入try-catchGo選擇顯式錯(cuò)誤處理是設(shè)計(jì)者對(duì)程序可讀性的一種偏執(zhí)。異常機(jī)制在Java、Python、C#那套體系里非常成熟它能把“正常流程”和“錯(cuò)誤流程”分開但代價(jià)是控制流變得不那么直觀——一個(gè)throw拋出來(lái)你根本不知道它會(huì)飛到哪里中間可能被某個(gè)catch吞掉也可能一直穿到最外層。Go設(shè)計(jì)者從一開始就不喜歡這種“隱秘的控制流跳轉(zhuǎn)”他們寧愿讓你在代碼里看到滿屏的if err ! nil也不愿意讓你在log里看到一句干巴巴的Unexpected error然后對(duì)著堆棧猜是誰(shuí)吞了異常。說(shuō)白了Go對(duì)錯(cuò)誤的處理方式繼承自C的經(jīng)驗(yàn)錯(cuò)誤就是值它和正常數(shù)據(jù)一樣得顯式傳遞誰(shuí)要用誰(shuí)就得接著。函數(shù)簽名(T, error)的約定把“可能失敗”這件事寫在了類型系統(tǒng)里。很多剛轉(zhuǎn)Go的人覺(jué)得這規(guī)矩?zé)┤说矣^察下來(lái)真正讓團(tuán)隊(duì)崩潰的從來(lái)不是if err ! nil多寫了幾行而是錯(cuò)誤出來(lái)之后怎么流轉(zhuǎn)、怎么保留上下文、怎么讓上游能感知到錯(cuò)誤的“身份”。這才是每年社區(qū)爭(zhēng)論真正的火藥桶。1.2 Go 1.13把“包裝”扶正了在Go 1.13之前想給錯(cuò)誤附加上下文幾乎全靠字符串拼接fmt.Errorf(xxx: err.Error())。問(wèn)題是拼完之后原始錯(cuò)誤的所有類型信息全部丟失。你不能對(duì)一個(gè)拼好的字符串調(diào)用errors.Is也不能從一串文本里掏出當(dāng)初那個(gè)*os.PathError或者sql.ErrNoRows。社區(qū)因?yàn)槭懿涣诉@個(gè)所以出現(xiàn)了github.com/pkg/errors這類庫(kù)用WithStack、Wrap的方式把堆棧和錯(cuò)誤綁在一起但問(wèn)題在于每個(gè)庫(kù)的約定不同A庫(kù)返回的錯(cuò)誤到了B庫(kù)沒(méi)法統(tǒng)一處理。2019年Go 1.13正式發(fā)布標(biāo)準(zhǔn)庫(kù)加入了errors.Is、errors.As、errors.Unwrap同時(shí)fmt.Errorf也支持了%w格式化動(dòng)詞。這個(gè)事件的意義不在于它發(fā)明了“錯(cuò)誤包裝”這個(gè)概念而在于它把包裝行為標(biāo)準(zhǔn)化了大家終于有了一個(gè)共同的基礎(chǔ)協(xié)議不同庫(kù)之間返回的錯(cuò)誤可以在同一條鏈上做統(tǒng)一判斷。從那時(shí)起Wrap就不再是某個(gè)第三方庫(kù)的專利而是每個(gè)Go開發(fā)者都會(huì)遇到的日常選擇。1.3 Wrap成了編碼規(guī)范里最大分歧點(diǎn)標(biāo)準(zhǔn)庫(kù)給了“能包裝”的能力但沒(méi)有規(guī)定“該不該包裝”。于是Wrap從技術(shù)問(wèn)題變成了風(fēng)格問(wèn)題而且很快演變成團(tuán)隊(duì)編碼規(guī)范里最容易被Challenge的分歧點(diǎn)。有人堅(jiān)持“每層都必須Wrap”理由是出問(wèn)題時(shí)日志里能看到完整的調(diào)用上下文有人堅(jiān)持“能不加就不加”理由是錯(cuò)誤鏈太長(zhǎng)以后根本沒(méi)法讀還有人夾在中間看心情包裝。其實(shí)這些爭(zhēng)論背后藏著一個(gè)更本質(zhì)的問(wèn)題錯(cuò)誤包裝的信息增益原則。每次Wrap都等于給錯(cuò)誤鏈加了一層“說(shuō)明文字”如果這層說(shuō)明不能讓下一個(gè)看日志的人更快定位問(wèn)題那它就不是上下文而是噪音。而要判斷增益是否存在得先把%w和%v的底層機(jī)制徹底搞清楚。2. %w與%v的一字之差決定了錯(cuò)誤鏈的生死2.1 一份代碼看清%w和%v的本質(zhì)差異很多剛接觸Go 1.13的開發(fā)者以為%w只是%v的“新寫法”兩者打出來(lái)的日志幾乎一模一樣于是習(xí)慣性選擇%v。這是最常見(jiàn)的誤解??聪旅孢@段代碼package main import ( errors fmt ) var ErrPermission errors.New(permission denied) func main() { base : ErrPermission wrapped : fmt.Errorf(open config file: %w, base) annotated : fmt.Errorf(open config file: %v, base) fmt.Println(wrapped :, wrapped) fmt.Println(annotated:, annotated) fmt.Println(errors.Is(wrapped, ErrPermission) :, errors.Is(wrapped, ErrPermission)) fmt.Println(errors.Is(annotated, ErrPermission):, errors.Is(annotated, ErrPermission)) }輸出結(jié)果會(huì)讓你意外wrapped : open config file: permission denied annotated: open config file: permission denied errors.Is(wrapped, ErrPermission) : true errors.Is(annotated, ErrPermission): false看到關(guān)鍵了嗎兩個(gè)錯(cuò)誤的展示文本完全一樣但程序化判斷能力天差地別。用%w包裝出來(lái)的錯(cuò)誤內(nèi)部實(shí)現(xiàn)了一個(gè)Unwrap() error方法標(biāo)準(zhǔn)庫(kù)可以通過(guò)這個(gè)鉤子沿著錯(cuò)誤鏈一層層往下找直到找到原始的ErrPermission而%v只是把錯(cuò)誤當(dāng)成普通數(shù)據(jù)澆進(jìn)字符串模板里鏈在那一刻就斷掉了。這就是“一字之差決定了錯(cuò)誤鏈的生死”的含義。日志里看不出區(qū)別但程序里區(qū)別極大errors.Is需要靠鏈去找哨兵錯(cuò)誤errors.As需要靠鏈去提取具體類型沒(méi)有%w這兩件事全都做不了。2.2 errors.Is、errors.As、errors.Unwrap三件套的適用邊界理解了%w之后再來(lái)梳理標(biāo)準(zhǔn)庫(kù)三件套的使用場(chǎng)景就不難了。errors.Is(err, target)沿著錯(cuò)誤鏈逐層比對(duì)判斷當(dāng)前錯(cuò)誤鏈上是否存在某個(gè)哨兵錯(cuò)誤sentinel error常見(jiàn)用例是判斷底層是否返回了sql.ErrNoRows、io.EOF這類可預(yù)期的錯(cuò)誤。errors.As(err, target)沿著錯(cuò)誤鏈查找第一個(gè)類型匹配的錯(cuò)誤并把目標(biāo)指針指向它。常見(jiàn)用例是提取出*json.SyntaxError、*net.DNSError這種結(jié)構(gòu)化錯(cuò)誤拿到內(nèi)部字段比如Offset、Op、Err做精細(xì)化處理。errors.Unwrap(err)只解開當(dāng)前這一層返回內(nèi)層錯(cuò)誤。它一般不出現(xiàn)在業(yè)務(wù)代碼里更多是給工具和調(diào)試用。三者配合的典型寫法是先errors.Is判斷語(yǔ)義層是否命中預(yù)期錯(cuò)誤不命中再用errors.As提取結(jié)構(gòu)信息。例如在網(wǎng)關(guān)代理里resp, err : http.Get(url) if err ! nil { var dnsErr *net.DNSError if errors.As(err, dnsErr) { // 知道是DNS解析失敗可以換個(gè)節(jié)點(diǎn)重試 return retryAnotherNode() } return err }這里如果上游沒(méi)有用%w保留*net.DNSError那errors.As永遠(yuǎn)只會(huì)返回false程序就只能對(duì)著字符串做fucking正則匹配——那感覺(jué)糟糕透頂。2.3 自定義錯(cuò)誤類型別漏掉Unwrap方法當(dāng)業(yè)務(wù)需要自定義錯(cuò)誤類型時(shí)很多人只記得實(shí)現(xiàn)Error() string方法卻忘了實(shí)現(xiàn)Unwrap() error于是自定義錯(cuò)誤永遠(yuǎn)無(wú)法向鏈條深處透?jìng)?。下面這個(gè)例子展示了正確的做法type TimeoutError struct { Op string Cause error } func (e *TimeoutError) Error() string { return fmt.Sprintf(%s: timeout: %v, e.Op, e.Cause) } // 關(guān)鍵讓這個(gè)類型可以被errors.Is/As穿透 func (e *TimeoutError) Unwrap() error { return e.Cause }有了Unwrap方法外層errors.Is(err, io.EOF)就能穿透TimeoutError去判斷內(nèi)層是不是EOFerrors.As也能從鏈上提取出*TimeoutError拿到Op字段。如果漏掉Unwrap自定義錯(cuò)誤就成了一堵墻所有內(nèi)層信息都被關(guān)死鏈從它這兒戛然而止。這里還有一個(gè)常見(jiàn)坑不要把Unwrap誤寫成返回自身。如果你在Unwrap()里返回e本身errors.Is會(huì)陷入無(wú)限循環(huán)直到棧溢出。標(biāo)準(zhǔn)庫(kù)判斷到“Unwrap返回了自己”時(shí)會(huì)panic但一旦錯(cuò)誤鏈特別長(zhǎng)這種bug排查起來(lái)反而更隱蔽。更安全的習(xí)慣是自定義錯(cuò)誤類型里永遠(yuǎn)只有一個(gè)cause字段專門用來(lái)保存內(nèi)部的原始錯(cuò)誤。3. 分層架構(gòu)里我堅(jiān)持Wrap的三個(gè)位置穿過(guò)機(jī)制層面落到實(shí)際工程里。我負(fù)責(zé)的項(xiàng)目基本都是經(jīng)典的repository / service / handler三層結(jié)構(gòu)經(jīng)過(guò)這幾年迭代團(tuán)隊(duì)在錯(cuò)誤處理上形成了一個(gè)共識(shí)repository層不準(zhǔn)亂Wrapservice層必須Wraphandler層做脫敏和狀態(tài)碼轉(zhuǎn)換。下面把每一層的具體規(guī)則拆開講。3.1 repository層盡量不動(dòng)保持原始錯(cuò)誤上岸repository層是離數(shù)據(jù)庫(kù)、外部API最近的地方。這里的錯(cuò)誤大多是驅(qū)動(dòng)直接返回的比如sql.ErrNoRows、context.DeadlineExceeded、io.EOF。在我的規(guī)范里repository層拿到底層錯(cuò)誤后不做任何包裝直接返回原始err。原因很簡(jiǎn)單repository是錯(cuò)誤鏈的“起點(diǎn)”信息最完整也最真實(shí)任何提前包裝都會(huì)增加后續(xù)判斷的噪音。func (r *OrderRepo) FindByID(ctx context.Context, id int64) (*Order, error) { var o Order err : r.db.QueryRowContext(ctx, SELECT id, user_id, payload FROM orders WHERE id ?, id, ).Scan(o) if err ! nil { return nil, err // 原始錯(cuò)誤原樣返回 } return o, nil }有人會(huì)質(zhì)疑這里不包一層FindByID failed日志里怎么看得出是哪一步我的回答是這個(gè)上下文不該在這里加。FindByID本身就寫在SQL語(yǔ)句里數(shù)據(jù)庫(kù)驅(qū)動(dòng)的錯(cuò)誤文本已經(jīng)足夠說(shuō)明問(wèn)題而真正需要“哪個(gè)方法做了什么”的語(yǔ)義上下文應(yīng)該由調(diào)用方service層來(lái)補(bǔ)充這樣錯(cuò)誤鏈才不會(huì)有多余的重復(fù)。3.2 service層業(yè)務(wù)上下文在這里統(tǒng)一補(bǔ)充service層是我唯一強(qiáng)制要求Wrap的地方。因?yàn)檫@一層是業(yè)務(wù)的語(yǔ)義邊界你比數(shù)據(jù)庫(kù)驅(qū)動(dòng)更清楚這個(gè)錯(cuò)誤代表什么業(yè)務(wù)意圖。比如上面那個(gè)sql.ErrNoRows在repository層就是個(gè)“掃描不到數(shù)據(jù)”的技術(shù)錯(cuò)誤但在service層它是“訂單不存在”這個(gè)業(yè)務(wù)判斷的輸入。所以service的標(biāo)準(zhǔn)寫法是func (s *OrderService) GetOrder(ctx context.Context, id int64) (*OrderDTO, error) { o, err : s.repo.FindByID(ctx, id) if err ! nil { return nil, fmt.Errorf(query order %d: %w, id, err) } // 業(yè)務(wù)組裝... return toDTO(o), nil }這里fmt.Errorf里的“query order %d”信息是新產(chǎn)生的它告訴我們這個(gè)錯(cuò)誤來(lái)自哪張訂單、哪個(gè)操作階段。用它替換掉repository層沒(méi)有的信息正好符合前文說(shuō)的“信息增益原則”。而且注意我用的是%w而不是%v這樣上一層還能繼續(xù)用errors.Is判斷sql層的問(wèn)題。service層的另一個(gè)職責(zé)是保持錯(cuò)誤語(yǔ)義的一致性。比如你想暴露一個(gè)ErrOrderNotFound給handler層判斷不要一言不合就返回一個(gè)新錯(cuò)誤而是應(yīng)該先判斷底層是不是空行再?zèng)Q定要不要轉(zhuǎn)換if errors.Is(err, sql.ErrNoRows) { return nil, fmt.Errorf(order %d: %w, id, ErrOrderNotFound) }這樣handler層只要用errors.Is(err, ErrOrderNotFound)就能做精確處理不需要和數(shù)據(jù)庫(kù)驅(qū)動(dòng)耦合。3.3 handler層脫敏和狀態(tài)碼轉(zhuǎn)換的最后一道關(guān)handler層是整個(gè)錯(cuò)誤鏈的終點(diǎn)面向HTTP響應(yīng)或RPC響應(yīng)。這里有兩個(gè)動(dòng)作一是把錯(cuò)誤轉(zhuǎn)換成用戶可讀的信息二是對(duì)外隱藏內(nèi)部細(xì)節(jié)。我通常的做法是“先記錄完整錯(cuò)誤鏈再對(duì)外返回脫敏文本”。func (h *OrderHandler) Get(w http.ResponseWriter, r *http.Request) { id : parseID(r) order, err : h.svc.GetOrder(r.Context(), id) if err ! nil { switch { case errors.Is(err, ErrOrderNotFound): http.Error(w, order not found, http.StatusNotFound) default: slog.Error(get order failed, order_id, id, err, err) http.Error(w, internal error, http.StatusInternalServerError) } return } writeJSON(w, order) }這里要注意handler里一旦把錯(cuò)誤寫進(jìn)日志就不要再把這個(gè)錯(cuò)誤返回給調(diào)用方了也不要向上傳遞否則日志會(huì)出現(xiàn)“get order failed: get order failed”的重復(fù)。錯(cuò)誤在鏈上每層只該“處理”一次要么記錄日志要么繼續(xù)向上傳遞這是我在第4節(jié)要強(qiáng)調(diào)的失控場(chǎng)景之一。4. 包裝泛濫的三重失控套娃、重復(fù)日志與細(xì)節(jié)泄露Wrap是工具不是成就。你把它當(dāng)初戀一樣親錯(cuò)誤鏈就會(huì)變成俄羅斯套娃。以下三種失控我都真實(shí)踩過(guò)每次排查都像在剝洋蔥。4.1 套娃式錯(cuò)誤鏈排查時(shí)最怕看到這種日志套娃式錯(cuò)誤鏈的典型特征是每一層都在給同一個(gè)錯(cuò)誤加前綴但這些前綴加起來(lái)不產(chǎn)生任何額外信息。比如get order failed: query order from service failed: call repo find failed: find order from db failed: sql: no rows in result set看到這種日志的第一反應(yīng)不是感謝寫代碼的人“考慮周全”而是想問(wèn)他“你到底要讓我從哪里看起”錯(cuò)誤鏈長(zhǎng)度一旦超過(guò)4層中間至少有兩層屬于純儀式性Wrap。而且這種鏈條越長(zhǎng)errors.Is匹配的性能越差雖然單個(gè)錯(cuò)誤鏈沒(méi)那么夸張但架不住請(qǐng)求量大日志的可讀性也呈指數(shù)級(jí)下降。我的經(jīng)驗(yàn)是錯(cuò)誤鏈控制在3到5層之間。repository原始錯(cuò)誤是一個(gè)起點(diǎn)service一次的上下文wrap是關(guān)鍵信息handler在記錄時(shí)做一次“收口”語(yǔ)義補(bǔ)充。超過(guò)5層你幾乎一定能找到冗余的包裝。4.2 日志與Wrap雙重處理等于錯(cuò)誤被處理了兩次第二個(gè)失控場(chǎng)景是“既記錄又返回”。常見(jiàn)寫法是這樣func (s *OrderService) GetOrder(ctx context.Context, id int64) (*OrderDTO, error) { o, err : s.repo.FindByID(ctx, id) if err ! nil { slog.Error(find order failed, id, id, err, err) return nil, fmt.Errorf(query order %d: %w, id, err) } return toDTO(o), nil }repository層已經(jīng)把這個(gè)錯(cuò)誤寫進(jìn)了日志service層又記錄了一次到了handler層再記錄一次。結(jié)果就是線上排查時(shí)要看三遍同一條錯(cuò)誤Log系統(tǒng)里相同信息被檢索出來(lái)三份。社區(qū)里有一句流傳很廣的原則錯(cuò)誤應(yīng)該只被處理一次。要么你在當(dāng)前層記錄日志要么Wrap后向上傳遞但不要既記錄又傳遞更不要每層都記錄。落到實(shí)操上團(tuán)隊(duì)可以約定repository層不記錄錯(cuò)誤日志直接返回service層Wrap且不記錄handler層記錄日志但并不再向上傳遞。這樣一條錯(cuò)誤鏈上日志只會(huì)出現(xiàn)一次完整記錄干凈又精準(zhǔn)。4.3 面向用戶的錯(cuò)誤別讓內(nèi)部細(xì)節(jié)裸奔第三個(gè)失控是“把內(nèi)部細(xì)節(jié)暴露給外部”。有些項(xiàng)目為了省事在handler層直接返回err.Error()當(dāng)作API響應(yīng)數(shù)據(jù)庫(kù)驅(qū)動(dòng)的信息就順著接口漏出去了。外部調(diào)用方不僅能看到“dial tcp: lookup db.internal”這種內(nèi)網(wǎng)地址還能通過(guò)錯(cuò)誤文本猜測(cè)你的技術(shù)棧、中間件版本甚至能靠報(bào)錯(cuò)內(nèi)容做進(jìn)一步的注入試探。正確的姿勢(shì)是內(nèi)部錯(cuò)誤在service層使用%w保留完整鏈在handler層只輸出一層穩(wěn)定的錯(cuò)誤碼或通用文案。對(duì)外輸出的錯(cuò)誤信息應(yīng)該脫敏對(duì)內(nèi)保留的錯(cuò)誤鏈應(yīng)該盡量完整。這兩者并不矛盾只是作用對(duì)象不同內(nèi)部日志看的是“為什么”外部響應(yīng)看的是“下一步怎么辦”。4.4 哨兵錯(cuò)誤的隱性破壞用了%v斷的不僅是鏈最后一種失控尤其隱蔽項(xiàng)目里定義了哨兵錯(cuò)誤sentinel error后續(xù)卻用%v包裝它。前面代碼已經(jīng)驗(yàn)證過(guò)fmt.Errorf(xxx: %v, err)輸出文本沒(méi)問(wèn)題但errors.Is找不到目標(biāo)了。于是業(yè)務(wù)里errors.Is(err, ErrOrderNotFound)永遠(yuǎn)返回false最終被handler當(dāng)成“internal error”返回500客戶端拿到一個(gè)沒(méi)頭沒(méi)腦的服務(wù)器錯(cuò)誤。這種問(wèn)題在開發(fā)環(huán)境幾乎測(cè)不出來(lái)因?yàn)殚_發(fā)環(huán)境里大部分請(qǐng)求都成功只有到了線上流量大、分支多的時(shí)候某些異常路徑才被觸發(fā)緊接著就被幾百個(gè)“500 internal error”的告警淹沒(méi)。如果你在排查這類故障時(shí)發(fā)現(xiàn)“明明錯(cuò)誤信息里寫著order not founderrors.Is卻不命中”不用懷疑八成就是某個(gè)位置的Wrap用了%v。5. 一次訂單查詢故障errors.Is如何在三層鏈里精準(zhǔn)定位理論講多了來(lái)一段實(shí)戰(zhàn)復(fù)盤。這是發(fā)生在我負(fù)責(zé)的電商訂單服務(wù)里的真實(shí)案例雖然細(xì)節(jié)做了簡(jiǎn)化但排查鏈路完全還原。5.1 故障現(xiàn)場(chǎng)一個(gè)只留下“internal error”的告警某個(gè)周二下午訂單列表接口的告警突然響起來(lái)成功率掉到97%。當(dāng)時(shí)開發(fā)環(huán)境、測(cè)試環(huán)境全都正常只有線上偶發(fā)性失敗。看告警日志handler層記錄的只有一行l(wèi)oad order list failed: internal error這不是真實(shí)的錯(cuò)誤鏈而是handler把錯(cuò)誤脫敏成了internal error輸出真正的錯(cuò)誤鏈寫在了另一個(gè)字段里。我打開日志詳情一看完整錯(cuò)誤是load order list failed: marshal order 918273 failed: json decode order row failed: unexpected end of JSON input三層鏈每一層都有信息哪張訂單918273、哪個(gè)操作marshal、從哪個(gè)環(huán)節(jié)開始出問(wèn)題json decode order row。這是當(dāng)初嚴(yán)格按照“repository不包、service包一層、handler脫敏記錄”的規(guī)范留下的成果問(wèn)題在于——光看文本我還是不知道哪張訂單的數(shù)據(jù)壞了。5.2 順著錯(cuò)誤鏈逐層拆解找到真正的壞環(huán)節(jié)接下來(lái)就是用errors.As提取根因類型的時(shí)候。因?yàn)樽罾飳邮莏son decode order row failed: unexpected end of JSON input我懷疑是某個(gè)訂單行的字段非法JSON導(dǎo)致json.Unmarshal解析失敗。于是我在排查用的臨時(shí)調(diào)試端點(diǎn)里加了一段代碼var syntaxErr *json.SyntaxError if errors.As(err, syntaxErr) { log.Println(json syntax error at offset:, syntaxErr.Offset) }結(jié)果還真提取出來(lái)了offset精確指向某個(gè)訂單描述字段的斷點(diǎn)。我順著這條線索找下去發(fā)現(xiàn)某個(gè)訂單的payload字段在寫入時(shí)被上游系統(tǒng)截?cái)鄬?dǎo)致JSON內(nèi)容不完整。問(wèn)題定位到數(shù)據(jù)污染而不是代碼邏輯Bug。之所以能這么高效正是因?yàn)殄e(cuò)誤鏈上沒(méi)有斷點(diǎn)repository的原始錯(cuò)誤類型*json.SyntaxError經(jīng)過(guò)service和handler兩層Wrap之后仍然保留在鏈里errors.As從最外層一路穿透到最內(nèi)層準(zhǔn)確提取出了細(xì)節(jié)。如果中間任何一處用了%v所有結(jié)構(gòu)化信息都會(huì)變成純文本我就只能寫正則去匹配那個(gè)offset甚至可能被迫重新打開線上數(shù)據(jù)做全量掃描。5.3 如果當(dāng)初用了%v這次的排查會(huì)是什么體驗(yàn)假設(shè)當(dāng)初service層寫的是fmt.Errorf(marshal order %d: %v, id, err)這次事故的排查體驗(yàn)馬上變成另一番光景日志里只能看到一串文本errors.As完全失效想確認(rèn)根因是不是JSON解析錯(cuò)誤要么靠人肉讀日志猜要么把訂單詳情全量拉出來(lái)重新Unmarshal一遍驗(yàn)證。在最壞情況下線上一個(gè)偶發(fā)錯(cuò)誤能讓人排查一整天。而正確配置%w之后整個(gè)排查從“猜”變成了“查”錯(cuò)誤鏈上的每一層都有明確信息errors.Is和errors.As把結(jié)構(gòu)化判斷變成程序行為。這個(gè)體驗(yàn)差異就是Wait與Not Wait之間最直白的性價(jià)比對(duì)比。6. 六條Wrap心法寫給我的團(tuán)隊(duì)也寫給你說(shuō)了這么多最后沉淀幾條我在實(shí)際項(xiàng)目中反復(fù)校驗(yàn)過(guò)的原則。它們不是什么高深理論就是寫在團(tuán)隊(duì)Wiki上的約定但確實(shí)讓錯(cuò)誤處理從“個(gè)人品味”變成了“可執(zhí)行的規(guī)范”。6.1 心法一有信息增益才Wrap每次動(dòng)手寫fmt.Errorf(xxx: %w, err)之前先問(wèn)自己這句話有沒(méi)有增加任何一條“前一層不知道的信息”如果有Wrap如果只是給錯(cuò)誤換個(gè)說(shuō)法停手。信息增益這個(gè)判斷標(biāo)準(zhǔn)能過(guò)濾掉八成儀式性包裝。6.2 心法二層級(jí)之間必須Wrap層級(jí)之內(nèi)少Wrap跨層傳遞錯(cuò)誤時(shí)必須Wrap因?yàn)槟悴荒軄G掉調(diào)用方向的上下文在同一層內(nèi)調(diào)用工具函數(shù)時(shí)不要每個(gè)函數(shù)都Wrap否則你會(huì)收獲一條三層起步的套娃鏈。收口原則很簡(jiǎn)單從哪一層進(jìn)了這個(gè)錯(cuò)誤就從哪一層加上第一層業(yè)務(wù)上下文中間的內(nèi)部函數(shù)保持原樣。6.3 心法三需要被程序判斷的錯(cuò)誤必須%w其余按需選擇如果一個(gè)錯(cuò)誤會(huì)被上層用errors.Is判斷比如哨兵錯(cuò)誤或用errors.As提取比如*net.DNSError必須用%w。如果這個(gè)錯(cuò)誤只是合并成日志給人看不再參與程序邏輯判斷%v其實(shí)更安全——因?yàn)槟悴幌M{(diào)用方和內(nèi)部實(shí)現(xiàn)細(xì)節(jié)產(chǎn)生耦合。6.4 心法四面向用戶的錯(cuò)誤脫敏面向日志的錯(cuò)誤保鏈對(duì)外響應(yīng)永遠(yuǎn)只暴露“用戶能采取行動(dòng)”的錯(cuò)誤對(duì)內(nèi)日志永遠(yuǎn)保留“開發(fā)者能定位根因”的完整鏈。兩者不能顛倒一旦內(nèi)部細(xì)節(jié)漏到外部接口你不只泄露了實(shí)現(xiàn)還把安全隱患交給了別人。6.5 心法五日志和Wrap二選一別兩個(gè)都做記錄日志本身是一種“處理”Wrap繼續(xù)上傳是另一種“處理”。在同一個(gè)層面既記日志又向上Wrap等于把一個(gè)錯(cuò)誤處理了兩遍日志系統(tǒng)里立刻出現(xiàn)重復(fù)信息。要么只記不傳要么只傳不記這個(gè)約定越早定下來(lái)后期排查越輕松。6.6 心法六哨兵錯(cuò)誤和自定義錯(cuò)誤類型都是對(duì)外API別輕易改一旦ErrOrderNotFound這種哨兵錯(cuò)誤被定義并廣泛使用它就成為了團(tuán)隊(duì)內(nèi)部模塊之間的契約。改動(dòng)它的文本信息通常還能忍errors.Is是按身份判斷不看字符串但改動(dòng)它的語(yǔ)義范圍或刪掉自定義類型里的字段會(huì)讓所有依賴方一起遭殃。任何對(duì)錯(cuò)誤API的變更都該走和接口變更一樣嚴(yán)格的評(píng)審流程。最后再分享一點(diǎn)個(gè)人感受我見(jiàn)過(guò)太多團(tuán)隊(duì)花大把時(shí)間爭(zhēng)論“要不要Wrap”卻沒(méi)有花十分鐘把錯(cuò)誤鏈的規(guī)范寫進(jìn)文檔。其實(shí)標(biāo)準(zhǔn)庫(kù)errors包設(shè)計(jì)得非常收斂核心就是“保留鏈、可判斷、可提取”這九個(gè)字。真正讓Go錯(cuò)誤處理難用的往往不是語(yǔ)言本身而是我們對(duì)“信息增益”和“層級(jí)邊界”缺乏統(tǒng)一認(rèn)識(shí)。把這兩件事想透了To Wrap or Not to Wrap就不是靈魂拷問(wèn)只是一道有標(biāo)準(zhǔn)答案的工程選擇題。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
5月丁香六月婷婷| 色婷婷免费视频| 狠狠色激情综合| 亚洲一二三网| 天天日天天爽| 在线观看av网站| 综合亚洲色色| 91啪啪啪啪| 国产在线黄色| 天天爱综合网| 色婷婷丁香中文在线播放| 久久久人妻| 色噜综| 激情国产综合| 五月天激情综合网| 任你爽视频| www.日韩艹| 激情婷| 天天日天天摸| 97干在线视频| 六月丁香激情| 欧美日本va| 久久婷婷五月综合色奶水99啪| 欧美大肥婆大肥BBBBB| 激情五月天综合| 国产精品久久久久久白浆色欲| 国产真人做爰视频免费| 五月丁香激情综合网| 丁香婷婷五月综合影院| 五月婷婷久久开心网| 成人视频免费观看高清完整版在线观看| 天天肏高清在线| Va另类视频| 六月丁香久久| 丁香五月激情婷婷视频| 色色激情网| 超级碰碰碰久久网站| 伊人在线视频| 婷婷伊人五月天| 噜噜久| 提提热五月天婷婷| 99热日韩| 久久女人天堂| 99re热在线视频| 国产精品久久久久久久久久久久| 五月婷婷色| 五月丁香六月婷婷欧美综合| 五月天 婷 欧美亚洲| 色色网站免费观看| 5月丁香六月婷婷| 九九青青草成人| 婷婷五月天堂| 91九色网| 五月综合777| 色色婷婷五月天| 狠狠久久婷| 久久色六月| 丁香婷婷六月| www.五月天| 亚洲人人操| 91久久九久久九久久九久久九久久| 天堂AV在线看| 九九热婷婷| 色五月丁香六月欧美综合| 天干天天干天天天天天| 色婷婷九月综合| 成人做爰A片免费看视频| 成人AV在线电影| 97在线刺激| 天天操人人干| 亚洲中文字幕AV| 99自拍视频在线观看| 伊人激情综合网| 五月婷婷六月丁香综合| 最近免费中文字幕大全高清大全1 免费看欧美成人A片无码 | 婷婷她六月天| 狠狠干在线视频| 婷婷开心综合人妻小说网址| 噜噜狠狠色| 色五月人妻| 天天操天天曰| 五月综合久久| 日韩野外 无套| 影音先锋男人AV资源站| 91免费看片| 亚洲中文av| 色婷婷五月天中文字幕| 开心五月激情婷婷| 99人人操| 五月六月丁香激情视频| 丁香六月无码| 99热6精品| 天天色粽合合合合合合合| www.婷婷六月天| 99综合视频一体| 无码AV免费精品一区二区三区| AA片在线观看视频在线播放| 91丨九色熟女丨首页| 日韩一级A片黄色| 九九热a| 亚洲性爱干干| 碰碰女| 色婷婷色99国产综合精品| 嫩BBB搡BBBB榛BBBB| 色www99| 久久加勒比| 伊人春天av| 色婷婷国色天香综合| 激情五婷网| 亚洲婷婷欧美婷婷| 丁香六月五月天| 激情五月黄色| 久久久中文| 久色成人| 久久婷婷综合五月天| 大香蕉啪啪网| 91超碰人人操| A久网| 六月婷婷激情图片| 操婷婷基地| 热99这里只是精品| www激情com| 激情五月婷婷综合| 色欲影香| 久久这里有精品视频| 99,色| 日本久热| 婷婷激情综合网| 99久久97| 色五月在线观看| 日本婷婷| 超碰免费人妻| aaa久久| 538在线精品| 久久婷婷五月激情综合| 五月丁香六月婷婷婷婷| 亚洲视频在线观看| 午夜亚洲国产精品av一区二区| 少妇口诉沐足视频播放器网址| 97色97干| 午夜成人综合| 欧美影院| 大香蕉伊人99| 久婷| 美日韩成人| 另类小说激情五月天| www.夜夜操.com| 91碰超| 天天干com| 色综合五月天| 色五月天成人在线| 婷婷久久色五月婷婷久久久| 狠色狠色综合久久| 色婷婷色丁香色欲av| 激情伊人六| 激情第四色| 色婷婷久久综合| 99热99久久| 精品爆操| 亚洲综合99| 色婷婷久久| 五月婷婷影院| 久久人妻乱子伦| 99热网站| 色丁香久综合在线久综合在线观看| 久久激情五月婷婷| 中文字幕日韩无码制服诱或| 国产精品 的国产| 俺去也综合| 天天干天天av天天射| 天天插天天日天天爽| 久久性爱视频| 五月天婷婷高清无码| 99热网精品| 久久五月天黄色五月天色网址| 色婷婷丁香五月| 都市激情久久| 日本三级中国三级99人妇网站| 婷婷精品在线| 婷婷啪啪| 97色色在线视频| 99热九九九九| 97碰| oVV4WIB3vFi8D| 丁香婷婷欧美综合| 五月丁香五月婷婷| 99热这里只有精品手机在线观看| 亚洲综合五月天婷婷| 天天综合亚洲综合| 婷婷久久性爱| 亚洲V国产V欧美V久久久久久| 国产激情久久| 69天堂99| 丁香六月婷婷综合| 综合六月激情婷婷| 黄色五月婷婷| 97色射| 俺去也五月| 超碰无码318604| 97碰啪啪| 人人色AV| www.久久久久久| 噜啊噜在线| 亚洲激情av| 九九热在线视频| 天天操天天爱天天玩| 人人草碰| 极品人妻VIDEOSSS人妻| 欧洲色色| 亚洲va欧美va国产综合久久久| 五月婷综合激情| 91超级碰| 亚洲热热视频| 天堂婷婷丁香六月网| 色色九区| www五月婷婷| 久大香蕉| 成人免费va| 啪啪色激情五月天| 丁香九月综合激情| 久久婷五月天| 色婷婷五月基地在线| 色色欧美。| 日本色综合| 五月丁香婷婷爱激情综合网| www.婷婷com| 五月天激情四射网站| 婷婷五月丁香综合| 久久婷婷色五月| 综合久久综合久久| 人人操人人添人人摸97| 欧美成人在线观看| 欧美大肥婆大肥BBBBB| 久久久久这里只有精品| 99色热综合| 五月丁香91| 女同在线9| 丁香五月久久| 激情伊人| 99九九在线视频| 婷婷五月综合在线视频| 精品婷婷五月天| 色狠狠色综合久久久绯色AⅤ影视| 免费观看全黄做爰的视频| 青青草原亚洲天堂| 美妞av| 九九色色| 九月色婷婷综合亚洲| 色图亚洲91| 久久久亚洲精品一区二区三区浴池| 伊人五月综合网| 色婷婷六月| 五月丁香另类网| 天天操天天曰| 九九热在线精品| 性婷婷| 亚洲黄色影视| 亚洲综合一区二区| 超碰99热精品| 五月婷婷啪啪啪| 久久大香蕉丁香| 中文字幕无码人妻少妇免费视频 | 丁香五月大香蕉AV| 五月激香蕉网| 久久久久久久久久久久久久久久久精典| 69精品人人人人| 婷婷丁香十月| 被男人添B超爽视频| 96丁香六月婷婷蜜桃综合久久| 99热在线精品播放| 天天插综合网| 国产69久久久欧美黑人A片| 99热这里只有精品23| 久久er免费视频| 五月婷婷av| 天天干夜夜谢| 亚洲成人综合在线| 日日舔夜夜操| 日本无va视频| 婷婷五月天改成什么了| 天天爽人人综合免费7799| 婷婷va| 超碰色热| 五月丁香另类网| 国产亚洲精品久久久久久郑州| 九九精品自拍| 在线中文av| 激情丁香九九五月综合网| 欧美成人性爱网| 天天操夜夜肏| 日本成人小说婷婷六月| 五月婷婷视频ab| 伊人激情啪啪| 91精品久久久久| 欧美色色干| 成人一区在线观看| 欧美大道不卡| 婷婷激情六月综合| 丁香五月天网站| 日韩99视频| 无码激情AAAAA片-区区| 丁香五月婷婷色| 99精品久久久久久久婷婷| 97色色色| www.精品99| 成人免费高清在线播放| 人人操人| 人人插9| 丁香婷婷五月综合| 91精品久久久久久久| 99热99在线精品| 婷婷激情97| 99热九九九九| 伊人大香久久| 操逼六区| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 久久免费操| 五月花婷婷| 九九色色| 99热97| 亚洲不卡| 色色色综合网| 影音先锋男士资源网一区| 91操在线| 99re这里只有精品99| 色婷丁香五月| 婷婷五月天电影区小说区| 久久久久久人妻| 99热老网站| 天天爽天天干| 婷婷丁香大香蕉| 91jiuseshunv| VA色婷婷| 色五月激情基地| 国产午夜精品久久久观看| 天天干天天干天天干天天干天天干天天干天天| 99在这里有精品| 五月天综合视频| 婷婷刺激综合| 色五月天电影| 欧美日韩成人h| 色婷婷综合在线| 99久久亚洲精品视频| 色欲丁香久久| 日韩99视频| 丁香五月天婷婷激情| 亚洲三级无码| 金桔一区二区ab地址| 亚洲AAAA网| 99资源人人| 国产avapp 网| 五月婷婷网站| 久久九九综合| 中文字幕97超级碰| 久久色五月天综合网| av网址在线| 激情五月天久久| 67194成I人在线观看线路1| 森林影视大全,最好看的2019年视频| 色五月女| 综合久久9| 亚洲无码11| 极品少妇高潮啪啪AV无码| 欧美三9久九观看| 97资源碰碰在线| 99热亚州综合| 久综合色| 九九热这里只有精品9| 精品成人在线观看| 26uuu亚洲欧美日本| 色婷婷婷婷| 丁香五月 无码| 五月开心六月婷婷在线播放网站| 国产成人综合在线| 中文av在线观看| 激情综合色五月六月婷婷| 97碰碰在线看视频免费| 色开心五月丁香| 色五月aV| 色婷婷久久| 丁香六月婷婷色播| 色色网站免费| 亚洲精品第一国产综合亚AV| 色五月激情五月丁香五月婷婷啪啪综合| 激情小说五月天| 九月婷婷在线视频| 第六色在线| www.久久| 色五月色五天色情网| 噼里啪啦在线观看免费完整版视频| 四季AV综合网| 天天做天天爱| 日韩美女羞羞网站在线观看| 亚洲天堂aaa| 影音先锋男人女人| 五月丁香婷婷啪啪综合网| 疯狂做受XXXX高潮A片| 五月丁香色婷婷色| 99日视频在线| 色偷偷色婷婷| 丁香综合久久| 99爱视频在线| 综合激情sV| 5月婷婷五月天| 欧美69久成人做爰视频| 夜夜www| www.婷婷五月| 激情五月婷婷免费视频| 婷婷五月天伊人网| 深爱女色婷婷丁香五月亚洲图区| 伊人在线视频| 五月人人丁香婷婷五月人人丁香| 超碰av在线| 亚洲色精彩| 91婷婷| 色色五月天丁香| 久久婷婷网站| 色色综合成人网| 五月激情在线| 丁香婷婷激情综合五月激情| 婷婷色色五月天| 亚洲操逼网| 婷婷色网| 人妻操逼| 日本在线播放97| 五月天婷婷激情春色小说| 逼特逼在线免费播放| 能看的AV网站| 日本三级片片| PORNY九色9l自拍视频成人| 九九re精品视频在线观看| 丁香六月激情| 亚洲日本激情| 日韩熟女啪啪视频| 色色色99| 99热九九这里只有精品| 欧美性做爰大片免费看办公室| 天天草天天舔| 91碰碰碰久久久久| 熟女网站久久| 99久久国产宗和精品1上映| 熟女色色一区二区| 狼人婷婷综合| 青草激情综合| 久久婷婷一级片| 婷婷五月天首页激情| 91凹凸在线| WWW,激情五月天,COM| 国产精品人人做人人爽人人添| 日韩六六久久电影| 九月丁香八月婷婷久久综合久97| 国产在线黄色| 婷婷丁香五月精品| 色99婷婷五月天| 伊人99热| 天天夜天天色天天| 国产精品成人AV在线| 99视频这里有精品| 精品久久66| 另类激情五月| AV成人在线网站| 99久久五月婷婷| 五月婷婷色| 热热色色五月天婷婷| 综合网亚洲| 色婷婷丁香网| 九九热91| 成人综合网站| 六月丁香色色| 色五月综合网| 色婷婷狠狠| 色播jjjj| 日韩操人| 五月婷啪啪| 激情综合网,婷婷五月天| 婷婷五月综合啪| 天天日天天插| 97碰人人操| 五月六月丁香婷婷在线观看| 狠狠99| 亚洲字幕AV一区二区三区四区 | 婷婷五月天久久久| 久热视频这里只有精品| 五月丁香六月婷婷精品| 九色 在线| 色999五月色| 99爱这里只有精品免费视频| 色色婷五月天| 五月婷婷影院| 丁香久久九九99| 国产亚洲精品AAAA片APP| 超碰人人干| 色青青视频| 99久久综合网| 久久五月婷婷丁香| 午夜激情四射影院| 综合欧美五月婷婷| 91综合在线| www.色九月| 激情综合亚洲色婷婷五月| 超碰在线国产| 99热在线精品观看| 五月丁了香蕉综合| 婷婷综合久久综合| 欧美综合激情| 嫩BBB搡BBBB榛BBBB| 天天肏夜夜肏| 五月丁香好婷婷A片网| 国产资源91在线| 成人久久天天x资源站| 久久久激情视频| 97热九九| www.99热这里精品| 色婷综合| 亚洲AV日韩AV永久无码网站| 色色五月婷婷久久| 久久综合干| 无码人妻一区| 丁香五月欧美色综合| 欧美美女国产日韩一区二区久| 在线婷婷| www色色com| AV在线大香蕉| 综合色情网| 99视频网址| www.激情com| 丁香色五月AV在线| 91色干| 99热在线网站| 久久区区一二三av| 啪啪操操| 任你日视频| 在线观看av网站| 超碰97久久| 51XX嘿嘿午夜无码| 四季AV综合网| 欧洲一区二区| 99热超碰在线| 亚洲精99| 另类国产综合| 婷婷十月激情综合网| 日韩爱操视频| 丁香婷婷九月| 99综合网| 天天日天天操心| www.色五月| 丁香五月亚洲综合丝袜| 色九九九综合| 色女人久久| 欧美 日韩 成人 在线| 婷婷天堂综合| site:901-07.com| 丁香婷婷激情五月| SS丁香五月婷婷| 婷婷五月精品中文字幕| 婷婷六月中文字幕| 九九热经典视频在线观看| 综合一本道| 日本乱子人伦在线视频| 老师高潮流白浆喷水的A片| 玖玖91| 一起操最新网址| 99热99| www.99婷婷| 婷婷丁香视频在线观看免费| 开心五月色婷| 九色啦蜜臀| 性一交一乱一交A片久久四色| 97热这里只有精品| 色日本颜射| 9999综合99综合人| 久久这里只有精彩| 五月情涩综合婷婷| 狼友视频在线观看18| 久久综合激情| 色吊丝99| 掩去也综合五月视频| 色欲五月天| 久久一热| 天天玩夜夜操| 婷婷桃色网| 色婷婷综合久久久久| 天天婷婷天天| 久久五月天网| 中字幕视频在线永久在线观看免费| 色五月色五天色情网址| 成人av免费观看| 久久小视频| 婷婷五月丁香综合桃花色网| 五月色婷婷在线观看| av五月天婷婷丁香| 激情综合五月天| 五月色情婷婷| 婷婷五月天成人动漫 | 五月天影院婷婷在线观看| 色五月激情| 五月丁香六月激情综合| 狠狠色丁香婷婷五月| 26uuu色噜噜精品一区| 九九色综合九九色| 99国产精品久久久久久久久久久 | 美女激情综合| 五月精品免费XXX| 91九色在线| 九九色网| 开心婷婷五月花| 婷婷五月天AV在线| 五月桃花网综合| 色婷婷九月| 99精品视频免费| 开心激情站| 色色色在线观看| 五月婷婷久久网| 二色av| 婷婷性爱综合| 狠狠操在线视频| 色色色免费视频| 超碰在线网站| 男人的天堂五月丁香| 六月丁香啪啪| 91丨九色丨东北熟女| 激情五月天小说网| 婷婷激情五月呦呦| 丁香五月婷婷六月婷| 三级三久久线久久99久目本WW| 久热视频97AV在线观看| 狠狠狠狠狠狠狠狠狠狠狠色宗合图片| 精品久热| 久操激情| 色欲午夜无码久久久久久张津瑜 | 久久A热| 天天综合网在线| 婷婷五月丁香91| 天干夜夜操| 六月婷婷色色网| 深爱激情九九五月天| 五月亭亭直播| 伊人久久婷婷| 大香蕉五月婷婷丁香| 99久久激情视频| 疯狂做受XXXX高潮A片| 综合久久97| www.一起草av| 婷婷激情小说| 欧洲区自拍| 97色色在线视频| 欧美日韩成人综合9| www.91有码.com| 天堂成人A片永久免费网站| 欧美婷婷六月丁香综合色| 九九久久99精品免费观看www| 99热99| 777色色色| 操比激情五月| 五月丁香中文| 草草视频91| 亚洲色综合| 激情综合九月| 丁香五月天堂网| 99A片| 五月婷婷色色色| 九九九九国产| 激情久久久| 激情综合网五月婷婷| 天天激情5月天亚洲| 色综合伊人网| 五月丁香啪啪激情| 久久综合婷婷激情| 亚洲五月色| 米奇激情婷婷| 91AV婷婷| 亚洲这里只有精品| 日韩抽插操逼| 成人av在线网| 五月花激情| 人人搡人人| 欧美色色色色色色色| 爱射综合| 国产做爰视频免费播放| 婷婷丁香人妻天天| 五月丁香婷草| 久久99视频| 丁香婷五月| 丁香9月婷婷| 夜夜躁婷婷AV| 六月婷婷深深爱| 日韩国产在线精品| 婷婷五月情| 中文字幕不卡+婷婷五月| 五月天综合在线| 色婷婷色情| 色色色色色综合| 久热九九| 久热这里只有精品视频6| 色吊丝av中文字幕| 婷婷狠狠操| 青青福利网| 日亚二欧美| 另类视频五月天| 亚洲麻豆乱码国产2028| 婷婷趴趴| 亚洲精品V天堂中文字幕| 婷婷色狠狠| 丁香婷婷啪啪| 超91热| 久热黄色| 五月综合亚洲婷婷| 六月婷婷激情图片| 色插人人| 婷婷性爱| 亚洲欧美一区二区三区爱爱动图| 日本三级黄色大片| 思思热99er| 午夜丁香| 激情五月天开心总和网| 91九色国产| 在线观看玖玖资源免费观看| 97超级操操| 五月停亭六月,六月停亭的英语 | 丁香五月影视| 噜噜噜噜在线| 婷婷五月天黄色| 雪千夏麻豆| 九九热精品视频| 日日操夜夜骑| 激情五月综合免费| 人人97碰| 91成人看| 欧类av怡春院| 亚洲AV免费在线| 亚洲激情免费视频观看| 有码人妻久久| 国产综合视频婷婷| 天色色综合网| 欧美性生交xXxX久久久| 91中文在线| 婷婷激情综合| 丁香六月亚洲综合| 婷婷丁香色五月天久久88| 免费97碰碰| 大香蕉网 久久| 99热在线观看| 婷婷六月啪啪| 五月色丁香| 思思热AV| 东北婷婷五月天| 永久的网站AAAA| 中文AV在线观看| 人人操婷婷| 人妻丰满精品一区二区A片| 日本精品99| 九九热婷婷| 亚洲色在线观看| 色五月婷婷DVD| 人人色性网| 成人噜噜网| 99激情网| 91久久综合亚洲噜噜成人在线 | 性日本精品| 色大综合| 五月婷婷六月爱| 丁香五月AV综合| 亚州精品色情无码A片| 五月婷婷综合久久| 九月久久婷婷| 九9九9无码| 色综合播放| 色色999三级片| 丁香五月综合狠狠| 天天久综合网永久入口18| 五月开心网| 99热这里只有精| 色婷婷网| 色情婷婷| 日韩成人无码| 午夜精品人妻无码一区二区三区| 99re在线播放| 色五月激情五月| 国产乱妇乱子在线播视频播放网站| 婷婷色中文字幕| 婷婷亚洲天堂| 色婷婷成人做爰A片免费看网站| 丁香五月性| 中文字幕永久在线| 欧美性生交XXXXX无码小说| 亚洲成av人影院| AA片在线观看视频在线播放| 欧美综合激情| 极品五月天| www五月天com| 任你日视频| 99热精品在线| tingting五月天亚洲| 六月丁香婷婷色综合| 开心五月丁香婷婷| 天天撸天天干天天插| 精品乱码久久久久| 婷婷九月综合| 人妻久久久久久| 国产FREESEXVIDEOS性中国| 亚洲乱码日产精品BD| 91丁香色| www久久久久| 99激情网| 天天摸,天天爽| 国产探花AV在线| 五月丁香中文字幕| 原琪琪色影院| 色五月综合网| 大香蕉久久青青| 俺去婷婷 丁香| 4399在线观看免费毛片| 99久久婷婷国产综合精品青桔 | 久久久久9999| 国产亚洲99久久精品| 色婷婷99| 九热视频在线伦| 婷婷综合色网| 日日夜夜狠狠婷婷色| 五月婷婷六月奇米网丁香| 色99在线观看| 九月婷婷| 久久久精品婷婷五月天| 久久大香蕉视频| 五月香蕉综合| 色99热| 色99在线视频| 亚洲视频在线观看| 視频福利乱色| 色综合色婷婷色伊人| 五月丁香婷庭在线| 欧美综合五月丁香六月婷| 五月大香蕉| 九九精品婷| 开心五月婷婷五月| 韩国三级五月天婷婷。| 开心五月婷婷激情| 午夜微拍福利| 五月婷婷综合激情| 免看黄大片AA | 操人久久| 五月丁香色狠狠干大屄| 五月天丁香久久| 色99视频| 亚洲成人AV一区在线观看| 97香蕉碰碰人妻国产欧美| 国产一级婬片毛片| 激情爱爱网站超大免费| 国产又色又爽又黄又免费| 亚洲爱婷婷| 婷婷五月天,影院| 久久五月天综合| 亚洲亚洲人成综合网络| 98永久精品| 五月社区婷婷激情| 国产91视频| 欧美日韩成人h| 桃色Av色哟哟| 99热97| 欧美三级巜人妻互换| 123日本不卡在线| 五月开心婷婷中文字幕| 五月丁香啪啪网| 国产亚洲在线| 99热在线精品播放| 丁香丝袜五月| 亚洲综合激情五月久久| 色狠狠综合入口| 激情综合色五月丁香六月亚洲| 五月丁香久久| 丁香五月天天| 色久综合天天做视频| 婷婷六月啪啪| www.日韩国产| 色五狠狠| 黄色中文字目| 天天爱天天日| 久久婷婷91| 伊人丁香五月婷婷潮吹| 91dy.av| 99久久综合网| 91尤物九色在线| 精品人妻伦一二三区久| www,setingting| 婷婷五月成年人| 丁香五月大香蕉| 久久婷婷五月综合成人d啪| 五月丁香五月婷婷在线观看| 97色 五月天丁香| 天堂婷婷五月在线| 色婷婷电影网| 久久性刺激| 99性爱视频| 亚洲第一综合| 天天日天天狠狠操| 精品久久久人妻| 五月丁香花激情综合网| 五月天播播中文字幕| 性爱激情久久| 天天色官网| 六月五月天婷婷涩播在线| 天天爽天天爽天天爽天天爽天天爽 | 国产精品天天狠天天看| 亚洲第一色色色| 婷婷五月丁香基地| 狼人久草| 伊人五月综合网| 色婷婷综合久久久久| 国产婷婷综合在线免费视频| 婷婷激情六月天视频| 91蝌蚪窝视频在线| 狠狠狠五月婷婷六月丁香| 欧美性生交XXXXX无码小说| 五月婷婷开心深| 激情五月影院| 久久久久婷婷五月热综合| 婷婷狠狠干| 9久久精品视频| 亚洲va国产va天堂va综合va| 国产操逼网站| 五月天婷婷久久| 婷婷性爱视频在线| 欧美视频五区| 97操在线视频| 五月天婷婷在线观看| aaa丁香五月天| 五月综合激情网| VA国产在线综合网站| 双性美人被调教到喷水A片| www.五月激情.com| 久久久全国免费视频| 五月综合缴情网| 成人在线视频男人的天堂4399| 九九热在线精品视频| 五月婷婷草| 91超级碰碰碰| 五月丁香色色综合| 国产精品美女久久久久AV超清| 五月涩涩网| 天啪天啪天啪天啪| 婷婷色片| 激情小说五月天| 精品一二三区久久AAA片| 青青草视频福利| 99碰碰碰| 操操天堂| 激情五月天婷婷免费观看| 欧美色图片88| 激情五月天婷婷在线网址发给我| 激情综合99| 97精品综合久久| xxxx五月激情| 五月婷九月| 丁香九月综合| www.激情在线| 五月九九综合| 五月婷婷色色色| 青草性爱视频| 亚洲在线综合| 91久久九九| 久久久人妻| 一起草无码视频| 国产精品久久久久久久久久免费| 天天综合永久| 9999热在线免费观看| 97色色色色色| 99er久久| 玖玖爱资源站| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 亚洲激情四谢| 79精品视频在线观看,| 色久女| 免费观看欧美成人AA片爱我多深| www.日日夜夜| 成人在线视频一区| 五月婷婷性爱| 久播影院免费观看电视剧大全最新网| 人伦30P| 国产精品噜噜在线视频| 九九成人电影婷婷| 99热这里| 26UUU精品一区二区c〇m| 狠狠爱婷婷爱| 密着浓厚中出乚交尾GvG935| 亚洲网站999| 九九热99精品在线| 97操碰视频| 久久精品99国产精品日本| 欧美乱码国产一级A片| 婷婷五月AV| www.99操| 少妇性BBB搡BBB爽爽爽视頻| 99精彩视频| caopeng97日韩| 色色五月天丁香| 97 A I色色| 九月久久婷婷| 性爱久久| 日韩狠狠色| 婷婷色爱| 69堂午夜视频最新地址| 色色网91| 乱乱av| 色婷婷大香蕉| 99re热免费观看视频精品| 国产精品电影| 色欲婷婷五月天丁香| 人与禽A片啪啪| 天堂久久精品| 99热中文字幕久久| 青青草蜜臀| 99热大香蕉| 9l视频自拍九色9l黑人| 色五月婷婷色| 伊人久久大香线蕉av一区| 亚洲精品性色| 丁香六月婷婷开心| 97丁香婷婷| 九月婷婷在线观看| 香蕉AV777XXX色综合一区 | 日韩综合大黄| 77799热| 99久久婷| 丁香五月婷婷综合91| 91丁香色| 久久99久久99久久99人受| 综激情网| 婷婷刺激综合| jiqingliuyuetian| 天天撸夜夜爽| 色综合久久88色综合天天人守婷| 色丁香久久| 丁香五月手机在线| 97黑人精品区| 综合九九久久| 黄色毛片精品| 超碰在线观看caop| 91九九九九九九| 色色婷婷综合| 色欲AVV| 五月婷婷五月| 激情五月天小说网| 色婷婷五月在线| 丁香五月成人网| 久久婷婷五月综合伊人| 六月香五月婷| site:pzdcoin.com| 饮料下药迷倒漂亮女同事强干| 狠狠的日| 六月综合在线| 国产精品蜜臀99| 久久婷婷亚洲| 99熟女啪啪视频| 婷婷五月天高清无码| 五月亭亭六月激情| 婷婷综合激情| 天天日天天做天天舔| www.五月天婷婷| 91久久免费| www.99热精品| 影音先锋一区二区资源站| 亚洲六月色| 在线观看日韩12345区| 午夜成人av在线| 日噜噜色| 激情久久 婷婷| 91丨九色丨熟女丰满| 综合99视频| www.激情| 秋霞午夜理论| 开心五月丁香综合久久| 翔田千里无码| 色五月第四色| 亚洲美女网Va| 色婷婷操逼| 深爱激情五月网| 操一区| 精品香蕉99久久久久网站| 五月丁香久久综合91| 欧洲综合一区| 91在线日本| 色人久久| 91精品丝袜久久久久久| 成人在线日韩| 综合热无码| 色天天综合成人网| 激情五月天影院| 欧洲亚洲免费视频9| 色色日本| JAPANRCEP老熟妇乱子伦视频| 男人先锋久久| 五月激情婷婷四射| 91小黄书网址在线观看| caop在线视频| 综合激情婷婷| 激情色中文| 色五月婷婷、老熟女| 亚洲综合激情五月| 色色色地址| 综合久| 七月丁香婷婷 色色| 丁香六月婷婷社区| 99热主页日本| 五月丁香六月婷婷色| 激情性五月天免费小说视频| 久久人妻精品| 丁香五月综合| 丁香婷婷综合喷| 51XX午夜影福利| 9l视频自拍9l九色9l成人| 99精品视频免费观看,| 五月丁香婷婷开心| 女同激情久久av久久| 99热成人| 激情深爱五月天| 国产91资源在线| www.97干视频| 日本的α片xxxwww| 99热精品中文字幕| 久久久久久久久99精品| 伊人久久婷婷| 婷婷久久五月天中文字幕在线观看| 99re99在线看| 五月天激情在线视频| 婷婷激情五月综合| 免费播放片大片| 国产毛片精品一区二区色欲黄A片| 香蕉视频性爱BB做爱| 97婷婷五月激情六月丁香伊人| 婷婷综合| 色综合色香蕉网| 色婷婷五月影院| 99热这只有| 婷婷五月激情的图片| 91打屁股免费看| 亚洲婷婷91丁香| 日本性激情色播| 99热这里只有精品中文字幕| 丁香五月婷婷激情中文| 99色区| 噜噜吧天天爱| 91久久精品国产91性色TV| 成片免费观看大全| 天天草人人摸| 婷婷久月| 日韩人妻在线播放| 色色综合成人网| 婷婷五月天狠狠色| 婷婷综合仓库中文| 六月婷婷色综合| 五月婷婷丁香婷婷| 亚洲三级无码| 五月天伊人av| 色五月婷婷五月天激情综合| 婷婷色中文字幕| 色狠狠综合网| 激情五月天伊人影院| 天天操天天插| 97自拍视频在线| 亚洲综合99| 色婷小说| 无码G高清天| 激情图片五月天| 亚洲综合一区二区| 丁香五月综合福利视频导航| 丁香五月色| 色婷婷啪啪啪啪啪啪| 婷婷婷婷色| 在线看九一V图片| 五月丁香少妇A| 婷婷五月天久久| 色99在线视频| 偷拍五月丁香| 国精产品一区一区三区免费视频| 亚洲Va成人| 三级三久久线久久99久目本WW| 91日综合欧美| 五月色精品| 成人片黄网站色大片免费毛片| 婷婷5月色| 五月婷婷导航| 伊人久久综合| 狠狠搞亚洲| 1024操逼| www.思思99热| 在线18av | 色色色在线免费视频| 色99网站| 丁香五月天导航| 99亚州综合精品成人网| 丁香婷婷六月天| 5五月综合网亚洲| 激情久久 婷婷| 综合五月丁香六月婷婷| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 九热电影av| 五月成人天| 人妻中文字幕精品| 五月色网| 色五月美女| 婷婷丁香五月亚洲免费| 97偷拍对白视频| 五月丁香六月香综合激情| 狠狠爱青青草| 婷婷五亚洲| 超级碰91| 激情五月天www| 日韩婷久| 大天天伊人| 色情久久久| 四色永久成人网站| 99热这里只有精品26| 激情五月天婷婷| 99色热视频| 91久女| 天天激情站| 欧洲一区二区| 欧美婷婷综合| 伊人青草成人| 一区二区成人电影免费播放| 天天干com| 婷婷色在线播放| 91九色熟女| 狠狠色丁香五月婷巨| 色婷婷丁香A片区毛片区女人区| 激情小说五月天中文字幕| 伊人热在线大香蕉| 99国产视频网| av国产精品偷| 五月婷婷六月天| 五月天婷婷爱丁香中文字幕| 婷婷99狠狠躁天天久久久九九九| 美英法精品无码免费视频| 伊人玖玖网| WWW.99热| 婷婷欧美色| 成人免费超碰| 99热最新精品| 丁香久久综合| 99热这| 婷婷丁香五月噜噜噜| 玖玖婷婷婷丁香五月| 色五月激情| 91狠狠综合网| 精品一二三区久久AAA片| 美女妹子后射视频网站在线观看| 九九综舍久久| 婷婷伊人网| 五月婷婷啪啪网| 久大香蕉| 国产成人精品一区二区三区视频| 天天色综合网1| 色欲AV导航| AV在线观看网站| 无码少妇高潮喷水A片免费| 久久人妻视步| 国产资源在线视频| 色五月激情综合网| 人人草人| 亚洲思思热久| 男人的天堂av俄罗斯热| 亚洲AV日韩无码| 丁香六月爱综合| 夜色爱爱亚洲| 色色色网站| 婷婷五月天激情丁香|