99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Go錯(cuò)誤處理實(shí)戰(zhàn):掌握%w與errors.Is/As,避免錯(cuò)誤鏈?zhǔn)Э?/h1>

每年Go社區(qū)的“錯(cuò)誤處理大戰(zhàn)”一開打吵到最后的焦點(diǎn)幾乎都落在同一個(gè)問(wèn)題上到底要不要Wrap錯(cuò)誤就拿我的團(tuán)隊(duì)來(lái)說(shuō)代碼評(píng)審上最常見(jiàn)的一條評(píng)論就是“這里為什么沒(méi)加%w”而回復(fù)也高度統(tǒng)一“加了怕鏈太長(zhǎng)不加又怕斷鏈?!边@種擰巴其實(shí)很正?!狦o的錯(cuò)誤處理設(shè)計(jì)哲學(xué)與真實(shí)業(yè)務(wù)系統(tǒng)之間隔著太厚的膠水層語(yǔ)言本身只給了你一個(gè)極簡(jiǎn)接口type error interface { Error() string }可一條錯(cuò)誤從數(shù)據(jù)庫(kù)底層一路被拋出API網(wǎng)關(guān)中間還要穿過(guò)repository、service、handler好幾個(gè)層次每一層都得做一次莎士比亞式的選擇題To Wrap or Not to Wrap。這篇文章不打算站隊(duì)說(shuō)“必須全部Wrap”或者“最好別Wrap”我想結(jié)合這些年寫Go的實(shí)際感受把%w、errors.Is、errors.As這些工具到底解決了什么問(wèn)題、什么時(shí)候加Wrap是真的有信息增益、什么時(shí)候純屬自嗨式包裝講清楚。如果你正在為團(tuán)隊(duì)的錯(cuò)誤處理規(guī)范頭疼或者剛被代碼評(píng)審問(wèn)住“這里為什么不Wrap”這篇應(yīng)該能給你一個(gè)相對(duì)可落地的判斷框架。1. 老生常談的“err ! nil”怎么就成了社區(qū)年經(jīng)貼1.1 為什么Go寧愿啰嗦也不引入try-catchGo選擇顯式錯(cuò)誤處理是設(shè)計(jì)者對(duì)程序可讀性的一種偏執(zhí)。異常機(jī)制在Java、Python、C#那套體系里非常成熟它能把“正常流程”和“錯(cuò)誤流程”分開但代價(jià)是控制流變得不那么直觀——一個(gè)throw拋出來(lái)你根本不知道它會(huì)飛到哪里中間可能被某個(gè)catch吞掉也可能一直穿到最外層。Go設(shè)計(jì)者從一開始就不喜歡這種“隱秘的控制流跳轉(zhuǎn)”他們寧愿讓你在代碼里看到滿屏的if err ! nil也不愿意讓你在log里看到一句干巴巴的Unexpected error然后對(duì)著堆棧猜是誰(shuí)吞了異常。說(shuō)白了Go對(duì)錯(cuò)誤的處理方式繼承自C的經(jīng)驗(yàn)錯(cuò)誤就是值它和正常數(shù)據(jù)一樣得顯式傳遞誰(shuí)要用誰(shuí)就得接著。函數(shù)簽名(T, error)的約定把“可能失敗”這件事寫在了類型系統(tǒng)里。很多剛轉(zhuǎn)Go的人覺(jué)得這規(guī)矩?zé)┤说矣^察下來(lái)真正讓團(tuán)隊(duì)崩潰的從來(lái)不是if err ! nil多寫了幾行而是錯(cuò)誤出來(lái)之后怎么流轉(zhuǎn)、怎么保留上下文、怎么讓上游能感知到錯(cuò)誤的“身份”。這才是每年社區(qū)爭(zhēng)論真正的火藥桶。1.2 Go 1.13把“包裝”扶正了在Go 1.13之前想給錯(cuò)誤附加上下文幾乎全靠字符串拼接fmt.Errorf(xxx: err.Error())。問(wèn)題是拼完之后原始錯(cuò)誤的所有類型信息全部丟失。你不能對(duì)一個(gè)拼好的字符串調(diào)用errors.Is也不能從一串文本里掏出當(dāng)初那個(gè)*os.PathError或者sql.ErrNoRows。社區(qū)因?yàn)槭懿涣诉@個(gè)所以出現(xiàn)了github.com/pkg/errors這類庫(kù)用WithStack、Wrap的方式把堆棧和錯(cuò)誤綁在一起但問(wèn)題在于每個(gè)庫(kù)的約定不同A庫(kù)返回的錯(cuò)誤到了B庫(kù)沒(méi)法統(tǒng)一處理。2019年Go 1.13正式發(fā)布標(biāo)準(zhǔn)庫(kù)加入了errors.Is、errors.As、errors.Unwrap同時(shí)fmt.Errorf也支持了%w格式化動(dòng)詞。這個(gè)事件的意義不在于它發(fā)明了“錯(cuò)誤包裝”這個(gè)概念而在于它把包裝行為標(biāo)準(zhǔn)化了大家終于有了一個(gè)共同的基礎(chǔ)協(xié)議不同庫(kù)之間返回的錯(cuò)誤可以在同一條鏈上做統(tǒng)一判斷。從那時(shí)起Wrap就不再是某個(gè)第三方庫(kù)的專利而是每個(gè)Go開發(fā)者都會(huì)遇到的日常選擇。1.3 Wrap成了編碼規(guī)范里最大分歧點(diǎn)標(biāo)準(zhǔn)庫(kù)給了“能包裝”的能力但沒(méi)有規(guī)定“該不該包裝”。于是Wrap從技術(shù)問(wèn)題變成了風(fēng)格問(wèn)題而且很快演變成團(tuán)隊(duì)編碼規(guī)范里最容易被Challenge的分歧點(diǎn)。有人堅(jiān)持“每層都必須Wrap”理由是出問(wèn)題時(shí)日志里能看到完整的調(diào)用上下文有人堅(jiān)持“能不加就不加”理由是錯(cuò)誤鏈太長(zhǎng)以后根本沒(méi)法讀還有人夾在中間看心情包裝。其實(shí)這些爭(zhēng)論背后藏著一個(gè)更本質(zhì)的問(wèn)題錯(cuò)誤包裝的信息增益原則。每次Wrap都等于給錯(cuò)誤鏈加了一層“說(shuō)明文字”如果這層說(shuō)明不能讓下一個(gè)看日志的人更快定位問(wèn)題那它就不是上下文而是噪音。而要判斷增益是否存在得先把%w和%v的底層機(jī)制徹底搞清楚。2. %w與%v的一字之差決定了錯(cuò)誤鏈的生死2.1 一份代碼看清%w和%v的本質(zhì)差異很多剛接觸Go 1.13的開發(fā)者以為%w只是%v的“新寫法”兩者打出來(lái)的日志幾乎一模一樣于是習(xí)慣性選擇%v。這是最常見(jiàn)的誤解??聪旅孢@段代碼package main import ( errors fmt ) var ErrPermission errors.New(permission denied) func main() { base : ErrPermission wrapped : fmt.Errorf(open config file: %w, base) annotated : fmt.Errorf(open config file: %v, base) fmt.Println(wrapped :, wrapped) fmt.Println(annotated:, annotated) fmt.Println(errors.Is(wrapped, ErrPermission) :, errors.Is(wrapped, ErrPermission)) fmt.Println(errors.Is(annotated, ErrPermission):, errors.Is(annotated, ErrPermission)) }輸出結(jié)果會(huì)讓你意外wrapped : open config file: permission denied annotated: open config file: permission denied errors.Is(wrapped, ErrPermission) : true errors.Is(annotated, ErrPermission): false看到關(guān)鍵了嗎兩個(gè)錯(cuò)誤的展示文本完全一樣但程序化判斷能力天差地別。用%w包裝出來(lái)的錯(cuò)誤內(nèi)部實(shí)現(xiàn)了一個(gè)Unwrap() error方法標(biāo)準(zhǔn)庫(kù)可以通過(guò)這個(gè)鉤子沿著錯(cuò)誤鏈一層層往下找直到找到原始的ErrPermission而%v只是把錯(cuò)誤當(dāng)成普通數(shù)據(jù)澆進(jìn)字符串模板里鏈在那一刻就斷掉了。這就是“一字之差決定了錯(cuò)誤鏈的生死”的含義。日志里看不出區(qū)別但程序里區(qū)別極大errors.Is需要靠鏈去找哨兵錯(cuò)誤errors.As需要靠鏈去提取具體類型沒(méi)有%w這兩件事全都做不了。2.2 errors.Is、errors.As、errors.Unwrap三件套的適用邊界理解了%w之后再來(lái)梳理標(biāo)準(zhǔn)庫(kù)三件套的使用場(chǎng)景就不難了。errors.Is(err, target)沿著錯(cuò)誤鏈逐層比對(duì)判斷當(dāng)前錯(cuò)誤鏈上是否存在某個(gè)哨兵錯(cuò)誤sentinel error常見(jiàn)用例是判斷底層是否返回了sql.ErrNoRows、io.EOF這類可預(yù)期的錯(cuò)誤。errors.As(err, target)沿著錯(cuò)誤鏈查找第一個(gè)類型匹配的錯(cuò)誤并把目標(biāo)指針指向它。常見(jiàn)用例是提取出*json.SyntaxError、*net.DNSError這種結(jié)構(gòu)化錯(cuò)誤拿到內(nèi)部字段比如Offset、Op、Err做精細(xì)化處理。errors.Unwrap(err)只解開當(dāng)前這一層返回內(nèi)層錯(cuò)誤。它一般不出現(xiàn)在業(yè)務(wù)代碼里更多是給工具和調(diào)試用。三者配合的典型寫法是先errors.Is判斷語(yǔ)義層是否命中預(yù)期錯(cuò)誤不命中再用errors.As提取結(jié)構(gòu)信息。例如在網(wǎng)關(guān)代理里resp, err : http.Get(url) if err ! nil { var dnsErr *net.DNSError if errors.As(err, dnsErr) { // 知道是DNS解析失敗可以換個(gè)節(jié)點(diǎn)重試 return retryAnotherNode() } return err }這里如果上游沒(méi)有用%w保留*net.DNSError那errors.As永遠(yuǎn)只會(huì)返回false程序就只能對(duì)著字符串做fucking正則匹配——那感覺(jué)糟糕透頂。2.3 自定義錯(cuò)誤類型別漏掉Unwrap方法當(dāng)業(yè)務(wù)需要自定義錯(cuò)誤類型時(shí)很多人只記得實(shí)現(xiàn)Error() string方法卻忘了實(shí)現(xiàn)Unwrap() error于是自定義錯(cuò)誤永遠(yuǎn)無(wú)法向鏈條深處透?jìng)?。下面這個(gè)例子展示了正確的做法type TimeoutError struct { Op string Cause error } func (e *TimeoutError) Error() string { return fmt.Sprintf(%s: timeout: %v, e.Op, e.Cause) } // 關(guān)鍵讓這個(gè)類型可以被errors.Is/As穿透 func (e *TimeoutError) Unwrap() error { return e.Cause }有了Unwrap方法外層errors.Is(err, io.EOF)就能穿透TimeoutError去判斷內(nèi)層是不是EOFerrors.As也能從鏈上提取出*TimeoutError拿到Op字段。如果漏掉Unwrap自定義錯(cuò)誤就成了一堵墻所有內(nèi)層信息都被關(guān)死鏈從它這兒戛然而止。這里還有一個(gè)常見(jiàn)坑不要把Unwrap誤寫成返回自身。如果你在Unwrap()里返回e本身errors.Is會(huì)陷入無(wú)限循環(huán)直到棧溢出。標(biāo)準(zhǔn)庫(kù)判斷到“Unwrap返回了自己”時(shí)會(huì)panic但一旦錯(cuò)誤鏈特別長(zhǎng)這種bug排查起來(lái)反而更隱蔽。更安全的習(xí)慣是自定義錯(cuò)誤類型里永遠(yuǎn)只有一個(gè)cause字段專門用來(lái)保存內(nèi)部的原始錯(cuò)誤。3. 分層架構(gòu)里我堅(jiān)持Wrap的三個(gè)位置穿過(guò)機(jī)制層面落到實(shí)際工程里。我負(fù)責(zé)的項(xiàng)目基本都是經(jīng)典的repository / service / handler三層結(jié)構(gòu)經(jīng)過(guò)這幾年迭代團(tuán)隊(duì)在錯(cuò)誤處理上形成了一個(gè)共識(shí)repository層不準(zhǔn)亂Wrapservice層必須Wraphandler層做脫敏和狀態(tài)碼轉(zhuǎn)換。下面把每一層的具體規(guī)則拆開講。3.1 repository層盡量不動(dòng)保持原始錯(cuò)誤上岸repository層是離數(shù)據(jù)庫(kù)、外部API最近的地方。這里的錯(cuò)誤大多是驅(qū)動(dòng)直接返回的比如sql.ErrNoRows、context.DeadlineExceeded、io.EOF。在我的規(guī)范里repository層拿到底層錯(cuò)誤后不做任何包裝直接返回原始err。原因很簡(jiǎn)單repository是錯(cuò)誤鏈的“起點(diǎn)”信息最完整也最真實(shí)任何提前包裝都會(huì)增加后續(xù)判斷的噪音。func (r *OrderRepo) FindByID(ctx context.Context, id int64) (*Order, error) { var o Order err : r.db.QueryRowContext(ctx, SELECT id, user_id, payload FROM orders WHERE id ?, id, ).Scan(o) if err ! nil { return nil, err // 原始錯(cuò)誤原樣返回 } return o, nil }有人會(huì)質(zhì)疑這里不包一層FindByID failed日志里怎么看得出是哪一步我的回答是這個(gè)上下文不該在這里加。FindByID本身就寫在SQL語(yǔ)句里數(shù)據(jù)庫(kù)驅(qū)動(dòng)的錯(cuò)誤文本已經(jīng)足夠說(shuō)明問(wèn)題而真正需要“哪個(gè)方法做了什么”的語(yǔ)義上下文應(yīng)該由調(diào)用方service層來(lái)補(bǔ)充這樣錯(cuò)誤鏈才不會(huì)有多余的重復(fù)。3.2 service層業(yè)務(wù)上下文在這里統(tǒng)一補(bǔ)充service層是我唯一強(qiáng)制要求Wrap的地方。因?yàn)檫@一層是業(yè)務(wù)的語(yǔ)義邊界你比數(shù)據(jù)庫(kù)驅(qū)動(dòng)更清楚這個(gè)錯(cuò)誤代表什么業(yè)務(wù)意圖。比如上面那個(gè)sql.ErrNoRows在repository層就是個(gè)“掃描不到數(shù)據(jù)”的技術(shù)錯(cuò)誤但在service層它是“訂單不存在”這個(gè)業(yè)務(wù)判斷的輸入。所以service的標(biāo)準(zhǔn)寫法是func (s *OrderService) GetOrder(ctx context.Context, id int64) (*OrderDTO, error) { o, err : s.repo.FindByID(ctx, id) if err ! nil { return nil, fmt.Errorf(query order %d: %w, id, err) } // 業(yè)務(wù)組裝... return toDTO(o), nil }這里fmt.Errorf里的“query order %d”信息是新產(chǎn)生的它告訴我們這個(gè)錯(cuò)誤來(lái)自哪張訂單、哪個(gè)操作階段。用它替換掉repository層沒(méi)有的信息正好符合前文說(shuō)的“信息增益原則”。而且注意我用的是%w而不是%v這樣上一層還能繼續(xù)用errors.Is判斷sql層的問(wèn)題。service層的另一個(gè)職責(zé)是保持錯(cuò)誤語(yǔ)義的一致性。比如你想暴露一個(gè)ErrOrderNotFound給handler層判斷不要一言不合就返回一個(gè)新錯(cuò)誤而是應(yīng)該先判斷底層是不是空行再?zèng)Q定要不要轉(zhuǎn)換if errors.Is(err, sql.ErrNoRows) { return nil, fmt.Errorf(order %d: %w, id, ErrOrderNotFound) }這樣handler層只要用errors.Is(err, ErrOrderNotFound)就能做精確處理不需要和數(shù)據(jù)庫(kù)驅(qū)動(dòng)耦合。3.3 handler層脫敏和狀態(tài)碼轉(zhuǎn)換的最后一道關(guān)handler層是整個(gè)錯(cuò)誤鏈的終點(diǎn)面向HTTP響應(yīng)或RPC響應(yīng)。這里有兩個(gè)動(dòng)作一是把錯(cuò)誤轉(zhuǎn)換成用戶可讀的信息二是對(duì)外隱藏內(nèi)部細(xì)節(jié)。我通常的做法是“先記錄完整錯(cuò)誤鏈再對(duì)外返回脫敏文本”。func (h *OrderHandler) Get(w http.ResponseWriter, r *http.Request) { id : parseID(r) order, err : h.svc.GetOrder(r.Context(), id) if err ! nil { switch { case errors.Is(err, ErrOrderNotFound): http.Error(w, order not found, http.StatusNotFound) default: slog.Error(get order failed, order_id, id, err, err) http.Error(w, internal error, http.StatusInternalServerError) } return } writeJSON(w, order) }這里要注意handler里一旦把錯(cuò)誤寫進(jìn)日志就不要再把這個(gè)錯(cuò)誤返回給調(diào)用方了也不要向上傳遞否則日志會(huì)出現(xiàn)“get order failed: get order failed”的重復(fù)。錯(cuò)誤在鏈上每層只該“處理”一次要么記錄日志要么繼續(xù)向上傳遞這是我在第4節(jié)要強(qiáng)調(diào)的失控場(chǎng)景之一。4. 包裝泛濫的三重失控套娃、重復(fù)日志與細(xì)節(jié)泄露Wrap是工具不是成就。你把它當(dāng)初戀一樣親錯(cuò)誤鏈就會(huì)變成俄羅斯套娃。以下三種失控我都真實(shí)踩過(guò)每次排查都像在剝洋蔥。4.1 套娃式錯(cuò)誤鏈排查時(shí)最怕看到這種日志套娃式錯(cuò)誤鏈的典型特征是每一層都在給同一個(gè)錯(cuò)誤加前綴但這些前綴加起來(lái)不產(chǎn)生任何額外信息。比如get order failed: query order from service failed: call repo find failed: find order from db failed: sql: no rows in result set看到這種日志的第一反應(yīng)不是感謝寫代碼的人“考慮周全”而是想問(wèn)他“你到底要讓我從哪里看起”錯(cuò)誤鏈長(zhǎng)度一旦超過(guò)4層中間至少有兩層屬于純儀式性Wrap。而且這種鏈條越長(zhǎng)errors.Is匹配的性能越差雖然單個(gè)錯(cuò)誤鏈沒(méi)那么夸張但架不住請(qǐng)求量大日志的可讀性也呈指數(shù)級(jí)下降。我的經(jīng)驗(yàn)是錯(cuò)誤鏈控制在3到5層之間。repository原始錯(cuò)誤是一個(gè)起點(diǎn)service一次的上下文wrap是關(guān)鍵信息handler在記錄時(shí)做一次“收口”語(yǔ)義補(bǔ)充。超過(guò)5層你幾乎一定能找到冗余的包裝。4.2 日志與Wrap雙重處理等于錯(cuò)誤被處理了兩次第二個(gè)失控場(chǎng)景是“既記錄又返回”。常見(jiàn)寫法是這樣func (s *OrderService) GetOrder(ctx context.Context, id int64) (*OrderDTO, error) { o, err : s.repo.FindByID(ctx, id) if err ! nil { slog.Error(find order failed, id, id, err, err) return nil, fmt.Errorf(query order %d: %w, id, err) } return toDTO(o), nil }repository層已經(jīng)把這個(gè)錯(cuò)誤寫進(jìn)了日志service層又記錄了一次到了handler層再記錄一次。結(jié)果就是線上排查時(shí)要看三遍同一條錯(cuò)誤Log系統(tǒng)里相同信息被檢索出來(lái)三份。社區(qū)里有一句流傳很廣的原則錯(cuò)誤應(yīng)該只被處理一次。要么你在當(dāng)前層記錄日志要么Wrap后向上傳遞但不要既記錄又傳遞更不要每層都記錄。落到實(shí)操上團(tuán)隊(duì)可以約定repository層不記錄錯(cuò)誤日志直接返回service層Wrap且不記錄handler層記錄日志但并不再向上傳遞。這樣一條錯(cuò)誤鏈上日志只會(huì)出現(xiàn)一次完整記錄干凈又精準(zhǔn)。4.3 面向用戶的錯(cuò)誤別讓內(nèi)部細(xì)節(jié)裸奔第三個(gè)失控是“把內(nèi)部細(xì)節(jié)暴露給外部”。有些項(xiàng)目為了省事在handler層直接返回err.Error()當(dāng)作API響應(yīng)數(shù)據(jù)庫(kù)驅(qū)動(dòng)的信息就順著接口漏出去了。外部調(diào)用方不僅能看到“dial tcp: lookup db.internal”這種內(nèi)網(wǎng)地址還能通過(guò)錯(cuò)誤文本猜測(cè)你的技術(shù)棧、中間件版本甚至能靠報(bào)錯(cuò)內(nèi)容做進(jìn)一步的注入試探。正確的姿勢(shì)是內(nèi)部錯(cuò)誤在service層使用%w保留完整鏈在handler層只輸出一層穩(wěn)定的錯(cuò)誤碼或通用文案。對(duì)外輸出的錯(cuò)誤信息應(yīng)該脫敏對(duì)內(nèi)保留的錯(cuò)誤鏈應(yīng)該盡量完整。這兩者并不矛盾只是作用對(duì)象不同內(nèi)部日志看的是“為什么”外部響應(yīng)看的是“下一步怎么辦”。4.4 哨兵錯(cuò)誤的隱性破壞用了%v斷的不僅是鏈最后一種失控尤其隱蔽項(xiàng)目里定義了哨兵錯(cuò)誤sentinel error后續(xù)卻用%v包裝它。前面代碼已經(jīng)驗(yàn)證過(guò)fmt.Errorf(xxx: %v, err)輸出文本沒(méi)問(wèn)題但errors.Is找不到目標(biāo)了。于是業(yè)務(wù)里errors.Is(err, ErrOrderNotFound)永遠(yuǎn)返回false最終被handler當(dāng)成“internal error”返回500客戶端拿到一個(gè)沒(méi)頭沒(méi)腦的服務(wù)器錯(cuò)誤。這種問(wèn)題在開發(fā)環(huán)境幾乎測(cè)不出來(lái)因?yàn)殚_發(fā)環(huán)境里大部分請(qǐng)求都成功只有到了線上流量大、分支多的時(shí)候某些異常路徑才被觸發(fā)緊接著就被幾百個(gè)“500 internal error”的告警淹沒(méi)。如果你在排查這類故障時(shí)發(fā)現(xiàn)“明明錯(cuò)誤信息里寫著order not founderrors.Is卻不命中”不用懷疑八成就是某個(gè)位置的Wrap用了%v。5. 一次訂單查詢故障errors.Is如何在三層鏈里精準(zhǔn)定位理論講多了來(lái)一段實(shí)戰(zhàn)復(fù)盤。這是發(fā)生在我負(fù)責(zé)的電商訂單服務(wù)里的真實(shí)案例雖然細(xì)節(jié)做了簡(jiǎn)化但排查鏈路完全還原。5.1 故障現(xiàn)場(chǎng)一個(gè)只留下“internal error”的告警某個(gè)周二下午訂單列表接口的告警突然響起來(lái)成功率掉到97%。當(dāng)時(shí)開發(fā)環(huán)境、測(cè)試環(huán)境全都正常只有線上偶發(fā)性失敗。看告警日志handler層記錄的只有一行l(wèi)oad order list failed: internal error這不是真實(shí)的錯(cuò)誤鏈而是handler把錯(cuò)誤脫敏成了internal error輸出真正的錯(cuò)誤鏈寫在了另一個(gè)字段里。我打開日志詳情一看完整錯(cuò)誤是load order list failed: marshal order 918273 failed: json decode order row failed: unexpected end of JSON input三層鏈每一層都有信息哪張訂單918273、哪個(gè)操作marshal、從哪個(gè)環(huán)節(jié)開始出問(wèn)題json decode order row。這是當(dāng)初嚴(yán)格按照“repository不包、service包一層、handler脫敏記錄”的規(guī)范留下的成果問(wèn)題在于——光看文本我還是不知道哪張訂單的數(shù)據(jù)壞了。5.2 順著錯(cuò)誤鏈逐層拆解找到真正的壞環(huán)節(jié)接下來(lái)就是用errors.As提取根因類型的時(shí)候。因?yàn)樽罾飳邮莏son decode order row failed: unexpected end of JSON input我懷疑是某個(gè)訂單行的字段非法JSON導(dǎo)致json.Unmarshal解析失敗。于是我在排查用的臨時(shí)調(diào)試端點(diǎn)里加了一段代碼var syntaxErr *json.SyntaxError if errors.As(err, syntaxErr) { log.Println(json syntax error at offset:, syntaxErr.Offset) }結(jié)果還真提取出來(lái)了offset精確指向某個(gè)訂單描述字段的斷點(diǎn)。我順著這條線索找下去發(fā)現(xiàn)某個(gè)訂單的payload字段在寫入時(shí)被上游系統(tǒng)截?cái)鄬?dǎo)致JSON內(nèi)容不完整。問(wèn)題定位到數(shù)據(jù)污染而不是代碼邏輯Bug。之所以能這么高效正是因?yàn)殄e(cuò)誤鏈上沒(méi)有斷點(diǎn)repository的原始錯(cuò)誤類型*json.SyntaxError經(jīng)過(guò)service和handler兩層Wrap之后仍然保留在鏈里errors.As從最外層一路穿透到最內(nèi)層準(zhǔn)確提取出了細(xì)節(jié)。如果中間任何一處用了%v所有結(jié)構(gòu)化信息都會(huì)變成純文本我就只能寫正則去匹配那個(gè)offset甚至可能被迫重新打開線上數(shù)據(jù)做全量掃描。5.3 如果當(dāng)初用了%v這次的排查會(huì)是什么體驗(yàn)假設(shè)當(dāng)初service層寫的是fmt.Errorf(marshal order %d: %v, id, err)這次事故的排查體驗(yàn)馬上變成另一番光景日志里只能看到一串文本errors.As完全失效想確認(rèn)根因是不是JSON解析錯(cuò)誤要么靠人肉讀日志猜要么把訂單詳情全量拉出來(lái)重新Unmarshal一遍驗(yàn)證。在最壞情況下線上一個(gè)偶發(fā)錯(cuò)誤能讓人排查一整天。而正確配置%w之后整個(gè)排查從“猜”變成了“查”錯(cuò)誤鏈上的每一層都有明確信息errors.Is和errors.As把結(jié)構(gòu)化判斷變成程序行為。這個(gè)體驗(yàn)差異就是Wait與Not Wait之間最直白的性價(jià)比對(duì)比。6. 六條Wrap心法寫給我的團(tuán)隊(duì)也寫給你說(shuō)了這么多最后沉淀幾條我在實(shí)際項(xiàng)目中反復(fù)校驗(yàn)過(guò)的原則。它們不是什么高深理論就是寫在團(tuán)隊(duì)Wiki上的約定但確實(shí)讓錯(cuò)誤處理從“個(gè)人品味”變成了“可執(zhí)行的規(guī)范”。6.1 心法一有信息增益才Wrap每次動(dòng)手寫fmt.Errorf(xxx: %w, err)之前先問(wèn)自己這句話有沒(méi)有增加任何一條“前一層不知道的信息”如果有Wrap如果只是給錯(cuò)誤換個(gè)說(shuō)法停手。信息增益這個(gè)判斷標(biāo)準(zhǔn)能過(guò)濾掉八成儀式性包裝。6.2 心法二層級(jí)之間必須Wrap層級(jí)之內(nèi)少Wrap跨層傳遞錯(cuò)誤時(shí)必須Wrap因?yàn)槟悴荒軄G掉調(diào)用方向的上下文在同一層內(nèi)調(diào)用工具函數(shù)時(shí)不要每個(gè)函數(shù)都Wrap否則你會(huì)收獲一條三層起步的套娃鏈。收口原則很簡(jiǎn)單從哪一層進(jìn)了這個(gè)錯(cuò)誤就從哪一層加上第一層業(yè)務(wù)上下文中間的內(nèi)部函數(shù)保持原樣。6.3 心法三需要被程序判斷的錯(cuò)誤必須%w其余按需選擇如果一個(gè)錯(cuò)誤會(huì)被上層用errors.Is判斷比如哨兵錯(cuò)誤或用errors.As提取比如*net.DNSError必須用%w。如果這個(gè)錯(cuò)誤只是合并成日志給人看不再參與程序邏輯判斷%v其實(shí)更安全——因?yàn)槟悴幌M{(diào)用方和內(nèi)部實(shí)現(xiàn)細(xì)節(jié)產(chǎn)生耦合。6.4 心法四面向用戶的錯(cuò)誤脫敏面向日志的錯(cuò)誤保鏈對(duì)外響應(yīng)永遠(yuǎn)只暴露“用戶能采取行動(dòng)”的錯(cuò)誤對(duì)內(nèi)日志永遠(yuǎn)保留“開發(fā)者能定位根因”的完整鏈。兩者不能顛倒一旦內(nèi)部細(xì)節(jié)漏到外部接口你不只泄露了實(shí)現(xiàn)還把安全隱患交給了別人。6.5 心法五日志和Wrap二選一別兩個(gè)都做記錄日志本身是一種“處理”Wrap繼續(xù)上傳是另一種“處理”。在同一個(gè)層面既記日志又向上Wrap等于把一個(gè)錯(cuò)誤處理了兩遍日志系統(tǒng)里立刻出現(xiàn)重復(fù)信息。要么只記不傳要么只傳不記這個(gè)約定越早定下來(lái)后期排查越輕松。6.6 心法六哨兵錯(cuò)誤和自定義錯(cuò)誤類型都是對(duì)外API別輕易改一旦ErrOrderNotFound這種哨兵錯(cuò)誤被定義并廣泛使用它就成為了團(tuán)隊(duì)內(nèi)部模塊之間的契約。改動(dòng)它的文本信息通常還能忍errors.Is是按身份判斷不看字符串但改動(dòng)它的語(yǔ)義范圍或刪掉自定義類型里的字段會(huì)讓所有依賴方一起遭殃。任何對(duì)錯(cuò)誤API的變更都該走和接口變更一樣嚴(yán)格的評(píng)審流程。最后再分享一點(diǎn)個(gè)人感受我見(jiàn)過(guò)太多團(tuán)隊(duì)花大把時(shí)間爭(zhēng)論“要不要Wrap”卻沒(méi)有花十分鐘把錯(cuò)誤鏈的規(guī)范寫進(jìn)文檔。其實(shí)標(biāo)準(zhǔn)庫(kù)errors包設(shè)計(jì)得非常收斂核心就是“保留鏈、可判斷、可提取”這九個(gè)字。真正讓Go錯(cuò)誤處理難用的往往不是語(yǔ)言本身而是我們對(duì)“信息增益”和“層級(jí)邊界”缺乏統(tǒng)一認(rèn)識(shí)。把這兩件事想透了To Wrap or Not to Wrap就不是靈魂拷問(wèn)只是一道有標(biāo)準(zhǔn)答案的工程選擇題。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
激情久久久久久久久久久| 婷婷五月天最新综合你懂的| 中文字幕av在线| 色久影院| 色色色网站| 婷婷伊人网| 另类色网| 壅壅儕家a| 五月婷婷中文字幕| 日韩ac不卡无码| 丁香五月自拍| 婷婷色av| 任你艹| 色五月激情五月开心五月| 婷婷五月蜜桃成人桃色丁香| 激情婷婷五月综合| 天天操天天曰| 丁香五月天在线| 天堂综合久| 久久九九re热| 五月综合亚洲色| 这里只有免费的精品| 欧美色97| 日碰日| 丁香五月欧美色综合| 人人操Av| 26uuu精品一区二区| 成人做爰A片免费看网站找不到了| 无语停婷丁香网| 五月激情婷婷播播开心| 婷婷激情五月天网站| 久草婷婷网| 国产精品久久久久久久久久久久| 亚洲自拍天堂| 五月丁香花婷婷玉莉AV| 五月丁香婷婷婷婷综合网| 五月天色综合| 俺去也综合| 五月天婷婷久草丁香| 99热伊人| 亚洲日日日| 熟女激情网| 九九热视频在线观看| 亚洲人妻五月丁香婷婷| 丁香色六月| 91无码一起草| 久久婷五月天| 任你搞网站| 五月婷婷天天色| 一操久久| 另类丁香五月天区图| www.色色五月天.com| 欧洲激情五月天婷婷| 丁香青青五月天| 夜夜谢天天干| 操操天堂| 狠狠干婷婷| 日韩三级片一区二区| 九色激情| 无码少妇高潮喷水A片免费| 激情综合激情综合| 97韩国久久电影院| 天天色爽| 五月婷婷激情刺激| 97视频91| 色婷婷欧美| 色性日本| 开心婷婷五月天电影院| 天天日天天爱天天噪| 九九激情| 激情婷婷五月亚洲| 五月丁香啪啪啪| 爽极品色| 婷婷综合五月| 九久9精品| 狠狠五月激情丁香六月| 九九色院| 久久狠狠干| 亚洲视频99| 五月开心婷婷| 五月天亚洲最大成人| 激情九月天天天天婷婷| 婷婷丁香五月天亚洲| 久久久中文| 久久天堂| 婷婷六月色开| 六月丁香久久| 九九色图| WWW,五月| 久久超级碰碰| 91无码高清| 123日本不卡在线| 第五色婷婷| 综合伊人久久| 色爱99| 亚洲亚洲永久无码777777| xxxx五月激情| 久久99最新地址| 色五月在线观看| 狠狠干天天日| 丁香五月激情综合| 亚洲成人av在线| 99久久五月婷婷| 婷婷五月色丁香在线看| 五月丁香六月婷婷在线播放| 婷婷激情五月天亚洲综合| 色波激情五月天| 久久色天堂| 91综合在线视频| 超碰免费观看| 久久精品五月| 成人五月天丁香| 色婷婷天堂| 黄色毛片精品| www.91AV.COM| 婷婷五月天激情网| 婷婷第六色| 婷婷五月情| WWW,五月天| 亚洲色热| 9999色色色色| 日本三级毛片| 99国产在线| 99热这里在线精品| 婷婷丁香六月天| 色噜久| 超碰成人黄色网| 国产麻豆视频| 婷婷五月a| 99啪99| 影音先锋四区| 激情小说五月天中文字幕| 河北真实伦对白精彩脏话| 新激情五月天色播| 人人97碰| 啊v视频在线观看| 粉嫩av懂色av蜜臀av熟妇| 六月撸婷婷| 91视频精品99| 99视频只有精品| 精品无码久久久久久久久| 成人无码精品1区2区3区免费看| A片试看120分钟做受视频红杏| 最新高清无码专区| 97sese婷婷| 99热第一页| 丁香五月婷婷av| 综合激情婷婷| 久久机热这里只有 | seuuu婷婷| 狼人伊人干| 婷婷丁香91| 久久婷婷成人| 97激情五月天| 婷婷五月天影视首页| 久久久久激情| 五月婷婷久久大片| 婷婷性爱网| 激情综合五月婷| 伊人超碰| 天天日天天色| 欧洲亚洲激情五月天在线| 九月色婷婷综合亚洲| 99久久久久久www| 色五月婷婷激情综合网| 青青草Avb在线| 九九热精品视频| 日日做夜夜爱| 国产精产国品一二三在观看| 丁香五月婷婷www..com| 深爱激情中文五月天av| 日本人妻A片成人免费看片| 人妻内射麻豆视频| 伊人碰碰婷婷| 这里只有精品96| 99热这里只有精品9| 色射影院| 五月丁花色综合网| 丁香五月综合| 在线看av| 色婷婷久综合久久一本国产AV| 天天插天天射天天干| 北京熟妇搡BBBB搡BBBB| AV在线免费播放| www.十八禁不禁AV.com| 久久婷婷视频| 六月婷婷综合| 大地9中文在线观看免费高清| 一起草aV| 啪啪啪五月天| 五月天成人综合| 玖玖婷婷五月天毛片| 五月丁香啪啪综合| 国产三级秋霞| 国产色五月婷婷| 久久看婷婷| 免看黄大片AA | 亚州操逼网| 五月丁香六月婷婷中文版| 婷婷五月天AV在线| 久久综合55| 玖玖国产视频一区| 99男人的天堂| 影音先锋综合网| 婷婷五月丁香综合激情小说| 五月色婷| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 五月天 无码| 成人国产欧美大片一区| 九九精品在线视频观看| 2017人人操| 97很鲁在线视频| 深夜男女福利刺激影院一区| 五月婷婷六月丁香| 色99www.| 天天色综合图片| 日日夜夜干| 久久婷婷五月丁香网| 天天爽天天草| 9视频在线成人网站| 六月婷婷之青青草| 欧美超碰亚洲| 风流少妇A片一区二区蜜桃| 超碰操网| 欧美日本黄色| 成人综合视频在线| 91色吧网| 99亚洲视频| 99热a片免| 久久婷婷五月草视频| 婷婷月五天在线在线看| 91成人品| 日本综合久久| 人人爽天天莫| 看婷婷五月天网| 激情六月婷婷| 蜜臀99精品| 国精产品一区一区三区免费视频| 五月天婷婷色色网| 亚洲精品色| 九九综合五月欧美| 婷婷爱婷婷| 日本熟妇乱妇熟色A片蜜桃| 97亚洲色 torrent magnet| 性视频久久| 五月久久婷婷天堂视频| 91碰| 成人日韩欧美| 婷婷五月天av| 狠狠干总合| 无码少妇高潮喷水A片免费| 激情五月综合色| 777色色色| 久久综合婷婷| www.婷婷五月天| 久久久久久久丁香五月天婷婷| 國語久久婷| 99碰| 99精品视频免费观看| 五月婷在线| 久久婷婷影院| 精品人妻伦| 激情小说五月天| 久色视频在线| 大战熟女丰满人妻AV| 在线视频另类| 玖玖综合色| 丁香花五月天激情| 日日干日日色| 久久这里有精品99| 噜噜网免费视频| 色五月天婷婷| 五月婷婷色影院| 超碰免费人妻| 婷婷五月在线视频| 97五月婷| 99精品视频推荐| 天天日天天舔| 天天草天天爱| av超碰在线| 色99视频| 天天艹夜夜爽| 开心五月婷婷99| 欧美日韩aaaa| 色欲天天综合| 日韩免费视频| 婷婷中文字暮| 五月色网| 五月丁香啪啪综合网| 成人网在线视频| www.超碰在线| 日本激情综合| 日本WWW九九九| 大香蕉婷婷丁香天堂AV| 九九视频在线观看视频6| 五月亭亭综合五码| 99热这里| 激情文学综合婷婷五月天丁香花| 丁香婷婷月| 婷婷欧美综合| 综合色图婷婷| 欧洲亚洲免费视频9| 五月丁欧美| 七七婷婷综合| 青青草tp| 五月婷婷九| 色婷婷激情五月天| 少妇性BBB搡BBB爽爽爽电影| 亚洲激情综合| 99在线视频精品| 九月婷婷综合在线| 九九色色| 婷婷玖玖五月天| 99热 在线观看| 免费一区二区三区| 色五月婷婷五月天| 五月天婷婷在线AN| 久热这里只有精品99re| 欧美色99| 91丁香色| 色婷婷丁香| 日日做天天操夜夜爽| 99这里有精品| 色狠狠色噜噜AV天堂五区| 伊人丁香五月婷婷潮吹| 丁香五月综合色婷婷| 婷婷丁香五月天中文字幕| 99丁香五月婷| 狠狠噪| 久久婷婷国产| 五月婷婷综合潮喷| 夜夜天天久久婷婷| 伊人大香蕉综合在线| 99热精品在这里| 怡红院一二三| 天天干天天色综合| 婷婷色偷拍| 五月丁香美女| 人妻久久婷婷| 超级碰 久久9| 婷婷大美在线| 99操视频| 色九综合| 狠狠色噜噜狠狠狠888了| 六月撸婷婷| 人妻丰满精品一区二区A片| 爆乳熟女一区二区三区爆乳| 色婷婷五月综合在线| 在线另类视频| 久久久9久| 激情五月深爱五月观看| 丁香婷婷九月| 高清a片基地| 亚洲激情亚洲激情| 日韩 中文 欧美| 2050人人操免费工开爱| 天天日夜夜B久久| 高清无码 一区 二区 三区| 久久青青日本视频| 日本婷婷色| 九九视频在线观看视频6 | 伊人激情啪啪| 99啪99| 99久久6| 天天日天天操天天干| 大香蕉久| 另类专区在线| AA久久| 五月丁香六月激情| 久久久精品色| 色综合久久88色综合天天| 九九草热在线观看| 五月天色婷婷小说| 操逼福利视频| 少妇口诉沐足视频播放器网址| 深爱五月月天| 丁香亭亭久久| 六月婷婷无码| 日本天天综合| 激情图片婷婷| 开心五月深爱五月婷| 成人精品一区二区三区四区五区 | 五月天丁香欧美激情| 午夜丁香久久久久久| 夜夜爽77777妓女免费下载| 激情六月婷婷| 思思久久99热只有频精品66| 精品国产乱码久久久久久免费| 人妻人人操| 91色久| 51国精产品自偷自偷综合| 99久久极情精品一区| 大香蕉综合| 欧美精品999| a在线观看| 另类图片色五月| 婷婷五月情| 97人人操人人爽| 人妻AV在线| 婷婷亚洲色| 日日爽日日| 国产AV国片偷人妻麻豆| 色色欧美。| 色色色国产| 激情五月天 婷婷| www久久99| 婷婷五月综合激情| 久热这里| 五月丁小婷婷激情四射| 五他月天啪啪啪| 日韩AV一区二区三区| 一本色道久久综合狠狠躁小说| 五月丁香五月丁香五月丁香五月丁香91| 97AV人人插人人操| 久久婷婷五月丁香网| 综合大香蕉| 夜夜夜天天操| 亚洲无码成人性爰网| 狠狠色丁香| 婷婷亚洲五| 精品国产va久久久久| 99热精品在线观看| 丁香婷婷久久老熟女综合网| 五月丁香狠狠| 91精品久久久久、久五月天| 国产成人99久久亚洲综合精品| 啪啪91| 婷婷五月天成人网| 337p大胆噜噜噜噜噜91Av| 亚洲无AV在线中文字幕| 日韩一级| 日韩AV在线免费观看| 久操婷婷| 五月丁香999| 情涩婷婷五月天| 99热这里只有免费| 九九综合九九| 欧美成人精品A片免费一区99| 九九99久久| 九九亚洲| 狠狠久久婷婷| 色五月激情视频在线综合| 国产99美少妇| 夜夜爽日日躁| 色狠狠综合网| 成人精品视频99在线观看免费| 色婷婷丁香花五月天| 射久久丁香五月| 丁香五月综合婷婷| 成人狠狠成人狠狠成人狠狠成人狠狠 | 五月婷婷精品无在线| 五月丁香亚洲综合| 丁香六月狠狠干| 丁香六月啪| 色五月丁香五| 激情文学第四色婷婷丁香五月| 久热这里只有精品3| 激情伊人五月婷婷久久| 久久99网| 粉嫩AV久久一区二区三区| 五月天天综合网色婷婷| 五月婷婷久久久| peg 2区三区四区的| 97色色综合| 99热这里只有精品16| 国产熟妇乱子伦hd| 十区AV| 五月丁香爱婷婷深深| www.色色色色| 色色国产| 9久久久| 婷婷丁香一月| 亚洲第一成人无码A片| 精国产品一区二区三区A片| 婷婷五月天你懂的| 狠狠人人| 六月婷婷八月丁香| 婷婷五月激情基地| 99亚洲综合| 天天久| 九九黄色网| 69精品人人人人| 在线视频九色97| 久久婷婷色色| 久久这里只精品| 欧美大肥婆大肥BBBBB| 丁香久久九九99| AV电影在线播放| 久久婷婷六月综合综合色| 五月天国产| 综合 蜜月 婷婷| 国产va在线视频| 久久婷婷五月综合色丁香| 99国产精品久久久久久久久久久| 中文字幕不卡+婷婷五月| www.minyis.com【JT】国内CDN落地页保证转化QQ2101460746 | 精品无码久久久久久久久| 婷婷终合色图| 久久久久久丁香五月| 大香蕉五月天| 欧美精品啪啪| 五月色婷婷综合| 婷婷五月在线影院| 98毛片| 一区二区免费看| www,99色| 特级片神马电影| 五月天激情小说网| 99re6热在线精品视频播放速度| 五月婷婷激情综合av| 熟女人妻视频| 综合色图区| 六月丁香色色| 九九中文字幕九| 校园激情 亚洲| 五月天婷婷成人网| 精a品a视a频| 96精品久久久久久久久| 在线视频99| 俺去也五月天婷婷| www,99热在线观看| 久久99美女精彩视频| 五月婷婷激情综合| 五月开心婷婷极品激情| 天天干天干| 亚洲黄色精品| 丁香五月手机在线| 另类专区在线| 天天肏在线观看| 91chinese 在线| 五月婷婷中文| 免费成人中文字幕| 日本五月婷婷| 亚洲日韩乱码一区二区三区四区| 婷婷久久五月天亚洲欧美国产日韩在线观看 | 99热这里只有精品亚洲| 久热无码| 熟女激情网| 色999亚洲人成色| 久久久久9| 超碰色色综合| 另类专区在线| 激情综合网激情五月天| 成人va在线观看视频| www.99热| 激情丁香五月婷| 中文字幕 中文字幕明步| 午夜丁香婷婷| www激情| 日韩色色小视频| 激情综合五月婷婷| 狠狠色丁香婷婷基地| 粉嫩AV久久一区二区三区| 丁香五月天偷拍| www久久久| 五月婷婷丁香伦理网| 天天日天天爽| 久久丁香五月婷婷| 精品自拍97| 丁香婷婷成人网站| 4399在线日本A片| 久久香蕉影院| 久久黄色网扯| 超碰人人在线观看| 色五月AV| 五月丁香无码| 五月丁香影院| 五月天婷婷成人资源站| 极品五月天| 色婷久| 人人摸人人操人人爽| 激情六月综合| 偷拍视频五月天| 亲子乱AV-区二区三区| 五月天婷婷影院影院观看| 91精品无码久久久久久五月天| 丁香五月在线自慰| 影音先锋xfplay资源男人网| OYIWbGcPu8H| 五月天久久婷婷| 五月丁香啪啪综合| 曰韩少妇内射免费播放| 国产午夜一区二区三区| 99欧州偷拍视频| 精品影院| 五月天婷婷色综合| 99色色网| 高清免费在线视频| 亚洲精品电影| 天天夜夜六月丁香五月婷婷老师| 五月婷婷综合社区| 亚洲人妻av| 99热这里只| 丁香九月久久| 婷婷色五月91啪啪| 五月婷婷啪啪| 天天干天天色天天干| 91天堂网综合| 成人做爰高潮A片免费视频| 五月婷婷色激情| 色婷婷操逼| 色狠狠婷婷| 久久99综合网| 国产淫熟妇| 婷婷色啪| 玖玖爱伊人网| 超碰99热| 色综合天天天天做夜夜| 色婷婷小说| 99在线精品视频| 野战毛片三一3| 激情婷婷五月女| 五月天怕怕| 久久九九综合| 综合五月丁香六月婷婷| 五月天激情婷婷小说| 五月天天堂久久| 无码少妇高潮喷水A片免费| 99久久婷婷五月综合| 六月丁香深深爱| 182TV大香蕉| 久久免费高| 国产亚洲99久久精品| WWW.99热| 激情的五月| 久久99大全| 99热热热天天人人人超超碰| 五月天婷婷在线播放| http://www.sd-xiangsu.com/| 色五月xxx| 欧美色色色色色色| 亚洲偷| 伊人久久婷婷| aa久久| 五月天激情AV| 欧美亚洲婷婷五月| 亚洲国产精品五月天| 91青娱乐青青草| 色五月亚洲| 色色a| 99这里有精品视频| 亚洲色五月婷婷| 99这里只有精品在线| 婷婷五月天激情网址| 91大屁股精品| 久久日九九| 亚洲日韩久久婷婷伊人| 99久久久久| 97超碰人人操| 日韩在线观看亚洲| 丁香狠狠色婷婷久久无码视频| 99色热视频| 精品在线| 日本啪啪网| 欧美日韩国产日本精品四虎网网站物 | 99久在线精品99re8热| 欧美影院| 3www激情| 天天摸天天高潮天天爽| 五月婷人妻| 欧洲激情五月天婷婷| 五月婷婷六月丁香| 99热这里只有精品1025| 日韩狠狠色| 久久宗合影| 懂色av蜜臀av粉嫩av永陈冠希| 丁香婷婷浪潮AV久久综合| 国产AV一区二区三区最新精品 | 79成人网| 中文不卡一二区| 婷婷丁香激情五月| 五月天激情婷婷小说| 国产va在线视频| 久久久妻人人人| 色5在线| 噜噜噜噜噜在线| 丁香五月综合婷婷| 色999亚洲人成色| 色一情一乱一乱一区91| 97色婷| 人妻人人操| 婷婷九月综合| 丁香五月在线人妻| 色色综合无码| 操人久久| 丁香五月电影| 久久久久久久五月婷婷六月丁香综合,开心激情综合网 | 婷婷五月丁香婷婷| 翔田千里无码| 五月丁香六月婷婷手机无线| 色丁香婷婷| 99热6色| 天天草天天爽| 亚欧州精品视频| 五月丁香啪啪啪啪| 久久伊人大香蕉| 涩涩五月天| 思思久久久婷婷| 国产女18毛片多18精品| 九九精品系列| 99在线免费视频| 亚洲精品无码久久| 91碰视频| 激情婷婷人妻| 99热这里只有精品官网| 97九色视频| 婷婷久热| 九九热在线视频| 67194线路二在线观看| 五月色情婷婷| 色综合久久88色综合天天99| 久久婷婷五月天激情新地址| 五月丁香美女视频| 天堂婷婷丁香六月网| 99re思思热久久| 97精品欧美91久久久久久久| 激情五月综合亚洲另类| 操精品9| 五月婷婷综合影院| 色婷婷综合网| 人人草人人爱手机视频看看| 丁香五月天之婷婷影院| 婷婷成人视频| 激情网 久久| 久久精品99久久久久久久久| 欧美在线干| 婷婷五月欧美综合| 丁香婷婷六月| 国产精品色色| 激情婷婷在线| 精品久色| 中文国产五月天| 91视频精品99| 麻豆AV一区二区三区| 成年视频免费观看| 激情综合自拍五月婷婷色五月| 国产99视频永久免费| 欧美丁香五月| 这里只有精品视频| 老妇操B| aaaaaa片| 激情五月婷婷五月| 97碰碰碰免费公开在线视频| 久人人操| 婷婷舔| 人妻少妇色综合| 国产精品久久久久久久久久| 成人色图情色成人网 www.5b5b5bcom 五月天| 五月丁香六月婷| 99re这里只有精品视频了| 五月丁香激情啪啪| 婷婷五月丁香人妻无码高清| 秋霞免费三级片| 深爱五月最新网址| 日韩啪啪视频| 99色.com| 丁香六月激情蜜桃| 欧美一级色| 亚洲视频1区| 秋霞午夜理论| 99操免费视频| 日韩AC在线免费观看| 成片免费播放| 高清无码视频网址| 黑人糟蹋人妻HD中文字幕| 99热热热国产超碰| 亚洲综合色丁香婷婷六月| 久久狼人天堂| 国产婷婷久久| 天天操天天操| 99热这里只有精品55| 久热精品在看| 97韩国久久电影院| 色色婷婷丁香| 亚洲小电影在线观看黄999| 亚洲狠狠狠| 综合色图区| 久热99热| 99热精品中文字幕| 五月停视频天堂| 婷婷,五月天,丁香,第一| 五月天婷婷无码| www九九免费视频| 五月激情丁香五月| 国产操碰| 无码九九九九| 亚洲综合色棒| 香蕉久久国产AV一区二区| 婷婷亚洲影院| 日本一级一片免费视频| 激情碰碰碰| 新激情五月天色播| 极品少妇XXXX精品少妇偷拍| 成人噜噜网| 99亚洲视频| 婷婷影院A成人| 婷色成人| 亚洲色五月| 大香蕉啪啪啪| www.91在线观看| 六月婷婷网| 直接看的AV网站| 新激情婷婷| sewuyue第四色| 久久五月综合| 99视频精品视频| 五月婷婷片| 日韩色色色色色| 久久九区| 操人91| www.五月天色色.com| 91艹人| 色五婷婷开心缴| 91九色 熟| 丁香六月婷婷一区二区三区| 91人人爱| 丁香六月成人| 久久久久久婷| 亚洲免费婷婷| 91jiuseshunv| 另类激情综合| av线电影| 日日噜噜夜夜狠狠久久丁香六月| 色综合99色| 国产亚洲精久久久久| 一区操| 色婷婷久综合久久一本国产AV| 国产91在线视频| 婷婷开心久久| 去色色五月天| 激情五月婷婷| 超碰色婷婷| 五月婷婷综合激情网| 色婷婷导航| 五月丁香网站| 亚洲九九免费| 刘玥av在线| 丁香五月天啪啪激情综和网 | 天天色综合色| 97天堂| A A色色| 大香蕉丁香五月| 亚洲色五月婷婷| 干一干xxxx| 色情综合网| 色五月天影视| 香蕉AV777XXX色综合一区| 五月天激情婷婷丁香| 激情五月天色色色| 天堂五月婷婷| 、激情六月天| 欧美人与性动交CCOO| 婷婷五月丁香久久| 婷婷激情啪啪| 色99在线| 婷婷丁香第一页| 国产99久9在线+|+传媒| 亚洲色频| 九久9精品| 激情六月天| 婷婷五月天狠狠搞干| 国产激情在线观看| 亚洲色热| 五月欧美色色五月| 久久综合播放| 色五月综合在线| 六月丁香婷婷网| 99综合成人视频在线观看 | 九九热在线99| h在线看免费版在线看| 久久99久久99精品免观看软件| 9l久久久视频| 99久久久免费| 五月丁香狠狠爱婷婷综合| 大香蕉久久久久久久久| 国产9色在线/日韩| 97久久香草精品视频| 色婷婷成人久久| 丁香久久| 激情激情激情网| 久久九九@| 91操人视频| 丁香婷婷免费| 色五月婷婷1| 丁香五月天堂网| 色婷婷基地| 久久婷婷亚洲| 丁香五月婷婷综合激情哟哟哟| 婷婷玖玖五月天| 天天综合天天做天天综合| 9精品一区| 久久婷五月天| 激情www| 69堂午夜视频最新地址| 日本网站久久| 九九综合| 六月丁香VA| 亚洲色色在线| 五月婷婷,六月婷婷| 婷婷天堂站| 婷婷五月六月| 少妇婷婷五月天| 色婷婷国产精品综合在线观看| 国产成人精品一区二三区熟女在线| 激情综合网五月天| 五月丁香六月婷婷中合网| 天天综合网~91| 国产精品美女久久久久AV超清 | 久久99久久99精品免观看软件 | 色玖玖综合网| 六月久久狠狠| 久久九九怡红院| WWW·色色色·COM| 欧美内射AAAAAAXXXXX| 狠狠色狠狠| 99亚洲色| www久久五月com| www.99热这里精品| 新激情婷婷| 91丨九色丨大屁股| 99精彩视频| 97久久香草精品视频| 激情网第九色| 日本黄色精品| 天天日色情| 99热这里只有精| 婷婷五月丁香超碰| 色5月婷婷| 丁香六月 婷婷六月| 丁香五月婷婷激情尤物| 亚洲成人av中文| 狠狠色成人影片| 日韩av在线电影| 色情综合网| 夜夜天天天天天干天天爽| 在线观看的av| 91婷婷在线观看| 成人做爰A片免费看视频| 久久九色| 99亚洲色| 五月婷婷,六月激情| 色99视频| 色婷婷色九月| 丁香六月激情综合网| www,黄色在线,con| 亚洲乱码日产精品BD在线观看| 99熟女视频| 婷婷五月天天爽| 丁香六月婷婷姐网| 79色色免费| 五月色情婷婷开心五月天| 人人澡玖玖一| 1区2区视频| 五月婷婷导航| 欧美婷婷综合| AV在线不卡网站| 婷婷色色网站| 五月婷婷色色爱| 亚洲爆乳无码精品AAA片蜜桃| 激情五月久久| www.婷婷| 色色五月婷婷| 超碰人人操在线| 日本婷婷在线| 五月天色五月| 婷婷五月天av| 婷婷五月免费视频| 色婷婷在线视频| 欧美成人网婷婷综合在线| 丁香五月综合福利视频导航| 五月丁香色色综合| 视频综合网| 激情com| 婷婷五月天播| 婷婷AV丁香| 免费日韩99| 色五月丁香激情视频| 六月婷婷狠狠| 婷婷狠狠五月综合| 先锋男人99资源| 五月婷婷精品视频| 婷婷激情五月天亚洲综合| 亚洲99在线| 婷婷五月天视| 色情五月天se| 五月丁香无码| 久久这里只| 天天色天天日| 婷婷五月天综合AV| 亚洲综合视频网| 99久在线| 五月婷婷在线视频| 二色av| 三级毛片视频| 无遮挡国产高潮视频免费观看| 国产AV一区二区三区最新精品 | 日本99热| 麻豆AV一区二区三区| 精品99*| 超碰在线个人观看| 六月色激情| 日韩成人无码人妻| 精a品a视a频| 亚洲九九九九| 五月丁香婷婷三级| www.色九月| 五月婷网| 亚洲亚洲人成综合网络| 91久久精品国产91性色TV| 五月丁香A∨在线| 91VIP在线观看| 九九99男女视频在线观看| www.99久| 日日日日做夜夜夜夜无码| 丁香五月人妻熟女| 亚洲va在线∨a天堂va欧美va| www久久艹| 天天干天天干天天干天天干天| av亚洲国产小电影| 亞洲自怕| 99热亚洲| 五月丁香六月欧美综合| 涩涩涩.com| 狼人婷婷久久| 开心五月婷婷激情网| 日本五月婷婷| 五月丁香婷婷久久| 亚洲情综合五月天| 伊人免费视频9| 91精产一区三区免费观看| 青青草原中文字幕| 噜噜噜精品欧美成人在线观看| 99只有这里有精品在线视频| 六月丁香久久| 日韩一级一片内射视频4K| 色久一| 五月6香色婷婷视频| 色婷婷五月天小说网| 五月天播播中文字幕| 五月丁香成人网| 91色综合久久| 色婷婷亚洲婷婷| 国产精品-91JQ就要激情网91JQ6.91JQ27.CASA:16888 | 精品色情一区二区三区四区| 丁香五月六月婷婷殴美综合| 亚洲AV人人操| www.seqingwuyuetian| 无码动漫av| 538在线| 日本狠狠干| 婷婷五月天伊人| 丁香九色不卡aaa| 91久久久久久| 天天操综合网站| 国产精品色色| 色色色色色色色色色色色色色色,网站| 色一情一乱一乱一区91Av| Www.婷婷五月| 色99在线视频| 丁香婷婷五月天成人| 久久网站免费亚洲| 五月丁香激情综合久久| 亚洲激情综合| 五月天激情四射网站| 久热这里只有精品在线观看 | 香蕉操亚洲| 5月丁香六月情| 激情五月丁香五月| 日韩五月婷婷久久| 五月丁香色婷婷伊人| 开心激情婷婷| 性av| www.99在线| 色婷视频| 国产肥白大熟妇BBBB视频 | 91 九色 入口| 亚洲色婷婷99一9|| 五月色网| www综合久久| 色的色综合| 激情综合色| 激情啪啪五月天| 青青草六月丁香| 五月狠狠| 超碰在线个人观看| 五月天色婷婷小说| 激情五月丁香五月| 五月丁香成年黄色| 激情五月婷婷综合网| 丁香五月天婷婷激情| 丁香婷婷九月| 丁香婷婷中文字幕| 日本操天堂| 99成人网一区| 超碰在线免费9| 丁香五月 无码| 五月丁香六月婷婷亚洲激情综合| 五月丁香亚洲综合| 1999天天操夜夜操| 丁香婷婷色| 97碰碰免费.视频| 亚洲人人96@| 欧美内射AA| 精品人妻在线| 天天天天天天操| 九一九九黄色| 丁香五月天av| 欧美性猛交 XXXX 乱大交| 午夜免费试看| 亚洲无码11| 另类视屏| 激情综合色婷婷六月天| 丰滿爆乳一区二区三区| 久久久er热| 婷婷五月色播| 丁香五月精品视频| 中文字幕综合网| 涩综合网| 色综合久久88色综合天天99| 色天堂操| 丁香五月天论坛| 色色色色色色色五月| 色区域网站视频| 丁香花社区av| 婷婷五月天亚洲激情戏精品| 青草青草视频2免费观看| 久久婷丁香五月| 色三级色三级| 91se在线视频| 色婷婷激情| 97香蕉久久超级碰碰高清版 | 色综合狠狠色| 丁香婷婷五月综合| 99九精品| www.99日本| 色约约视频一区二区三区四区五区 | 综合五月丁香六月婷婷| 另类亚洲视频| 啪啪99| 色五婷婷| 91九色国产| 国产高清视频91九九九久久久| AAA亚洲AV| 婷婷日韩| 天天做天天爱天天要| 色五月婷婷天堂| 五月婷婷亚洲色视频| 日本人妻久久| 五月天婷婷激情| 丁香香蕉婷婷| 综合久久高清| 九九黄色网| 涩综合婷婷| 六月婷婷狠狠色在线观看| 人妻无码视频网| 99热777| 99热一本久道| 色吧婷婷| 亚洲精品99| 久久怡红院| 思思99精品视频在线观看| 国产精品久久久久久亚洲毛片| 天天综合亚洲综合| 激情 久久 婷婷| 五月丁香六月婷婷综合网站| 婷婷丁香成人五月天| 五月婷婷天堂| 99er这里只有精品视频| 国精产品一区一区三区免费视频 | 伊人五月综合网| 久色网| caopeng超碰| 影音先锋秋秋五月婷婷| www.夜夜操.com| 久热 91| 日本乱子人伦在线视频| 六月丁香婷婷开心综合基地| 草久私拍| 99在线热| 亚洲一色色色色色色色色| 97碰精品| 另类精品视频在线观看| 激情五月综合色婷婷| 五月婷婷真爱激情网| 色99婷婷五月天| 久久xxxx| 99区视频| 九九久久污| 思思热视频| 日韩婷婷五月天| 99伊人婷婷在线| 特级西西4444www无码| 午夜性爱影视一区77| 92久操视频| 丁香六月色婷婷| 婷婷色香六月综合激情| 大香蕉懂9| 婷婷丁香18| 伊人色欲五月天| 色婷婷88| 亚洲国产精品VA在线看黑人| 亚洲色色香蕉| 日本久久99| 亚洲AV成人精品网站在线播放| 久操97| 五月香蕉婷婷| 激情久久综合网| 天干夜夜操| 欧美日韩aaaa| 婷婷导航| 老师高潮流白浆喷水的A片| AV在线大香蕉| 日日操,夜夜爽| 久久婷婷人人| 亚洲色无码A片一区二区麻豆| 婷婷婷久久久| 天天婷婷天天| 久久性刺激| 91夫妻视频| 激情亚洲婷婷| 99精品无码网站| 久操人妻| 中文字幕无码人妻少妇免费视频| 色色色无码| 亚洲色婷婷婷婷人人爽| 啪啪操超碰| 亚洲精品V天堂中文字幕| 97色啪| 色噜综| 久久激情综合| 久re在线| 国产看真人毛片爱做A片| 五月天久久综合婷婷| 精品无码色欲AV| 高清无码 一区 二区 三区| 婷婷综合激情| JAPANRCEP老熟妇乱子伦视频| 亚韩在线视频| 六月丁香婷婷尤物| 99热在线播放| 日韩av在线免费观看| 婷色天堂| 亚洲精品久久久久AV无码| 亚洲AV日韩无码| 婷婷色导航| 亚洲色另类| 五月婷婷开心爱| 丁香 亚洲 久久| 思思99热在线| 色婷婷超碰| 色综合中文综合网| 裸体做A爰片毛片A片免费| 久热69| 天天插天天插天天插| 人妻乱码久久久| 91九色熟女| 丁香五夜激情四射夜夜夜| 精品一二三区久久AAA片 | 99色免费视频| 99热国产这里只有| 丁香五月AV| 九九美女视频| 久热99狠| 综合色色网| 丁香五月激情综合| 色婷婷综合亚洲|