99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

同一個(gè)ECC,三種技術(shù)世界:內(nèi)存糾錯(cuò)、SAP年結(jié)與MBIST測(cè)試

同一個(gè)ECC,三種技術(shù)世界:內(nèi)存糾錯(cuò)、SAP年結(jié)與MBIST測(cè)試 先問各位一個(gè)問題你在搜索框里輸入“ECC”三個(gè)字母的時(shí)候腦子里想的是哪個(gè)東西前陣子我同時(shí)被三撥人“轟炸”過。財(cái)務(wù)部的同事甩來一張截圖說公司 SAP 系統(tǒng)年結(jié)跑不下去了問我“是不是服務(wù)器內(nèi)存報(bào) ECC 錯(cuò)誤了”機(jī)房那邊告警面板上掛著一行“UNCORR. ECC 2”沒人敢動(dòng)隔壁做芯片驗(yàn)證的兄弟又跑來找我對(duì)齊 MBIST 里 ECC 測(cè)試的故障注入方案。有意思的是這三撥人說的都是“ECC”但完全是三件事。技術(shù)圈的“縮寫歧義”就是這么坑人。同樣是三個(gè)字母可以是內(nèi)存糾錯(cuò)碼可以是 SAP 的 ERP 核心組件還可以是橢圓曲線密碼學(xué)。你要是拿內(nèi)存糾錯(cuò)的知識(shí)去理解 SAP 年結(jié)或者用密碼學(xué)算法去套服務(wù)器告警大概率會(huì)一頭霧水。這篇文章我打算把這個(gè)縮寫徹底講明白先教你一眼分辨自己遇到的是哪個(gè) ECC然后重點(diǎn)展開硬件圈最常碰到的兩種場(chǎng)景——運(yùn)行時(shí)的 ECC 報(bào)錯(cuò)排查、芯片出廠前的 MBIST ECC 測(cè)試。如果你是為了 SAP ECC 年結(jié)而搜到這里第 5 章專門安排了年結(jié)的核心流程說明可以直接跳過去。1. 同一個(gè) ECC三種完全不同的技術(shù)世界1.1 四條熱搜詞背后的三類人群搜索平臺(tái)給“ECC”這個(gè)關(guān)鍵詞掛了一串關(guān)聯(lián)搜索詞sap ecc 年結(jié)、mbist ecc、uncorr. ecc 顯示2。乍一看毫無規(guī)律但它們精準(zhǔn)地暴露了三類不同的人群。“sap ecc 年結(jié)”來自企業(yè)管理系統(tǒng)里的財(cái)務(wù)或 IT 運(yùn)維人員他們糾結(jié)的是賬務(wù)年度怎么結(jié)、資產(chǎn)怎么結(jié)轉(zhuǎn)“mbist ecc”來自半導(dǎo)體行業(yè)的設(shè)計(jì)驗(yàn)證或測(cè)試工程師他們?cè)谘芯吭趺丛谛酒慨a(chǎn)前把內(nèi)嵌存儲(chǔ)器的糾錯(cuò)邏輯測(cè)干凈“uncorr. ecc 顯示2”則多半來自服務(wù)器運(yùn)維或硬件發(fā)燒友他們面對(duì)的是一臺(tái)試圖告訴他們“有 2 個(gè)錯(cuò)誤我修不了了”的機(jī)器。同一時(shí)刻搜索引擎把這三種人送到同一個(gè)關(guān)鍵詞下面的同一個(gè)結(jié)果頁(yè)——這就是縮寫歧義最典型的體檢現(xiàn)場(chǎng)。1.2 硬件糾錯(cuò)碼 ECCError Correction Code在服務(wù)器、內(nèi)存條、SSD、網(wǎng)絡(luò)控制器這些硬件場(chǎng)景里ECC 是 Error Correction Code 的縮寫翻譯過來是“糾錯(cuò)碼”指一類能夠檢測(cè)數(shù)據(jù)錯(cuò)誤、并且在能力范圍內(nèi)把錯(cuò)誤糾正回來的編碼算法。最廣為人知的應(yīng)用是 ECC 內(nèi)存。普通內(nèi)存條讀到一個(gè) bit 錯(cuò)了它不知道、也不管ECC 內(nèi)存讀到一個(gè) bit 錯(cuò)了控制器能定位到具體是哪一位然后把它翻回正確的值甚至不會(huì)讓上層軟件感知到這次錯(cuò)誤。除了內(nèi)存很多存儲(chǔ)芯片和高速數(shù)據(jù)鏈路也在用 ECC 機(jī)制來抵抗傳輸過程中的干擾。本文第 2 到第 4 章要展開的內(nèi)容全部屬于這個(gè)范疇。1.3 SAP ECC 和橢圓曲線 ECC名字像但八竿子打不著SAP ECC 的全稱是 ERP Central Component是 SAP 公司 ERP 產(chǎn)品線的核心組件承載著企業(yè)財(cái)務(wù)、物料管理、生產(chǎn)計(jì)劃、銷售分銷等業(yè)務(wù)流程。你會(huì)在登錄界面、年度財(cái)務(wù)結(jié)算、模塊配置里看到這個(gè)詞。它跟“糾錯(cuò)”沒有任何關(guān)系唯一的共同點(diǎn)是同樣叫 ECC。橢圓曲線密碼學(xué)Elliptic Curve Cryptography也縮寫成 ECC。它主要用在數(shù)字簽名、密鑰交換和區(qū)塊鏈相關(guān)的算法里和內(nèi)存、企業(yè) ERP 也都完全不搭界。為什么這幾個(gè)完全不相干的領(lǐng)域會(huì)撞名說白了就是電子信息行業(yè)在發(fā)展過程中各自為政誰也沒想到幾十年后同一個(gè)縮寫會(huì)被三個(gè)領(lǐng)域同時(shí)大規(guī)模引用?,F(xiàn)在再去追溯“誰先占用”已經(jīng)沒有意義重要的是在實(shí)際工作中能快速識(shí)別上下文。當(dāng)你看到 ECC 這個(gè)詞先看它出現(xiàn)在哪類文檔或系統(tǒng)里再?zèng)Q定按哪個(gè)領(lǐng)域的知識(shí)去理解。這種多義詞在 IT 領(lǐng)域到處都是USB-C 的 C 和 C 語言的 C 也完全是兩碼事處理方式是一樣的看語境。1.4 一張表幫你定位為了方便你快速對(duì)號(hào)入座我把四個(gè)高頻場(chǎng)景整理成一個(gè)對(duì)照表你身邊的語境ECC 全稱所屬領(lǐng)域本文對(duì)應(yīng)章節(jié)服務(wù)器告警、內(nèi)存條、BMC/IPMI 日志Error Correction Code硬件/服務(wù)器第 2、3 章芯片測(cè)試、SoC 驗(yàn)證、ATE 機(jī)臺(tái)日志Error Correction Code半導(dǎo)體測(cè)試第 4 章SAP 系統(tǒng)、財(cái)務(wù)年結(jié)、ERP 模塊ERP Central Component企業(yè)管理軟件第 5 章數(shù)字簽名、TLS 密鑰協(xié)商、區(qū)塊鏈Elliptic Curve Cryptography信息安全第 1 章說明我的習(xí)慣是跟人溝通時(shí)永遠(yuǎn)不說“ECC”三個(gè)字母而是帶上前綴內(nèi)存 ECC、MBIST ECC、SAP ECC、ECC 算法。一句話里帶上一個(gè)限定詞能避免絕大部分無效溝通。2. 內(nèi)存出錯(cuò)這件事比你想的更頻繁2.1 你的內(nèi)存其實(shí)在悄悄地出錯(cuò)一提到“內(nèi)存出錯(cuò)”很多人第一反應(yīng)是“內(nèi)存條壞了”。但實(shí)際在服務(wù)器上看日志你會(huì)發(fā)現(xiàn)大量?jī)?nèi)存錯(cuò)誤是隨機(jī)、瞬時(shí)、不可復(fù)現(xiàn)的稱為“軟錯(cuò)誤”soft error。DRAM 存儲(chǔ)單元靠電容上的電荷表示 0 和 1而電容有天然漏電特性所以內(nèi)存需要周期性地刷新把快要漏完的電荷補(bǔ)回去。在這個(gè)持續(xù)運(yùn)行的過程中高能粒子可能恰好穿過某個(gè)存儲(chǔ)單元比如宇宙射線中的中子或者芯片封裝材料里微量放射性元素釋放的 α 粒子。粒子命中之后會(huì)讓幾個(gè)存儲(chǔ)單元的電荷狀態(tài)發(fā)生變化原本的 0 變成 1或者反過來。這個(gè)過程完全不依賴硬件是否損壞純粹是概率事件。還有一類“硬錯(cuò)誤”hard error則是存儲(chǔ)單元物理?yè)p壞導(dǎo)致的比如介質(zhì)擊穿、金屬線開路這時(shí)候同一個(gè)地址會(huì)反復(fù)出錯(cuò)。軟錯(cuò)誤和硬錯(cuò)誤后面的處理方式完全不同這也是為什么要認(rèn)真分析日志而不是無腦換內(nèi)存。2.2 奇偶校驗(yàn)只能喊救命不能治病在 ECC 普及之前工程師先發(fā)明了奇偶校驗(yàn)Parity Check。思路極簡(jiǎn)多存一個(gè)比特讓整條數(shù)據(jù)字里 1 的個(gè)數(shù)保持奇數(shù)或偶數(shù)。比如一條 8 位數(shù)據(jù) 10101100 里有 4 個(gè) 1如果約定奇校驗(yàn)校驗(yàn)位就補(bǔ)一個(gè) 1讓整個(gè) 9 位數(shù)據(jù)里 1 的個(gè)數(shù)變成奇數(shù) 5。讀取時(shí)重新數(shù)一遍如果發(fā)現(xiàn)是偶數(shù)個(gè) 1說明數(shù)據(jù)在傳輸或存儲(chǔ)過程中發(fā)生了錯(cuò)誤。奇偶校驗(yàn)的問題有兩個(gè)。第一它只能告訴你“有錯(cuò)”不能告訴你“哪一位錯(cuò)了”所以無法恢復(fù)數(shù)據(jù)。第二如果恰好有偶數(shù)個(gè) bit 同時(shí)出錯(cuò)奇偶校驗(yàn)會(huì)判斷“沒毛病”。這是數(shù)學(xué)決定的——偶數(shù)個(gè)錯(cuò)誤不會(huì)改變 1 的個(gè)數(shù)的奇偶性校驗(yàn)必然漏檢。所以奇偶校驗(yàn)只能當(dāng)“哨兵”不能當(dāng)“醫(yī)生”。2.3 SEC-DED怎么做到糾 1 檢 2真正支棱起來的內(nèi)存糾錯(cuò)算法叫 SEC-DED全稱 Single Error Correction, Double Error Detection即糾正單個(gè)比特錯(cuò)誤、檢測(cè)雙比特錯(cuò)誤。ECC 內(nèi)存幾乎都基于它實(shí)現(xiàn)。它使用的底層數(shù)學(xué)是漢明碼Hamming Code。漢明碼的思路可以總結(jié)成一句大白話讓每一位數(shù)據(jù)比特都參與到多個(gè)不同的校驗(yàn)方程里。當(dāng)一個(gè)比特出錯(cuò)時(shí)不只一個(gè)校驗(yàn)方程會(huì)報(bào)警把“哪些方程報(bào)了警、哪些沒報(bào)”組合起來就可以倒推出到底是哪個(gè)數(shù)據(jù)比特出了問題。既然知道了位置把它取反錯(cuò)誤就修復(fù)了。整個(gè)過程類似“點(diǎn)名時(shí)兩個(gè)值日組同時(shí)報(bào)告少了人你根據(jù)‘缺人的組名’反推出具體是誰沒來”。SEC-DED 在傳統(tǒng)漢明碼的基礎(chǔ)上額外增加了一個(gè)全體校驗(yàn)位。這個(gè)全校驗(yàn)位讓硬件能區(qū)分“錯(cuò)了一個(gè)”和“錯(cuò)了兩個(gè)”錯(cuò)兩個(gè)比特時(shí)校驗(yàn)方程的組合會(huì)被識(shí)別為“不可糾正”于是硬件報(bào)出 UEUncorrected Error而不是盲目按單比特去糾正。這一步特別重要——如果 2 比特錯(cuò)誤被當(dāng)成 1 比特去修會(huì)把本來就是錯(cuò)的數(shù)據(jù)修得更錯(cuò)。2.4 ECC 內(nèi)存和普通內(nèi)存差的不只是價(jià)格從實(shí)物上看ECC 內(nèi)存比普通內(nèi)存多出一顆或幾顆芯片。普通 DDR4 內(nèi)存通常是 8 顆 x8 顆粒提供 64 位數(shù)據(jù)線ECC 內(nèi)存多一顆 x8 顆粒組成 72 位這多出來的 8 位就是校驗(yàn)碼的存儲(chǔ)空間。多出來的硬件直接反映在成本上ECC 內(nèi)存一般比同規(guī)格普通內(nèi)存貴 20% 到 30%。同時(shí)每次讀寫都要額外搬運(yùn) 8 位校驗(yàn)數(shù)據(jù)理論上有一定的總線帶寬開銷。但對(duì)服務(wù)器、數(shù)據(jù)庫(kù)、虛擬化平臺(tái)來說防止“靜默數(shù)據(jù)損壞”的收益遠(yuǎn)遠(yuǎn)大于損失。你希望財(cái)務(wù)系統(tǒng)里的一筆金額在內(nèi)存里悄悄從 1000 變成 1001 嗎顯然不。所以幾乎所有正經(jīng)服務(wù)器和云數(shù)據(jù)中心都會(huì)配 ECC 內(nèi)存。3. 從告警日志到換內(nèi)存條拆解一次真實(shí)的 ECC 排障3.1 告警日志里每個(gè)字段的潛臺(tái)詞實(shí)戰(zhàn)場(chǎng)景來了。假設(shè)某天你打開服務(wù)器帶外管理界面比如常見的 iDRAC、iLO或者翻 Linux 下的 dmesg、EDAC 相關(guān)日志看到這樣一段示意輸出EDAC MC0: 1 CE on DIMM2 (channel:0 slot:2 page:0x123456 offset:0x789) EDAC MC0: 2 UE on DIMM2 (channel:0 slot:2 page:0x654321 offset:0x987)先解釋兩個(gè)核心縮寫CE 表示 Corrected Error意思是“硬件已經(jīng)糾正掉的錯(cuò)誤”屬于警報(bào)到你這兒時(shí)已經(jīng)處理完的事故UE 表示 Uncorrected Error意思是“硬件嘗試糾正但沒能做到”的錯(cuò)誤這個(gè)才是真正需要人介入的?!癠NCORR. ECC 顯示2”里的 2通常就是 UE 的計(jì)數(shù)表示截止當(dāng)前已經(jīng)有 2 個(gè)不可糾正的 ECC 錯(cuò)誤。這兩個(gè)錯(cuò)誤背后大概率藏著同一條物理內(nèi)存條的硬故障。日志里 DIMM2、channel:0、slot:2 這些字段則是定位用的“坐標(biāo)”直接告訴你故障所在的內(nèi)存槽位。后面的 page 和 offset 是具體的物理地址用來判斷錯(cuò)誤是不是集中在同一片區(qū)域。3.2 三步鎖定故障內(nèi)存條第一步把完整日志記下來別只記一個(gè)“2”。page 和 offset 信息如果總是落在同一片地址空間基本可以認(rèn)定是硬錯(cuò)誤也就是那顆內(nèi)存顆粒本身有物理?yè)p傷如果地址一直在隨機(jī)變化那更可能是接觸不良、供電紋波、固件 bug 等問題。第二步給內(nèi)存條做個(gè)“除灰”處理。關(guān)服務(wù)器、斷開電源把告警的 DIMM 拔下來用干凈的橡皮擦輕輕擦拭金手指重新插緊開機(jī)后清空 SEL 日志再觀察。別小看這一步機(jī)房設(shè)備常年運(yùn)行插槽金手指氧化、灰塵覆蓋導(dǎo)致的接觸問題至少能解釋三成以上的內(nèi)存“誤報(bào)”。第三步單獨(dú)做壓力測(cè)試。如果重插之后還在繼續(xù)報(bào) UE把其他內(nèi)存條全部拆掉只留被測(cè)內(nèi)存條用 MemTest86 或 Linux 下的 memtester 跑至少一個(gè)完整輪回。一輪過后仍然出現(xiàn) UE這根內(nèi)存條基本就可以宣判了。3.3 從更換到驗(yàn)證少一步都不行換內(nèi)存條不是“拔舊插新”這么簡(jiǎn)單。我見過不少人在這一步翻車換上全新的內(nèi)存條系統(tǒng)仍然報(bào) UE最后發(fā)現(xiàn)問題出在主板的 DIMM 插槽上。正確的順序是關(guān)機(jī)斷電后等兩分鐘讓主板電容把殘余電荷放干凈插入新內(nèi)存條后先進(jìn) BIOS 確認(rèn)容量、頻率、時(shí)序是否正確識(shí)別再進(jìn)系統(tǒng)查看 CE/UE 計(jì)數(shù)是否還在增長(zhǎng)之后用 memtester 對(duì)新內(nèi)存條跑一輪全內(nèi)存壓力測(cè)試確認(rèn)其本身健康。如果新內(nèi)存條在原來插槽上依然報(bào) UE把這條新的換到相鄰插槽再試一次。這樣做是為了區(qū)分“內(nèi)存條壞”還是“插槽壞”。我在實(shí)踐中遇到過針腳彎了一根、插槽里有異物的情況導(dǎo)致連續(xù)兩根新內(nèi)存條被“誤殺”。提示服務(wù)器內(nèi)存通常支持不同頻率混插但系統(tǒng)會(huì)以最低頻率運(yùn)行。為了保證性能和穩(wěn)定性建議按原機(jī)配置購(gòu)買同頻率、同時(shí)序的內(nèi)存條別只看容量一樣就下單。3.4 什么情況該走 RMA什么情況是誤報(bào)內(nèi)存條作為半導(dǎo)體器件其故障率和批次、工作環(huán)境溫度、濕度、供電質(zhì)量都有關(guān)系。如果剛裝上的新內(nèi)存條立刻出現(xiàn) UE先別急著走售后去主板廠商官網(wǎng)查一下兼容性列表QVL——有些內(nèi)存條本身是好的但在特定主板上就是不兼容。真正需要走 RMA 時(shí)把以下信息準(zhǔn)備好DIMM 槽位、錯(cuò)誤類型CE/UE、錯(cuò)誤計(jì)數(shù)增長(zhǎng)頻率、服務(wù)器型號(hào)、內(nèi)存條序列號(hào)或照片。廠家對(duì)售后憑證的要求各不相同這些材料能讓你少跑一趟。另外還有一類“誤報(bào)”容易被忽略服務(wù)器固件或 BIOS 版本太老EDAC 驅(qū)動(dòng)存在誤判把正常訪問判斷為 UE。排查的一開始就應(yīng)該把 BIOS、帶外管理固件升到官方最新穩(wěn)定版再觀察日志。不要一上來就拆硬件。4. 芯片怎么給自己做“出廠體檢”MBIST 與 ECC 的配合4.1 MBIST 在芯片測(cè)試?yán)锏慕巧ㄎ话褧r(shí)間軸往前撥來到芯片出廠之前?,F(xiàn)代 SoC 內(nèi)部往往集成著幾十上百個(gè) SRAM 實(shí)例分布在 CPU 核、緩存、總線橋接等各個(gè)位置。芯片生產(chǎn)出來之后如果靠外部測(cè)試機(jī)臺(tái)逐個(gè)訪問這些存儲(chǔ)單元測(cè)試時(shí)間和 pin 腳資源都不現(xiàn)實(shí)。于是有了 MBISTMemory Built-In Self-Test存儲(chǔ)器內(nèi)建自測(cè)試技術(shù)。芯片內(nèi)部集成了一個(gè)專門的測(cè)試引擎它能夠自己生成地址、數(shù)據(jù)、讀寫控制信號(hào)快速遍歷全部存儲(chǔ)單元把讀回的數(shù)據(jù)和預(yù)期值做比對(duì)最后輸出 pass/fail。這樣量產(chǎn)測(cè)試時(shí)外部機(jī)臺(tái)只需要啟動(dòng) MBIST 引擎讀一下結(jié)果標(biāo)志就能完成對(duì)整顆芯片內(nèi)嵌存儲(chǔ)器的“體檢”。MBIST 的引入帶來的直接收益是測(cè)試時(shí)間大幅縮短、測(cè)試成本下降并且能定位到具體的失效存儲(chǔ)單元給后續(xù)的失效分析提供依據(jù)。4.2 MBIST 測(cè)的是存儲(chǔ)器不是 ECC 本身這里需要澄清一個(gè)概念MBIST 本身不是 ECC它是個(gè)測(cè)試工具。但很多芯片內(nèi)部的 SRAM 帶 ECC 功能比如 CPU 緩存、SoC 片內(nèi)內(nèi)存控制器數(shù)據(jù)緩沖區(qū)那么 MBIST 除了驗(yàn)證存儲(chǔ)陣列本身還必須驗(yàn)證 ECC 編解碼邏輯是否工作正常。怎么驗(yàn)證 ECC 邏輯靠“故障注入”。MBIST 引擎在數(shù)據(jù)路徑上人為地翻轉(zhuǎn)某個(gè)比特然后觀察 ECC 編碼器和解碼器的反應(yīng)如果注入 1 比特錯(cuò)誤ECC 邏輯能不能把它糾正回來如果注入 2 比特錯(cuò)誤ECC 邏輯能不能正確報(bào)出“不可糾正”。有一點(diǎn)需要特別強(qiáng)調(diào)這里的故障注入不是真的把存儲(chǔ)單元打壞而是通過旁路邏輯在寫入或讀取路徑上把某個(gè) bit 強(qiáng)行取反。這么做的目的是驗(yàn)證“如果數(shù)據(jù)錯(cuò)了編解碼器能不能按設(shè)計(jì)檢測(cè)出來并處理好”而不是驗(yàn)證“芯片本身會(huì)不會(huì)出錯(cuò)”。換句話說MBIST 測(cè)試 ECC 邏輯時(shí)關(guān)心的是糾錯(cuò)電路的反應(yīng)是否符合預(yù)期至于存儲(chǔ)單元本身的可靠性已經(jīng)被前面的數(shù)據(jù)完整性測(cè)試覆蓋了。這兩個(gè)層面要分清楚否則很容易把測(cè)試目標(biāo)搞混。4.3 測(cè)試日志里的 uncorrectable error count 怎么讀在芯片測(cè)試平臺(tái)或驗(yàn)證環(huán)境里你同樣會(huì)看到類似“uncorr. ECC 顯示2”的信息。但這里的解讀邏輯和服務(wù)器運(yùn)行時(shí)完全不同。在服務(wù)器上UE 計(jì)數(shù)是真實(shí)的故障信號(hào)在芯片量產(chǎn)測(cè)試?yán)飖ncorrectable error count 更像一個(gè)“預(yù)期行為檢查點(diǎn)”。預(yù)先設(shè)計(jì)好注入的錯(cuò)誤模型再去對(duì)照實(shí)際輸出注入 1 比特錯(cuò)誤期望 corrected error count 1uncorrectable error count 0注入 2 比特錯(cuò)誤期望 uncorrectable error count 2或者按測(cè)試向量定義的計(jì)數(shù)口徑來對(duì)應(yīng)如果注入 1 比特錯(cuò)誤日志卻報(bào)了 uncorrectable error說明解碼邏輯存在缺陷測(cè)試失敗。所以當(dāng)你看到“顯示2”時(shí)先不要急著判斷“產(chǎn)品壞了”而是要回到測(cè)試向量確認(rèn)這次注入的錯(cuò)誤模型到底是多少比特、預(yù)期計(jì)數(shù)是多少。我見過工程師拿著測(cè)試報(bào)告說 ECC 功能掛了折騰半天發(fā)現(xiàn)是測(cè)試程序把注入錯(cuò)誤數(shù)配錯(cuò)了虛驚一場(chǎng)。4.4 SEC-DED 的能力邊界測(cè)試覆蓋率必須考慮還有一個(gè)很重要的邊界認(rèn)知SEC-DED 不是萬能的。它保證的是“糾正 1 個(gè)比特錯(cuò)誤、檢測(cè) 2 個(gè)比特錯(cuò)誤”但 3 個(gè)及以上比特同時(shí)出錯(cuò)時(shí)存在某些組合會(huì)讓算法誤判為“無錯(cuò)”或“單比特錯(cuò)誤”。這意味著在做 MBIST ECC 測(cè)試時(shí)不能只測(cè)一兩個(gè)固定錯(cuò)誤注入點(diǎn)而要根據(jù)產(chǎn)品的可靠性目標(biāo)合理設(shè)計(jì)錯(cuò)誤注入向量并且在覆蓋率報(bào)告里明確標(biāo)注“SEC-DED 的能力邊界”。對(duì)于車規(guī)、工規(guī)等對(duì)可靠性要求極高的場(chǎng)景往往還會(huì)疊加額外的多比特錯(cuò)誤檢測(cè)機(jī)制或者要求固件周期性做內(nèi)存自檢把漏檢風(fēng)險(xiǎn)壓到可接受范圍內(nèi)。5. SAP ECC 年結(jié)同名縮寫下的另一個(gè)高頻需求5.1 先糾正一個(gè)誤解SAP ECC 和糾錯(cuò)碼沒關(guān)系聊完半導(dǎo)體和服務(wù)器那攤事我們回到企業(yè)管理系統(tǒng)??吹健癝AP ECC 年結(jié)”這個(gè)詞如果你下意識(shí)想到內(nèi)存糾錯(cuò)那說明你還沒被上一個(gè)章節(jié)的上下文“洗腦”成功笑。SAP ECC全稱 ERP Central Component是 SAP ERP 產(chǎn)品的核心組件。它負(fù)責(zé)公司財(cái)務(wù)、物料、生產(chǎn)、銷售這些核心業(yè)務(wù)流程。在 SAP 的世界里ECC 指的是軟件系統(tǒng)不是硬件技術(shù)。所以當(dāng)你所在的團(tuán)隊(duì)提到“ECC 在做年結(jié)”不要去服務(wù)器機(jī)房里找內(nèi)存條那是財(cái)務(wù)系統(tǒng)的事。5.2 年結(jié)的三件核心事SAP 年結(jié)Year-End Closing的核心目標(biāo)是把本財(cái)務(wù)年度的業(yè)務(wù)數(shù)據(jù)干凈地過渡到下一個(gè)會(huì)計(jì)年度。這里有三件大事財(cái)務(wù)同事應(yīng)該很熟。第一余額結(jié)轉(zhuǎn)??傎~科目里資產(chǎn)、負(fù)債、權(quán)益類科目的期末余額會(huì)進(jìn)入新年度作為期初余額損益類科目收入、費(fèi)用則會(huì)結(jié)轉(zhuǎn)到一個(gè)專門的留存收益科目把本年度利潤(rùn)“落袋”。這一步做不對(duì)新年度的報(bào)表基礎(chǔ)就塌了。第二資產(chǎn)會(huì)計(jì)年結(jié)。啟用固定資產(chǎn)模塊的企業(yè)需要先完成折舊計(jì)提、資產(chǎn)報(bào)廢或銷售的過賬然后執(zhí)行資產(chǎn)余額結(jié)轉(zhuǎn)和年度開關(guān)設(shè)置。資產(chǎn)年結(jié)和總賬年結(jié)之間有嚴(yán)格的先后順序順序錯(cuò)了會(huì)出現(xiàn)期末余額對(duì)不上的情況。第三未清項(xiàng)目處理。采購(gòu)訂單、銷售訂單、發(fā)票校驗(yàn)這類跨年可能的未清項(xiàng)需要在年結(jié)前確認(rèn)是結(jié)清還是允許跨年延續(xù)避免把上一個(gè)年度的歷史包袱帶進(jìn)新年度。5.3 年結(jié)前的準(zhǔn)備清單根據(jù)我接觸 SAP 項(xiàng)目時(shí)被財(cái)務(wù)同事拉著一起處理年結(jié)問題的經(jīng)歷年結(jié)前至少要把這幾件事確認(rèn)清楚舊年度所有會(huì)計(jì)憑證都已過賬當(dāng)月和當(dāng)年度月度結(jié)賬全部完成資產(chǎn)模塊的折舊已經(jīng)計(jì)提完畢資產(chǎn)卡片沒有未處理的異常狀態(tài)采購(gòu)、銷售模塊的未清項(xiàng)已梳理明確哪些結(jié)清、哪些跨年生產(chǎn)環(huán)境執(zhí)行前先備份數(shù)據(jù)庫(kù)年結(jié)操作不可逆必須有可回滾的方案有條件的話先在測(cè)試環(huán)境完整跑一遍年結(jié)流程。之所以列這些是因?yàn)槟杲Y(jié)的失敗大多不是“系統(tǒng)壞了”而是前置條件沒滿足。數(shù)據(jù)不齊、憑證沒過賬、資產(chǎn)卡片狀態(tài)異常這些都會(huì)讓年結(jié)程序卡在某個(gè)環(huán)節(jié)。5.4 年結(jié)報(bào)錯(cuò)大概率不是系統(tǒng)問題我觀察到一個(gè)規(guī)律SAP 年結(jié)報(bào)錯(cuò)多數(shù)時(shí)候不是“系統(tǒng)壞了”而是主數(shù)據(jù)或業(yè)務(wù)流程狀態(tài)不滿足條件。比如某張憑證沒有過賬、某個(gè)資產(chǎn)卡片狀態(tài)不對(duì)、某個(gè)未清項(xiàng)金額異常。報(bào)錯(cuò)信息只是把問題暴露出來。所以遇到年結(jié)報(bào)錯(cuò)時(shí)正確做法是去看錯(cuò)誤消息對(duì)應(yīng)的 SAP Note、查業(yè)務(wù)數(shù)據(jù)、核對(duì)流程節(jié)點(diǎn)是否滿足前置條件而不是一遍又一遍地重跑同一個(gè)年結(jié)程序。重跑十次結(jié)果不會(huì)改變。至于具體的菜單路徑、事務(wù)代碼、SAP Note 編號(hào)不同版本ECC 6.0、S/4HANA差異很大執(zhí)行前務(wù)必以你系統(tǒng)版本對(duì)應(yīng)的官方文檔為準(zhǔn)這里不展開羅列。提示如果你在搜索“SAP ECC 年結(jié)”時(shí)被一堆“內(nèi)存糾錯(cuò)”的教程帶偏過現(xiàn)在你應(yīng)該知道這里需要的不是換內(nèi)存條而是去翻 SAP 的實(shí)施文檔和財(cái)務(wù)模塊的結(jié)賬清單。6. 被“ECC”這個(gè)名字坑過幾次之后我的三條經(jīng)驗(yàn)6.1 內(nèi)存排障順序別搞反在內(nèi)存 ECC 排障這件事上我收到的教訓(xùn)是順序決定效率。先看日志再清灰塵然后跑壓力測(cè)試最后才換硬件。很多人上來就換內(nèi)存條結(jié)果新內(nèi)存還報(bào)錯(cuò)才發(fā)現(xiàn)是插槽問題。內(nèi)存條本身屬于失效率相對(duì)低的器件大量 UE 報(bào)警經(jīng)過排查后真正是內(nèi)部顆粒物理?yè)p壞的只是一部分接觸不良、固件 bug、電源質(zhì)量差這些因素更多見。不按順序排查很容易把一個(gè)簡(jiǎn)單的接觸問題升級(jí)成一次高成本的硬件更換。6.2 ECC 測(cè)試?yán)镂也冗^的兩個(gè)坑做 MBIST ECC 測(cè)試驗(yàn)證時(shí)我踩過兩個(gè)實(shí)打?qū)嵉目印5谝粋€(gè)是忘記在功能性測(cè)試模式里關(guān)閉錯(cuò)誤計(jì)數(shù)導(dǎo)致正常的預(yù)期錯(cuò)誤也被累加進(jìn) ECC fail測(cè)試結(jié)論直接不成立。第二個(gè)是故障注入點(diǎn)選在了 ECC 邏輯旁路保護(hù)覆蓋不到的位置測(cè)出來的結(jié)果根本不能說明編解碼器好壞。后來我養(yǎng)成了一個(gè)習(xí)慣在寫測(cè)試向量之前先把“數(shù)據(jù)位-校驗(yàn)位-錯(cuò)誤注入點(diǎn)”的映射關(guān)系表畫出來逐個(gè)核對(duì)注入點(diǎn)是否真正經(jīng)過編解碼路徑。這個(gè)過程雖然枯燥但能避免最蠢的返工。6.3 遇到“同詞不同義”先對(duì)語境再動(dòng)手最后一條經(jīng)驗(yàn)不局限于 ECC適用所有技術(shù)名詞遇到“同詞不同義”先確認(rèn)語境再動(dòng)手。跟硬件同事說“ECC”他默認(rèn)是內(nèi)存糾錯(cuò)跟 SAP 顧問說“ECC”他默認(rèn)是 ERP 系統(tǒng)跟密碼學(xué)工程師說“ECC”他大概率想到橢圓曲線。同一個(gè)縮寫差之毫厘謬以千里。多問一句“你指的是哪個(gè) ECC”在客戶現(xiàn)場(chǎng)能省掉一晚上的無用功。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月天综合在线| 天堂综合久久| 天天干,夜夜爽| 9久热在线视频精品| 香蕉久久国产AV一区二区| 天天色伊人| 色99免费视频中文| 97操碰人免费| 亚洲精品V天堂中文字幕| 婷婷六月丁香欧美视频在线| 另类激情五月| 欧洲亚洲最新精品| 色色五月天婷婷| 色婷婷激情Av久久久| 99热综合网| 这里只有精品视频一区| 五月天色在线| 涩涩五| 久热久操久热久草国产91| 可以免费观看的AV| 五月天激情视频| 天天久综合| 婷婷综合网在线| 亚洲色色五月天| 婷婷在线五月综合| 日本美女97在线视频| 九月丁香亭亭| 91色五月| 亚洲无码成人| 另类精品视频在线观看| 色女人久久| 五月天综合区| www.婷婷,com| 国际国外精品欧洲南美洲专区无码不卡| 99riAV国产精品视频| 亚洲天堂婷婷| OUMEIRIHANCHENGREN| 亚洲蜜桃精久久久久久久久久久久| 91凹凸在线| 久久久精品色| 五月丁香六月婷婷激情网| 天天日日夜夜爽。| 婷婷五月花西瓜| 五月丁香婷中文| 加勒比色色| 亚洲国产精品成人免费一区久久久在线观看AAAA | 五月婷婷开心色伊人| 婷婷97色| 日韩AV在线电影| 国产肥白大熟妇BBBB视频| 99色在线观看| 五月婷视频| 国产精品久久久久9999小说| 色色999三级片| 九九亚洲| 中文字幕人妻AV| 日韩人人操| 九九丁香社区欧美激情| 综合久久首页| 91超碰人人操| 日本人妻丁香婷婷久久寝取熟女五月| 九热在线这里有精品6| 婷婷伊人久久| 色五月婷婷天天干| 开心激情网五月| 综合五月激情网| 五月丁香花开综合网| 丁香婷婷啪啪啪| WWW.开心五月天.COM| 开心五月婷| WWW.99热| 婷婷五月无码| 岛国在线观看91| 日日操夜夜擼| 99精品在线观看视频| 婷婷97碰碰| 婷婷五月天AV在线| 亚洲色情激情丁香五月| 久久久27操| 色播婷婷大香蕉| 精品人人操| 丁香五月天堂| 激情电影五月婷婷| www.激情五月天。com| 亚洲欧洲色色| 天天综合网站| 202丰满熟女妇大| 超碰在线免费观看3 9| 九九大香蕉黄色影院| 激情九月综合| 99成人小视频| 涩涩五月天| 亚洲九九99精品视频在线播放| 激情国产五月| 天天操夜夜爽天天操| 狠狠婷婷爱| 99久久免费精品| 嫩草视频观看| 综合99在线| 天天视频亚洲| 久草热8精品视频在线观看| 青吴乐视频| 久久东京热婷婷五月| 99热日本| 五月天婷a在线| 亚洲一区先锋影音| 久久婷婷热| 99ER热精品视频| 超级碰碰碰碰视频| 五月天深爱激情网| 成人国产欧美大片一区| 丁香五月性爱| 97人人搞| 91亚洲天堂| 五月综合亚洲| 婷婷五月天丁香| 久久久久久18| 这里只有精品免费观看网占| 夜夜爽77777妓女免费下载| 97国产精品女人碰碰| 青青夜夜狠狠夜夜狠狠| 亚洲九九夜夜| 丝袜激情网| 国产精品久久久60086| 激情色色| 99自拍网| 九九99免费理论| 五月婷婷综合天天操| 婷婷五月天AV网| 色老久久| 久青操| 色人妻五月| 青草五月天| 伊人婷婷五月天av| 狠狠爱五月婷婷| 免费无码毛片一区二区A片| 97狠狠色| 夜夜操天天干| 久久草人妻| 永久免费一区二区三区| 亚洲精品中文字幕成人片| 久热最新视频 | 久久综合婷婷五月| 99热在线资源| 色九网| 9色免费网| 米奇影视资源婷婷狠狠色激情欧美五月丁香| 天天摸天天肏| 精热在线综合网| 九九热av| 综合五月丁香久久| 国产精品久久久久久久久久免费 | 亚洲AV免费在线| 久久色天堂| 婷婷干六月综合旧址| 色五月色综合| 九月大香蕉| 人人妻久久妻| 亚洲久久日| 操一操干一干| 丁香五月激情宗合网| 婷婷五月天av| 婷婷五月天xxx| 天天爽天天| 五月丁香婷婷啪啪| 99久久国产宗和精品1上映| 婷婷五月天成人娱乐| 五月天激情影院| 丁香婷婷六月婷婷六月婷婷六月婷婷 | 婷婷五月性感| 99热无码首页| 9久久久久久久久久久| 99热自拍| 色五月色五天色情网| 一级内射毛片| 91久久婷婷| 激情五月综合色| 激情小说五月天| 五月色欧洲| 亚洲激情四谢| 激情五月婷婷五月| 五月综合色播播丁香婷婷| www99xxxx五月丁| 久草热在线视频| 91操片| 色99视频| 可以看的AV| 91视频精品99| 99色在线观看视频者| 六月久久狠狠| 久久色频| 五月婷婷九九热| 久久 婷婷 五月天| 久色五月| 久久激情网| 久久久久人妻| 婷婷五月婷婷| 影音先锋 91工厂| 五月天丁香久久综合| 五月天综合| 99热免费网站| 激情爱爱网站| 国产原创视频91九色| 婷婷五月激情图片| 激情五月婷婷色| 中文字幕永久免费| 五月丁香人妻| WWW色五月| 色五月色图| 亚洲成人电影aaaa| 丁香亭亭久久| 婷婷九月激情| 91人人操人人看| 丁香五月天啪啪| 夜夜谢天天干| 亚洲热久久| 婷婷操逼| 99a级片| 国色天香成人网| 五月丁香婷婷免费视频| 国模淫穴色图| 热久久77777| 欧美日韩成人高清在线| 久久99日本精品视频免费观看| 在线只有精品| 超碰免费在线| 久热九九| 91碰| 婷婷久久精品| 婷婷五月天久久| 婷婷成人五月天一区| 丁香婷婷六月天| 爱iii做iiii日| 另类激情中文| 丁香五月六月| 精品人妻一区| 日本欧美成人片AAAA| 99视频激情四射| 国产美女最新VA在线免费观看| 嫩草视频在线观看| 色三级色三级| 婷婷五月亚洲综合| 伊人激情啪啪| 国产 码在线成人网站| 激情五月份婷婷| 色天使久久综合| 亚洲第一综合| 久久一级AV| 色色色网站| 婷婷97碰碰| 99视频激情四射| 婷婷爱五月天人人爱| 国熟女视频| 丁香五月天无码AV| 国内裸舞二区| 亚洲 无码 中文字幕 中出| 婷婷八月激情| 婷婷六月中文字幕| 婷婷丁香综合| 99热成人| 特黄三级片| 五月丁香亭亭操逼| 国产色色视频| 粉嫩AV久久一区二区三区| A久久| 丁香婷婷影院| 少妇性BBB搡BBB爽爽爽视頻| 亚洲精品一二三| 无码激情AAAAA片-区区| 婷婷亚洲在线| 九九色色色| 天天操天天曰天天射| 日韩精品一区二区刘| 激情五月天婷婷色色色色色色色色色色色| 97色图片中文字幕视频在线观看| 91欧美| 婷婷99狠狠躁天天躁| 婷婷视频网| www.天天色综合| 欧美极品999| 色五月无码| 天天拍天天做视频| 六月婷婷中文字幕| 激情五月婷婷五月| 99视频热99| 97丁香视频| 欧美操我| 开心深爱五月天| 我要射综合| 五月婷婷啪啪| 蜜桃人妻无码AV天堂三区| 爱99干99| 丁香五月激情棕合| 激情影院免费视频婷婷五月天| wwwC0maV五月花| 婷婷五月激情图片| 五月色综合| 色就色94欧美setu| 天天艹天天综合网| 亭亭五月色男人| 91欧美日韩综合| 国产精品人人做人人爽人人添 | 四色五月视频| 日韩成人五月天| 婷婷综合五月天亚洲综合| 91丨九色丨熟女|老版| 天天射影院| 精品久9| 亚洲AV综合网| 这里只有精品在线免费视频| 欧美一级色| 一区二区你懂的| 91热在线| 色五月婷婷五月| 丁香久久| 色综合激情| 亚洲99在线| 激情综合啪啪| www五月天com| 激情性五月天免费小说视频| 六月丁香啪啪啪| 婷婷婷五月香蕉| 激情综合五月丁香| 久久久久婷| 天天插天天插| 丁香六月激| 激情五月天伊人影院| 午夜不卡久久精品无码免费 | 亚洲成人免费在线| 色色色婷婷五月天| 色婷婷精品视频| 狠狠色综合五月人人| 99在线精品视频| 久久人人人人妻| 六月丁香啪啪| 玖玖色综合网| 夜夜爱伊人| 婷婷情色五月| 99成人无码| 99热99在线| 激情久久丁香| 婷婷五月影院| 久久久久激情网| 天天射夜夜骑| 开心色色五月天综合| 天天艹天天综合网| 色色色热| 丁香六月婷婷一区| 五月丁香在线| 日韩抽插操逼| 国产精品99久久久久久久女警| 美女黄频aⅴ视频| 六月丁香VA| 99精品国产在热久久| 91一起操| 久草热在线视频| 久操福利| 激情久久综合| 天天搞夜夜爽夜夜爽| 婷婷激情在线| 婷婷色五月激情| 超碰免费99| 久久久婷丁香五月天激情综合| 色婷婷成人五月| 97成人丁香| 日本欧美国产| 亚洲av成人电影在线观看| 无码色色| 91pornav在线| 亚洲国产网站| 丁香五月综合激情性爱| www.激情| 亚洲婷婷五月天| 精a品a视a频| 婷婷五月成人| 丁香五月在线观看完整版| 色婷婷综合久久| 婷婷丁香五月六月激情| 在线不卡的视频| 亚洲最大五月六月丁香婷婷| 激情九月天天天天婷婷| 久久久久er热| 天天摸日日舔狠狠添婷婷婷| 婷婷色色色| 久草五月天| 色五月婷婷天堂| www.射伊蕉婷婷| 97色色色| 亚洲精品99| 99热精国产这里只有精品| 五月婷婷丁香日韩在线| 影音先锋天天日| 超碰男人色| PORNY九色9l自拍视频成人| 99色激| 丁香五月天婷婷激情| 婷婷五月天激情四射| 狠狠干综合| 五月丁香激情综合欧美| 丁香五月婷婷亚洲另类| 九九这里都是精品| 激情婷婷五月天在线观看| 91碰操| 日韩成人AV在线播放| 九九色逼| 国产成人综合亚洲| 大香蕉婷婷久久| AV中文在线| 国产综合A片| 国产婷婷五月中文字幕高清| 色播色丁香五月| 在线成人视频免费| 五月五丁香婷婷| 七月激情六月婷婷综合在线播放| 五月婷婷中文| 逼里香不卡| 天堂中文国产| 婷婷天堂伊人| 婷婷五月天综合在线| 久久婷婷五月综合色播| 91色逼| 色色色色色色网| 开心五月丁香婷婷| 婷婷五月电影院| 成人做爰A片免费看网站找不到了| 99爱这里只有精品免费视频| 99啪啪| 黄网在线免费| 538午夜激情| 免费无码毛片一区二区A片| 影音先锋91| 伊人丁香五月| 婷婷五月天久久久| 亚洲色频| 丁香婷婷激情网站| 另类天堂| 欧美精品999| www.色色色色| 俺去也在线官网| 影音先锋毛片网站| 99热最新国内| 国产成人AV| 99综合| 五月丁香成人视频| 思思国产99| 丁香五月宝贝激情网| 伊人色综合影院视频| 九九99视频精品| 激情小说五月天| 99热精品99| 天天情色五月天| 另类五月婷婷| 婷婷的激情五月| 婷婷人人操| 热996精品在线观看| www.91五月| 99热在线观看| 91精品久久久久久77777| 九九大香视频| 色碰碰| 婷婷五月色情| 色噜噜97视频在线观看| 亚洲免费观看高清完整版AV线| 九热视频| 深爱激情五月婷婷| 天天日天天色| 激情文学第四色婷婷丁香五月| AA片在线观看视频在线播放 | 怡红院成人AV| 五月黄色婷婷| 五月天之色情综合网| Av中文在线| 精品人妻午夜一区二区三区四区 | 成人五月丁香社区| 黄色五月婷婷| 婷婷大香蕉| 99精品在线| 99爱视频| 在线观看亚洲视频影院| 99热青青草| www.91操| 色色色网站| 婷婷99| 色五月播五月| 色狠狠色噜噜AV天堂五区| www激情| 五月综合久久| 天天做天天爱天天高潮| 大色鬼综合| 99人妻碰碰久久久禁片| 人人摸人人干| www.99婷婷| 激情综合网丁香| 《战争与艾拉》完整版| 色五月 激情婷婷 综合五月天| 五月丁香日本在线视频观看| 亚色网站小视频| 亚洲舔观看| 秋霞电影理论| 日本五月天激情| 五月婷久久草| 免费观看亚洲AV片| 色婷久久| 亚洲综合色丁香婷婷六月| av在线色五月丁香婷区久| 五月天激情社区| www.婷婷,com| 激情五月天婷婷| 国产精品天天狠天天看| 久久综合播放| 激情精品久久| 天天日综合| 夜夜躁婷婷AV| 麻豆AV一区二区三区| 嫩草AV久久伊人妇女超级A| 琪琪色网址| av成人在线播放| 丁香五月婷婷色| 人人干Av| 69精品人人人人| 图片区 小说区 区 亚洲五月| 99久久6| 色99在线视频| 久草丁香婷婷1024| 亚洲AV综合在线观看| 婷婷五月天影视网址| 色五月婷婷激情| 色色色色色色色色网站| 碰碰碰91| 九九久久五月天综合伊人| 久久五月丁香婷婷| 六月色丁香婷婷| 国产免费一区二区三区三州老师F1F1.CC | 99啪啪| 欧美五月丁香| 九九九九九999999| 激情深爱综合| 色久女| ai97re99一本| 在线视频色五月| 4438激情网| 五月婷婷欧洲| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 丁香五月婷婷av影院| 婷婷天堂综合| 日韩高清成人| 九九99香蕉在线视频播放| 婷婷玉月丁香五月在线视频| 激情综合网激情五月天| 六月婷婷天天操夜夜爽视频| 97碰久久| 伊人9在线| 99热费观看| 天天揷综合网| 丁香婷婷六月天| 六月丁香五月婷婷| 337p大胆噜噜噜噜噜91Av| 五月激情在线| 狼友超碰| 日本色天堂| 激情婷| 国产色99| 激情丁香五月综合| 深爱激情综合网| 91精选国| 色视频五月天| www.激情com| 日本全黄一级999| 激情五月视频| 曰本久久女| 婷婷激情五月天亚洲综合| 中文字幕网伦射乱中文| 都市激情蜜桃婷婷五月天 | www.婷婷| 色婷婷五月综合在线| 人妻丰满精品一区二区A片| 亚洲亚洲激情| 亚洲欧美日韩VIP| 五月婷婷之六月丁香| 欧美精品在线观看| 91人人爽久久涩噜噜噜| 3p久久| 色婷婷综合影院| 99热1| 五月婷婷激情网| 在线五月婷婷小电影| 色婷婷丁香五月| 婷婷爱综合| 极品人妻VIDEOSSS人妻| 五月开心深深爱激情综合| 99热观看| 5月丁香啪啪啪| 亚洲五月天第一综合干| 综合色、色综合| 久久这里只| 天堂久久性| 天堂在线9| 五月天婷婷无码| 成人欧美一区二区三区在线观看| 婷婷中文综合网| 五月天婷婷AV| 婷婷五六日| 九九色网专区| 97婷婷狠狠| 99人这里只有精品| 丁香五月性爱爱五月| 色999五月色| 成人婷婷五月天| 殴美97色| 99在线免费观看| 9久热这里只有精品| 色播播婷婷| 色人久久| 狠狠色丁香| 天天人人综合| 在线成人av播放| 天天操天天操天天操天天操天天操 | 色欲久久99精品久久久久久| 91狠狠色| 色婷婷五月天天天干天天操天天爽 | 五月激情综合婷婷| 色婷婷小说网| 色色a| 日日操夜夜爽天天天| www,超碰| 天天狠狠综合精区| 深爱激情丁香| 综合久久五月天| 亭亭玉立国色天香| 香蕉网久久| 男女啪啪做爰高潮无遮挡| 99啪啪网| 9久热这里只有精品| 91婷婷| 99热在线网站| 桃色五月婷婷| 欧美丁香六月在线观看视频| 99干99| 激情色五月天| av中文在线| 久久久久亚洲AV成人无码电影| 五月开心啪啪| 99超在线| 俺也去婷婷五月天第五色| 日hao1区| 任我肏视频精品| 欧美性猛交AAAA片黑人 | 九九久久99精品免费观看www| 久久人妻高清中文| 六月亚洲| www色婷婷久久综合久色| 亚洲AV中文在线| 91亚洲免费片| 婷婷五月天丁香综合网| 青草视频在线播放| 久综合网| 久久九色| 国产亚洲在线| 激情五月丁香五月| 人人爽天天爽| 亚洲天堂久久| 操久久网| 91九色在线| 久99视频在线观看| 91久久色| 超碰91人人操| 9色视频在线| 一月婷婷色色| 婷婷五月综合久久中文字幕| WWW免费视频碰碰碰碰| 五月色综合网| 亚洲天堂色色| 手机旧版看人妻1025| 99精品在线观看视频| 欧美日韩一区二区三区四区| 婷婷激情小说| 99操无码视频观看| 国产激情AV| 色综合九九| 久久久婷婷| 激情综合网五月| 可以免费观看的av| 国产成人片| 亚洲成人在线在线| 男人的天堂99| 久9视频免费播放| 丁香五月人妻| 超碰碰碰碰| 激情五月丁香综合蜜桃| 久久网思思| 五月天婷婷中文字幕在线播放| 人人人va亚洲视频在线| 中文av网| 97人人草| 天天肏在线| 99精品综合在线| 亚洲成人av在线播放| 99re热99| 深爱网深爱综合网| 99er精品视频| 五月久久婷婷丁香| 天天日天天插| WWW、日本色丁香、co m| 婷婷成人AV| 天天干,天天舔| 天天综合五月| 欧美 日韩 成人| 五月天色不卡| 97色综合视频| 香蕉综合在线| 伊人午夜综合色啪| 色色色在线观看| 免费视频99| 天天干人人奸97| 9 1在线视频| 伊人春天av| 99视频热| 91丨九色丨熟女高潮| 91人久| 9精品视频在线观看| 久久成人性爱| 桃色五月天| 99热这里是精品| 日韩三级视频一区二区| 99re这里只有精品9| 色停停五月天| 六月激情网| 久久182| 婷婷丁香五月av| 婷婷久久草| 五月婷婷综合网| 久久码久久无清| 91免费在线视频6| 色五月激情网| 五月婷婷色欲| 国产欧美日韩性爱| 婷婷狠狠操| 日本欧美成人片AAAA| 大香蕉中文| 日日艹思思热| 九九在线精品| www.色综合| 思思热视频在线观看| 精国产品一区二区三区A片| 色综合视频| 婷婷五月天首页| 精品色色| 爆乳熟妇一区二区三区爆乳照片| 五月丁香六月婷婷亚洲综合| 四LLL少妇BBBB槡BBBB| 久久免费9| 婷婷狠狠操| 日操熟女| yazhouzonghesese| 亚洲激情在线| 色久九| 丁香五月成人| 中文字幕+中文在线| 六月丁香五月激情婷婷| 性做久久久久久久免费看| 色色色综合网| 色啪影院| 一区二区成人电影| 色综合天堂| 1024成人在线观看| 色偷偷五月天| 亚洲激情五月| 五月丁香六月情| 欧美人人草草| 天天檫天天爽| 久久免费高| 亚洲五月综合色播| 亚洲舔观看| 五月天激情小说| 六月婷基地| 亭亭五月丁香五月天激情| 九月丁香婷婷网| www.狠狠干com| 91 影音先锋| 无码中文一区二区三区| 香蕉AV福利精品导航| 丁香综合伊人| 天天拍天天操| 天天弄天天爽| 国产欧美精品AAAAAA片| 色综合播放| 国产日韩精品SUV| 五月激情另类| 激情五月综合网丁| 五月天婷婷青青草| 色婷婷激情视频| 亚洲五月色| 久久久9久| 激情五月婷婷五月| 五月天婷婷伊人| 性视频久久| 女婷久久| 99在线观看| 五月天另类综合网| 99国产精品久久久久久久久久久| 五月天色在线| 久久久久久久久久久久久久久久久精典| 新精品99| 色婷天天| 另类图片天天影视在线观看| 亚洲无码色色| 五月婷久久| 国产亚洲成AV人片在线观黄桃| 五月丁香狠狠地噜噜噜噜| 亚洲永远av在线播放| 精品人妻一区| 久久婷婷五月综合97色一本| 国产成人网| 噜噜噜噜在线| 操操熟女| AA久久| 伊人网欧美在线男人天堂五月丁香| 9久视频| 天天综合插插| 丁香五月婷婷婷桃花影院| 91丁香五月| 色色色色色色色综合| 最新无毒无码AV| 色情五月婷婷| 激情小说五月天社区丁香| 人妻丰满精品一区二区A片| 99热这里有精品2| 中文网婷婷字幕婷| 天天综合在线网| 色婷婷狠狠色| 色婷婷88| 9久热精品在线视频| 日韩视频99| 婷婷99中文字幕| 中文字幕视频色婷婷| 色综合九九色综合88| mmm1717.6dbm人人爱人人操| 久9热在线免费观看| 亚洲愉拍99热成人精品| 青青草视频福利| 99久久.www| 欧美顶级少妇做爰HD| 欧美性猛交99久久久99| 九六五月天婷婷| www99在线观看视频| 欧美性生交XXXXX无码小说| 五月丁香啪啪网| 2020久久婷婷五月| 色噜噜五月丁香婷婷| 精品夜夜澡人妻无码AV| 熟女网站久久| 色婷婷狠狠干芒果TV| 99国产er热视频| 懂色av蜜臀av粉嫩av永陈冠希| 香蕉久久国产AV一区二区| 开心激情综合| 五月丁香久久久| 色五月综合激情| 色婷婷五月影视| 五月Huangsewang| 色五月婷婷在线| 可以免费观看的av| www激情五月天| 日日夜夜青青草| 狠狠色丁香五月婷巨| 伊人大香蕉在线视频| 不卡在线视频| 99性爱| 啪啪啪大香蕉| 丁香激情网| 色婷婷小说网| 超碰熟女拍拍| 婷婷成人五月天一区| 色色综合无码| 色色五月婷| 91.com男女操| 色综合久久综合| 日韩精品在线观看9| 狠狠色 综合色区| 少妇AB又爽又紧无码网站| 99综合网| 激情综合五月| 99热在线播放| 丁香五月欧美| 99视频精品在线| 六月丁香啪啪| 激情婷婷丁香五月天| 人人草人人舔| 亚洲 视频 导航 一区| 久久久久婷| 五月婷婷激情中文字幕| 色5月丁香婷婷| 久久这里有精品| 久久99热在线观看| 婷婷五月色天| 91热视频色网站| 激情综合国产| 丁香色五月 97干| 色色丁香| 色婷婷基地| 成人无码精品1区2区3区免费看| 成人精品一区日本无码网| 少妇性按摩无码中文A片| 久久精彩视频| 婷婷色色亚洲| 色444综合网| 久操97| 97狠狠色| 天天做综合| 亚洲综合丁香五月| 情涩婷婷五月天| 五月天婷婷人妻| www.色婷婷| 狼人久草| 国产亚洲精品AAAAAAA片| 欧类av怡春院| 激情婷婷五月在线合集| 久热婷婷在线视频| A片一曲| xxxx五月激情| 美国天天日天天操| 丁香五月欧美| 色色色色色色网| 亚洲乱码日产精品BD| 九九久久偷拍| 婷婷五月天六点丁香五月| 国产色色在线| 区区欧美你爱| 日韩欧美成人片| 97久久超碰| 九九久久偷拍| 变态另类9| 色五月丁香激情视频| 天天干夜夜想| 婷婷五月天久久久| 最新无码专区| 国产五月天婷婷| 婷婷六月色丁香视频在线观看| 欧美激情综合色丁香婷婷五月天 | 久久性操| 97在线观视频免费观看| 蜜乳人妻一区二区三区| 天天日天天添| 成人综合伍月天| 色五月首页| 五月婷婷 婷婷五月 一区二区 久久久| 99er热精品视频| 婷婷综合另类小说| 深爱激情婷| 丁香六月婷| 亚洲AV成人无码电影| 婷婷久久精品| www,婷婷五月天,com| 狠狠五月天| 丁香色五月 97干| 激情超碰网| 久久婷婷成人视频| 激情综合网五月婷婷| 996er热| 丁香五月www| 国产婷婷五月中文字幕高清| 青青草原伊人网| 国产成人一区二区三区在线观看 | 亚洲第一色色色色| 欧美日韩123| 影音先锋男士资源网一区| 91操碰| 五月亭亭网成人在线视频| 丁香六月婷婷| BT综合在线视频观看| 99视频网| 少妇性BBB搡BBB爽爽爽视頻 | 婷婷五月天另类视频| av在线中文| 人妻免费网站| 思思热99er在线视频| 色在线99| 91操女| 五月婷色丁香| 丁香五月五月婷婷| 欧美图片丁香五月天| 色五月丁香五月婷婷五月成人网| 五月天激情小说| 激情五月天色色网| 欧美成人精品A片免费一区99| 新激情婷婷| 韩国情人在线电视剧免费观看高清版全集| 色噜噜狠狠色综无码久久合欧美 | xx综合网| 丝袜大香蕉| 中文字幕综合网| 久色激情| 1234操逼网| 五月天六月婷| 色色丁香婷婷五月天| 五月天激情中文字幕| 熟女人妻一区二区三区免费看| 狠狠搞五月天| 久久久五月天| 久久精品婷婷| 亚洲AV网站| 欧美精产国品一二三区| 99re在线视频| jiujiujiuwuyuetian| 99这里有精品| 丁香五月婷婷五月| 色五月五月婷婷| 色婷婷色综合激情91| 色色亚洲五月天| 碰超在线九色| 野战毛片三一3| 色婷亚洲五月丁香| 激情综合五月婷婷| 98永久精品| 99狠狠操一| 91精品婷婷国产综合| 98色花堂98t.R| 天天综合网91| 丁香五月色| 免费AAAAA网| 五月丁香婷婷色| 激情伊人五月婷婷久久| 亚洲视频一区| 亚洲一区二区无码蜜乳av| 婷婷色网址| 国产性爱亚洲是图| 天天综合网~91综合网| 五月丁香婷婷基地| 大功率国产在线| www.夜夜| 就爱射中文字幕资源网| 99re在线免费视频| 久久98热re| 丁香五月综合高清在线| 九九久久综合| 久久成人天| 99伊人婷婷在线| 91色综合网| 九九热这里只有精品556| 无码人妻少妇色欲AV一区二区| 丁香婷婷六月激情综合| 爱狠射| 激情久久久久久久久久久| 丁香五月婷婷久久综合激情网 | 99热色精品| 久久婷婷五月综合色播| 亚洲123区高清入口| 一区二区免费看| 婷婷激情丁香五月婷婷激情丁香五月婷婷 | 99成人网站| 99热99精品在线观看| 久久99热免费最新版| 婷婷色婷婷亚洲成人| 精品国产一区二区三区四区阿崩| 婷婷六月久久综合导航| 成人av在线电影| 国产69久久久欧美黑人A片| 久久人妻视步| 国产精品久久..4399| 日日做A爰片久久毛片A片英语| 激情五月丁香六月| 久久九九网| 色吧网91| 色综合婷婷| www.夜夜騎夜夜狠| 婷婷射丁香| 大香蕉色婷婷伊人在线| 五月天激情四射网站| 五月天婷婷青青| 97久久五月丁香婷婷| 色婷婷成人做爰A片免费看网站 | 欧美va亚洲va| 99这里| 五月婷婷丁香啪啪| 婷婷五月日本| 99热这里只有精品9| 日韩在线婷婷五月天综合| 国产亚洲色婷婷久久99精品91| www.色色色com| 日本色色图| 99re这里只有精品视频了| 就是色婷婷五月亚洲色| 91久久九九| 国产FREESEXVIDEOS性中国| 人人操AV| 国产日日操夜夜操的肉棒视频| 丁香婷婷性爱| 色综啪啪啪啪啪啪| 五月婷婷激情网| 成人在线综合| 丁香五月六月激情久久| 99热永久在线观看| 久久久久久久8| 99在线资源视频| 五月婷婷六月丁香| 久婷| 激情五月婷婷五月丁香五月开心五月| site:picc-up.com| 久久久WWW| www.综合久久| 婷婷激情六月中文| 久久99国产综合精品免费| 97资源碰碰| 婷婷五月情| 日日夜夜综合| 婷婷五月天伦理| jiqingtaose五月天| 97人操人免费视频| 六月婷在线| 97久久综合网| 日本人妻伦在线中文字幕| 色中色综合| 伊人激情啪啪| 国产精品视频| 婷婷五月天天天| 天天做 天天爱| 99热这里只有精品2024| 婷婷的五月天另类视频| 久久人妻久久久久| 国产精品久久久久久白浆色欲| 激情綜合網址| 色婷成人狠干| 999精品久久久久久久| 婷婷五月丁香色色| 日本色99网站| www五月婷婷88导航| 亚洲妇女熟BBW| 久久九九99| 五月激情小说| 公的粗大挺进了我的密道| 综合网色| 五月丁香成人网| 可以看的av| 亚洲精品V天堂中文字幕| 99热久久这里只有精品| 精品一二三区久久AAA片| 天天插天天插| 国产AV一区二区三区最新精品| 色色热| 国产人妻人伦精品一区二区| 少妇熟女视频一区二区三区| 风流少妇A片一区二区蜜桃| 99re6在线视频精品免费| 国产精产国品一二三在观看| 蜜桃成语时李时珍 免费| 欧美性猛交99久久久久99按摩| 亚洲成人无码专区| 五月激激网w'w'w| 91dy.av| 亚洲九九99精品视频在线播放| 五月天伊人日日噜影片AV| 久久午夜理论| 久久婷婷五月综合啪| 激情五月婷婷开心网| 五月天激情久久| 亚洲啪啪网| 亚洲激情综合| 大陆极品少妇内射AAAAAA| 色和综合网| 欧美在线视频9| 在线中文字幕av| 五月情丁香色| 永久地址 色| 美欧成人视频| 日日杆天天| 人妻内射一区二区在线视频| 超碰免费人人肏| 国产99久9在线| 婷香五月| ji'qing'luan'ren'lun| 欧美日本一区二区三区| 草综合14| 婷婷五月丁香六月| 亚洲国产精品SUV| 婷色综合| 国产精品电影网| 婷婷色五月综合丁香| 99成人无码| 第四色五月婷婷| 色婷婷影视| 51精品国内探花| 日本三级日本三级99| 亚洲婷婷六月天| 亚洲色婷婷| 亚洲乱码精品久久久久..| 91九色PORNY中文啦| 激情综合亚洲| 五月婷婷五月天亚洲无码| 精品99在线观看| 开心激情站| 91视频综合网| 欧美日韩大黄| 色爱综合网| 成人无码精品1区2区3区免费看| 午夜日日| 五月婷婷和六月| 超碰三级片| 九九婷婷五月天| 7777激情基地| 天天爽天天摸| 色五月欧美| 日韩xx在线| 巴基斯坦粉嫰无码视频| 激情人妻综合| 九九婷| 丁香五月激情宗合网| 丁香五月激情啪啪| 91精品综合久久久久久五月丁香| 婷婷综合偷拍| 在线色五月婷婷| 色婷婷久久综合| 欧美精品狠狠色丁香婷婷| 这里有精品99| 97欧美在线| 久久丁香综合精品综合| 五月丁香美女| 综合另类视频| 人人操人| 五月丁香婷婷激情在线| 热九九精品| 超碰色女| 婷婷丁香五月综合激情视频| 色九九综合| 嫩草视频在线观看| 五月久久婷婷成人网| 天天久综合网永久入口18| 色色无码日韩| 久热中文字幕| 操日本色| 天天舔日日肏夜夜爽| 高清一区二区三区日本久| 96丁香六月婷婷蜜桃综合久久| 久久狠狠干| 91久久久久| α久久| 五月婷婷综合激情| 91蜜桃婷婷狠狠久久综合9色| 六月婷婷色色色| 久久九九九九| www.99情趣网| 雪千夏麻豆| 丁香五月综合在线播放 | 久久婷婷精品| 婷婷综合网站| 97人人干人人操| 棕合影院色色| 婷婷六月天天| 天天综合五月天| 国产精品色色| 成人网站av免费网站推荐| 国产精品久久久海的味道| 色约约视频一区二区三区四区五区| 久久久精久人妻| 久久久天堂国产精品女人| 天天色天天干天天插| 五月婷婷六月丁香| 日韩草草草草草草草草草草草草| 99热这里只有精| 一起草无码视频| 亚洲色五月| 99热精在线九九久久保| 激情六月婷婷| 久久A热| 日韩欧美成人网| 女高怪谈在线观看| 日韩av网站在线观看|