99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

塔式、機(jī)架式、刀片服務(wù)器怎么選?運(yùn)維老手講透機(jī)房選型核心邏輯

塔式、機(jī)架式、刀片服務(wù)器怎么選?運(yùn)維老手講透機(jī)房選型核心邏輯 機(jī)房選型這件事表面上是采購(gòu)和技術(shù)方案的問(wèn)題但真正上手之后你會(huì)發(fā)現(xiàn)最后都會(huì)被三個(gè)名詞卡住機(jī)架式服務(wù)器、塔式服務(wù)器、刀片服務(wù)器。尤其是第一次給公司配服務(wù)器、或者剛接手運(yùn)維的兄弟看到這三個(gè)詞很容易懵——明明都叫服務(wù)器憑什么長(zhǎng)得完全不一樣價(jià)格差出好幾倍適用的場(chǎng)景也完全不同。這篇東西我不聊廠商PPT里的漂亮話只從一個(gè)裝過(guò)機(jī)器、扛過(guò)機(jī)柜、踩過(guò)不少坑的運(yùn)維老油條的角度把三類服務(wù)器的區(qū)別、適用場(chǎng)景、選型邏輯和實(shí)際操作中的避坑點(diǎn)一次講透。這篇內(nèi)容適合誰(shuí)看剛?cè)胄械倪\(yùn)維、小公司的兼職網(wǎng)管、準(zhǔn)備給實(shí)驗(yàn)室或辦公室搭服務(wù)器的技術(shù)負(fù)責(zé)人以及所有在機(jī)架、塔式、刀片之間猶豫不決的人??赐曛竽阒辽倌茉诓少?gòu)單上做出一個(gè)不后悔的選擇并且知道機(jī)器到貨之后該怎么規(guī)劃、怎么安裝、怎么避免那些看著小但能折騰死人的坑。1. 先說(shuō)清楚三類服務(wù)器的本質(zhì)區(qū)別在哪里很多人以為這三類服務(wù)器只是“長(zhǎng)相不同”其實(shí)它們的差異本質(zhì)上是設(shè)計(jì)目標(biāo)不同。換句話說(shuō)廠商在設(shè)計(jì)之初就沒想把它們用在同一個(gè)地方。搞清楚這一點(diǎn)后面的選型就順理成章了。1.1 塔式服務(wù)器最早也最親民的形態(tài)塔式服務(wù)器Tower Server長(zhǎng)得跟一個(gè)豎立的臺(tái)式機(jī)主機(jī)箱差不多只是更大、更重、內(nèi)部空間更充裕。這是服務(wù)器最早期的形態(tài)也是很多小公司接觸到的第一臺(tái)“真服務(wù)器”。你可以把它理解成一個(gè)加強(qiáng)版臺(tái)式機(jī)——CPU更多、內(nèi)存插槽更多、硬盤位更多、支持ECC內(nèi)存和RAID陣列卡但整體邏輯還是“一臺(tái)獨(dú)立計(jì)算機(jī)”。它的核心優(yōu)勢(shì)就是簡(jiǎn)單。買回來(lái)拆箱接上電源和網(wǎng)線開機(jī)裝系統(tǒng)完事。不需要機(jī)柜不需要理線甚至連機(jī)房都不用專門準(zhǔn)備放辦公區(qū)角落里就能跑。早期很多公司的ERP系統(tǒng)、進(jìn)銷存、財(cái)務(wù)軟件就是靠一臺(tái)塔式服務(wù)器撐了好幾年。塔式的短板也恰好在“簡(jiǎn)單”的對(duì)立面——空間利用率太低。一臺(tái)塔式服務(wù)器占地面積大概相當(dāng)于一個(gè)落地音響但只提供一顆或兩顆CPU的計(jì)算能力。如果業(yè)務(wù)規(guī)模上來(lái)需要加第二臺(tái)、第三臺(tái)辦公區(qū)很快就會(huì)被這些鐵疙瘩占滿供電和散熱也會(huì)成問(wèn)題。所以塔式更準(zhǔn)確的定位是單機(jī)應(yīng)用場(chǎng)景的入門選擇而不是數(shù)據(jù)中心里的大規(guī)模部署方案。1.2 機(jī)架式服務(wù)器數(shù)據(jù)中心的絕對(duì)主力機(jī)架式服務(wù)器Rack Server是現(xiàn)在數(shù)據(jù)中心里最主流的形態(tài)。它被設(shè)計(jì)成扁平的矩形盒子寬度統(tǒng)一為19英寸——這是國(guó)際標(biāo)準(zhǔn)的機(jī)柜寬度——高度按“U”來(lái)計(jì)算1U約等于44.45毫米。常見的有1U、2U、4U對(duì)應(yīng)的高度分別是約4.45厘米、8.9厘米和17.8厘米。機(jī)架式的設(shè)計(jì)邏輯非常明確在單位空間內(nèi)塞下盡量多的計(jì)算資源并且把所有設(shè)備統(tǒng)一安裝到標(biāo)準(zhǔn)機(jī)柜里集中管理。一臺(tái)標(biāo)準(zhǔn)42U的機(jī)柜理論上可以裝進(jìn)42臺(tái)1U服務(wù)器或者21臺(tái)2U服務(wù)器。這種密度是塔式完全做不到的。正因?yàn)榻y(tǒng)一了尺寸標(biāo)準(zhǔn)機(jī)架式服務(wù)器在機(jī)房里的部署就變得非常有條理機(jī)柜里一層一層碼好電源線從后邊接上PDU電源分配單元網(wǎng)線走理線架前面板留出指示燈和運(yùn)維接口。加上導(dǎo)軌抽拉設(shè)計(jì)運(yùn)維人員不用把整臺(tái)機(jī)器抱出來(lái)拉出導(dǎo)軌就能換內(nèi)存、插硬盤。不過(guò)機(jī)架式也有它的脾氣。首先是厚度限制帶來(lái)擴(kuò)展性妥協(xié)——1U的機(jī)器內(nèi)部空間非常緊湊PCIe擴(kuò)展槽位少、散熱空間小、風(fēng)扇轉(zhuǎn)速高導(dǎo)致噪音大。其次是必須依賴標(biāo)準(zhǔn)機(jī)柜沒有機(jī)柜的話單獨(dú)一臺(tái)機(jī)架式服務(wù)器放在桌面上又扁又長(zhǎng)接線還不方便基本屬于自找麻煩。1.3 刀片式服務(wù)器密度至上的“集成方案”刀片式服務(wù)器Blade Server是三類里最特殊、也最容易被人誤會(huì)的形態(tài)。它不是一個(gè)獨(dú)立的鐵盒子而是一個(gè)系統(tǒng)一個(gè)大型的刀片機(jī)箱也叫底盤/Chassis再加上若干片插在機(jī)箱里的“刀片”計(jì)算模塊。每片刀片就是一臺(tái)完整的服務(wù)器但它不帶電源、不帶散熱風(fēng)扇、不帶網(wǎng)絡(luò)接口這些全部由機(jī)箱統(tǒng)一提供。用過(guò)機(jī)架式的朋友可以把刀片理解成這樣的關(guān)系機(jī)架式是把整臺(tái)服務(wù)器做成一個(gè)“完整的盒子”放進(jìn)機(jī)柜刀片式則相當(dāng)于把服務(wù)器的電源、散熱、網(wǎng)絡(luò)、管理這些公共部分抽出來(lái)集中做成一個(gè)機(jī)箱計(jì)算單元?jiǎng)t瘦身成一片片模塊插上去就能用。刀片的核心優(yōu)勢(shì)就是密度極高、管理極統(tǒng)一。一個(gè)4U或6U的刀片機(jī)箱往往能插入8到16片刀片意味著一個(gè)機(jī)柜就能塞進(jìn)上百個(gè)計(jì)算節(jié)點(diǎn)。配合機(jī)箱自帶的管理模塊所有刀片的開關(guān)機(jī)、固件升級(jí)、狀態(tài)監(jiān)控都能在一個(gè)管理界面里完成。這種特性讓它成為大規(guī)模虛擬化、云計(jì)算集群的理想選擇。刀片的代價(jià)也很直接前期投入大、綁定性強(qiáng)。刀片機(jī)箱本身單價(jià)不低而且必須配上相應(yīng)數(shù)量的刀片模塊才能攤薄成本用得少反而比機(jī)架式更虧。操作系統(tǒng)的驅(qū)動(dòng)兼容性、固件升級(jí)流程也必須跟著廠商的生態(tài)走比機(jī)架式更封閉。更要命的是機(jī)箱是整個(gè)系統(tǒng)的單點(diǎn)——電源模塊、散熱模塊一旦出問(wèn)題整個(gè)機(jī)箱里的所有刀片都會(huì)受影響所以機(jī)房規(guī)范和備件策略都得更嚴(yán)格。2. 三類服務(wù)器逐項(xiàng)硬核對(duì)比不只看外觀要看實(shí)際賬前面說(shuō)的都是形態(tài)和設(shè)計(jì)邏輯但真正決定選型的是這些差異落到空間、功耗、維護(hù)、成本等維度的具體影響。我按實(shí)際運(yùn)維中比較關(guān)心的幾個(gè)維度逐一拉出來(lái)對(duì)比數(shù)字和單位都按真實(shí)機(jī)房里的情況來(lái)說(shuō)。2.1 空間占用與密度對(duì)比算算機(jī)柜里到底能塞多少算力空間這件事放在小公司可能覺得無(wú)所謂放到機(jī)房就是真金白銀。按常見的42U標(biāo)準(zhǔn)機(jī)柜來(lái)計(jì)算塔式服務(wù)器因?yàn)楦叨炔唤y(tǒng)一通常沒法在機(jī)柜里整齊疊放多數(shù)情況是放在機(jī)柜旁邊的地面上一臺(tái)塔式大約占0.5平方米的地板面積機(jī)架式1U服務(wù)器一臺(tái)占1U高度42U機(jī)柜理論上可以放42臺(tái)刀片式取常見配置——比如一臺(tái)10U的刀片箱放進(jìn)16片刀片——那么一個(gè)42U機(jī)柜可以放4個(gè)刀片箱提供64個(gè)計(jì)算節(jié)點(diǎn)。光看數(shù)字還不夠得看這些計(jì)算節(jié)點(diǎn)的密度差距。同樣是10U的空間機(jī)架式大約能放9臺(tái)1U機(jī)器但刀片箱能插進(jìn)16片刀片相當(dāng)于同等機(jī)柜空間里多出了近80%的計(jì)算節(jié)點(diǎn)。這還是按1U來(lái)算如果機(jī)架式用2U機(jī)器差距會(huì)更懸殊。不過(guò)密度高不是白來(lái)的。刀片箱對(duì)供電和散熱的要求要比普通機(jī)架式高好幾個(gè)等級(jí)所以“塞得進(jìn)”和“跑得穩(wěn)”是兩碼事。機(jī)柜的電力容量、空調(diào)的制冷能力跟不上密度再高的刀片也只能降頻運(yùn)行這一塊后面會(huì)專門說(shuō)。2.2 功耗、散熱與供電差異機(jī)房里的“氣”和“電”都得管服務(wù)器是吃電大戶也是產(chǎn)熱大戶。三類機(jī)器在這方面的表現(xiàn)差異非常明顯。塔式服務(wù)器體積大內(nèi)部空間寬敞散熱通??壳爸眠M(jìn)風(fēng)、后置出風(fēng)的大尺寸低轉(zhuǎn)速風(fēng)扇噪音相對(duì)低散熱余量也足。功耗上塔式的范圍很寬從低配單路到高配雙路都有但通常跑不滿很高的功率密度一臺(tái)滿載大概在300W到800W之間。因?yàn)樗揭话悛?dú)立供電電源線直接插墻插或普通PDU就行。機(jī)架式受限于厚度1U的機(jī)器風(fēng)向幾乎是“直線貫穿”前面板進(jìn)風(fēng)后面板出風(fēng)中間經(jīng)過(guò)CPU散熱器和內(nèi)存條。為了讓有限空間里的熱量快速排出機(jī)架式風(fēng)扇通常轉(zhuǎn)速高、噪音大滿載時(shí)的呼呼聲在機(jī)房里非常明顯。功率部分1U雙路服務(wù)器滿載一般在500W到1000W2U機(jī)型可以到1000W以上。注意機(jī)架式因?yàn)槎嗯_(tái)同時(shí)裝在一個(gè)機(jī)柜里機(jī)柜散熱通道是前后貫通的機(jī)柜前后門都要保證通風(fēng)面積空調(diào)送風(fēng)方向也要安排好。刀片式是最極端的。一個(gè)滿配刀片箱的功耗可以輕松超過(guò)3000W甚至5000W相當(dāng)于好幾個(gè)電熱水器同時(shí)在工作。機(jī)箱內(nèi)部風(fēng)扇組幾乎是一開機(jī)就在高轉(zhuǎn)配上空調(diào)的強(qiáng)制冷才能壓住刀片堆積的熱量。刀片機(jī)箱的電源模塊通常是冗余并行供電——比如六個(gè)2600W模塊——需要多路PDU接入對(duì)機(jī)柜供電容量有硬性要求。供電給不到位刀片會(huì)直接拒載。這三類機(jī)器放在一起散熱和供電的投入是逐級(jí)遞增的。塔式是“插上就能用”機(jī)架式是“機(jī)柜和管理要配套”刀片式則是“機(jī)房條件必須達(dá)標(biāo)”。選刀片卻配了一個(gè)普通辦公環(huán)境開機(jī)五分鐘就過(guò)熱報(bào)警這是新手最容易犯的錯(cuò)誤。2.3 擴(kuò)展性與可維護(hù)性加硬件、修故障的時(shí)候差距就出來(lái)了服務(wù)器用兩三年之后基本都會(huì)面臨加內(nèi)存、加硬盤、換網(wǎng)卡之類的需求。這時(shí)候三類機(jī)器的擴(kuò)展性差異就很現(xiàn)實(shí)。塔式服務(wù)器擴(kuò)展性最強(qiáng)。它的機(jī)箱空間充裕PCIe插槽數(shù)量多——中塔機(jī)型通常有6到8個(gè)擴(kuò)展槽位硬盤位也從4盤位到12盤位不等甚至可以再掛陣列柜。加卡、加盤都不需要太多技巧打開側(cè)板就是干。維護(hù)性的優(yōu)勢(shì)也很直接機(jī)器就在你旁邊斷電開箱哪兒壞了換哪兒新手也能操作。機(jī)架式服務(wù)器的擴(kuò)展性就看U高。1U機(jī)型通常只有一到兩個(gè)PCIe擴(kuò)展槽2U機(jī)型有3到5個(gè)和塔式比少了不少但勝在形態(tài)標(biāo)準(zhǔn)和統(tǒng)一。維護(hù)方面機(jī)架式配好導(dǎo)軌之后拉出來(lái)就能打開上蓋操作不用把整臺(tái)機(jī)器從機(jī)柜里抬出來(lái)。要注意的是1U機(jī)器內(nèi)部接線空間非常小插內(nèi)存條、換CPU散熱器時(shí)手大的兄弟會(huì)有點(diǎn)受罪。刀片服務(wù)器的擴(kuò)展邏輯和前面兩類完全不一樣。單片刀片內(nèi)部的PCIe擴(kuò)展基本不用指望——那點(diǎn)空間連半高卡都插不了幾塊刀片通常只留數(shù)量有限的板載網(wǎng)口和磁盤位。擴(kuò)展是整箱級(jí)的性能不夠就再插一片刀片進(jìn)去網(wǎng)絡(luò)不夠就加機(jī)箱里的交換模塊。這種擴(kuò)展方式的優(yōu)勢(shì)是彈性好、管理統(tǒng)一但代價(jià)是單節(jié)點(diǎn)內(nèi)部幾乎沒有折騰空間想在某一片刀片上插一塊專用GPU加速卡很多時(shí)候根本插不上。2.4 成本結(jié)構(gòu)對(duì)比別只看采購(gòu)價(jià)電費(fèi)才是隱藏的大頭采購(gòu)時(shí)的標(biāo)價(jià)最容易迷惑人。我見過(guò)不少公司一看塔式服務(wù)器便宜立馬下單結(jié)果業(yè)務(wù)上量之后發(fā)現(xiàn)性能和擴(kuò)展跟不上又得再來(lái)一輪機(jī)架式采購(gòu)也見過(guò)團(tuán)隊(duì)被刀片的高密度吸引很快上了刀片箱結(jié)果后續(xù)電費(fèi)和維護(hù)成本高得讓財(cái)務(wù)眉頭直皺。實(shí)際上成本要分成四塊看采購(gòu)成本、運(yùn)行成本電費(fèi)制冷、維護(hù)成本、空間成本。塔式服務(wù)器的采購(gòu)單價(jià)在三類里通常最低低配單路機(jī)型幾千元就能拿下。但它占用空間大、單臺(tái)計(jì)算密度低所以空間成本是最高的。你可以算一筆賬數(shù)據(jù)中心機(jī)柜的租用費(fèi)是按U甚至按面積算的一臺(tái)塔式占用的地面面積如果換算成機(jī)架位隱形開銷并不低。維護(hù)成本方面塔式相對(duì)最簡(jiǎn)單硬件故障直接開箱換件就行。機(jī)架式是性價(jià)比最均衡的。1U和2U的采購(gòu)價(jià)格從幾千到幾萬(wàn)跨度很大但整個(gè)生態(tài)非常成熟二手市場(chǎng)活躍、備件好找、兼容方案多??臻g利用率比塔式高出幾個(gè)量級(jí)單機(jī)功耗可預(yù)測(cè)性強(qiáng)電力規(guī)劃和成本測(cè)算很容易做。維護(hù)成本要看環(huán)境——機(jī)柜布局合理的機(jī)房換一臺(tái)機(jī)器基本是拉出、換件、推回、上電十幾分鐘搞定機(jī)柜理線一團(tuán)糟的機(jī)房光是抽出服務(wù)器就要先拆一堆網(wǎng)線時(shí)間成本全耗在這上面。刀片式的采購(gòu)成本在三類里最容易讓人打退堂鼓一個(gè)刀片箱加十幾片刀片報(bào)價(jià)幾十萬(wàn)甚至上百萬(wàn)很正常。但它有一筆隱蔽的“省”管理成本低。不用一臺(tái)臺(tái)單獨(dú)接管理口和電源線所有刀片共用一套管理模塊批量部署、云化調(diào)度都更順手。運(yùn)行成本上刀片雖然總功耗高但分?jǐn)偟絾蔚镀笠驗(yàn)殡娫崔D(zhuǎn)換效率集中化、制冷通道集中化單位負(fù)載的電費(fèi)往往低于一堆散裝機(jī)架式。真正要警惕的是機(jī)箱本身的空載功耗——哪怕只插了2片刀片機(jī)箱的電源、風(fēng)扇、管理模塊全都在轉(zhuǎn)這部分電費(fèi)即使不用也跑不掉。3. 怎么選一套能直接上手的選型思路說(shuō)了這么多對(duì)比落到實(shí)際問(wèn)題就是一句話我到底該買哪一類我給一個(gè)相對(duì)實(shí)用的決策思路不需要你成為硬件專家只要順著四個(gè)問(wèn)題往下走基本就能圈定方向。3.1 先看業(yè)務(wù)規(guī)模和形態(tài)這是第一步也是決定性的一步。如果你只有一套業(yè)務(wù)系統(tǒng)要跑用戶量不大比如一家?guī)资说墓九芤惶譋RP或者一個(gè)門店跑收銀進(jìn)銷存沒有專職運(yùn)維——選塔式。一臺(tái)中高配塔式服務(wù)器足夠撐住這類負(fù)載三到五年。機(jī)房環(huán)境也不用刻意準(zhǔn)備防塵、通風(fēng)、斷電保護(hù)做到位就夠。如果你有多個(gè)業(yè)務(wù)系統(tǒng)、多個(gè)應(yīng)用要跑或者已經(jīng)在規(guī)劃做虛擬化比如用VMware、Proxmox VE、Hyper-V之類把多套系統(tǒng)整合到幾臺(tái)物理機(jī)上——選機(jī)架式。兩臺(tái)2U雙路機(jī)架式服務(wù)器做成虛擬化集群性能和穩(wěn)定性都對(duì)得起價(jià)格。如果你要做大規(guī)模的云計(jì)算平臺(tái)、大數(shù)據(jù)集群或者你已經(jīng)明確知道未來(lái)一年內(nèi)計(jì)算節(jié)點(diǎn)會(huì)超過(guò)幾十臺(tái)并且有一個(gè)像樣的機(jī)房來(lái)支撐——刀片式才是劃算的。低于這個(gè)體量刀片的優(yōu)勢(shì)發(fā)揮不出來(lái)反而背上機(jī)箱空載成本和綁定成本不值得。3.2 再看機(jī)房物理?xiàng)l件電源、空調(diào)、機(jī)柜尺寸業(yè)務(wù)想用刀片但你得先問(wèn)問(wèn)機(jī)房答不答應(yīng)。這里給一張自查表采購(gòu)之前照著核一遍電力容量機(jī)房總供電多少安機(jī)柜分配多少千瓦刀片箱動(dòng)輒3000W以上一個(gè)普通辦公室的16A插座根本帶不動(dòng)。機(jī)架式也要算好一個(gè)42U機(jī)柜塞滿1U雙路設(shè)備總功率可能突破15kW普通機(jī)房設(shè)計(jì)容量未必夠。制冷能力空調(diào)制冷量夠不夠機(jī)房有沒有下送上回或上送下回的規(guī)范氣流組織如果只是開放式辦公區(qū)建議直接放棄刀片。機(jī)柜深度標(biāo)準(zhǔn)機(jī)架式服務(wù)器深度一般600毫米到900毫米刀片機(jī)箱深度更大。買機(jī)柜之前先量機(jī)柜內(nèi)部實(shí)際可用深度尤其是靠墻角、被管道擋住的機(jī)柜很容易出現(xiàn)深度不夠關(guān)不上門的情況。機(jī)房高度和承重這聽起來(lái)夸張但裝滿設(shè)備的機(jī)柜重達(dá)幾百公斤很正常老舊樓板的承重能力要提前確認(rèn)。3.3 算一筆總成本賬TCO采購(gòu)價(jià)只是起步我建議把五年的總持有成本拉出來(lái)比一比。簡(jiǎn)化算法是五年總成本 采購(gòu)價(jià) 五年耗電費(fèi) 五年維護(hù)備件費(fèi) 空間占用費(fèi)。舉個(gè)例子一個(gè)小機(jī)房要部署16個(gè)計(jì)算節(jié)點(diǎn)。方案A16臺(tái)1U機(jī)架式方案B1個(gè)10U刀片箱加16片刀片。假設(shè)單臺(tái)1U機(jī)架式采購(gòu)1.5萬(wàn)元16臺(tái)就是24萬(wàn)刀片箱加16刀片可能報(bào)價(jià)30萬(wàn)到35萬(wàn)。第一眼刀片貴不少但看后邊機(jī)架式16臺(tái)要占用32U到40U空間需要額外的網(wǎng)絡(luò)交換設(shè)備和線纜管理電費(fèi)按每臺(tái)500W跑五年16臺(tái)五年電費(fèi)將近35萬(wàn)元刀片箱整箱功耗算4000W五年電費(fèi)約17萬(wàn)元。再加上空間成本機(jī)架式在機(jī)房里的租金分?jǐn)傔h(yuǎn)高于一個(gè)10U刀片箱。五年算下來(lái)反而是刀片更省。但注意這個(gè)結(jié)論有一個(gè)前提你的負(fù)載真有那么大。如果只需要4個(gè)節(jié)點(diǎn)塔式或機(jī)架式明顯更靈活。刀片的省省在規(guī)模效應(yīng)規(guī)模沒起來(lái)就談不上省。3.4 部署形態(tài)與運(yùn)維習(xí)慣也要考慮最后一條是很多技術(shù)選型容易忽略的你的運(yùn)維團(tuán)隊(duì)習(xí)慣怎么維護(hù)設(shè)備。如果你就一個(gè)人兼著管網(wǎng)絡(luò)、管桌面、管服務(wù)器那你最需要的是“少操心”的設(shè)備。塔式最省心機(jī)架式也可以只要管理口配置好遠(yuǎn)程管理能力足夠。刀片式雖然管理界面統(tǒng)一但機(jī)箱、刀片、交換模塊、固件升級(jí)這些概念學(xué)習(xí)曲線比機(jī)架式陡不少一個(gè)人如果沒接觸過(guò)前期會(huì)很吃力。如果你背后有完整的運(yùn)維團(tuán)隊(duì)甚至有專門的機(jī)房管理規(guī)范那刀片的集中管理優(yōu)勢(shì)就會(huì)被放大幾十臺(tái)刀片固件批量升級(jí)、狀態(tài)批量巡檢、故障節(jié)點(diǎn)快速隔離一套操作比一臺(tái)臺(tái)單獨(dú)SSH進(jìn)服務(wù)器高效得多。這種效率差是刀片最值錢的地方。4. 實(shí)戰(zhàn)中的典型問(wèn)題與避坑經(jīng)驗(yàn)這些坑我是真踩過(guò)型號(hào)和參數(shù)看再多都不如實(shí)際部署中踩出來(lái)的教訓(xùn)來(lái)得深刻。我把這些年積累的幾個(gè)典型問(wèn)題按場(chǎng)景整理出來(lái)每條都是真金白銀換的經(jīng)驗(yàn)。4.1 塔式服務(wù)器放辦公區(qū)的噪聲與散熱陷阱塔式服務(wù)器比臺(tái)式機(jī)安靜但那是相對(duì)機(jī)架式來(lái)說(shuō)的。滿負(fù)載跑起來(lái)塔式的高轉(zhuǎn)速風(fēng)扇依然有明顯噪聲放在開放式辦公區(qū)員工肯定有意見。我見過(guò)一個(gè)公司把塔式服務(wù)器直接塞在工位旁邊的矮柜里夏天CPU溫度一路飆到90多度頻繁降頻業(yè)務(wù)卡成幻燈片。正確的做法是給塔式服務(wù)器預(yù)留獨(dú)立空間至少要保證前后通風(fēng)順暢不要貼墻、不要塞進(jìn)密閉柜子。有條件的話給它單獨(dú)拉一路防雷電源插座避免和空調(diào)、微波爐共用線路。如果辦公室本身就沒有機(jī)房條件那別硬上高配塔式選低功耗的低配機(jī)型會(huì)穩(wěn)妥很多。4.2 機(jī)架式服務(wù)器的“深度陷阱”和理線問(wèn)題機(jī)架式服務(wù)器的寬度是統(tǒng)一標(biāo)準(zhǔn)但深度差異很大。有些低端1U機(jī)深度只有500多毫米有些高性能4U機(jī)深度超過(guò)900毫米。買機(jī)器前不量機(jī)柜實(shí)際深度到貨才發(fā)現(xiàn)推進(jìn)去頂?shù)胶竺婢€槽柜門都關(guān)不上這種事每天都在發(fā)生。理線是另一個(gè)新手重災(zāi)區(qū)。服務(wù)器裝上去電源線、網(wǎng)線、光纖、管理線一通亂接后門鼓成一團(tuán)之后任何一臺(tái)機(jī)器要維護(hù)都得先拆半天線。我的建議是機(jī)柜里必須配理線架網(wǎng)線用成品跳線而不是自己壓線光纖走專用光纖槽。線纜標(biāo)簽從第一天就必須做每根線兩端貼上標(biāo)簽寫明對(duì)端設(shè)備不然后面排查故障的時(shí)候表情只能是崩潰。4.3 管理口配置帶外管理是救命稻草不管選機(jī)架式還是刀片式必須把帶外管理口BMC/IPMI/iDRAC/iLO配置好。這是服務(wù)器上的一個(gè)獨(dú)立管理網(wǎng)口不占業(yè)務(wù)網(wǎng)卡即使系統(tǒng)死機(jī)、網(wǎng)絡(luò)中斷運(yùn)維也能通過(guò)它遠(yuǎn)程查看硬件狀態(tài)、開關(guān)機(jī)、看控制臺(tái)。實(shí)際使用場(chǎng)景很殘酷業(yè)務(wù)凌晨三點(diǎn)掛掉機(jī)房又遠(yuǎn)你沒法立刻趕過(guò)去。這時(shí)候如果帶外管理口配好了你能直接遠(yuǎn)程重啟、看POST界面、甚至掛載ISO重裝系統(tǒng)幾十秒就能定位問(wèn)題。如果沒配好這一晚就別想睡了。新到貨的服務(wù)器第一件事就是進(jìn)管理口設(shè)置界面配好IP、賬號(hào)、密碼測(cè)試遠(yuǎn)程訪問(wèn)正常再上架。這個(gè)動(dòng)作花不了十分鐘但后面能救命無(wú)數(shù)次。4.4 刀片式的單點(diǎn)依賴與固件綁定刀片式最風(fēng)光的時(shí)候是虛擬化大規(guī)模部署但它的風(fēng)險(xiǎn)也在集成度上。一個(gè)刀片箱里的電源模塊、散熱模塊、管理模塊都是共享的任何一環(huán)故障影響面都是整個(gè)機(jī)箱而不是某一片刀片。所以選刀片之前就要把備件策略想清楚冗余模塊當(dāng)然是標(biāo)配但備件庫(kù)里是不是隨時(shí)有替換件廠商的維保響應(yīng)時(shí)效是多少這些要提前談好。固件綁定問(wèn)題更麻煩。刀片箱的固件升級(jí)、交換模塊的配置、刀片之間的兼容矩陣都比機(jī)架式復(fù)雜。我見過(guò)一臺(tái)刀片箱因?yàn)楣碳炝税姹竟芾砟K直接失聯(lián)最后只能走廠商遠(yuǎn)程介入才恢復(fù)。所以刀片環(huán)境的幾條鐵律要記牢禁止在業(yè)務(wù)高峰期升級(jí)固件升級(jí)前必須完整備份配置升級(jí)時(shí)必須按照廠商的兼容矩陣逐級(jí)升不允許跳版本。4.5 “看似劃算”的二手刀片陷阱拆機(jī)市場(chǎng)里刀片機(jī)箱和刀片模塊的二手價(jià)格非常誘人很多人以為淘一套回家能撿大便宜。實(shí)際觀察下來(lái)二手刀片是三類服務(wù)器里最容易踩坑的。因?yàn)榈镀瑱C(jī)箱和模塊高度綁定你買的二手刀片如果和機(jī)箱不是同一個(gè)生態(tài)體系——比如不同代、不同兼容清單——很可能插上去點(diǎn)不亮。再加上刀片模塊內(nèi)部結(jié)構(gòu)緊湊二手貨的風(fēng)扇、電源等部件老化問(wèn)題會(huì)比普通塔式機(jī)架式更隱蔽。真出了問(wèn)題配件還不好找。我的態(tài)度是入門練手可以淘一淘二手機(jī)架式但生產(chǎn)環(huán)境里尤其是刀片這種集成度高的東西別碰二手。省下的采購(gòu)成本很可能在故障處理成本和業(yè)務(wù)停擺成本里加倍還回去。4.6 虛擬化與操作系統(tǒng)的兼容性確認(rèn)前面熱詞里也沒少出現(xiàn)“服務(wù)器虛擬化技術(shù)”相關(guān)的內(nèi)容選型時(shí)一定要提早確認(rèn)硬件和虛擬化平臺(tái)的兼容性。機(jī)架式和塔式還好驅(qū)動(dòng)和兼容性資料都比較開放刀片式就要特別留意有些刀片節(jié)點(diǎn)的網(wǎng)卡、存儲(chǔ)控制器型號(hào)偏冷門虛擬化平臺(tái)或新版本操作系統(tǒng)未必自帶驅(qū)動(dòng)。我的習(xí)慣是采購(gòu)前先到虛擬化平臺(tái)和操作系統(tǒng)的官方兼容性列表里查一遍硬件型號(hào)確認(rèn)能被支持再下單。別信“應(yīng)該沒問(wèn)題”先查表查不到就問(wèn)廠商要支持聲明。為了省這一步我見過(guò)有人機(jī)器到了之后裝不上驅(qū)動(dòng)在兼容性泥潭里折騰了整整一周。最后再分享一點(diǎn)個(gè)人的實(shí)操體會(huì)做運(yùn)維久了我越來(lái)越覺得選服務(wù)器不是選“最好的”而是選“最適合當(dāng)前階段的”。塔式、機(jī)架式、刀片式?jīng)]有哪一類是絕對(duì)王者不同階段的選擇完全可以不同。今天業(yè)務(wù)小一臺(tái)塔式就能穩(wěn)住明年業(yè)務(wù)上量機(jī)房條件跟上了再平滑過(guò)渡到機(jī)架式或刀片式這很正常。我自己的習(xí)慣是無(wú)論選哪類先保證管理口配好、線纜標(biāo)簽做好、關(guān)鍵備件有底。硬件這東西本身出大事的概率不高出事的往往是人手忙腳亂的時(shí)候做出的不規(guī)范操作。把準(zhǔn)備工作做在前頭后面就算半夜被叫起來(lái)處理故障心里也有底。希望這篇對(duì)比能幫你在下次采購(gòu)前少走點(diǎn)彎路真金白銀地省下來(lái)。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
玖玖五月| 激情视频网址| 色色国产| www久久久久久久| 狠狠婷婷色综合| 五月激情久久| 26uuu青青| 成人羞羞啪啪 全 视频| 26uuu精品一区二区| A1片久久久| 开心五月网| 免费在线观看AV网站| 日韩精品电影| hd五月婷婷在线| 欧洲亚洲精品| WWW.国产| 九热视频在线精品15| 99热这里只有精品26| 亚洲五月丁| 婷婷十月激情综合网| 91丨九色丨高潮丰满日本| 91蜜桃婷婷狠狠久久综合9色| 被强行糟蹋的女人A片| 丁香97综合| www.激情五月天。com| 五月丁香六月合| 激情五月天小说网| 成人在线二区| 婷激情五月天视频导航| 五月婷婷激情| 在线综合亚洲欧美65| 伊人久久婷| 天天摸日日舔狠狠添婷婷婷 | 丁香五月天电影| 丁香六月在线| 99九九热视频免费| 玖玖精品视频99| 五月天狠狠网站| wwwxxx五月婷婷小说| 看片视频在线免费日产在线看| 五月丁香啪啪网| www.久久色.com| 26UUU一区二区| 亚洲色情网站| av国产精品| 成人精品人妻| 欧美黄色AA片哗啦啦啦| 香蕉久久国产AV一区二区| 黄网在线免费播放| 思思re99视频在线观看| 性做爰A片免费视频A片直播| 日日日,com| 五月天婷婷7米| 无码AV免费精品一区二区三区| 67194中文字幕| 国产热精品| 丁香六月婷婷综合| 操人久久| 久久免片| 亚洲av| AV在线免费播放| 久久五月激情| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | jiujiuxiangjiaowang| 91啪啪视频| 婷婷激情综合色五月久久,色婷婷丁香花,丁香婷婷五月情天,久久婷婷五月综合色 | 欧美成人无码一区二区三区| 青青草tp| 日韩精品超碰在线观看| 激情综合五月开心狠狠| 999热在线观看视频| 2015好吊操| 五月天社区婷婷丁香社区| 北条麻妃九九九国产精品视频| 91碰在线| 99自拍视频网站| 色五月激情问网站| 丁香九月婷婷色| 99热这里只有精品99| 九九99精品视频| 99国产这里只有精品| 婷婷六月天| 激情亚洲网| 五月婷婷丁香五月| 另类小说五月天激情| 天天日天天干天天操| 亚洲人成网站999综合| 天天色伊人| 色五月在线观看| 国产三级片91| www.婷婷亚洲基地| 99爱99操| www.超碰在线| 色婷婷黄色网络| 五月婷六月| 9 大屁股在线视频精品| 久久色情综合免费网站| 六月丁香激情| 激情第四色| 亚洲成人AV电影网| 五月天婷婷乱论小说| www.韩日视频| 丁香五月天中文字幕| 久久婷婷五月综合色和| 99综合网| 国产成人+综合亚洲+天堂| 99re热在线视频观看| 亚洲欧洲一二| 第四色五月天| 美女激情综合| 五月天社区| 色综合色综合婷婷热| 色色网站在线| 五月丁香六月婷婷免费| 激情 久久 婷婷| 六月丁香五月激情婷婷| 99精品综合在线| 婷婷五月伦理网站| 懂色av蜜臀av粉嫩av永陈冠希| 亚洲va欧洲va国产va不卡| 久久99精品久| 婷婷午夜精品久久久| 国产性爱一级| 激情五月天综合| 一级片sese片.COM| 久久精品99国产精品日本| 777丁香六月青青草婷婷综合久月 五月丁香综合伦理片 | 丁香五月影院| 色青青视频| 天天狠狠综合精区| 99热在线只有精品| 五月天综合久久| 久久92| 亚洲啪啪网| 久久丝袜婷婷| 丁香六月色香蕉视频| 国产FREESEXVIDEOS性中国| 欧美噜噜免费观看| 中文字幕无码AV| 亚洲va欧美va国产综合久久久| 激情五月婷婷色综合| 婷婷五月天激情五月天深爱五月天| 岛国AAAV| 女同激情久久av久久| 色综合区| 亚洲春色奇米影视| 九色无码| 这里只有精品视频在线观看免费| 东京热五月婷婷| 草逼大片| 大香蕉久久久久| 激情五月婷| 天天操九九插| 99久re热| 人妻丰满精品一区二区A片| 欧美成人网婷婷综合在线| 五月天婷婷激情四射综合| 人人爱人人添| 99精品国产在热久久| 国外亚洲成AV人片在线观看| 热成人网| 婷婷丁香激情综合色情| 91日韩在线| 婷婷色在线播放| 久久婷婷综合基地| 色情五月天首页| 色护士综合| 亚洲激情综合网| 99热日韩这里只有精品| 九9九9无码| 色五月激情婷婷| 去干网最新版本亚洲版| 亚洲AV网站在线观看| 欧美激情综合色综合啪啪五月| 欧美va亚洲va在线播放| 久久精彩综合视频| 狠狠色噜噜狠狠亚洲A∨| 色五月丁香婷婷| 久热这里只精品| 99久久人妻精品无码二区| 亚洲精品永久久久久久| 婷婷五月永远18免费久久久| 五月天色综合| 久久久久九九九九视屏小说88| 大香蕉综合在线| 呦呦视频无码播放| 久久只有这里精品免费| 五月天停婷基地| 婷婷五月在线视频| 五月丁香亭亭操逼| 九九热99热| 天天草人人摸| 久99久精品视频| 99热热热99精品婷婷| 五月丁香六月激情综合| 日屌日日操日日色| 色欲丁香久久| 26uuu视频欧美| 91传媒无码人妻精| 九九九激情综合| 成人五月天丁香婷| 九九热99热| www.精品99| 99资源在线视频| 99re欧美精品| 婷婷五月色| 97极品在线| 激情综合网,婷婷五月天| 91色色色18| 玖玖婷婷五月天毛片| 大香蕉伊人99| 思思热精品在线| 五月天婷婷在看| 另类激情五| 婷婷色色综合| 极品人妻VIDEOSSS人妻| 大香蕉五月天婷婷| 色色色免费视频| 激情丁香五月天| 丁香五月AV综合激情| 大香蕉久艹| 97艹| 1024在线视频| 成人亚洲精品久久久久| 激情五月激情综合网| 色五月av| 人人视频人人干人人做| 激情九九这里只有精品| 少妇婷婷五月天| 99操逼| 色婷婷五月影视| 欧美精品在线观看| 无码少妇高潮喷水A片免费| 九九色逼| 99在线热| 99婷婷国产最新视频| 久久er99| 激情五月天激情综合网| 丁香六月亚洲综合| 丁香六月视频免费观看| 婷婷色播六月无码| 青青草搞屄视频网站| A片一曲| 日本久久9| 日韩av一区二区在线/日产精品久久久 | 国产这里只有精品| 好吊丝aV| 二人电影免费版在线观看| 色区久久| 九九人人精品| AA片在线观看视频在线播放| 天天日天天插天天操| 国产精自产拍久久久久久蜜| 丁香五月成人自拍| 久久综合五月天激情小说网站| 国色天香成人网| 日日.c| 色综合久久99色| 日韩AAAAAAAAAAA片| 伊人网色婷婷五月天| AV在线不卡网站| 成人美女网| 丁香色色网| 色婷五月天网站| 激情综合网,婷婷| 天天舔天天插天天爱| 五月激情综合网| 2022人人操人人看| 操人久久| 亚洲精品国产成人AV在线| 97sese婷婷| 国产亚洲AV人片在线| 午夜成人片400| 国产午夜精品一区二区三区四区| 亚洲五月天激情| 精品亚洲国产成AV人片传媒| 五月激情四射网站| 激情婷| 欧美情色一区| 无码人妻AV久久久一区二区三区| 秋霞少妇AV网站| www.丁香六月婷婷久久天堂影院.con| 日韩AV在线免费| 99日视频在线| 玖玖无码中文| 99久久国产宗和精品1上映| 思思99热这里只有精品| 五月综合视频| 欧美搡BBBBB摔BBBBB| 98国产精品综合一区二区三区| 99热国品| 婷婷激情五月天激情小说| AV网在线观看| 久久久91| 五月婷在线观看| 人妻性爱av网站| 久久婷婷五月综合伊人| 九九国产视频| 中文AV网站| 99re青青草| 国产免费AV在线| 六月婷婷成人| 久久五月激情| 免费国产视频| 日日夜夜天天| ou洲色吧| 99精品视频在线观看免费| 熟女激情网| 五月丁香六月合| 五月天综合激情网| 婷婷导航| 久久99最新地址| 色五月婷婷丁香凹凸| 美欧成人视频| 再綫Av免费視品| 五月丁香黄色| 国产成人网站在线观看| 婷婷丁香综合网| 五月婷婷导航| 亚洲综合网激情小说| 99热只有精品在线播放| 久久这里只有欧美| 99在线精品免费视频| 中文字幕乱码亚洲精品一区| 五月天婷婷色色网| 猫咪伊人AV| 色五月色开心开心五月| 99.N在线视频| 五月激情综合网| 丁香久久五月天视频在线观看| 五月天涩涩| 九热视频| 色九九九综合| 丁香九月婷婷| 俺去也五月天婷婷| 国产精品色色| 99精品网址| 亚洲成人网站在线观看| 丁香六月激情网C0W| 97干在线播放| 婷婷五月天天| 婷婷丁香五月天哟啪| 99思思热只有在这里看| 激情五月五月婷婷| 丁香婷婷五月人体| www.婷婷五月天啪啪| 五月婷婷六月丁香在线| 图片区 小说区 区 亚洲五月 | 午夜免费试看| 人人操婷婷| 91婷婷| 开心五月深爱五月丁香五月激情五月 | 九九九九九九热| 久久与婷婷| 欧美天天性| 九九久久网| 色狠狠综合| 九九热婷婷| 色天天综合色| 99热精品无码| 欧美日韩国产一区| www天天爽| 婷婷五月天激情视频| 偷偷操99| 亚洲国产黄色电影| 五月丁香婷婷激情在线| 五月丁香婷婷色色| 丁香色五月AV在线| 五月色俺婷婷| 中文av网| 99ri国产在线| 五月婷婷丁香婷婷| 色九九综合色| 日本www五月婷婷| 任你搞网站| 久草x色在线观看99 | 性做爰A片免费视频A片直播| 五月色在线| 久久婷婷五月天| 狠狠爱五月婷婷综合六月| 激情五月第四色| 99色热视频| 99在线免费视频播放| 亚洲视频丁香网va| 91色色色| 久久er这里只有精品| 婷婷五月色情| 九九在线91| 激情五月网站| www.99色| 天天干夜夜操A片| 九九无码| 激情久久 婷婷| 视色综合| 大香伊人久色| 久久这里只有精品无码| 少妇性BBB搡BBB爽爽爽视頻| 亚洲五月天综合色| 九九成人| 综合亚洲色色| 丁香五月成人网| 日本在线视频播放91| 性生活视频98791| 五月天婷婷中文字幕在线播放| 亚洲精品一区中文字幕乱码| 欧美va亚洲va| 女人天堂久久| 日韩av在线免费观看| 五月丁香六月婷婷综合网站| 五月伊人91| 狠狠色狠狠鲁| 激情综合网激情五月婷婷| 看婷婷五月天网| 欧美啪啪9| 人妻激情视频| 97人妻碰碰碰久久香蕉| 久久3p| 五月丁香六月婷婷激情视频在线观看免费| 色婷婷亚洲综合av| se影音资源在线观看| 做爰丰满少妇1313| 激情色情五月天| 久草婷婷在线| 五月天五月天激情网| 色九月综合| 丁香成人色情五月天| av操B网站| 婷婷亚洲丁香五月| 91人在线观看| 色丁香婷婷| 五月丁香花激情啪啪网| 天天弄天天操| 99ri国产在线| 丁香婷婷久久| 国产成人网址| 九九综合| 丁香五月天视频在线播放| 久爱综合| 婷婷激情小说| 99亚洲视频| 色婷婷综合久久久久| 色9999日韩国产| 99亚州综合精品成人网| 婷婷区日本| 亚洲天天操| 综合五月丁香97| 五月丁香激情综合久久| 97人人干。| 日本五月天网站| 激情五月综合网最新| 色欲一区二区三区精品A片| 色婷婷五月天av在线| 人妻久久久| 人人干Av| 色五月婷婷成人| www.亚洲激情| 日本女人久久| www.99视频| 婷婷九月激情| 久久综合香蕉国产国产蜜臀AV| 人人摸人人澡人人| 精品一二三区视频立| 九九九激情综合| 五月丁香婷婷潮喷中文字幕| 免费播放片大片| 狠狠色综合网| 狠狠色激情综合| 丁香五月 激情文学| 中文字幕在线免费观看视频| 在线五月色播| 五月丁香婷婷激情四射迷人| 亚洲成人五月天| 丁香五月婷婷激情123| 九九综合五月欧美| 婷婷五月天激情小说| 密乳视频| 大香蕉久久婷婷精品综合| 成人AV免费观看| 五月丁香好婷婷姑娘综合网| 久久婷婷大香蕉| 激情九月综合| 99色爱| 日本九九视频| 欧美韩国日本| 婷婷六月色| 亚洲国产精品五月天| 人人摸人人干| 激情综合网五月婷婷| 亚洲久热无码| 五月激情小说| 亚洲激情婷婷| 激情综合青草| 亚洲AV无码成人精品区电影网| 日日噜噜夜夜狠狠久久丁香五月| 婷婷色5月激情网| 五月婷色| 色婷婷五月成人网| 六月丁香五月婷婷| 99视频在线播放大全| 婷婷亚洲激情在线观看视频| 2020日日干| 无码免费人妻A片AAA毛片西瓜| 日本狠狠干| 五月色情网| 国产精品成人AV在线| 激情6月| 久久婷婷色| 思思热在线视频99| 97人人操人人干| 亚洲AV无码电影| 亚洲成人五月天| 五月在线| 婷婷五月天性| 丁香五月天在线观看视频| 另类婷婷五月天啪帕帕| 久久精彩视频| 综合一区二区三区| 五月丁香六月花| 91狠狠色丁香婷婷综合久久精品| 亚洲成人九九九| 亚洲欧洲中文日韩久久AV乱码| 久99久在线观看| 久久久久99精品成人片| 日本色天堂| 五月婷婷黄网站大全| 久热免费| 婷婷五月天亚洲综合| www.minyis.com【JT】国内CDN落地页保证转化QQ2101460746 | 色色色综合网| 久久综合首页| 丁香五月婷婷网| 丁香五月深爱五月婷婷| 四川BBB搡BBB爽爽视频| 久久激情五月| 无码动漫av| www.99热. com这里只有精品| 久久久久久久久久久久久久人妻视频 | 五月激情综合网| 就爱干 在线| 国产熟女一区二区三区五月婷| 9久热在线精品| 亚洲深喉AV| 丁香五月影院| 色999亚洲人成色| 六月激情久久| 亚洲六月色| 99热精品综合| www.com操| www.99热日韩.com| a网站免费观看| 久久久五月五丁香| 五月婷婷丁香啪啪| 五月婷婷综合性爱噜噜| 激情五月天99色| 色色草97| 97在线日韩| 国产成人综合亚洲| 日本熟妇乱妇熟色A片蜜桃| 伊人久久大香网| 欧美性爱一区| 亚洲免费观看高清完整版AV线| 色色色色色网站| 激情五月,深深爱五月| 激情5月婷婷狠狠干| 另类激情五月| 97操在线视频| 欧美在线操| 婷婷综合97| 婷婷久久伊人| 国产资源在线视频| 欧日韩成人| 久久久久久久久久91| 一本色道久久综合狠狠躁小说| 永久天堂日本| 99在线综合视频| 五月婷婷之综合激情在线| 六月婷婷日| 久久免费干| AV变态另类一区二区| 欧美激情VA永久在线播放| 看久久性爱视频| 69五月天视频| 激情综合丁| 超碰狠狠色| 日本五月视频| 色偷偷色婷婷| 99在线免费视频| 九九色99| 丁香激情五月天| 99热97| 99热这里是精品| 激情综合婷婷| 亚洲欧美在线观看| 婷婷九九色| 69精品无码一区二区三区| 97在线日本| 26uuu偷拍亚洲欧洲综合| 99玖玖在线视频| 成人在线日韩| 久久精品在线| 久久综合天天综合| 天天干天天操天天拍| 另类小说色婷婷| 99日在线视频| 91人妻PORNY九色大屁股| 久热九九| 婷婷.com| 五月叮香啪| 丁香五月停停基地| 狠狠色综合网| www.人人操人人看人人想人人摸 人人人人操,COM | hd五月婷婷在线| WWW.99热| 射区导航| 久久精品这里只有精品免费首页| 激情五月激情综合网| 婷婷99| 婷婷狠狠干| 色444综合网| 久久婷婷五月综合成人d啪| 99视频自拍| 婷婷综合五月激情| 一本色道久久综合狠狠躁小说| 色99日韩| 欧美电影在线播放| av电影在线播放| 色天使色婷婷| 狠狠色丁香99| 碰碰女| 天天爽爽日日做做| 狠狠狠狠狠草| 九九 激情 网| 国产人妻人伦精品一区二区| 午夜av网| 开心五月婷婷五月| 伊人色综在线| 啪啪激情综合| 婷婷久综合| 激情五月天的婷婷| 亚洲色情一区二区三区四区| 五月婷婷五月丁香| 天天插天天插| 欧美婷婷九月| 五月丁香啪啪啪免费看| 婷婷深爱五月丁香| 俺去也综合| 色五月婷婷成人| 99热日韩| av人人操| 99色婷婷视频| 91人妻人人操| 婷婷综合另类小说| www.com五月天| 人人草人人舔| 极品九九九九九九| 五月婷婷就去色| 五月天淫乱视频| 俺去也五月| 啪啪色激情五月天| 成人五月天色天堂| 久久狠狠干| 五月婷丁香| 亚洲电影中文字幕| 婷婷丁香五月天综合网| 五月婷婷,狠狠操| 久久久亚洲精品一区二区三区浴池| 色色五月激情| 激情五月综合视频| 久久婷婷综合基地| 久久久亚洲成人无码A片| 永久的网站AAAA | 九九成人精品免费视频| 午夜色丁香| 九九在线视频| 久久99网址| 婷婷激情啪啪| 丁香五月激情婷婷| 国产精品成人AV在线| 天天夜天天色天天| 极品人妻VIDEOSSS人妻| 97久久草草超级碰碰碰| 狠狠人妻色综合| 99热最新网址| 欧美色五月| 五月色婷婷影院| 色丁香婷婷| 亚洲精品久久久久AV无码| 影音先锋天天日| 五月丁香六月欧美| 91碰碰| 中文精品在| 亚洲最大五月天成人网| www.97视频| 精品久色| 久草A片| 9久操| 另类小说婷婷色| 亚洲人妻AV| 丁香婷婷五月激情| 激情综合五月| 日韩有码久久| 激情六月综合| 97啪在线观看视频| 六月伊人婷婷| 高清无码.com| 激情网第九色| 丁香五月婷婷色情综合| 91 九色 入口| 亚洲精品激情| 九九爱激情| 六月婷婷日| 六月婷婷激情| 免费AAAAA网| 久久综合五月天| 色久99| 69色色视频| 日本乱子人伦在线视频| 免费的日逼视频| 播播网色播播| 丁香五月婷婷亚洲人| 九九五月天| 男人的天堂五月丁香| 亚城区在线| 免费色婷婷| 五月天婷婷青青草| 久99久视频精品| 婷婷丁香成人网址| 成人.在线日韩| 亚洲爱爱无码婷婷色五月| 99精品在线播放| 五月激情五月丁香| 国产亚洲在线| 同性gv国产精品一区二区| 色五月成人| 99色色网站| 色九区| 77799热| 天天插天天插| 伦乱美欧| 国产3p露脸普通话对白| 97久久香草精品视频| 国产乱子轮XXX农村| 色 五月俺去也| 伊人高清无码| 激情五月少妇| www.激情五月天.con| 久久综合五月天| 狠狠色丁香婷婷久久综合| 久久3p| 99九色视频在线观看| 99色| 五月激情综合网| 欧美操人| 26uuu.| 亚洲视频在线观看| 日日插日日干| 色情五月| 亚洲不卡| 五月天天丁香婷婷在线中| 久久久99精品免费观看| 日本五月视频| 殴美日韩成人| 五月婷婷六月天| 六月丁香啪| 日韩AV中文在线观看| 看国产探花操逼三级片| 加勒比日本一区二区三区| 色停停香蕉视频| 丁香五月天偷拍| 精品少妇人妻AV无码专区偷人| 开心五月综合| 任你擦免费视频| 99这里| 26uuu亚洲欧美另类| 99A片| 99爱精品| 色色色色欧洲| 国产精品人成A片一区二区| 岛国av电影网站| 91日韩美女被插视频| 婷婷色在线观看| 99成人精品六| 在线综合啪| 伊人久久五月天| 欧美日韓成人亚洲精品另类| 99热黄| 久久久大香蕉| 一本道综合网| 久久久五月天婷婷成人网| 91人人网| 色婷丨日丨天丨综合久久| 婷婷丁香色性爱| 久久98| 5月婷婷六月丁香| 黄色高清无码| 五月婷婷激情网| 激情综合激情五月| www.99热这里精品 | 大香蕉丁香| 亚洲情欲| 日日夜夜小色哥| 久久婷婷色综合| 日韩无码色色| 丁香六月激情综合啪啪| 超碰超碰在线| 天天综合网站| 婷婷激情五月色综合| 成人在线不卡| 狠狠婷婷色| 色碰碰| 天天天天做夜夜夜夜做| 啪啪 综合网| 91狠狠色丁香婷婷综合久久| 天天夜天天色天天| 另类激情综合| 日本综合99| 丁香婷婷久久 | 亚洲成人av在线观看 | 一起草AV入口| 五月天激情四射网站| 99这里只有精品国产| 五月婷婷亚洲色图| 天天射影院| 123草逼网| 美女丁香五月天| Www.狠狠| 免费看欧美成人A片无码| www.婷婷五月| 99色看这里只有精品| 人妻中文字幕网| 高潮毛片又色又爽免费| 另类视频综合| Www.狠狠| www.狠狠狠狠| 丁香婷婷五月六月久久| 五月天社区婷婷| 99久久综合网| 婷婷色色婷婷| 日韩按摩二区| 五月婷婷综合激情| 九九热婷婷| 激情98色婷婷五| 夜夜爽天天干| 六月天婷婷| 狠狠草综合网| 在线区区区| www.五月婷婷.com| 婷婷丁香五月天大香蕉| 亚洲国产精品VA在线看黑人| 丁香六月婷婷久久综合| 五月天婷婷视频小说| 新激情五月天色播| 日操| 婷婷五月丁香六月| 婷婷五月天AV在| 久久色六月| 婷婷五月丁香六月| 超碰日日操| 可以直接看的av| 婷婷五月久久| 五月人人丁香婷婷五月人人丁香| 欧美内射AA| 99人人操人人操人人精| 色综合中文综合网| 久草婷婷网| 九九无码| 99热这里只有精品中文字幕| 丁香五月激情网| 综合五月网| 九九久久视频| 五月天色婷婷av| wwW天天干| 色欲丁香| 98色花堂98t.R| 婷婷五月综合基地| 婷婷成人基地| 99综合视频| 欧美色色色色色| 婷婷丁香六月| 久久久久亚洲AV成人无码电影| www.五月丁香| 亚洲天天操| 丁香五月亚洲| 丁香六月视频免费观看| 另类图片婷婷五月天| 久久996re热这里只有精品无码| 做爱夜夜干天天操| 久久免费操| 国产精品视频免费看| 婷婷激情啪啪| 久久99日本精品视频免费观看| 激情综合九| 91九色PORNY肉丝在线| 91肏肏肏| W色综合| 成人无码髙潮喷水A片| 成功精品影院| 色婷婷av在线观看| 粉嫩AV久久一区二区三区| 色综合婷婷| 久久538| 99色色| 狠狠干,狠狠操| 91婷婷| 伊人在线视频| 无码色| 五月丁香六月激情在线| 色婷婷在线播放| 色色色免费视频| 天天爱天天做天天操| 99色热| 欧美在线视频99| 五月天大香蕉| 欧美在线| 综合久久十三| 欧美A片在线视频免费观看| 丁香五月婷婷色综合| www.夜夜爱.com| 五月婷婷之综合激情在线| 丁香五月婷婷影院| 热婷婷av| 九九人人看| 99久操| 99在线视频播放| 91viP在线看| 综合97五月| 人妻内射麻豆视频| 五月丁香婷婷综合网色欲| 久色资源网| 丁香五月天资源网| 91精品无码| 亚洲无码99| 日本欧美成人片AAAA| 精品热九九| 激情宗合 激情宗合| 久久99久久99精品免观看粉| 开心久久xxx色| wwccc久久久| 国产精品久久7777777精品无码| 丁香五月六月综合欧美| 99在线精品视频| 五月丁香六月综合激情| 91久久久久久| 欧美日韩成人综合9| 超级碰碰视频无码| 97色永久免费视频| 五月丁香六月婷婷精品| 人妻在线中文字幕久久| 婷婷五月天堂| 91人人爽狠狠狠| 色婷婷基地| 日韩啪啪自拍| 久热 91| 激情精品久久| 婷婷五月丁综合| 婷婷综合五月| 五月丁香婷婷六月| 婷婷五月天综合亚洲| 婷婷玖玖丁香| 五月丁香六月综合情在线观看| 深爱激情久久| 婷婷五月天小说| 五月丁香婷婷综合网| 五月婷婷丁香日韩在线| 91超级碰在线| 亚洲久久视频| 丁香五月激情婷婷婷婷在线观看| 五月丁香婷婷综合网| 精品国产乱码久久久久久免费| 色青五月天| 亚洲综合成人网| 国产精品色色色色| 婷婷五月色综合| 亚洲乱码日产精品BD在线观看| 激情文学 综合 九月| 综合亚洲六月婷婷在线| 日日操,夜夜爽| 久久东京热婷婷五月| 久热在线中文字幕色999舞| 婷婷综合九月| 热热久久精品视频| 亚洲无码99| 国产一级片| 涩 五月 婷婷 狠狠| 综合欧美五月婷婷| 五月色色激情网| 五月天婷婷久久视频| 婷婷丁香五月天操逼| 丁香六月婷婷综情欧美| 亚洲综合丁香五月| 日本婷久久| 人人人操 超碰| 五月婷婷黄色| 五月婷综合网| 日韩成人免费电影| 国产黄色大片| 色五月婷婷久久爱| 涩五月婷婷| WwW色婷婷| 欧洲毛片基地c区| 战争与艾拉电影免费观看| 99热官网精品在线| 超级碰91| 99久久久国产大片区| 色色网站| 欧美人与性动交CCOO| 人人干99| 这里只有精品视频一区| 夜夜骑夜夜撸| 密视AV综合在线| 丁香五月婷婷动漫| 婷久久| 热久久这里只有三级视频| 狠狠色丁香五月婷巨| 99热这里只有免费| 1024人妻| 91热视频色网站| 视色综合| 亚洲精品视频在线播放| www五月天com| 亚洲狠狠操| 婷婷五月影院| 成人AV中文字幕| 日日夜夜狠狠干| 亚洲人人操| 五月天婷婷亚洲| 五月丁香婷婷久久| 丁香六月成人| 爆乳熟妇一区二区三区四区| 就要爱综合| 99ri精品在线| 91综合在线观看| 很很干在线视频| 婷婷激情六月| 婷婷免费无马| 色七七色九九| www99精品在线观看| 这里只有精品99视频| 人人操插| 丁香六月激情综合网| 午夜无码精品色综合久久| 一本色道久久综合狠狠躁小说| 欧美日本黄色| 色视频五月天| 五月综合激情网| 九月婷婷丁香| www.99热| 五月天天天操天天爽夜夜操| 激情综合网址| 黑人熟妇一区二区三区| 五月天色婷婷网| 三级毛片视频| 婷婷激情蜜桃玖玖丁香| 伊人99热| WWW五月婷婷| 激情综合婷婷| 99玖玖在线视频| 五月丁香啪啪| 丁香五月婷婷高清| 影音先锋 91工厂| 婷婷丁香五月综合| 久久黄A片| 九九这里都是精品| 大香蕉九操| 久久狠狠干| 91碰超| 激情婷婷丁香| 哇嘎成人久久| 人人射人人高潮| 依人大香蕉在钱1| 99热这里只有精品 搜| 久99999热视频在线观看免费| 五月青青草综合| 丁香婷婷综合激情五月色| 激情五月深爱五月| 激情开心五月天| 噜综合| 日本三级中国三级99人妇网站| 另类天堂| 国产超碰在线| 99re热视频这里只有综合亚洲| 99久在线精品99re8| 五月丁香六月婷综合成人综合| 超碰成人电影| 丁香六月啪| 五月婷婷中文字幕| 亚州精品色情无码A片| 亚洲这里只有精品| 久久欧洲久久| 色色丁香| 26uuu国产色| 婷婷久久网| 婷婷五月天激情综合| 欧美韩国日本| 六月五月婷婷| 久久久噜噜噜操操操| 色偷偷色婷婷| 26.uuu丁香五月婷婷| 99干日本| www久久99| 99热精品在这里| 日韩a热| 国产又爽又猛又粗的视频A片| www.五月天性.com| 青青草大香| 五月综合六月婷婷| 92久久久| 久久激情五月| 色婷婷免费视频| 99爱视频在线| 99'无码| 香蕉久日夜| 五月天综合在线观看| 激情久久丁香| 婷婷九月激情| 综合啪啪| 无码免费人妻A片AAA毛片西瓜 | 大香蕉久久久久久久久| 99久久五月婷婷| 婷婷五月色综合| 99国产在线| 婷婷丁香五月天综合网| 9 7总站超级碰免费视频| 97色色色色色| 99精品视频偷拍| 五月天偷拍| 亚洲射激情| 一起草日本| 泰州成人视频| 色一情一乱一乱一区9| 五月婷精品| 无码天天操| 色噜婷婷| 五月久久婷婷丁香| 久青青久| 国产成人精品一区二三区熟女在线 | 国产91资源在线| 激情五月综合婷婷| 中文字幕不卡+婷婷五月| 国产一级片| 天天色五月| 中文字幕天天干| 九九热欧美| 狠狠狠狠狠狠狠狠狠狠狠色宗合图片| 五月丁香日逼| 综合久| 婷婷丁香五月激情中文字幕版| 婷婷五月丁香综合瑟瑟| 综合激情站| 99热婷婷| 色无婷婷| 六月色播| 日韩a热| 五月丁香激情综合网官网| 五月婷啪啪| 丁香五月天欧美| 97人妻碰碰碰久久| 日韩亚洲视频| 99视频在线观看视频| 97婷婷在线| 亚洲无AV在线中文字幕| 噜噜吧天天爱| 99热欧| 色婷婷丁香社综合| 狠狠综合久久| 婷婷五月免费在线| 久久久久8888| 最近中文字幕2019视频1| 狠狠操狠狠插| 婷婷国产日本欧美| 丁香五月www| 久久婷婷视频| 思思热再线视频| 九九99免费理论| 色婷婷很很丝袜| 五月婷婷大香蕉| 夜夜撸天天日| 婷婷激情肏屄网| 亚洲99一级无嗎特制在线| 丁香九九九九| 五月综合六月丁| 伊九九三级区| 91久久18| 丁香六月综合激情| 夜夜干夜夜操| 五月婷婷综合激情| av在线免费网站 | 五月激情婷婷开心| 九九热这里都是精品6| 97操视频| 五月停停激情网| 日韩色色色色色| 亚洲天堂有码| 国产67194| 色婷婷五月综合在线| 九九热在这里只有精品| 狠狠干综合| 97艹| 精品一二三区久久AAA片| www.射伊蕉婷婷| 丁香无五月网| 成人综合视频在线| 丁香花社区av| 丁香五月婷婷五月| 五月综合色| 26uuu国产激情视频| 狠狠夜夜五月丁香| 九艹在线| 超碰2021| 色色色综合网| 97视频.干com| 夜夜操激情| 欧美色骚婷婷五月天| 色99视频| 综合www色| 天天狠狠综合精区| 日日撸夜夜操| 久久人人超| 欧美色色色色色| 欧美成人无码一区二区三区| 日本一级一片免费视频| 99久久高清视频| 日韩精品视频中文字幕| 天天射综合网站| 夜夜骑天天操| 亚洲天天综合| 四虎婷婷五月天| 亚洲俩性性爱图片久久第六页| 996er热| 91人碰| 5Www色5夜| 四季8848精品成人免费网站| 99热在线观看免费精品| 一区二区三区视频| 五月天婷婷综合网| 激情五月天在线视频| 五月天婷婷永久免费视频| 26uuu四色| AV九九| 色噜噜狠狠色综合成人网| 五月婷婷色色爱| 国产精品一区在线观看你懂的| 日本九九视频| 五月香婷婷| 色婷婷丁香五月色综合网| 婷婷五月深深的爱| 97精品综合| 日本爆乳片手机在线播放| 五月色影院| 五月丁花色综合网| 夜夜操夜夜姧| 色噜噜,噜噜色| 99热这里只有精品98| 久热超碰| 久久婷婷亚洲| 91.com男女操| 久久久九九视频精品18| 久9综合| 99热免费观看| 色婷婷成人| 五月色综合| 日韩操人| 九九热在线视频观看| 亚洲成人综合在线| 丁香五月天啪啪| 五月天社区|