99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

智慧景區(qū)邊緣計(jì)算落地實(shí)踐:架構(gòu)設(shè)計(jì)、算力選型與多業(yè)態(tài)數(shù)據(jù)融合

智慧景區(qū)邊緣計(jì)算落地實(shí)踐:架構(gòu)設(shè)計(jì)、算力選型與多業(yè)態(tài)數(shù)據(jù)融合 去年年中我接手了一個(gè)智慧景區(qū)項(xiàng)目主題就是“邊緣計(jì)算與多業(yè)態(tài)融合”。一開始我覺得這名字有點(diǎn)大——景區(qū)嘛無非就是閘機(jī)、廣播、監(jiān)控、停車攏共也就那么幾個(gè)系統(tǒng)??烧娴确桨冈u審和現(xiàn)場部署跑下來我才意識到智慧景區(qū)真正難的不是某一個(gè)系統(tǒng)怎么建而是散落在各個(gè)業(yè)態(tài)里的數(shù)據(jù)怎么在邊緣側(cè)被處理、被打通、被復(fù)用。這篇文章就把這個(gè)項(xiàng)目從設(shè)計(jì)、選型、部署到踩坑的完整過程拆開講全是實(shí)操層面的東西希望能給正在做或者準(zhǔn)備做類似項(xiàng)目的朋友一些參考。適合看這篇內(nèi)容的人我覺得有三類一是負(fù)責(zé)景區(qū)、園區(qū)、校園這類多系統(tǒng)場景的甲方信息化人員需要理清楚邊緣計(jì)算的落地邊界二是做系統(tǒng)集成的項(xiàng)目經(jīng)理或技術(shù)負(fù)責(zé)人看看別人是怎么處理算力分配、網(wǎng)絡(luò)規(guī)劃和多業(yè)態(tài)數(shù)據(jù)聯(lián)動的三是剛接觸邊緣計(jì)算、想找一個(gè)真實(shí)業(yè)務(wù)場景入門的開發(fā)者。文章里不會堆概念而是把當(dāng)時(shí)我們?yōu)槭裁催@么選、實(shí)測數(shù)據(jù)怎么樣、哪些坑必須躲開都一條條講清楚。1. 整體設(shè)計(jì)與思路拆解為什么智慧景區(qū)必須引入邊緣計(jì)算1.1 智慧景區(qū)到底在“智慧”什么很多人一提智慧景區(qū)第一反應(yīng)就是“裝攝像頭、搞人臉識別、上大屏指揮中心”。這個(gè)理解沒有錯(cuò)但是太淺了。真正從運(yùn)營角度看景區(qū)要解決的“智慧”問題其實(shí)非常具體游客還沒到景區(qū)門口停車場還剩多少位子能不能在手機(jī)上提前看到某個(gè)熱門打卡點(diǎn)人開始聚集了要不要啟動限流廣播和導(dǎo)視牌怎么聯(lián)動餐飲、零售、二銷這些業(yè)態(tài)怎么根據(jù)實(shí)時(shí)客流做備貨和人力調(diào)度游客從進(jìn)門到出門在哪個(gè)區(qū)域停留最久、對什么項(xiàng)目興趣最大這些數(shù)據(jù)能不能反哺運(yùn)營。這些問題背后都有一個(gè)共同的痛點(diǎn)數(shù)據(jù)孤島。停車系統(tǒng)管停車票務(wù)系統(tǒng)管票務(wù)安防系統(tǒng)管監(jiān)控商業(yè)系統(tǒng)管收銀各自為政數(shù)據(jù)格式不統(tǒng)一實(shí)時(shí)性也參差不齊。如果要把這些數(shù)據(jù)全部匯到一個(gè)中心平臺再分析不僅鏈路長網(wǎng)絡(luò)帶寬壓力也大而且很多場景根本等不起那個(gè)延遲。所以這個(gè)項(xiàng)目從一開始就定了一個(gè)基調(diào)不做“大而全”的純中心化平臺而是把一部分計(jì)算能力下沉到景區(qū)現(xiàn)場在靠近數(shù)據(jù)產(chǎn)生的地方先做處理再和云端做協(xié)同。這就是邊緣計(jì)算在這個(gè)場景里最核心的存在意義。1.2 三個(gè)繞不開的現(xiàn)實(shí)問題在方案調(diào)研階段我們列了幾次現(xiàn)場走訪把景區(qū)實(shí)際運(yùn)營里遇到的硬問題整理了出來發(fā)現(xiàn)有三個(gè)問題是繞不開的第一是實(shí)時(shí)性。停車場的余位信息、熱門景點(diǎn)的擁擠度、游客的異常行為比如翻越護(hù)欄、靠近危險(xiǎn)水域這些都需要在秒級甚至毫秒級做出反應(yīng)。如果所有數(shù)據(jù)都傳到幾十公里外的云機(jī)房哪怕網(wǎng)絡(luò)狀況再好一個(gè)來回也要幾十毫秒再加上云端排隊(duì)處理整體的鏈路延遲很難保證。第二是帶寬成本。一個(gè)中型景區(qū)光視頻監(jiān)控點(diǎn)位就有幾十上百路按1080P、4Mbps碼率來算100路并發(fā)就是400Mbps的持續(xù)帶寬。如果所有視頻都是原始碼流直傳云端先不說能不能扛得住光是專線費(fèi)用就是每年幾十萬甚至上百萬級別這在中型景區(qū)項(xiàng)目上完全不現(xiàn)實(shí)。第三是可靠性。景區(qū)節(jié)假日大客流時(shí)現(xiàn)場網(wǎng)絡(luò)經(jīng)常不穩(wěn)定而且一旦中心機(jī)房或?qū)>€出問題如果所有智能化設(shè)備都變成“離線狀態(tài)”連最基本的閘機(jī)通行、車輛識別、客流統(tǒng)計(jì)都做不了那運(yùn)營就完全癱瘓了。系統(tǒng)必須在斷網(wǎng)或者網(wǎng)絡(luò)抖動的極端情況下依然能保持核心功能可用。這三個(gè)問題指向同一個(gè)技術(shù)方向把算力放到離現(xiàn)場最近的地方。也就是說在景區(qū)機(jī)房、弱電間、甚至攝像頭旁邊部署邊緣計(jì)算節(jié)點(diǎn)讓視頻解析、結(jié)構(gòu)化數(shù)據(jù)提取、事件判斷這些工作在邊緣完成云端只負(fù)責(zé)模型訓(xùn)練、全局調(diào)度和跨業(yè)態(tài)的數(shù)據(jù)分析。1.3 為什么不是“全上云”而是“邊云協(xié)同”可能有人會問“那干脆所有東西都放本地不就行了還要云端干嘛”這里需要解釋清楚邊緣計(jì)算和云計(jì)算的邊界。我的理解是邊緣計(jì)算擅長的是“快、輕、本地”的任務(wù)。比如車輛車牌識別、人臉比對、客流統(tǒng)計(jì)、設(shè)備狀態(tài)采集這些任務(wù)模型相對固定、對實(shí)時(shí)性要求高、數(shù)據(jù)量又大適合放在邊緣節(jié)點(diǎn)上持續(xù)跑。而云計(jì)算擅長的是“慢、重、全局”的任務(wù)。比如模型訓(xùn)練、跨業(yè)態(tài)的數(shù)據(jù)挖掘、游客畫像分析、財(cái)務(wù)報(bào)表生成這些任務(wù)需要大量歷史數(shù)據(jù)和全局視角放云端更合適。所以正確的架構(gòu)不是二選一而是分層協(xié)作。邊緣側(cè)做推理云端做訓(xùn)練和長周期分析邊緣側(cè)負(fù)責(zé)實(shí)時(shí)響應(yīng)云端負(fù)責(zé)策略下發(fā)和模型更新。用一個(gè)生活化的比喻邊緣計(jì)算像是門店的店長能現(xiàn)場處理突發(fā)情況、安排員工、快速決策云端像是總部負(fù)責(zé)制定統(tǒng)一的運(yùn)營策略、分析整體經(jīng)營數(shù)據(jù)、定期給店長做培訓(xùn)。店長不能事事等總部指令總部也不需要盯著每個(gè)門店的每一個(gè)動作。2. 核心細(xì)節(jié)解析與實(shí)操要點(diǎn)邊緣計(jì)算節(jié)點(diǎn)怎么選、怎么部署2.1 算力選型從“能跑算法”到“能跑多少路算法”邊緣計(jì)算節(jié)點(diǎn)是整個(gè)系統(tǒng)的基礎(chǔ)設(shè)施選型上我們踩過不少彎路。一開始我們想省錢準(zhǔn)備用普通X86工控機(jī)加CPU跑推理結(jié)果一測YOLOv5s模型在1080P分辨率下CPU推理一幀要300到500毫秒一路視頻都跑得費(fèi)勁更別提并發(fā)處理多路。后來換了一臺帶GPU的服務(wù)器推理速度確實(shí)上來了但成本也上來了而且體積大、功耗高景區(qū)現(xiàn)場的弱電間不一定放得下。最后我們走的路線是“混合部署”核心邊緣節(jié)點(diǎn)用專業(yè)AI邊緣計(jì)算設(shè)備比如NVIDIA Jetson系列的Orin NX或者Orin Nano在算力和功耗之間取了一個(gè)平衡點(diǎn)對于只需要做數(shù)據(jù)匯聚和協(xié)議轉(zhuǎn)換的場景用普通的X86迷你主機(jī)或者ARM開發(fā)板就夠。這樣既保證了關(guān)鍵視頻分析任務(wù)的性能又不會在非核心節(jié)點(diǎn)上浪費(fèi)成本。關(guān)鍵是要明確一個(gè)指標(biāo)單節(jié)點(diǎn)能跑多少路視頻流。這直接決定了節(jié)點(diǎn)數(shù)量和預(yù)算。以我們用的Orin NX 16GB版本為例實(shí)測跑YOLOv5s模型、輸入分辨率1920×1080、幀率控制在10到15FPS景區(qū)客流統(tǒng)計(jì)不需要25FPS滿幀率單節(jié)點(diǎn)大約能穩(wěn)定處理8到12路視頻流同時(shí)跑一個(gè)輕量級的人臉檢測模型和車牌識別模型。這個(gè)數(shù)據(jù)在項(xiàng)目初期心里一定要有數(shù)否則規(guī)劃節(jié)點(diǎn)數(shù)量時(shí)很容易拍腦袋后期加設(shè)備又得改網(wǎng)絡(luò)拓?fù)洹_x型時(shí)還要注意算力冗余。邊緣節(jié)點(diǎn)不僅要跑當(dāng)前業(yè)務(wù)還要考慮后續(xù)算法模型的迭代新模型往往更復(fù)雜、更吃顯存。我們的經(jīng)驗(yàn)是預(yù)留30%到50%的算力余量否則模型一升級整條鏈路的推理速度都會被拖垮。2.2 三層組網(wǎng)與硬件部署細(xì)節(jié)邊緣計(jì)算節(jié)點(diǎn)在景區(qū)不是單點(diǎn)存在的而是要形成一張有層次的計(jì)算網(wǎng)絡(luò)。我們項(xiàng)目最終采用的是“中心機(jī)房—匯聚節(jié)點(diǎn)—邊緣盒子”三層組網(wǎng)架構(gòu)中心機(jī)房層放核心的邊緣計(jì)算服務(wù)器和存儲設(shè)備負(fù)責(zé)全局的視頻解析任務(wù)調(diào)度、模型版本管理、數(shù)據(jù)匯聚以及和云端平臺的對接。這里相當(dāng)于邊緣計(jì)算網(wǎng)絡(luò)的“大腦”匯聚節(jié)點(diǎn)層在景區(qū)幾個(gè)主要區(qū)域比如游客中心、核心景點(diǎn)片區(qū)、停車場部署匯聚節(jié)點(diǎn)負(fù)責(zé)本區(qū)域多個(gè)邊緣盒子的數(shù)據(jù)匯總、協(xié)議轉(zhuǎn)換和本地緩存同時(shí)跑一些區(qū)域級的聯(lián)動規(guī)則邊緣盒子層就近部署在攝像頭附近或弱電間里直接接入幾路攝像頭的視頻流做本地推理把結(jié)構(gòu)化結(jié)果比如“檢測到1個(gè)人、耗時(shí)32毫秒”上報(bào)給匯聚節(jié)點(diǎn)。這樣分層的好處是單個(gè)邊緣盒子掛了只影響局部幾路視頻匯聚節(jié)點(diǎn)掛了邊緣盒子依然能獨(dú)立工作把數(shù)據(jù)緩存在本地網(wǎng)絡(luò)恢復(fù)后再補(bǔ)傳。整個(gè)系統(tǒng)的容錯(cuò)能力比“所有設(shè)備直連中心”強(qiáng)很多。部署時(shí)有個(gè)容易被忽視的細(xì)節(jié)供電和散熱。景區(qū)現(xiàn)場的弱電間往往條件比較差沒有空調(diào)夏天溫度能到40度以上。Jetson設(shè)備在高負(fù)載下發(fā)熱量很大如果散熱不好芯片會主動降頻推理速度直接掉一半。我們后來在關(guān)鍵節(jié)點(diǎn)加裝了工業(yè)級的主動散熱風(fēng)扇同時(shí)把設(shè)備放在通風(fēng)位置問題才得到解決。另外所有邊緣節(jié)點(diǎn)必須接UPS或者帶電池的電源模塊防止瞬時(shí)斷電導(dǎo)致系統(tǒng)文件和模型損壞。2.3 帶寬與存儲容量測算實(shí)例這部分我拿實(shí)際數(shù)據(jù)來算一筆賬大家以后做方案可以直接套用。假設(shè)景區(qū)有100路1080P攝像頭編碼格式H.264單路碼率4Mbps。全量上云時(shí)中心帶寬需求 100路 × 4Mbps 400Mbps。這還沒算峰值的網(wǎng)絡(luò)抖動和冗余在運(yùn)營商那邊至少要申請500M以上的專線成本非??捎^。邊緣處理后每路攝像頭不再傳原始視頻流而是傳結(jié)構(gòu)化數(shù)據(jù)。比如每秒鐘上報(bào)一次檢測結(jié)果一條JSON數(shù)據(jù)大約2KB100路就是200KB/s換算成帶寬只有1.6Mbps。再加上偶爾回傳的事件短視頻片段比如10秒的報(bào)警錄像總體帶寬需求也就在30到50Mbps左右。降了一個(gè)數(shù)量級。存儲方面差別更大。如果100路攝像頭7×24小時(shí)全量錄像按4Mbps碼率算 單日存儲量 100路 × 4Mbps × 86400秒 ÷ 8 ÷ 1024 ≈ 4.1TB 7天存儲量 ≈ 28.8TB。這個(gè)數(shù)據(jù)量對本地機(jī)房來說不是不能做但長期存儲成本很高。而采用邊緣事件驅(qū)動存儲后只保存“有事件”的片段。比如一臺設(shè)備每天平均觸發(fā)150次事件每次存10秒視頻單路一天產(chǎn)生的存儲量約為 150 × 10秒 × 4Mbps ÷ 8 ≈ 750MB100路一天約75GB7天約525GB。壓縮到原來的不到2%。這些片段還可以只保留7到30天配合云端存儲做更長時(shí)間的歷史追溯。這就是邊緣計(jì)算在成本賬上最直接的體現(xiàn)。實(shí)時(shí)性提升是“質(zhì)”的變化但帶寬和存儲的節(jié)省是“量”的變化甲方看方案時(shí)對這種量化對比非常買賬。3. 實(shí)操過程與核心環(huán)節(jié)實(shí)現(xiàn)多業(yè)態(tài)融合的數(shù)據(jù)架構(gòu)和場景落地3.1 從“各業(yè)態(tài)自掃門前雪”到“One ID一張網(wǎng)”多業(yè)態(tài)融合是整個(gè)項(xiàng)目里最考驗(yàn)數(shù)據(jù)能力的部分。第一個(gè)要解決的問題是怎么讓不同業(yè)態(tài)的數(shù)據(jù)能“對上號”。景區(qū)里的游客在停車場系統(tǒng)里是一個(gè)車牌號在票務(wù)系統(tǒng)里是一張門票編碼在餐飲消費(fèi)時(shí)是一筆訂單在酒店入住時(shí)是一條入住記錄。這些ID本來是割裂的無法知道“這個(gè)正在餐廳消費(fèi)的人是不是那個(gè)早上九點(diǎn)停好車進(jìn)園的人”。要實(shí)現(xiàn)多業(yè)態(tài)融合必須先做統(tǒng)一ID。我們最終采用了“One ID”體系以游客入園時(shí)的人臉特征或手機(jī)號為核心標(biāo)識在入園那一刻生成一個(gè)全局唯一的游客ID。這個(gè)ID貫穿停車、門票、消費(fèi)、住宿、互動體驗(yàn)等所有環(huán)節(jié)。具體做法是在票務(wù)閘機(jī)上做人臉綁定在停車場出入口做車牌和場內(nèi)支付的綁定在餐飲零售端通過小程序掃碼將訂單關(guān)聯(lián)到游客ID。邊緣計(jì)算節(jié)點(diǎn)在這里承擔(dān)了關(guān)鍵的實(shí)時(shí)關(guān)聯(lián)工作閘機(jī)識別到人臉后邊緣節(jié)點(diǎn)立刻把這個(gè)人臉特征和游客ID映射關(guān)系同步到其他業(yè)態(tài)的邊緣節(jié)點(diǎn)后續(xù)消費(fèi)行為就能被實(shí)時(shí)歸集到同一個(gè)ID下。這套體系的建設(shè)難度不在技術(shù)而在業(yè)務(wù)協(xié)同。因?yàn)橥\?、餐飲、票?wù)往往是不同供應(yīng)商提供的系統(tǒng)有的甚至有獨(dú)立的數(shù)據(jù)庫。我們花了很多時(shí)間做接口聯(lián)調(diào)推動各方開放數(shù)據(jù)字段統(tǒng)一時(shí)間格式、設(shè)備編碼規(guī)則、事件類型定義。現(xiàn)在回頭看這個(gè)“數(shù)據(jù)標(biāo)準(zhǔn)化”工作比任何技術(shù)選型都重要它是后面所有融合場景的基礎(chǔ)。3.2 一條典型數(shù)據(jù)鏈路的完整拆解拿景區(qū)里最普通的“客流統(tǒng)計(jì)與擁堵預(yù)警”場景來拆解大家能更清楚邊緣計(jì)算在整條鏈路里扮演什么角色。第一步攝像頭采集視頻流通過RTSP協(xié)議推給邊緣盒子。邊緣盒子里的視頻解碼模塊把視頻幀解碼成YUV數(shù)據(jù)送入AI推理引擎。第二步推理引擎運(yùn)行人形檢測模型在每一幀畫面中識別出人體的位置框。這里有個(gè)細(xì)節(jié)不是每幀都做檢測而是按一定幀率采樣比如每秒處理5到10幀。這樣做既能保證統(tǒng)計(jì)精度又能大幅降低算力消耗。第三步邊緣節(jié)點(diǎn)的跟蹤模塊對不同幀之間的同一目標(biāo)做關(guān)聯(lián)也就是目標(biāo)跟蹤算法判斷這個(gè)人是從哪個(gè)方向走過來的、在這片區(qū)域停留了多久。這個(gè)數(shù)據(jù)比單純的人頭計(jì)數(shù)更有價(jià)值可以直接用于分析高峰時(shí)段的客流走向。第四步結(jié)構(gòu)化結(jié)果通過MQTT協(xié)議上報(bào)給匯聚節(jié)點(diǎn)匯聚節(jié)點(diǎn)匯總本區(qū)域多路視頻的統(tǒng)計(jì)結(jié)果實(shí)時(shí)計(jì)算出區(qū)域人數(shù)、密度、增長趨勢并和預(yù)設(shè)的閾值做對比。一旦超過閾值自動觸發(fā)預(yù)警廣播系統(tǒng)播放疏導(dǎo)提示導(dǎo)視大屏顯示擁堵信息同時(shí)后臺推送消息給現(xiàn)場運(yùn)營人員。第五步每天結(jié)束后邊緣節(jié)點(diǎn)把當(dāng)日客流摘要、分時(shí)段駐留數(shù)據(jù)等同步到云端云端再結(jié)合餐飲、零售的銷售數(shù)據(jù)生成“客流轉(zhuǎn)化率”之類的經(jīng)營分析報(bào)表。這條鏈路里最關(guān)鍵的設(shè)計(jì)原則是能下沉的處理盡量下沉云端做不了實(shí)時(shí)決策邊緣側(cè)也絕不做長周期分析。分工明確各司其職整條鏈路跑起來才穩(wěn)。3.3 三個(gè)典型融合場景復(fù)盤場景一節(jié)假日大客流的“停車—入園—餐飲”聯(lián)動。以前節(jié)假日停車場滿了門衛(wèi)只能拿著對講機(jī)喊“別放車進(jìn)來了”?,F(xiàn)在停車場入口的邊緣節(jié)點(diǎn)實(shí)時(shí)統(tǒng)計(jì)剩余車位數(shù)據(jù)同步到票務(wù)系統(tǒng)當(dāng)剩余車位低于15%時(shí)自動觸發(fā)限流策略線上購票頁面顯示“車位緊張”提示引導(dǎo)游客錯(cuò)峰出行。同時(shí)餐飲業(yè)態(tài)會收到大客流預(yù)警中央廚房根據(jù)預(yù)測入園人數(shù)提前備餐。這套聯(lián)動上線后的第一個(gè)黃金周停車場排隊(duì)時(shí)長縮短了將近40%餐飲浪費(fèi)率也明顯下降。場景二園區(qū)“一碼游”跨業(yè)態(tài)閉環(huán)。游客通過小程序掃碼入園后這個(gè)碼就綁定到了One ID。在景區(qū)內(nèi)騎共享代步車、買小吃、玩漂流項(xiàng)目都可以直接掃碼消費(fèi)記錄實(shí)時(shí)同步到邊緣節(jié)點(diǎn)再由邊緣節(jié)點(diǎn)匯總到云端的經(jīng)營分析平臺。這樣做的好處是游客不需要在不同系統(tǒng)中分別注冊和支付體驗(yàn)順暢景區(qū)也能拿到完整的消費(fèi)路徑分析哪些項(xiàng)目是“引流”的、哪些是“賺錢”的。場景三游客動線優(yōu)化。我們在景區(qū)各個(gè)岔路口和熱門點(diǎn)位部署了邊緣盒子用視覺算法計(jì)算每個(gè)方向的人流量。經(jīng)過一周的數(shù)據(jù)積累發(fā)現(xiàn)某個(gè)網(wǎng)紅打卡點(diǎn)下午2點(diǎn)到4點(diǎn)嚴(yán)重?fù)頂D但旁邊的文化展館卻非常冷清。于是運(yùn)營方臨時(shí)調(diào)整了導(dǎo)視系統(tǒng)在擁擠時(shí)間點(diǎn)引導(dǎo)部分游客先去展館同時(shí)展館門口增加了一個(gè)快閃活動。數(shù)據(jù)顯示展館的客流提升了66%網(wǎng)紅點(diǎn)的擁擠指數(shù)下降了約35%。這種實(shí)時(shí)引導(dǎo)和動態(tài)調(diào)整只有在數(shù)據(jù)能夠快速流轉(zhuǎn)、及時(shí)反饋的情況下才能實(shí)現(xiàn)。4. 常見問題與排查技巧實(shí)錄4.1 視頻流反復(fù)斷連故障排查全過程這個(gè)坑我們花了一整天才定位出來非常有代表性?,F(xiàn)象是某個(gè)邊緣盒子上有幾路視頻分析任務(wù)總是運(yùn)行一兩個(gè)小時(shí)就退出重啟后又能正常運(yùn)行一段時(shí)間然后再次退出。一開始以為是程序崩潰查看日志發(fā)現(xiàn)是拉流模塊報(bào)錯(cuò)提示RTSP連接超時(shí)。我們就去查攝像頭網(wǎng)絡(luò)發(fā)現(xiàn)攝像頭和邊緣盒子之間的交換機(jī)端口有丟包現(xiàn)象。更換了網(wǎng)線、光模塊之后丟包問題解決了但任務(wù)還是會偶爾退出。后來把問題范圍縮小到“并發(fā)連接數(shù)”。原來那批攝像頭是某廠商的入門級型號每路攝像頭最多只允許2路RTSP并發(fā)連接。邊緣盒子的拉流模塊重連時(shí)舊連接沒有完全釋放新連接又建立起來超過了攝像頭的并發(fā)限制導(dǎo)致后續(xù)連接全部失敗。找準(zhǔn)原因后我們把拉流模塊改成了單連接復(fù)用——用一路RTSP連接同時(shí)獲取視頻幀和時(shí)間戳并加上斷線重連的退避算法第一次重連等5秒第二次10秒逐步遞增到60秒上限問題才徹底不再出現(xiàn)。這次排查給我的教訓(xùn)是邊緣計(jì)算項(xiàng)目里鏈路中任何一個(gè)“犄角旮旯”的小設(shè)備都可能成為瓶頸選型時(shí)不能只看中心設(shè)備攝像頭、交換機(jī)這些末端設(shè)備同樣要納入測試范圍。4.2 常見問題速查表與避坑建議問題現(xiàn)象可能原因處理建議邊緣盒子推理速度越來越慢散熱不良導(dǎo)致芯片降頻檢查風(fēng)扇和通風(fēng)環(huán)境必要時(shí)加裝主動散熱視頻分析任務(wù)頻繁退出RTSP并發(fā)連接數(shù)超限做單連接復(fù)用加斷線重連退避策略多個(gè)模型同時(shí)運(yùn)行顯存不足模型加載占用過多顯存用TensorRT優(yōu)化模型減少輸入分辨率按優(yōu)先級卸載不常用模型邊緣節(jié)點(diǎn)上報(bào)數(shù)據(jù)時(shí)間混亂設(shè)備未同步NTP時(shí)間在匯聚節(jié)點(diǎn)統(tǒng)一配置NTP服務(wù)器所有設(shè)備統(tǒng)一時(shí)間源邊緣設(shè)備離線但業(yè)務(wù)正常網(wǎng)絡(luò)抖動或設(shè)備重啟在邊緣盒子本地做數(shù)據(jù)緩存恢復(fù)后自動補(bǔ)傳模型識別準(zhǔn)確率下降場景光線變化或模型過時(shí)定期采集真實(shí)場景數(shù)據(jù)更新訓(xùn)練集并熱更新模型避坑建議方面有幾條是花真金白銀買來的經(jīng)驗(yàn)。第一不要把AI識別做成全鏈路串行。有些團(tuán)隊(duì)圖省事把“檢測—跟蹤—屬性識別—事件判斷”全寫在一個(gè)流程里一個(gè)環(huán)節(jié)慢了整條鏈路都被拖住。正確做法是解耦每一路視頻一個(gè)獨(dú)立進(jìn)程各模塊之間用消息隊(duì)列傳遞數(shù)據(jù)出問題只影響單路不會“一粒老鼠屎壞了一鍋湯”。第二不要上來就想搞“全業(yè)態(tài)大中臺”。數(shù)據(jù)打通是漸進(jìn)的過程先選兩三個(gè)業(yè)務(wù)關(guān)聯(lián)度最高、收益最明顯的場景跑通比如停車加票務(wù)、票務(wù)加餐飲跑順了再往更多業(yè)態(tài)復(fù)制。我們項(xiàng)目里最先只做了停車和票務(wù)的聯(lián)動穩(wěn)定運(yùn)行了一個(gè)月后才逐步擴(kuò)展這樣風(fēng)險(xiǎn)最小。第三邊緣節(jié)點(diǎn)一定要做可觀測性。給每個(gè)節(jié)點(diǎn)加統(tǒng)一的狀態(tài)上報(bào)機(jī)制包括CPU占用、內(nèi)存占用、GPU利用率、推理耗時(shí)、任務(wù)狀態(tài)、網(wǎng)絡(luò)連接數(shù)等指標(biāo)。沒有這些數(shù)據(jù)出了問題只能一臺臺設(shè)備去登服務(wù)器查效率極低而且很可能等你趕到現(xiàn)場問題已經(jīng)過去了。5. 從智慧景區(qū)延伸出去邊緣計(jì)算在校園物聯(lián)網(wǎng)場景的實(shí)踐參考做完景區(qū)項(xiàng)目后我又參與了一個(gè)校園物聯(lián)網(wǎng)設(shè)備數(shù)據(jù)上云的項(xiàng)目發(fā)現(xiàn)很多經(jīng)驗(yàn)是可以直接平移過去的。校園場景和景區(qū)有很強(qiáng)的相似性設(shè)備種類多門禁、監(jiān)控、水電表、照明、多媒體教室設(shè)備數(shù)據(jù)產(chǎn)生分散實(shí)時(shí)性要求高而且中心帶寬有限。比如校園宿舍的用電監(jiān)測如果所有電表的數(shù)據(jù)都直接傳云平臺一方面海量高頻采集數(shù)據(jù)會占用大量帶寬另一方面對異常用電比如違規(guī)使用大功率電器的檢測如果依賴云端延遲會很不可控。按照景區(qū)項(xiàng)目的思路我們在一棟宿舍樓部署了一個(gè)邊緣計(jì)算節(jié)點(diǎn)電表數(shù)據(jù)先匯聚到節(jié)點(diǎn)上節(jié)點(diǎn)用規(guī)則引擎加輕量級算法做本地判斷只有異常事件和每天一次的匯總數(shù)據(jù)才上云。這樣既保證了用電安全預(yù)警的實(shí)時(shí)性又把中心平臺的存儲和計(jì)算壓力降了下來。再比如校園里的攝像頭資源。很多高校有幾千路攝像頭學(xué)校保衛(wèi)處最關(guān)心的不是普通場景的錄像存儲而是異常事件如打架、闖入、物品遺留的實(shí)時(shí)發(fā)現(xiàn)。邊緣節(jié)點(diǎn)直接在源頭做視頻結(jié)構(gòu)化把“有異?!钡姆昼娂壠瓮扑偷奖Pl(wèi)處大屏傳統(tǒng)的“大海撈針”式回放就變成了“實(shí)時(shí)精準(zhǔn)”式響應(yīng)。這個(gè)思路和景區(qū)項(xiàng)目里的事件驅(qū)動存儲如出一轍。從技術(shù)架構(gòu)上看景區(qū)和校園邊緣計(jì)算項(xiàng)目的核心邏輯是一致的感知設(shè)備在末端產(chǎn)生數(shù)據(jù)邊緣節(jié)點(diǎn)做實(shí)時(shí)處理和本地決策云平臺做模型訓(xùn)練和全局管理。區(qū)別只在于業(yè)務(wù)場景的適配——景區(qū)關(guān)注客流和消費(fèi)校園關(guān)注安全和管理。這也說明邊緣計(jì)算作為一種技術(shù)底座它的價(jià)值不在于技術(shù)本身有多前沿而在于能不能在真實(shí)場景里解決具體問題。5.2 跨項(xiàng)目沉淀下來的幾條工程經(jīng)驗(yàn)做完這兩個(gè)項(xiàng)目我最大的體會是邊緣計(jì)算項(xiàng)目拼的不是算法的多先進(jìn)而是工程化的耐心和細(xì)節(jié)。第一數(shù)據(jù)標(biāo)準(zhǔn)一定要先定后面才能少返工。景區(qū)項(xiàng)目的One ID體系之所以能在一個(gè)月內(nèi)搭建完成得益于一開始就統(tǒng)一了設(shè)備編碼、人員編碼、事件類型的規(guī)范。校園項(xiàng)目里我們同樣先定義了“設(shè)備—點(diǎn)位—房間”的三級關(guān)聯(lián)模型和各子系統(tǒng)對接時(shí)大家都遵循這個(gè)標(biāo)準(zhǔn)接口聯(lián)調(diào)順暢了很多。第二先跑“最小閉環(huán)”再橫向擴(kuò)展這是避免項(xiàng)目失控的鐵律。邊緣計(jì)算涉及設(shè)備、算力、網(wǎng)絡(luò)、云端、業(yè)務(wù)系統(tǒng)鏈路長、環(huán)節(jié)多如果一開始就想一步到位把所有場景全做出來排錯(cuò)成本會非常高。我們的做法是先挑一個(gè)場景比如景區(qū)項(xiàng)目先做停車余位識別從攝像頭接入到云端展示全打通所有技術(shù)風(fēng)險(xiǎn)在最小范圍內(nèi)暴露并解決然后才大規(guī)模復(fù)制到其他場景。第三邊緣側(cè)的業(yè)務(wù)規(guī)則要能“熱更新”?,F(xiàn)場運(yùn)營需求經(jīng)常變化比如“客流預(yù)警閾值從80人調(diào)整到60人”、“檢測到游客靠近水域就立即報(bào)警”這些規(guī)則如果寫死在代碼里每改一次就得重新發(fā)版運(yùn)維成本太高。我們的方案是把規(guī)則配置從代碼中抽離出來存成JSON或YAML配置由匯聚節(jié)點(diǎn)統(tǒng)一下發(fā)邊緣盒子收到后動態(tài)加載不需要重啟服務(wù)。這個(gè)設(shè)計(jì)在后期響應(yīng)運(yùn)營需求變化時(shí)幫了大忙。最后再分享一個(gè)小技巧無論景區(qū)還是校園邊緣節(jié)點(diǎn)的統(tǒng)一運(yùn)維通道都要提前規(guī)劃。現(xiàn)場幾十上百臺設(shè)備如果每一臺都需要單獨(dú)登進(jìn)去布版本、改配置運(yùn)維人員會瘋掉。我們最終搭了一套輕量級的設(shè)備管理平臺支持遠(yuǎn)程下發(fā)模型文件、更新規(guī)則配置、批量執(zhí)行命令設(shè)備離線時(shí)自動告警。這套平臺本身開發(fā)量不大但帶來的運(yùn)維效率提升是十幾倍的。做邊緣計(jì)算和多業(yè)態(tài)融合項(xiàng)目很多時(shí)候是“七分業(yè)務(wù)梳理三分技術(shù)實(shí)現(xiàn)”。技術(shù)方案再漂亮如果現(xiàn)場業(yè)務(wù)關(guān)系沒理順、數(shù)據(jù)標(biāo)準(zhǔn)沒統(tǒng)一系統(tǒng)終究跑不起來。反過來只要把數(shù)據(jù)鏈路和邊界理清楚了邊緣計(jì)算帶來的實(shí)時(shí)性、成本和可靠性收益是甲方能直接感受到的。希望這篇文章里的實(shí)操細(xì)節(jié)能幫你少走一些彎路。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久综合人妻| 日本久久综合| 五月丁香啪啪啪综合网| 色五月,com| 国产婷婷五月色情综合| 色色色99韩| 五月美女婷婷风骚 | 激情五月丁香五月| 天天久综合| 久久精品婷婷| aV欲望人妻中文字幕| 亚洲色99| 色丁香五月| 丁香五月aV| 天天肏天天肏天天肏| www.久久| 色婷婷www| 久久这里有精品在线观看| 五月天丁香成人社| 婷婷激情五月呦呦| 丁香六月婷婷久久综合| 丁香婷婷五月天亚洲| 丁香五月-激情综合| 久久久ww| 99熟女啪啪视频| 91婷婷五月天综合视频| 美女亚洲五月丁香| 久久激情五月| 亚洲AV综合网| 五月婷婷中文字幕| 操逼视频一区| 日本欧美国产| 停停五月色宗合| 三级黄色大片视频| 少妇性按摩无码中文A片| 色婷婷的五月天| 色色色色色色色五月| 色情五月综合婷婷| 人妻九九九九| 亚洲99综合| 五月婷婷开心综合| 色色丁香激情五月| 久草五月天| 丁香综合伊人AV| 伊人春天av| 欧美日韩成人在线网站| 欧美、日韩、中文、制服、人妻| 欧美一线视频| 日韩欧美一道四区中文字幕| 久草五月天| 婷婷五月天VI| 高清a片基地| 99久久99久久综合| 极品人妻VIDEOSSS人妻| 97人妻超级碰碰碰碰碰| 一本婷婷丁香久久| 国产精品久久欧美久久一区| 久久99成人性爱高清视频| 26uuu青青| 久99久在线| 熟女91九色| 涩玖玖免费视频| 美女被操一区二区| 91九色成人原创视频| 丁香五月婷婷国产av| 99热这里都是精品| 99色综合久久| 久久思思99| 99热在线网站| 久Se视频在线观看| 色婷婷手机在线| 九九99精品视频在线观看| 国产精品日日躁夜夜躁| 色色99| 久久资源网五月婷| 天天日天天插| 亚洲无码影音| 美女黄频aⅴ视频| 欧美视频五区| 情婷婷五月天在线| 亚洲久久婷婷| 99热免费| 性爱久久| 丁香五月伊人| 棕合影院色色| 超黄亚洲瑟瑟网站| 人人草人人视| 天天做夜夜爽| 免费碰碰视频久| 日韩av手机在线观看| 天天揷综合网| 操九色| 99欧州偷拍视频| 五月天丁香网| 久久开心五月婷婷| 超碰免费人妻| 久久性爱视频网站| www,超碰| 国产真人做爰视频免费| 色婷婷色| 99热6这里之有精品| 色狠狠伊人久久五月丁香| 婷婷激情五月天小说| 五月婷婷影| 丁香五月婷婷基地| 中文字幕无码人妻少妇免费视频 | 亚洲激情视频在线观看| 狠狠精品干练久久久无码中文字幕| 国产日产亚洲系列最新| 97色色婷婷五月天| 丁香五月综合在线播放 | 久久婷婷五月综合| 日本丰满久久| 丁香五月天激情网址| 大香蕉视频婷| 九月婷婷久久| 婷婷狠狠干| 五月天色图| 亚洲精品一区中文字幕乱码| 啪啪操超碰| 99色综合网| www.狠狠干com| 人人爱人人草| 亚洲操女| 天天人人综合| 99精品在线| 色婷婷丁香五月天| 丁香六月狠狠干| 色五月无码| 五月天婷婷视频| 91超级碰碰| 久久精品99| 六月婷婷AV| 五月丁香日本一抹本| 91精品又长又大又粗又爽又猛| 久久久久9| 色五月成人在线| 日韩 中文 欧美| 人妻丰满精品一区二区A片| 成人一区在线观看| 俺去啦综合网| 中国女人做爰A片| 99免费偷拍视频| 五月天色婷婷小说| 日本丁香五月| 久操无码| 99热在线看| 国产成人精品123区免费视频| 久久综合网桃花| 99 色色吧| 激情综合色图| www.日本91| 国产日韩欧美性生活| 26uuu丁香婷婷五月| 久久97久久99久久综合欧美| 成人五月天综合网| 激情婷婷五六月天| 午夜丁香婷婷| 国产中文亚洲欧美日韩性交| 五月婷婷色综图片| 狠狠99| renre人人操国产超碰在线| 51XX午夜影福利| 久久激情四射| 亚洲成人噜噜| 国产人人操| 激情网第四色| 免费看欧美成人A片无码| 色婷婷免费观看| 亚洲激情婷婷| AV操一操| 99热国产这里只有精品| 色婷综合| 亚洲精品国产精品乱码视99| 99热亚洲综合| 天天操婷婷| 美女被肏网站在线看| 亚洲精品另类| 天天操电影院色狼性av| 无毒黄色网址| 婷婷六月激情综合| 99热 在线播放| 天天综合亚洲| 婷婷99丁香| 少妇激情五月天| 万月丁香狠狠爱| 天天日夜夜草进麻麻的子宫| yw国产AV| 丁香五月天之婷婷影院| 九九热re99re6在线精品| 色综合久久88色综合天天99| 日韩在线一级| 亚洲第一黄网| www久久99com| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 色狠狠综合网| 国产伦理精品高清在线观看网站一区二区 | 色色色色色网| 六月丁香婷婷天堂| 影院久久久| 久久金品黃色| 国产精品人妻欲求不满| 操人无码| 五月色俺婷婷| 五月婷久久久| 婷婷五月在线观看| 激情五月视频| 色色综合院| 激情五月天婷婷| 9久久久久| 99综合免费视频| 亚洲欧洲99| 日日干天天| 天天日狠狠| 五月激情丁香啪啪| 久久曰曰| 色综合天天天天做夜夜| 色狠狠综合网| 午夜色丁香| 狠狠色狠狠色综合日日91| 成人免费va| 99热加勒比| 啪啪一区| 免費亭亭成人| 五月丁香婷婷伊人| 99热爱爱干干日| 人人色婷婷五月天| 超碰2021| 热久久这里只有精品| 婷婷成人视频| 成人免费va| 1024久婷| 久久久99久久| www天堂99| 婷婷五月丁香花综合| 五月激情婷婷女| 99ri网站在线观看| cc精品国产性传播| 中文字幕不卡视频| 99性爱| 国产精品美女| 亚洲婷婷激情888精品久| 人妻视频一区而且二区| AAA久久| 激情婷婷激情在线不卡| 婷婷五月色情天| 丁香桃色网| 国产玖玖资源| 婷婷五月天综合色| 99色综合网| 九九热a| 99re8这里只有精品99re8热视频| 久久久精品AV| 嫩草AV久久伊人妇女超级A| 精品综合久久久久久五月天| 91日综合欧美| 婷婷九月| 99re这里只有精品在线观看| 9久久网| 亚州色色色| 天天做天天爱高潮片| 日本狠狠干| 99热人人艹| 色色五月丁香婷婷| 婷婷开心激情综合五月天| 婷婷深爱五月亚洲综合| 五月丁香婷婷色色| 色婷婷成人做爰A片免费看网站 | 操91| 久色中文| 综合一区二区三区| 伊人五月综合网| 色婷婷在线视频久| 久久亚洲天堂| 大学生高潮无套内谢视频| 色色COm| 成人片在线播放| 婷婷色影音天| 久久视频这里有精品99| 99九九精品| 99re6热在线精品视频播放速度| 国产精品18久久久| 五月天成人免费视频| 五月天激情综合网站| 六月色丁香婷婷| 天天天干夜夜夜操| 日本爆乳片手机在线播放| 欧美激情五月天在线观看| 色五月超碰| 天天日日| 婷婷综合性爱网| 99性爱| 九九综合久久| 亚洲成人免费在线| 婷婷五月天AV| 9久久久久久久久久久| 啪啪小说五月天| 五月丁花色综合网| 人妻肉射免费观看| tingtingzonghewang| 91久久| 超碰在线观看成人视| 国产精品人人做人人爽人人添| 国产无人区大片| 校园激情 亚洲| 情情五月天色| 99热这里只有国产精品| 六月婷五月丁香| 五月色丁香国产在线视频| 亚洲在线视频321| 成人资源在线| 色噜噜狠狠色综合日日| 丁香五月成人论坛| 五月天啪啪| 六月99天天婷婷激情综合| 亚洲综合激情五月| 日韩在线视频中文字幕| 99爱视频在线| 美女黄频aⅴ视频| 五月天激情播播网| 九九热这里只有精品31| 91久热| 中文人妻AV久久人妻18| 大香蕉在线观看9| 《久久综合九色综合97婷婷| 久久这有这里精品| 思思热在线| 在线只有精品| 色婷婷中文在线| 色五月av伊人| 九九精品亚洲| av大片在线| 91丨九色熟女丨首页| 五月天丁香六月综合| 九九热在线观看视频网站| 玖玖五月丁香| 五月丁香婷婷狠狠操| www一起操| 亚洲色 视频| 丁香五月成人社区| 激情五月丁香色色去久久| 久热这里只有精品性色AV| 婷婷日欧美在线观看| 色五月激情五月| 人人操操| 99综合视频| 精品激情| 大香蕉狠狠爱主页| 婷婷精品综合| 日本黄色一级| 深爱激情九九五月天 | 99久久综合网| 六月久久婷婷| 丁香六月激情| 激情五月综合| 伊人婷婷青青cao| 丁香五月中文字幕| 五月天天堂久久| xxx.色婷婷| 婷婷五月天av小说| 婷婷成人五月天成人文学小说| 国产成人一区二区三区在线观看| www.av视频xx999.com| 99综合在线| 热久久91| 丁香九月激情| 日韩操逼大片| 九九無妻| 色婷婷在线视频综合| 日韩精品AV一区二区三区| 九九热视频首页/这里只有精品| 九九综合| 这里只有精品免费观看网占| 99热欧美精品| 色婷婷亚洲婷婷| 五月激情四射婷婷丁香| 中文字幕人妻熟女在线| 热的无码综合视频| 久人人操| 99热66| 狠狠久久婷五月综合色| av首页在线| 五月色影院| 欧美日韩aaaa| 99久久99九九九99九他书对| 国产精品久久久久久久久久| 激情五月婷在线精品| 久久婷婷激情四射五月天| 亚洲色婷婷| 五月中旬婷婷丁香六| 91日视频| 墨西哥毛片内射精| 搡BBBB搡BBB搡18| 99只有这里有精品在线视频| 狠狠五月激情在线| 六月婷婷啪啪| 天天se在线视频| www色综合| 性爱综合网| 国产黄色av| 91精品久久久久久久久久| 麻豆雪千夏| 五月色 亚洲| 色 免费网站视频| 五月婷婷基地| 丁香婷婷五月| 丁香婷婷婷五月综合色情| 天天综合精品| 欧美影院婷婷| 囯产精品久久欠久久久久久九大| 天天 青草 丝袜制服 在线| 深爱激情中文五月天av| 中文字幕欧美久久| 97久操视频| 影音先锋自拍网| 99热爱爱干干日| 婷色天堂| 另类图片激情五月| 五月天婷婷导航| 99碰碰。| 亚洲精品亚洲人成人网| 婷婷丁香五月欧美人| 久久这里只有精品99| 亚洲岛国电影| 亚洲V国产V欧美V久久久久久| 香蕉AV777XXX色综合一区| 无码少妇高潮喷水A片免费 | 无码一级片| 小视频aaa久久久| 九月色婷婷综合| 色综合久网| 人妻激情视频| 久久99婷婷| 丁香婷婷精品视频| 五月天婷婷色播| 一本伊人色婷| 丁香五月综合在线| 激情五月婷| 涩五月婷婷| 国精产品一区一区三区免费视频 | 天堂无码人妻精品AV一区| 精国产品一区二区三区A片| 操大屄五月天视频| AV色婷婷| WWW.99热| 婷婷五月天网址| 99亚州综合精品成人网| 99ER热精品视频| 亚洲成人av在线观看| 久久久五月五丁香| 丁香五月天在线直播观看| 婷婷无码视频| 亚洲99热| 97操男人的天堂| 久久久激情| 婷婷丁香先锋资源网站| 操日本色| 99精品无码网站| 色久女| 色五月综合激情网| 色七色九九| 97九色视频| 久久婷婷七月丁香| 思思99热这里只有精品| 亚洲亚洲永久无码777777| 午夜丁香| 亚洲99热| 婷婷色5月天在线。| 久月婷婷| 成人丁香色| 天天干天天日天天操| 亚洲深喉aV| a色色片| 五月丁香亚洲综合| 桃色五月婷婷| 丁香婷婷久久综合在线| 大色鬼综合| 台湾综合丁香五月蜜桃| 久久激情五月婷婷| 中文字幕在线观看视频www| 五月欧美丁香在线观看| 9 1 A v久久久| 久久66成人网站| 国产婷婷色综合AV蜜臀AV| 五月天伊人av| 极品人妻VIDEOSSS人妻| 99色啊| 六月天婷婷| 激情六月下句是什么| 在线成人网址| 99热在线爱| 人妻久久久| 天天草婷婷五月| 亚洲V国产V欧美V久久久久久| 婷婷久热| 碰97 久| 色综合久久88色综合天天| 婷婷五月成人系列| 9|在线观看视频| 久久久久久性爱视频| 五月亭久久无码视频| 99热成人| 日韩色色网| 99视频自拍| 色综合综合网| 色婷婷丁香综合中文字幕| 久久亚洲激情五码| 干婷婷五月天| 婷婷久久综合| 五月天色婷婷视频| 99久精品视频| 97在线观视频免费观看| 色色色热| 日本在线免费中文com.| 婷婷在线网| 婷婷五月天黄色| www.五月丁香av| .青娱乐天天操B| 大香蕉丁香婷婷| 97丁香婷婷| 国产精品久久久爽爽爽麻豆色哟哟| 天天热夜夜操| 婷婷色色狠狠| 丁香六月激情毛片| 成人国产欧美大片一区| 91视频一起草| 色色A| 亚洲综合婷婷| 性一交一乱一交A片久久四色| 久操欧美在线观看97| 五月天合网| 色情五月综合婷婷| 欧美色色色色色色色色色色影视| 丁香五月婷婷综合啪啪| 97色色-99久久| 日日噜噜夜夜狠狠久久丁香五月| 另类视屏| 五月天精品视频| 久久怡红院| 婷婷伊人| 九九青青草成人| 开心网五月色婷婷| 99热亚洲| 99爱在线视频| 超碰碰碰碰| 亭亭五月色男人| 亚洲欧美丁香五月天亚洲欧美| 大战熟女丰满人妻AV| 色婷婷四色| 五月天综合久久| 青青久久91| 夜夜躁婷婷AV| 色色AV色色色东莞| 亚洲日日日| 网站免费一站二站| 超碰免费大香蕉| 99热日本| 国产精品第一国产精品| 国产无套精品一区二区| 热99玖玖99玖玖99九九| 狠狠五月激情丁香六月| 亚洲黄色网址| 激情五月综合| 日韩黄色电影| 婷婷舔| 99re在线观看| 2020日日干| 五月婷婷涩涩爱| 五月丁香黄色视频| 97色久| yellow视频在线观看91| 五月激情婷婷六月| 人妻激情视频| 深爱五月月天| 狠狠一日| 五月天天堂久久| 俺来也综合网精品一区| 大地资源色婷婷视频在线| 99视频只有精品| 婷婷丁香六月激情综合| 婷婷激情小说网| 国产古装妇女野外A片| 色五月超碰| 99热精品中文字幕| 91精品久久久久久| 黄色aa观看aaguochan| 91九九| 99热这里只有精品2| 婷婷五月天综合在线| 大香蕉懂9| 综合色五月天| 婷婷五月天av| 99日在线视频| 九热精品| 69天堂99| 黄色AAAAAAA| 天久综合91综合首页| 99免费热视频在线| 操人无码| 琪琪色五月天| 国产毛片精品一区二区色欲黄A片| 激情五月丁香在线观看直播| 国产99精品免费视频| 五月婷婷丁香啪啪| 色情综合| 激情丁香五月天综合| 国产午夜精品一区二区三区四区| 六月色色| 先锋资源91| 婷婷5月色| 天天肏天天肏天天肏| 久热这里只有| 久久色五月天| 美女亚洲五月丁香| 丁香涩涩五月天| 色日本网| 天天干天天做| 99这里有精品视频| 五月丁香| 五月婷婷免费在线视频| 婷婷五月天成人| 日本久草福利| 久久人操| 99热亚洲| 91av视频在线观看最新网址| 久久中文人妻系列| 思思热精品在线| 色五月涩涩婷婷蜜桃| 成人AV在线电影| 精品色色网| 超级碰碰碰久久网站| 大香蕉欧美在线| 色之综合网| 婷婷五月成人社区| 婷久久| 97超级碰碰碰| 梁铮版蜘蛛女在线观看| 四川女人毛多水多A片| 五月丁香激情综合啪| 婷婷五月天丁香社区| 99国产精品久久久久久久久久久| 黑人巨粗进入警花疼哭A片| 婷婷五月激情五月丁香五月| 婷婷五月丁香六月伊人网| 狠狠五月天婷婷| 欧美激情综合色丁香婷婷五月天| 色啪网| 色婷婷丁香五月| 99热亚洲| 99爱视频在线| 五月丁香婷婷在线| 五月天丁香综合| 中文字幕按摩做爰| 五月天色色婷婷| 色综合日日| 99视频色在线观看| 五月天操逼网| 色婷婷五月影视| 成人做爰黄A片免费看直播室男男 久草热8精品视频在线观看 | 一级黄色尤物综合视频手机在线观看| 99热超碰在线| 色婷婷综合网| 无码人妻少妇色欲AV一区二区 | 99热99干| 五月天色图| 性色欲情 网站| www.激情五月天| 国产AV影片| 成人婷婷色五月天| 九色91视频| 欧美电影在线观看| 韩日另类| 中文字幕97超级碰| 99久久五月天| 99性视频| 婷婷五月天伊人| 激情婷婷五月女| 色五月婷婷丁香五月| 亚洲人妻AV| 五月综合激情| 久久草大香蕉| 天天综合久久| 99久热这里有精品| 婷婷色五月天第7色| 天天在线久久综合 | 色婷丁香| 久久99网址| 狠狠干综合| 婷婷色影院| 色婷视频| 婷婷五月丁综合| 色色丁香婷婷五月天| 美女网黄| 久久久精久人妻| 日日夜夜天天| 日本va欧美va欧美精品88| 成人免费120分钟啪啪| 日本不卡中文字幕| 五月婷婷中文网| 国产欧美婷婷| 97碰人人操| 丁香五月激情婷婷| 久久久久久丁香五月| 人人爱人人添| 婷婷五月天激情电影| 97自拍视频在线| 色婷婷成人做爰A片免费看网站 | 五月 丁香 欧美| 精品无码视频| 天堂久久性| www.色婷婷.com| 久久亭亭电影| 婷婷色五月综合丁香| 激情综合色播| 99国产精品白浆在线观看免费| 欧美日韩国产一二区| 婷婷久久五月| 色情五月综合婷婷| 久久小说| a网站免费观看| 色色色色色网站| 色五月亚洲| 97操| 婷婷综合伊人丁香| 久久九九免费视频| 国产午夜精品一区二区| 丁香五月天天高清在线| 曰韩少妇内射免费播放| 久久久性爱网| 欧美日韩成人高清在线| 亚州激情九月| 丁香婷婷五月| 免费在线观看av网站| 九九家庭影院| 午夜69成人做爰视频| www.久久| 超碰国产在线| 婷婷五六月丁香| 综合激情站| 91在线日本| 能直接看的av网站| av电影在线播放| 色婷婷五月视频| 久久精品日| 99视频这里只有精品10| 婷婷五月天丁香综合网| 思思久久99热只有频精品66| 天天射综合网夜夜操| 色色色婷婷五月天| WWW.桔色成人.COM| 久久婷婷内射| 亚洲av骚货| 国产五月丁香在线| 日本不卡高字幕在线2019| 色的色综合| 中文字幕欧美精品久久| 丁香五月婷婷五月| 91热久久| 狠狠干最新地址| 色色色免费视频| 婷婷午夜精品久久久| 99热这里只有精品22| 丁香婷婷综合五月天| 丁香六月婷婷激情| 99热这里只有精品1025| 蜜臀av无码久久久久久久久| 九九精品免费视频99| 99热免费| 天天干,噜噜色,狠狠色| 操操日韩| 狠狠精品干练久久久无码中文字幕 | 免费婷婷| 天天日日| 欧美99热| 色婷婷中文在线| 久久在线人妻| 综激情网| 久久久99精品免费观看| 五月色网| 99碰网站| 天天色粽合合合合合合合| 丁香五月精品| 5月婷婷性视频| 99精品视频免费在线播放| 婷婷涩涩五月天| 99久久五月婷婷| 极品人妻VIDEOSSS人妻| 狠狠狠狠狠操| 亚洲av网站| 五月天激情综合在线| 丝袜激情网| 色婷婷亚洲综合av| 色在线免费观看| 亚州在线中文字幕| 五月天成人综合| 99re免费精品视频| 成人亚洲精品| 久综合网| 五月丁香综合激情| 97操操操| 五月丁香啪啪| 色五月在线观看| 欧美色色色色色| 日韩成人电影在线播放| 99热这里只有精品9| 亚洲热久久| 噜噜狠狠色综无码久久合欧美| www.av骚货| 婷婷五月伦理| 狠狠草狠狠草| 夜夜躁婷婷AV| 亚洲第一综合| 天天碰夜夜操| 奇米四色五月天| 免费AV在线| 91丨九色丨国产打屁股| 六月色婷婷色| 99re久热只有精品6在线直播| 色综合播放| 婷婷五月视屏| 亚洲在线操| A久久| 国产av第一专区| 久久久五月婷婷| 丁香五月婷婷深爱综合激情| 天天艹夜夜爽| 91干在线| 国产亚洲AV人片在线| www.综合久久| 性爱在线播放av| 99精品网| 国产欧美熟妇另类久久久| 精品欧美一区二区三区久久久| 最新日韩AV中文字幕| 天天日日夜夜爽| 丁香五月激情综合| 五月婷婷久草| 思思99精品视频在线观看| 丁香五月激情婷婷婷婷在线观看| 人妻少妇色综合| 国产精品国产| 五月花婷婷丁香| 99综合网| 99欧美精品99日本精品| 五月熟妇婷婷久久| 丁香婷婷六月天| 婷婷五月天大香蕉在线视频观看| 婷婷伊人无码| 大香蕉99热| 欧美婷婷综合| 深爱激情网综合| 色婷婷成人做爰A片免费看网站| 91狠狠色色丁香婷婷综合久久| 激情婷婷综合五月少妇| www.狠狠操| 欧美99| 五月丁香色婷婷色| 欧在线一区| WWW.开心五月天.COM| 欧美精品99久久久| 久久久久妻| 色五月婷婷久久| 日韩狠狠色| 五月丁香六月婷婷久久| 五月天婷婷无码| 五月婷婷精品视频| 激情内射人妻1区2区3区| 久久99这里| 99在线精品观看99| 天天在线久久综合 | 亚洲精品久久久久久久久久吃药| 欧美成性色| 99在线精品免费视频| 深爱五月综合网| 亚洲色婷婷| 亚洲五月婷天天操| 天天狠狠综合精区| 99热九九热| 99综合自拍| 97色婷| 丁香色六月婷婷| 98国产精品综合一区二区三区| 管管補管管紱| 五月婷九月| 日本高清久| 色综合色综合色综合高潮| 婷婷伊人久久无码色五月| 99视频这里有精品免费观看| 亚洲超级碰| 国产做爰视频免费播放| 人人看人人草人人摸| 精品人妻伦九区久久AAA片| 第四色婷婷五月| 亚洲综合一区二区| 91欧美| 婷婷五月丁香欧洲| 久久婷婷欧美| 亚洲精品成人| 色欲色香综合网站| 99人人干| 色呦呦美女| 狠狠激情五月天| 欧洲婷婷五月天| 五月丁香啪啪综合| 99re视频在线精品| 激情五月婷婷综合| 五月婷成人网| 五月丁香六月情亚洲| 久久久久激情网| 丁香婷婷五月| 玖玖激情网| 97影院一级片| 五月丁香六月情亚洲| 国产激情在线| 五月激情影院| 国产超碰av| 99热乎| 精品久久艹| 色五月丁香五月| 97色色视频| 丁香五月之久操视频| 高潮毛片又色又爽免费| 99九九中文字幕视频| 色五月婷婷色| 五月丁香六月在线| 99热综合在线| 91爱啪啪| 综合 激情 婷婷| 这里只有精品视频99| 九九这里只有精品| 婷婷综合五月天激情| 欧州婷婷五月天综合| 五月激情婷婷开心| 丁香香五月激情免费视频| 九九无码AV| 久久大香蕉| 成人欧美一区二区三区在线观看| 高清无码.com| 九九久久99精品免费观看www| 大香蕉75线| 中文AV网站| 操逼三区| 99热8| 色五月婷婷在线观看第一页舔| 大香蕉网 久久| 色婷婷久久天天性爱| xxxx五月激情| 99久久综合| 97福利视频| 美国少妇性做爰| 殴美日韩成人| 色色99色色| 一起草性爱不卡视频| 色啪综合| av中文在线| 成人AV片播放| 亚洲综合视频在线| 婷婷综合网在线| 狠狠爱五月婷婷| www.色婷婷| 热久91| 亚洲欧洲99| 国产无套精品一区二区| 亚洲人妻av| 丁香五月婷婷国产av| 九九亚洲无码| 五月天婷婷午夜丁香| 99激情视频| 国产亚洲精品久久久久久久久动漫 | 久久人妻精品| 天天综合网~91| 丁香婷婷色五月| 天天日综合| 北条麻妃九九九国产精品视频| 26UUU欧美激情一区二区| 狠色狠色综合久久| 色婷婷网| 91婷婷在线| 天天日天天爽| 日本在线wwww| 亚洲色综合性| 最近中文字幕2019视频1| 91精品婷婷国产综合| 精品少妇蜜臀91| 嫩草AV久久伊人妇女超级A| 五月久久网| 五月天播播中文字幕| 九九XX视频| 欧美性爱5月天天天看| av中文在线| rr天天操| www.色五月| 亚洲激情精品| 亚洲AV日韩在线观看| 五月综合影院| 色444综合网| 婷婷五月在线观看| 综合激情五月婷婷| 99热这里只有精品2| 五月丁香网av| 一级片操逼视频| 亚洲色情网站| www99在线观看视频| 五月成人网站| 五月天激情网页| 色婷亚洲五月丁香| 日本色色色| 99热只有精品在线观看| 激情婷婷视频在线| 婷婷爱综合| 激情五月天www| 人人色人人弄人人操| 日日骑夜夜撸| 免费视频WWW在线观看网站| 欧美天天干五月丁香| 九月色婷婷综合亚洲| 五月天婷婷綜合院| 久久综合伊人77777蜜臀| 开心五月色婷| 亚洲V国产V欧美V久久久久久| 五月丁香六月婷婷不卡免费无码 | 久久婷婷丁香六月天| 亚洲一区国产传媒| 日本无码专区| 婷婷性爱网| 婷婷五月天激情五月天| 91色五月| 婷婷伊人綜合| 一级操逼大片| 五月色综合| 伊人婷婷大香蕉| 丁香五月婷婷激情中文| 欧美丁香婷婷天天操| 色九月综合网| 天堂久久久久天堂网| 99热香港| 日韩在线99| 91九色在线视频| 777丁香六月青青草婷婷综合久月| 婷婷亚洲五月丁香综合在线 | 久久久99精品| 国产成人亚洲综合A∨婷婷| 五月婷婷中文| 久久精品国产精品| 亚洲中文字幕在线观看| 久久免费高| 五月激情射| 另类视频在线| 天天摸天天高潮天天爽| 五月丁香婷婷婷婷综合网| 天天婷婷天天| 亚洲激情网| 婷婷六月色| 欧美激情综合| 婷婷五月天综合亚洲| 婷婷丁香色五月天| 狠狠丁香| 五月丁香六月情亚洲| 精品99在线| 欧洲色| 亚洲AV网址| 99热这里是精品| 五月天社区| 丁香五月-激情综合| 日韩一级| 婷婷六月综合| 色色日韩| 婷婷六月五月天综合| 五月激情小说| 欧美成人精品A片免费一区99| 激情五月天婷婷| 五月色丁香婷婷综合| 久久看婷婷| 狠狠五月丁香色婷| 亚洲欧美一区二区三区爱爱动图| 国产婷婷综合在线免费视频| 99热国产免费| 69人人操人人爽| 丁香五月激情六月欧亚激情综合导航 | Aα在线免费观看| 婷婷激情五月综合基地| 亚洲激情网| 日本色频| 日韩成人网址| 色婷婷影视| 99热这里只有精品66| 亚洲激情AV| 色婷婷久久综合| 狠狠色色综合| 激情五月天伊人av| 91av无码| 99在线看片| 九九热视频精品999| 五月香蕉婷婷| 操骚货在线| 婷婷五月天六月综合| 日本99热| 色婷婷在线视频久| 婷婷丁香久久| 播五月开心婷婷欧美综合| 五月丁香六月欧美综合| 99热碰碰热| 亚州激情九月| 天堂二区| 国产精品激情AV久久久青桔| 亚洲色视频| 免费婷婷| 五月丁香色综合| 婷婷五月图片小说网| 69婷婷丁香午夜| 激情综合网络插| 丁香五月天AV在线| 亚洲AV日韩无码| 婷婷娌伦网| 天堂网色婷婷| 91综合网| 99热黄| 玖玖99婷婷| 狠狠精品干练久久久无码中文字幕| 婷婷成人视频| 99精品热| 亚洲不卡| 久久HD| 婷婷五月天奸女| 丁香婷婷九月| 丁香婷婷五月色成人网站| 六月综合婷婷开心伊人| 99视频在线精品免费观看2| 开心五月色婷婷综合开心网| 九九热在线观看视频网站| 国产欧美婷婷五月| 最新激情五月天| 五月天堂婷婷| 就是色婷婷五月亚洲色| 99狠狠色| 五月丁香无码| 五月丁香啪啪激情| 久9热| 久久之人妻| 色婷婷五月天亚洲| 婷婷激情综合无月| 激情五月亚洲综合网| 欧美成人网婷婷综合在线| 色色aⅤ網| 99热成人在线| 激情欧美丁香五月| 亚洲激情综合| 丁香色综合| 久99热| 91九九| 最新无毒无码AV| 中文字幕在线视频播放| 九月婷婷在线观看| 亚洲精品在线视频| 久久九九爽| 亚洲第一色色色| 色五月五月丁香| 婷婷五月天狠狠搞干| 五月婷婷六月丁香玖玖玫瑰91| 99ri精品在线| 高清无码视频网址| 北京熟妇搡BBBB搡BBBB| 亚洲三A| 亚洲成人无码免费| WWW免费视频碰碰碰碰| 日本久久高清| 亚洲综合丁香婷婷六月天| 婷婷综合色播网| 极品另类| 91啪啪视频| 色99最新网址| 激情五月天啪啪| 99这里只有精品视频在线| 成人性爱精品视频| 婷婷九月在线| 日本三级大片| 丁香五月婷婷高清| 97碰在线| 色婷婷色五月综合| 91超级碰在线视频| 国产精品大香蕉| 日日操无码| 婷婷久久五月天| 亚洲婷婷激情888精品久| 久草狼人| 99网| 97丁香五月| 亚洲熟妇AV综合网五月丁香伊人| 色XX综合网| 婷婷综合激情| 久草网大香视频| 日本本土色网第一区| 第四色五月天| 思思热在线| 激情五月综合久久| 狠狠狠人妻| 丁香婷婷色色| 丁香五月天堂婷婷| 日本综合色色| 久久思思精品| 五月丁香影院| 综合色网站| 天天拍久久| 九热视频| 99热 在线播放| 日韩五月天婷婷| 色色丁香婷婷综合| 五月婷婷婷色| 另类综合激情| 婷婷综合五月天| 丝袜熟女一区二区三区| 国产伊人五月天| 99re在线视频| 97操碰免费视频| 色婷婷五月基地在线| 五月婷婷与六月丁香图片激情| 综合五月激情| 大波美女VA网站| 99热99干| 伊人综合婷婷| 婷婷五月色亚洲| 99综合网| 激情婷婷色色| 亚洲成人av在线播放| 日本三级99人妇网站| 五五月丁香花激情综合网| 另类激情五月| 日韩无码乱轮| www色综合| 超碰国产在线播放| 干亚洲天堂| 色播五月婷婷| 久久婷婷五月丁香网| 狠狠综合网| 一起操 91N.com| 久久久精品人妻录| 国产午夜精品一区二区三区四区| 精品九九在线观看视频| 操久久网| 婷婷免费无马| 婷婷五月天丁香社区| 婷婷六月色情| 深爱激情五月婷婷| 99热10在线高清播放| 亚州日本欧州韩美高青高潮一| 色婷婷视频| 五月天婷婷基地丁香| 天天干 夜夜爽| 久久九九爽| 99自拍视频在线| AV网站免费在线| 久久婷婷婷| 99九九在线精品热动漫| 激情综合五月天| 激情av在线| 日韩 中文 欧美| 欧美 日韩 成人在线| 色九月婷婷综合| 99热老司机| 狠狠草狠狠草| 五月丁香美女| 色婷婷视频| 婷婷永久在线| a免费在线| 99久在线精品99re8| 波多野结衣AV无码Porn|