99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

智慧景區(qū)邊緣計(jì)算落地實(shí)踐:架構(gòu)設(shè)計(jì)、算力選型與多業(yè)態(tài)數(shù)據(jù)融合

智慧景區(qū)邊緣計(jì)算落地實(shí)踐:架構(gòu)設(shè)計(jì)、算力選型與多業(yè)態(tài)數(shù)據(jù)融合 去年年中我接手了一個(gè)智慧景區(qū)項(xiàng)目主題就是“邊緣計(jì)算與多業(yè)態(tài)融合”。一開始我覺得這名字有點(diǎn)大——景區(qū)嘛無非就是閘機(jī)、廣播、監(jiān)控、停車攏共也就那么幾個(gè)系統(tǒng)??烧娴确桨冈u審和現(xiàn)場部署跑下來我才意識到智慧景區(qū)真正難的不是某一個(gè)系統(tǒng)怎么建而是散落在各個(gè)業(yè)態(tài)里的數(shù)據(jù)怎么在邊緣側(cè)被處理、被打通、被復(fù)用。這篇文章就把這個(gè)項(xiàng)目從設(shè)計(jì)、選型、部署到踩坑的完整過程拆開講全是實(shí)操層面的東西希望能給正在做或者準(zhǔn)備做類似項(xiàng)目的朋友一些參考。適合看這篇內(nèi)容的人我覺得有三類一是負(fù)責(zé)景區(qū)、園區(qū)、校園這類多系統(tǒng)場景的甲方信息化人員需要理清楚邊緣計(jì)算的落地邊界二是做系統(tǒng)集成的項(xiàng)目經(jīng)理或技術(shù)負(fù)責(zé)人看看別人是怎么處理算力分配、網(wǎng)絡(luò)規(guī)劃和多業(yè)態(tài)數(shù)據(jù)聯(lián)動的三是剛接觸邊緣計(jì)算、想找一個(gè)真實(shí)業(yè)務(wù)場景入門的開發(fā)者。文章里不會堆概念而是把當(dāng)時(shí)我們?yōu)槭裁催@么選、實(shí)測數(shù)據(jù)怎么樣、哪些坑必須躲開都一條條講清楚。1. 整體設(shè)計(jì)與思路拆解為什么智慧景區(qū)必須引入邊緣計(jì)算1.1 智慧景區(qū)到底在“智慧”什么很多人一提智慧景區(qū)第一反應(yīng)就是“裝攝像頭、搞人臉識別、上大屏指揮中心”。這個(gè)理解沒有錯(cuò)但是太淺了。真正從運(yùn)營角度看景區(qū)要解決的“智慧”問題其實(shí)非常具體游客還沒到景區(qū)門口停車場還剩多少位子能不能在手機(jī)上提前看到某個(gè)熱門打卡點(diǎn)人開始聚集了要不要啟動限流廣播和導(dǎo)視牌怎么聯(lián)動餐飲、零售、二銷這些業(yè)態(tài)怎么根據(jù)實(shí)時(shí)客流做備貨和人力調(diào)度游客從進(jìn)門到出門在哪個(gè)區(qū)域停留最久、對什么項(xiàng)目興趣最大這些數(shù)據(jù)能不能反哺運(yùn)營。這些問題背后都有一個(gè)共同的痛點(diǎn)數(shù)據(jù)孤島。停車系統(tǒng)管停車票務(wù)系統(tǒng)管票務(wù)安防系統(tǒng)管監(jiān)控商業(yè)系統(tǒng)管收銀各自為政數(shù)據(jù)格式不統(tǒng)一實(shí)時(shí)性也參差不齊。如果要把這些數(shù)據(jù)全部匯到一個(gè)中心平臺再分析不僅鏈路長網(wǎng)絡(luò)帶寬壓力也大而且很多場景根本等不起那個(gè)延遲。所以這個(gè)項(xiàng)目從一開始就定了一個(gè)基調(diào)不做“大而全”的純中心化平臺而是把一部分計(jì)算能力下沉到景區(qū)現(xiàn)場在靠近數(shù)據(jù)產(chǎn)生的地方先做處理再和云端做協(xié)同。這就是邊緣計(jì)算在這個(gè)場景里最核心的存在意義。1.2 三個(gè)繞不開的現(xiàn)實(shí)問題在方案調(diào)研階段我們列了幾次現(xiàn)場走訪把景區(qū)實(shí)際運(yùn)營里遇到的硬問題整理了出來發(fā)現(xiàn)有三個(gè)問題是繞不開的第一是實(shí)時(shí)性。停車場的余位信息、熱門景點(diǎn)的擁擠度、游客的異常行為比如翻越護(hù)欄、靠近危險(xiǎn)水域這些都需要在秒級甚至毫秒級做出反應(yīng)。如果所有數(shù)據(jù)都傳到幾十公里外的云機(jī)房哪怕網(wǎng)絡(luò)狀況再好一個(gè)來回也要幾十毫秒再加上云端排隊(duì)處理整體的鏈路延遲很難保證。第二是帶寬成本。一個(gè)中型景區(qū)光視頻監(jiān)控點(diǎn)位就有幾十上百路按1080P、4Mbps碼率來算100路并發(fā)就是400Mbps的持續(xù)帶寬。如果所有視頻都是原始碼流直傳云端先不說能不能扛得住光是專線費(fèi)用就是每年幾十萬甚至上百萬級別這在中型景區(qū)項(xiàng)目上完全不現(xiàn)實(shí)。第三是可靠性。景區(qū)節(jié)假日大客流時(shí)現(xiàn)場網(wǎng)絡(luò)經(jīng)常不穩(wěn)定而且一旦中心機(jī)房或?qū)>€出問題如果所有智能化設(shè)備都變成“離線狀態(tài)”連最基本的閘機(jī)通行、車輛識別、客流統(tǒng)計(jì)都做不了那運(yùn)營就完全癱瘓了。系統(tǒng)必須在斷網(wǎng)或者網(wǎng)絡(luò)抖動的極端情況下依然能保持核心功能可用。這三個(gè)問題指向同一個(gè)技術(shù)方向把算力放到離現(xiàn)場最近的地方。也就是說在景區(qū)機(jī)房、弱電間、甚至攝像頭旁邊部署邊緣計(jì)算節(jié)點(diǎn)讓視頻解析、結(jié)構(gòu)化數(shù)據(jù)提取、事件判斷這些工作在邊緣完成云端只負(fù)責(zé)模型訓(xùn)練、全局調(diào)度和跨業(yè)態(tài)的數(shù)據(jù)分析。1.3 為什么不是“全上云”而是“邊云協(xié)同”可能有人會問“那干脆所有東西都放本地不就行了還要云端干嘛”這里需要解釋清楚邊緣計(jì)算和云計(jì)算的邊界。我的理解是邊緣計(jì)算擅長的是“快、輕、本地”的任務(wù)。比如車輛車牌識別、人臉比對、客流統(tǒng)計(jì)、設(shè)備狀態(tài)采集這些任務(wù)模型相對固定、對實(shí)時(shí)性要求高、數(shù)據(jù)量又大適合放在邊緣節(jié)點(diǎn)上持續(xù)跑。而云計(jì)算擅長的是“慢、重、全局”的任務(wù)。比如模型訓(xùn)練、跨業(yè)態(tài)的數(shù)據(jù)挖掘、游客畫像分析、財(cái)務(wù)報(bào)表生成這些任務(wù)需要大量歷史數(shù)據(jù)和全局視角放云端更合適。所以正確的架構(gòu)不是二選一而是分層協(xié)作。邊緣側(cè)做推理云端做訓(xùn)練和長周期分析邊緣側(cè)負(fù)責(zé)實(shí)時(shí)響應(yīng)云端負(fù)責(zé)策略下發(fā)和模型更新。用一個(gè)生活化的比喻邊緣計(jì)算像是門店的店長能現(xiàn)場處理突發(fā)情況、安排員工、快速決策云端像是總部負(fù)責(zé)制定統(tǒng)一的運(yùn)營策略、分析整體經(jīng)營數(shù)據(jù)、定期給店長做培訓(xùn)。店長不能事事等總部指令總部也不需要盯著每個(gè)門店的每一個(gè)動作。2. 核心細(xì)節(jié)解析與實(shí)操要點(diǎn)邊緣計(jì)算節(jié)點(diǎn)怎么選、怎么部署2.1 算力選型從“能跑算法”到“能跑多少路算法”邊緣計(jì)算節(jié)點(diǎn)是整個(gè)系統(tǒng)的基礎(chǔ)設(shè)施選型上我們踩過不少彎路。一開始我們想省錢準(zhǔn)備用普通X86工控機(jī)加CPU跑推理結(jié)果一測YOLOv5s模型在1080P分辨率下CPU推理一幀要300到500毫秒一路視頻都跑得費(fèi)勁更別提并發(fā)處理多路。后來換了一臺帶GPU的服務(wù)器推理速度確實(shí)上來了但成本也上來了而且體積大、功耗高景區(qū)現(xiàn)場的弱電間不一定放得下。最后我們走的路線是“混合部署”核心邊緣節(jié)點(diǎn)用專業(yè)AI邊緣計(jì)算設(shè)備比如NVIDIA Jetson系列的Orin NX或者Orin Nano在算力和功耗之間取了一個(gè)平衡點(diǎn)對于只需要做數(shù)據(jù)匯聚和協(xié)議轉(zhuǎn)換的場景用普通的X86迷你主機(jī)或者ARM開發(fā)板就夠。這樣既保證了關(guān)鍵視頻分析任務(wù)的性能又不會在非核心節(jié)點(diǎn)上浪費(fèi)成本。關(guān)鍵是要明確一個(gè)指標(biāo)單節(jié)點(diǎn)能跑多少路視頻流。這直接決定了節(jié)點(diǎn)數(shù)量和預(yù)算。以我們用的Orin NX 16GB版本為例實(shí)測跑YOLOv5s模型、輸入分辨率1920×1080、幀率控制在10到15FPS景區(qū)客流統(tǒng)計(jì)不需要25FPS滿幀率單節(jié)點(diǎn)大約能穩(wěn)定處理8到12路視頻流同時(shí)跑一個(gè)輕量級的人臉檢測模型和車牌識別模型。這個(gè)數(shù)據(jù)在項(xiàng)目初期心里一定要有數(shù)否則規(guī)劃節(jié)點(diǎn)數(shù)量時(shí)很容易拍腦袋后期加設(shè)備又得改網(wǎng)絡(luò)拓?fù)洹_x型時(shí)還要注意算力冗余。邊緣節(jié)點(diǎn)不僅要跑當(dāng)前業(yè)務(wù)還要考慮后續(xù)算法模型的迭代新模型往往更復(fù)雜、更吃顯存。我們的經(jīng)驗(yàn)是預(yù)留30%到50%的算力余量否則模型一升級整條鏈路的推理速度都會被拖垮。2.2 三層組網(wǎng)與硬件部署細(xì)節(jié)邊緣計(jì)算節(jié)點(diǎn)在景區(qū)不是單點(diǎn)存在的而是要形成一張有層次的計(jì)算網(wǎng)絡(luò)。我們項(xiàng)目最終采用的是“中心機(jī)房—匯聚節(jié)點(diǎn)—邊緣盒子”三層組網(wǎng)架構(gòu)中心機(jī)房層放核心的邊緣計(jì)算服務(wù)器和存儲設(shè)備負(fù)責(zé)全局的視頻解析任務(wù)調(diào)度、模型版本管理、數(shù)據(jù)匯聚以及和云端平臺的對接。這里相當(dāng)于邊緣計(jì)算網(wǎng)絡(luò)的“大腦”匯聚節(jié)點(diǎn)層在景區(qū)幾個(gè)主要區(qū)域比如游客中心、核心景點(diǎn)片區(qū)、停車場部署匯聚節(jié)點(diǎn)負(fù)責(zé)本區(qū)域多個(gè)邊緣盒子的數(shù)據(jù)匯總、協(xié)議轉(zhuǎn)換和本地緩存同時(shí)跑一些區(qū)域級的聯(lián)動規(guī)則邊緣盒子層就近部署在攝像頭附近或弱電間里直接接入幾路攝像頭的視頻流做本地推理把結(jié)構(gòu)化結(jié)果比如“檢測到1個(gè)人、耗時(shí)32毫秒”上報(bào)給匯聚節(jié)點(diǎn)。這樣分層的好處是單個(gè)邊緣盒子掛了只影響局部幾路視頻匯聚節(jié)點(diǎn)掛了邊緣盒子依然能獨(dú)立工作把數(shù)據(jù)緩存在本地網(wǎng)絡(luò)恢復(fù)后再補(bǔ)傳。整個(gè)系統(tǒng)的容錯(cuò)能力比“所有設(shè)備直連中心”強(qiáng)很多。部署時(shí)有個(gè)容易被忽視的細(xì)節(jié)供電和散熱。景區(qū)現(xiàn)場的弱電間往往條件比較差沒有空調(diào)夏天溫度能到40度以上。Jetson設(shè)備在高負(fù)載下發(fā)熱量很大如果散熱不好芯片會主動降頻推理速度直接掉一半。我們后來在關(guān)鍵節(jié)點(diǎn)加裝了工業(yè)級的主動散熱風(fēng)扇同時(shí)把設(shè)備放在通風(fēng)位置問題才得到解決。另外所有邊緣節(jié)點(diǎn)必須接UPS或者帶電池的電源模塊防止瞬時(shí)斷電導(dǎo)致系統(tǒng)文件和模型損壞。2.3 帶寬與存儲容量測算實(shí)例這部分我拿實(shí)際數(shù)據(jù)來算一筆賬大家以后做方案可以直接套用。假設(shè)景區(qū)有100路1080P攝像頭編碼格式H.264單路碼率4Mbps。全量上云時(shí)中心帶寬需求 100路 × 4Mbps 400Mbps。這還沒算峰值的網(wǎng)絡(luò)抖動和冗余在運(yùn)營商那邊至少要申請500M以上的專線成本非??捎^。邊緣處理后每路攝像頭不再傳原始視頻流而是傳結(jié)構(gòu)化數(shù)據(jù)。比如每秒鐘上報(bào)一次檢測結(jié)果一條JSON數(shù)據(jù)大約2KB100路就是200KB/s換算成帶寬只有1.6Mbps。再加上偶爾回傳的事件短視頻片段比如10秒的報(bào)警錄像總體帶寬需求也就在30到50Mbps左右。降了一個(gè)數(shù)量級。存儲方面差別更大。如果100路攝像頭7×24小時(shí)全量錄像按4Mbps碼率算 單日存儲量 100路 × 4Mbps × 86400秒 ÷ 8 ÷ 1024 ≈ 4.1TB 7天存儲量 ≈ 28.8TB。這個(gè)數(shù)據(jù)量對本地機(jī)房來說不是不能做但長期存儲成本很高。而采用邊緣事件驅(qū)動存儲后只保存“有事件”的片段。比如一臺設(shè)備每天平均觸發(fā)150次事件每次存10秒視頻單路一天產(chǎn)生的存儲量約為 150 × 10秒 × 4Mbps ÷ 8 ≈ 750MB100路一天約75GB7天約525GB。壓縮到原來的不到2%。這些片段還可以只保留7到30天配合云端存儲做更長時(shí)間的歷史追溯。這就是邊緣計(jì)算在成本賬上最直接的體現(xiàn)。實(shí)時(shí)性提升是“質(zhì)”的變化但帶寬和存儲的節(jié)省是“量”的變化甲方看方案時(shí)對這種量化對比非常買賬。3. 實(shí)操過程與核心環(huán)節(jié)實(shí)現(xiàn)多業(yè)態(tài)融合的數(shù)據(jù)架構(gòu)和場景落地3.1 從“各業(yè)態(tài)自掃門前雪”到“One ID一張網(wǎng)”多業(yè)態(tài)融合是整個(gè)項(xiàng)目里最考驗(yàn)數(shù)據(jù)能力的部分。第一個(gè)要解決的問題是怎么讓不同業(yè)態(tài)的數(shù)據(jù)能“對上號”。景區(qū)里的游客在停車場系統(tǒng)里是一個(gè)車牌號在票務(wù)系統(tǒng)里是一張門票編碼在餐飲消費(fèi)時(shí)是一筆訂單在酒店入住時(shí)是一條入住記錄。這些ID本來是割裂的無法知道“這個(gè)正在餐廳消費(fèi)的人是不是那個(gè)早上九點(diǎn)停好車進(jìn)園的人”。要實(shí)現(xiàn)多業(yè)態(tài)融合必須先做統(tǒng)一ID。我們最終采用了“One ID”體系以游客入園時(shí)的人臉特征或手機(jī)號為核心標(biāo)識在入園那一刻生成一個(gè)全局唯一的游客ID。這個(gè)ID貫穿停車、門票、消費(fèi)、住宿、互動體驗(yàn)等所有環(huán)節(jié)。具體做法是在票務(wù)閘機(jī)上做人臉綁定在停車場出入口做車牌和場內(nèi)支付的綁定在餐飲零售端通過小程序掃碼將訂單關(guān)聯(lián)到游客ID。邊緣計(jì)算節(jié)點(diǎn)在這里承擔(dān)了關(guān)鍵的實(shí)時(shí)關(guān)聯(lián)工作閘機(jī)識別到人臉后邊緣節(jié)點(diǎn)立刻把這個(gè)人臉特征和游客ID映射關(guān)系同步到其他業(yè)態(tài)的邊緣節(jié)點(diǎn)后續(xù)消費(fèi)行為就能被實(shí)時(shí)歸集到同一個(gè)ID下。這套體系的建設(shè)難度不在技術(shù)而在業(yè)務(wù)協(xié)同。因?yàn)橥\?、餐飲、票?wù)往往是不同供應(yīng)商提供的系統(tǒng)有的甚至有獨(dú)立的數(shù)據(jù)庫。我們花了很多時(shí)間做接口聯(lián)調(diào)推動各方開放數(shù)據(jù)字段統(tǒng)一時(shí)間格式、設(shè)備編碼規(guī)則、事件類型定義。現(xiàn)在回頭看這個(gè)“數(shù)據(jù)標(biāo)準(zhǔn)化”工作比任何技術(shù)選型都重要它是后面所有融合場景的基礎(chǔ)。3.2 一條典型數(shù)據(jù)鏈路的完整拆解拿景區(qū)里最普通的“客流統(tǒng)計(jì)與擁堵預(yù)警”場景來拆解大家能更清楚邊緣計(jì)算在整條鏈路里扮演什么角色。第一步攝像頭采集視頻流通過RTSP協(xié)議推給邊緣盒子。邊緣盒子里的視頻解碼模塊把視頻幀解碼成YUV數(shù)據(jù)送入AI推理引擎。第二步推理引擎運(yùn)行人形檢測模型在每一幀畫面中識別出人體的位置框。這里有個(gè)細(xì)節(jié)不是每幀都做檢測而是按一定幀率采樣比如每秒處理5到10幀。這樣做既能保證統(tǒng)計(jì)精度又能大幅降低算力消耗。第三步邊緣節(jié)點(diǎn)的跟蹤模塊對不同幀之間的同一目標(biāo)做關(guān)聯(lián)也就是目標(biāo)跟蹤算法判斷這個(gè)人是從哪個(gè)方向走過來的、在這片區(qū)域停留了多久。這個(gè)數(shù)據(jù)比單純的人頭計(jì)數(shù)更有價(jià)值可以直接用于分析高峰時(shí)段的客流走向。第四步結(jié)構(gòu)化結(jié)果通過MQTT協(xié)議上報(bào)給匯聚節(jié)點(diǎn)匯聚節(jié)點(diǎn)匯總本區(qū)域多路視頻的統(tǒng)計(jì)結(jié)果實(shí)時(shí)計(jì)算出區(qū)域人數(shù)、密度、增長趨勢并和預(yù)設(shè)的閾值做對比。一旦超過閾值自動觸發(fā)預(yù)警廣播系統(tǒng)播放疏導(dǎo)提示導(dǎo)視大屏顯示擁堵信息同時(shí)后臺推送消息給現(xiàn)場運(yùn)營人員。第五步每天結(jié)束后邊緣節(jié)點(diǎn)把當(dāng)日客流摘要、分時(shí)段駐留數(shù)據(jù)等同步到云端云端再結(jié)合餐飲、零售的銷售數(shù)據(jù)生成“客流轉(zhuǎn)化率”之類的經(jīng)營分析報(bào)表。這條鏈路里最關(guān)鍵的設(shè)計(jì)原則是能下沉的處理盡量下沉云端做不了實(shí)時(shí)決策邊緣側(cè)也絕不做長周期分析。分工明確各司其職整條鏈路跑起來才穩(wěn)。3.3 三個(gè)典型融合場景復(fù)盤場景一節(jié)假日大客流的“停車—入園—餐飲”聯(lián)動。以前節(jié)假日停車場滿了門衛(wèi)只能拿著對講機(jī)喊“別放車進(jìn)來了”?,F(xiàn)在停車場入口的邊緣節(jié)點(diǎn)實(shí)時(shí)統(tǒng)計(jì)剩余車位數(shù)據(jù)同步到票務(wù)系統(tǒng)當(dāng)剩余車位低于15%時(shí)自動觸發(fā)限流策略線上購票頁面顯示“車位緊張”提示引導(dǎo)游客錯(cuò)峰出行。同時(shí)餐飲業(yè)態(tài)會收到大客流預(yù)警中央廚房根據(jù)預(yù)測入園人數(shù)提前備餐。這套聯(lián)動上線后的第一個(gè)黃金周停車場排隊(duì)時(shí)長縮短了將近40%餐飲浪費(fèi)率也明顯下降。場景二園區(qū)“一碼游”跨業(yè)態(tài)閉環(huán)。游客通過小程序掃碼入園后這個(gè)碼就綁定到了One ID。在景區(qū)內(nèi)騎共享代步車、買小吃、玩漂流項(xiàng)目都可以直接掃碼消費(fèi)記錄實(shí)時(shí)同步到邊緣節(jié)點(diǎn)再由邊緣節(jié)點(diǎn)匯總到云端的經(jīng)營分析平臺。這樣做的好處是游客不需要在不同系統(tǒng)中分別注冊和支付體驗(yàn)順暢景區(qū)也能拿到完整的消費(fèi)路徑分析哪些項(xiàng)目是“引流”的、哪些是“賺錢”的。場景三游客動線優(yōu)化。我們在景區(qū)各個(gè)岔路口和熱門點(diǎn)位部署了邊緣盒子用視覺算法計(jì)算每個(gè)方向的人流量。經(jīng)過一周的數(shù)據(jù)積累發(fā)現(xiàn)某個(gè)網(wǎng)紅打卡點(diǎn)下午2點(diǎn)到4點(diǎn)嚴(yán)重?fù)頂D但旁邊的文化展館卻非常冷清。于是運(yùn)營方臨時(shí)調(diào)整了導(dǎo)視系統(tǒng)在擁擠時(shí)間點(diǎn)引導(dǎo)部分游客先去展館同時(shí)展館門口增加了一個(gè)快閃活動。數(shù)據(jù)顯示展館的客流提升了66%網(wǎng)紅點(diǎn)的擁擠指數(shù)下降了約35%。這種實(shí)時(shí)引導(dǎo)和動態(tài)調(diào)整只有在數(shù)據(jù)能夠快速流轉(zhuǎn)、及時(shí)反饋的情況下才能實(shí)現(xiàn)。4. 常見問題與排查技巧實(shí)錄4.1 視頻流反復(fù)斷連故障排查全過程這個(gè)坑我們花了一整天才定位出來非常有代表性?,F(xiàn)象是某個(gè)邊緣盒子上有幾路視頻分析任務(wù)總是運(yùn)行一兩個(gè)小時(shí)就退出重啟后又能正常運(yùn)行一段時(shí)間然后再次退出。一開始以為是程序崩潰查看日志發(fā)現(xiàn)是拉流模塊報(bào)錯(cuò)提示RTSP連接超時(shí)。我們就去查攝像頭網(wǎng)絡(luò)發(fā)現(xiàn)攝像頭和邊緣盒子之間的交換機(jī)端口有丟包現(xiàn)象。更換了網(wǎng)線、光模塊之后丟包問題解決了但任務(wù)還是會偶爾退出。后來把問題范圍縮小到“并發(fā)連接數(shù)”。原來那批攝像頭是某廠商的入門級型號每路攝像頭最多只允許2路RTSP并發(fā)連接。邊緣盒子的拉流模塊重連時(shí)舊連接沒有完全釋放新連接又建立起來超過了攝像頭的并發(fā)限制導(dǎo)致后續(xù)連接全部失敗。找準(zhǔn)原因后我們把拉流模塊改成了單連接復(fù)用——用一路RTSP連接同時(shí)獲取視頻幀和時(shí)間戳并加上斷線重連的退避算法第一次重連等5秒第二次10秒逐步遞增到60秒上限問題才徹底不再出現(xiàn)。這次排查給我的教訓(xùn)是邊緣計(jì)算項(xiàng)目里鏈路中任何一個(gè)“犄角旮旯”的小設(shè)備都可能成為瓶頸選型時(shí)不能只看中心設(shè)備攝像頭、交換機(jī)這些末端設(shè)備同樣要納入測試范圍。4.2 常見問題速查表與避坑建議問題現(xiàn)象可能原因處理建議邊緣盒子推理速度越來越慢散熱不良導(dǎo)致芯片降頻檢查風(fēng)扇和通風(fēng)環(huán)境必要時(shí)加裝主動散熱視頻分析任務(wù)頻繁退出RTSP并發(fā)連接數(shù)超限做單連接復(fù)用加斷線重連退避策略多個(gè)模型同時(shí)運(yùn)行顯存不足模型加載占用過多顯存用TensorRT優(yōu)化模型減少輸入分辨率按優(yōu)先級卸載不常用模型邊緣節(jié)點(diǎn)上報(bào)數(shù)據(jù)時(shí)間混亂設(shè)備未同步NTP時(shí)間在匯聚節(jié)點(diǎn)統(tǒng)一配置NTP服務(wù)器所有設(shè)備統(tǒng)一時(shí)間源邊緣設(shè)備離線但業(yè)務(wù)正常網(wǎng)絡(luò)抖動或設(shè)備重啟在邊緣盒子本地做數(shù)據(jù)緩存恢復(fù)后自動補(bǔ)傳模型識別準(zhǔn)確率下降場景光線變化或模型過時(shí)定期采集真實(shí)場景數(shù)據(jù)更新訓(xùn)練集并熱更新模型避坑建議方面有幾條是花真金白銀買來的經(jīng)驗(yàn)。第一不要把AI識別做成全鏈路串行。有些團(tuán)隊(duì)圖省事把“檢測—跟蹤—屬性識別—事件判斷”全寫在一個(gè)流程里一個(gè)環(huán)節(jié)慢了整條鏈路都被拖住。正確做法是解耦每一路視頻一個(gè)獨(dú)立進(jìn)程各模塊之間用消息隊(duì)列傳遞數(shù)據(jù)出問題只影響單路不會“一粒老鼠屎壞了一鍋湯”。第二不要上來就想搞“全業(yè)態(tài)大中臺”。數(shù)據(jù)打通是漸進(jìn)的過程先選兩三個(gè)業(yè)務(wù)關(guān)聯(lián)度最高、收益最明顯的場景跑通比如停車加票務(wù)、票務(wù)加餐飲跑順了再往更多業(yè)態(tài)復(fù)制。我們項(xiàng)目里最先只做了停車和票務(wù)的聯(lián)動穩(wěn)定運(yùn)行了一個(gè)月后才逐步擴(kuò)展這樣風(fēng)險(xiǎn)最小。第三邊緣節(jié)點(diǎn)一定要做可觀測性。給每個(gè)節(jié)點(diǎn)加統(tǒng)一的狀態(tài)上報(bào)機(jī)制包括CPU占用、內(nèi)存占用、GPU利用率、推理耗時(shí)、任務(wù)狀態(tài)、網(wǎng)絡(luò)連接數(shù)等指標(biāo)。沒有這些數(shù)據(jù)出了問題只能一臺臺設(shè)備去登服務(wù)器查效率極低而且很可能等你趕到現(xiàn)場問題已經(jīng)過去了。5. 從智慧景區(qū)延伸出去邊緣計(jì)算在校園物聯(lián)網(wǎng)場景的實(shí)踐參考做完景區(qū)項(xiàng)目后我又參與了一個(gè)校園物聯(lián)網(wǎng)設(shè)備數(shù)據(jù)上云的項(xiàng)目發(fā)現(xiàn)很多經(jīng)驗(yàn)是可以直接平移過去的。校園場景和景區(qū)有很強(qiáng)的相似性設(shè)備種類多門禁、監(jiān)控、水電表、照明、多媒體教室設(shè)備數(shù)據(jù)產(chǎn)生分散實(shí)時(shí)性要求高而且中心帶寬有限。比如校園宿舍的用電監(jiān)測如果所有電表的數(shù)據(jù)都直接傳云平臺一方面海量高頻采集數(shù)據(jù)會占用大量帶寬另一方面對異常用電比如違規(guī)使用大功率電器的檢測如果依賴云端延遲會很不可控。按照景區(qū)項(xiàng)目的思路我們在一棟宿舍樓部署了一個(gè)邊緣計(jì)算節(jié)點(diǎn)電表數(shù)據(jù)先匯聚到節(jié)點(diǎn)上節(jié)點(diǎn)用規(guī)則引擎加輕量級算法做本地判斷只有異常事件和每天一次的匯總數(shù)據(jù)才上云。這樣既保證了用電安全預(yù)警的實(shí)時(shí)性又把中心平臺的存儲和計(jì)算壓力降了下來。再比如校園里的攝像頭資源。很多高校有幾千路攝像頭學(xué)校保衛(wèi)處最關(guān)心的不是普通場景的錄像存儲而是異常事件如打架、闖入、物品遺留的實(shí)時(shí)發(fā)現(xiàn)。邊緣節(jié)點(diǎn)直接在源頭做視頻結(jié)構(gòu)化把“有異?!钡姆昼娂壠瓮扑偷奖Pl(wèi)處大屏傳統(tǒng)的“大海撈針”式回放就變成了“實(shí)時(shí)精準(zhǔn)”式響應(yīng)。這個(gè)思路和景區(qū)項(xiàng)目里的事件驅(qū)動存儲如出一轍。從技術(shù)架構(gòu)上看景區(qū)和校園邊緣計(jì)算項(xiàng)目的核心邏輯是一致的感知設(shè)備在末端產(chǎn)生數(shù)據(jù)邊緣節(jié)點(diǎn)做實(shí)時(shí)處理和本地決策云平臺做模型訓(xùn)練和全局管理。區(qū)別只在于業(yè)務(wù)場景的適配——景區(qū)關(guān)注客流和消費(fèi)校園關(guān)注安全和管理。這也說明邊緣計(jì)算作為一種技術(shù)底座它的價(jià)值不在于技術(shù)本身有多前沿而在于能不能在真實(shí)場景里解決具體問題。5.2 跨項(xiàng)目沉淀下來的幾條工程經(jīng)驗(yàn)做完這兩個(gè)項(xiàng)目我最大的體會是邊緣計(jì)算項(xiàng)目拼的不是算法的多先進(jìn)而是工程化的耐心和細(xì)節(jié)。第一數(shù)據(jù)標(biāo)準(zhǔn)一定要先定后面才能少返工。景區(qū)項(xiàng)目的One ID體系之所以能在一個(gè)月內(nèi)搭建完成得益于一開始就統(tǒng)一了設(shè)備編碼、人員編碼、事件類型的規(guī)范。校園項(xiàng)目里我們同樣先定義了“設(shè)備—點(diǎn)位—房間”的三級關(guān)聯(lián)模型和各子系統(tǒng)對接時(shí)大家都遵循這個(gè)標(biāo)準(zhǔn)接口聯(lián)調(diào)順暢了很多。第二先跑“最小閉環(huán)”再橫向擴(kuò)展這是避免項(xiàng)目失控的鐵律。邊緣計(jì)算涉及設(shè)備、算力、網(wǎng)絡(luò)、云端、業(yè)務(wù)系統(tǒng)鏈路長、環(huán)節(jié)多如果一開始就想一步到位把所有場景全做出來排錯(cuò)成本會非常高。我們的做法是先挑一個(gè)場景比如景區(qū)項(xiàng)目先做停車余位識別從攝像頭接入到云端展示全打通所有技術(shù)風(fēng)險(xiǎn)在最小范圍內(nèi)暴露并解決然后才大規(guī)模復(fù)制到其他場景。第三邊緣側(cè)的業(yè)務(wù)規(guī)則要能“熱更新”?,F(xiàn)場運(yùn)營需求經(jīng)常變化比如“客流預(yù)警閾值從80人調(diào)整到60人”、“檢測到游客靠近水域就立即報(bào)警”這些規(guī)則如果寫死在代碼里每改一次就得重新發(fā)版運(yùn)維成本太高。我們的方案是把規(guī)則配置從代碼中抽離出來存成JSON或YAML配置由匯聚節(jié)點(diǎn)統(tǒng)一下發(fā)邊緣盒子收到后動態(tài)加載不需要重啟服務(wù)。這個(gè)設(shè)計(jì)在后期響應(yīng)運(yùn)營需求變化時(shí)幫了大忙。最后再分享一個(gè)小技巧無論景區(qū)還是校園邊緣節(jié)點(diǎn)的統(tǒng)一運(yùn)維通道都要提前規(guī)劃。現(xiàn)場幾十上百臺設(shè)備如果每一臺都需要單獨(dú)登進(jìn)去布版本、改配置運(yùn)維人員會瘋掉。我們最終搭了一套輕量級的設(shè)備管理平臺支持遠(yuǎn)程下發(fā)模型文件、更新規(guī)則配置、批量執(zhí)行命令設(shè)備離線時(shí)自動告警。這套平臺本身開發(fā)量不大但帶來的運(yùn)維效率提升是十幾倍的。做邊緣計(jì)算和多業(yè)態(tài)融合項(xiàng)目很多時(shí)候是“七分業(yè)務(wù)梳理三分技術(shù)實(shí)現(xiàn)”。技術(shù)方案再漂亮如果現(xiàn)場業(yè)務(wù)關(guān)系沒理順、數(shù)據(jù)標(biāo)準(zhǔn)沒統(tǒng)一系統(tǒng)終究跑不起來。反過來只要把數(shù)據(jù)鏈路和邊界理清楚了邊緣計(jì)算帶來的實(shí)時(shí)性、成本和可靠性收益是甲方能直接感受到的。希望這篇文章里的實(shí)操細(xì)節(jié)能幫你少走一些彎路。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
天天开心天天色| 99精品国产乱码久久久人妻| 五月婷婷,狠狠操| 色天天久婷婷| 五月婷婷啪啪网| 色5月婷婷| 色婷婷激情视频| 9九色首页| 丰满人妻一区二区三区| 日韩成人免费电影| 深情五月天| 91色涩| 那里有AV网址| 99热全是精品| 99re资源在线视频导航| 大香蕉九九| AV性爱在线| 久久五月婷婷电影| 五月日韩中文字幕| 婷婷激情综合网| 秋霞网在线观看理论91| 99re这里只有精品99| 色色丁香婷婷五月天| 我爱大香蕉| 激情婷婷六月| 五月激情基地| 五月婷庭丁香在线| 五月激情婷婷色| 香蕉国产2013| 色你久久| 婷婷伊人综合中文字幕| 久青操| 大陆极品少妇内射AAAAAA| 热99这就是精品视频| 五月丁香日本在线视频观看| 亚洲色综合| 97伦色婷婷| 婷婷五月天伊人| 婷婷五月天网| 五月婷婷丁香五月 | 99热香港| 久久密臀婷婷| 亚洲色图在线视频| 丁香五月大香蕉AV| 久久超视频| 丁香五月婷婷影视先锋| 丁香五月婷婷影视先锋| 久re在线| 日本一级| 国产xxxxx在线观看| 另类精品视频在线观看| 欧美日韩99| 人人操97| 亚洲激情免费久久| 97成人在线视频精品| 99色色热| 五月丁香综合啪啪啪啪啪| 香蕉中文在线| 9l视频自拍9l视频自拍九色学生| 婷婷色婷婷亚洲成人| 五月丁香色色网| 深爱丁香激情| 天天日,夜夜爽| 五月丁香999| 五月天五月色婷婷综合| 婷婷五月丁香色情| 久色资源| 丁香五月在线播放| 欧美A级成人婬片免费看理论| 午夜性做爰电影| 婷婷五月情| 日本婷婷在线| 国产亚洲色婷婷久久99精品9j| 婷婷五月丁香六月| 午夜激情婷婷| 五月丁香激情五月天| 激情综合五月婷婷| 色欲五月婷婷| 色婷婷丁香五月观看| 婷婷五月天最新综合你懂的| 五月丁香六月婷婷亚洲| 色婷婷日本| 一区视频网站| 五月天婷婷色在线视频免费观看 | 色播五月丁香| 五月婷婷av在线| 久久44| 婷婷色综合网日韩国产| 日本婷婷五月天| 久热九九| 天天撸天天干天天插| 五月丁香啪啪网| 在线另类视频| 色婷婷久久| 国产精品久久久爽爽爽麻豆色哟哟| 九九热123| 丁香花婷婷五月天| 亚洲激情电影五月天色婷婷丁香一起草 | 婷婷五月天激情诱惑| 婷婷综合视频| 老美AA片| 伊人婷婷大香蕉| 狠狠色情婷婷| 99视频在线| 怎么样可以看免费的一级av| 婷综合| 中文字幕簧片| 无码激情| 精品人妻在线| 伊人午夜综合色啪| 亚洲精品久久久久久久久久吃药| 91九色精品| 无码四色色色| 涩综合网| 亚洲AV永久无码影院黑人| 五月婷婷婷综合网| 欧美精品18| 色99视频| 只有精品视频在线观看| 五月丁香六月香综合激情| 五月丁香啪| 免费无码毛片一区二区A片| 97久久精品视频| 思思99热热热99| 十月丁香九月婷婷综合| 天堂无码人妻精品AV一区| 久热9热| 色婷婷操逼| 森林影视大全,最好看的2019年视频 | 成人亚洲精品| 五月丁香婷婷综合网| 亚洲色网址| 一区二区三区四区牛| 色色操| 五月天com| 小香蕉av| 99久久6| 91男女视频在线观看| 天天久综合网永久入口17v| 久久婷婷五月丁香网| 丁香五月人妻熟女| 日本三级成人秘书精品片| 精品久久婷婷| 色爱综合网| 俺去婷婷 丁香| 久久er九九| 丁香五月婷婷超碰在线| 色婷婷综合成人| 大香蕉久久婷婷| 中文字幕av在线播放| 婷婷视频网| www色婷婷com| 五月婷婷欧美| 欧美色频| 夜夜爱影院| 狠狠激情五月天| 亚洲视频一区| 婷婷五亚洲| 激情人妻蜜夜系列区| 26uuu四色| 国产精品电影| 爱之国产色情综合| 亚洲电影在线观看| 婷婷亚洲色| 青青热久久综合| 日韩另类| www.十八禁不禁AV.com| 91操黄| 99er视频在线| 伊人久久中文网| 亚洲美女网Va| 欧美精品狠狠色丁香婷婷| 五月情涩综合婷婷| 婷婷五月色色| 国产激情综合| 99热99精品在线观看| 亚洲精品一区中文字幕乱码| 亭亭五月天黑人2014| 色婷婷AV久久| 五月激情综合网| 大香蕉伊人99| 色www久视频| 婷婷成人小说综合| 婷婷久久内射| 91久久久久久久久久久| 五月婷婷综合色拍| 婷婷丁香五月激情密臀av| 狠狠做婷婷| 五月婷婷深深爱| 丁香六月婷婷综合网| 最近中文字幕2019视频1| 99热 免费| 热日韩欧美| 色婷婷视频在线| 五月停停色| 色色色999| 色婷婷五月天亚洲| 天天射综合网站| 秋霞AV吧| 婷婷激情五月天桃花网| 丁香五月亚洲激情婷婷射| 久久激情五月婷婷| 色区域网站视频| 第四色五月婷婷| 综合激情视频| 五月色影院| 深夜男女福利刺激影院一区| 超碰操日| 夜夜谢天天干| 五月丁香网站| 五月婷婷六月爱| 丁香九月综合在线| 免费观看18视频网站| 五月天综合影院| 综合久久高清| 九九九AAA热视频| www开心激情网| 亚洲综合另类| 丁香婷婷五月综合欧美另类| 另类在线| 成人看片网站| 五月天激情国产综合婷婷婷| 米奇影视五月天| 六月丁香啪啪啪| 热久久999| 久久九色| 曰韩少妇内射免费播放| 国产婷婷综合在线免费视频| 五月天激情.com| 成人在线精品| 伊人9在线| 丁香婷婷五月香蕉91| 欧美日韩成人在线观看| 丁香婷婷久久| 色欲av伊人久久大香线蕉影院 | 天天在线XXX| 丁香亚洲色综合| 激情五月婷| 深爱激情五月婷婷| 五月激情婷婷开心| 5月丁香六月婷婷| 99综合视频在线| 激情综合色婷婷啪啪六月天| 操大屄五月天视频| 91919191919久久成人视频| 久久狠狠干| 啪啪亚洲综合| 五月天激情AV| 大香焦A∨| 久久激情五月婷婷| 丁香婷婷色五月| 播五月丁香三月婷婷| 人妻性爱av网站| 成人av在线网址| 亚洲成人日韩无码精品| 国产又黄又爽又激情不遮挡视频在线观看| 婷婷色五月激情| 国产AV不卡福利| 久久XX日本综合| 激情文学综合婷婷五月天丁香花| 亚洲激情四射| 亚洲精品白浆高清久久久久久| 可以看的AV| 9999三级片| 欧美综合激情丁香五月六月婷| 五月丁香好婷婷A片网| 啊v视频在线观看| 99操无码视频观看| 久久这里只有精彩| 激情六月五月婷婷综合网| 亚洲AV网址| 极品色丁香| 9久久久| 中文字幕成人日韩| 色哟哟www| 综合性爱网| 日本专区久久| 亚洲激情四射| 丁香婷婷六月激情综合| 噜噜色婷婷| 开心深爱激情网| 五月天.com| 99在热线免费视频| 国产操碰| 成人精品视频99在线观看免费| 亚洲熟妇AV乱码在线观看| 国产特级毛片AAAAAAA高清| 成人做爰A片免费看视频| 国产精品天天狠天天看| 91人人爽人人操| 丁香五月婷婷色偷偷| 激情视频综合| 新久久五月天激情| 久久久精品色色色| 91九色熟女| 97干在线视频| 精品三区影院| 五月丁香 啪啪| AV人人操| 中文字幕婷婷在线| 天堂AV三级| 激情美女五月天激情在线| 99热精品无码| 99精品在线播放| 婷婷丁香熟女| 久热九九| 亚洲亚洲亚洲AAAAAA| av操一操| 99碰碰| 五月停性愛| 久久伊人五月天| 亚洲欧洲中文日韩久久AV乱码| 岛囯综合激情网| 婷婷欧美综合| 天天操夜夜玩!| 六月婷婷色综合| 五月天丁香婷婷网| 99色这里| 九九色大香蕉| 五月婷婷伊| 色噜噜狠狠色综合网| 色色色99韩| 精品A√| www.操.com| 成人 AV播放| 五月天婷婷基地| 五月天成人小说网| 久在线88综合| 激情网战码亚洲A| 涩婷婷五月天| 久久久激情视频| 五月天婷婷在线观看精品男人| 久久国产色| 久久久精品人妻| 91操片| 国产婷婷婷| 日韩综合成人| 婷婷五月天色综合翘| 九九精品网| 开心激情站| 99亚洲视频| 国产高清精品色| 丁香五月婷婷基地| 久久9热| 激情婷婷网| 国产精品美女久久久久AV超清| 开心激情五月天网| 日韩黄黄| 久久三级视频| 亚洲第一黄网| 4399在线观看免费高清黄色视频| 久久视频九九视频| 疯狂做受XXXX高潮A片动画| 久久总和99| 这里只有精品免费观看网占| 9视频在线成人网站| 欧美天天爽| 久婷婷婷| 日韩无码AV电影网站| 成人色五月天婷婷| 深爱激情五月天| 亚州色婷婷| 五月天开心色情网| 影音先锋噜一噜| 五月情涩综合婷婷| 玖玖99婷婷| 综合99在线| 97在线视频观看| 色婷婷五月开心六月综合| 婷婷视频网| 久久99久久99精品免视看婷| 在线播放成人网站| 五月婷六月丁| 久久五月天 91| 五月天俺去也| 丁香六月婷婷综合啪啪| 婷婷色丁香五月| 99久久婷婷五月综合| 日本丁香五月| 五月婷婷激情| 无码啪啪| 亚洲中文无码成人| 婷婷婷婷婷婷婷婷婷婷丁香| 日韩无码人妻一区二区三区综合| 激情文学综合婷婷五月天丁香花| 婷婷精品性性性性性性性| 白度黄视频| 欧州色色| 色色色色五月天| 天天噜| 色九月欧美| 五月婷婷婷婷| 综合五月激情| 超碰人人在线| 亚洲激情四射色| 五月婷婷激情久久| 久久综合九九| av电影在线播放| 丁香六月色婷婷| 久久久色婷婷五月天| 99精品国产乱码久久久人妻| A久久| 98毛片| 婷五月天影院| 国产AV影片| 五月婷婷激情综合网| 激情五月天第四色| 久久99热在线观看| 99热只有精| 激情六月日韩| 丁香婷婷性爱| 激情综合区| 丁香婷婷狠狠97| 婷婷五月综合社区在线| 无码AV久久久久久久久| 五月香蕉婷婷| 99精品小视频| 亚洲成人五月天| 丁香五月婷婷激情四射| 九九日伊人| 五月天激情丁香| 色五月丁香总合网| 五月天婷婷香蕉狠狠超碰综合| 99综合网| 日韩一级网站| 人人爱人人摸人人澡| 五月丁香婷婷爱激情综合网| 91se在线观看| 久久综合图片| 丁香五月欧美婷婷综合| 国产精品涩涩涩视频网站| 99思思| 手机AVAV天堂看网| 天天做天天爱天天日| 久久九九99.www| 丁香五月天啪啪| 亚洲色情一区二区三区四区| 97色久| 内射 无码 伊人| 亚洲操B| 色亚洲视频| 日本美女上人| 激情九九六月激情免费视频| 影音先锋综合网| 丁香五月婷婷av影院| 丁香在线视频| 久久9视频| 五月天综合久久| 丁香婷婷影院| 五月丁查人人| 成人免费va| 人人射av| aaa日韩| 99热国产国产| 亚洲五月天天| 99视频精品8 | se99视频| 天天色天天日| 五月丁香六月婷婷久久肏| 人妻自慰高清合集| 婷婷五月天成人小说| 五月丁香婷婷综合网色欲| 五月丁香成人| 96精品久久久久久久久| 狼人狠狠操| 国产精品人妻在线网址| 伊人色综合久久久| 人人操人人操919999| aaaa.黄| 日本少妇AA一级特黄大片| 中文字幕综合色| 五月天婷婷无码| 亚洲欧美成人在线观看| 五月丁香A片| 超色欲天天| 婷婷激情人妻| 色综合夜夜| 七七九九色色| 日本激情五月天‘| 2025天天日爽| 国产激情综合五月久久| 成人免费120分钟啪啪| 熟妇内谢69XXXXXA片| 久久久99精品免费观看| 亚洲啪啪自拍| 99爱99操| 开心久久爱五月天| 婷婷涩涩五月天| 97干在线观看视频| 国产av天堂| www狠狠| 激情五月天影院| 9久久婷婷国产综合精品性色| 五月停停色色丁香| 免费观看全黄做爰的视频| 欧类av怡春院| 九月av| 色狠狠五月天| 亚洲激情.com| 色五月激情综合网| 五月综合激情网| 99热资源在线| 91啪级电影| 激情五月开心五月丁香五月| 日韩另类| 免费在线观看av网站| 婷婷五月丁香欧洲| 另类激情五月| 91九色在线| 精品香蕉99久久久久网站| 永久热91| 婷婷五月天激情偷拍| 丁香五月激情在线| 亚洲第一综合| 激情爱爱网站超大免费| 婷婷中文字幕版| 五月天 婷 欧美亚洲| 99爱爱| 九九色情网五月天 | 天天射综合网站| 久久九九网| 丁香9月婷婷| 日本99视频| 开心五月天激情网站| 九九色婷| 综合久色五月| 久久99久久99精品免观看粉嫩| 五月激情小说| 九九热99熟女| 丁香五月天激情免费在线观看AV777| 丁香五月性爱| 色色丁香色五月| 色天天久婷婷| 激情五月丁香五月| 91九色 婷婷| 亚洲成人va| 婷婷伊人视婷婷婷| 五月婷婷伊人网| 成人亚洲精品| 天天操天天插| 五月丁香狠狠爱| 第四色五月天| 亚洲av成人一区二区电影在线| 伊人丁香六月婷婷| 天天干天天干天天干天天干天天干天天 | 五月天六月婷| 久9久视频精品| 第2色五月婷| 激情床戏| 蜜桃婷婷狠狠久久| 丁香五月六月综合欧美| 久婷婷视平| 色婷婷五月天激情久久| 996er热| 久久天堂网| 五月丁香婷婷视频| 激情婷婷黄色五月| 天天插天天插天天插| 激情婷婷五月久久| 丝袜大香蕉| a九九热www| 色噜噜狠狠色综无码久久合欧美| 亚洲色基地| 五月六月丁香激情| 大香蕉丁香| 好激情在线综合网| 丁香五月 无码| 色色色成人网| 99国产精品久久久久久久久久久| 久色视频首页| 婷婷五月激情欧美大胆视频| WWW.色婷婷.COM| 玖玖99婷婷| 久久欧洲综合网| 欧美三级欧美一级| 婷婷色在线观看| 欧美日韩一区二区三区四区| 婷婷六月激情小说网| 久久一热| 天天色五月| A片试看120分钟做受图片| 婷婷五月天色网久| 97碰碰草| 五月婷婷综合在线| 欧美操人| 成人超碰网| 99青青草| 日本九九视频| 综合色播| 婷婷综合五月色播| 午夜丁香六月婷| 色丁香五月天| 激情播丁香| 久热re视频在线观看网站| 伊人9999| 大香蕉婷婷五月| 狠狠干在线| 久久狠狠色| 拍色综合| 99热这里只| 亚洲尤物在线| 97欧美在线| 夜夜干天天操| 涩婷婷五月天| 伊人久久婷婷| 97色综合| 欧美操人| 99色色色色| 久久精品婷婷| 久久视9精| 蜜桃人妻无码AV天堂三区| 99在线观看视频免费| 51精品国自产在线| 五月天综合色| 99re这里只有精品视频6| 激情性爱婷婷| 色播播五月天| 五月丁香婷婷免费视频| 丁香久色| av国产精品偷| 人人操人人妻| 99在线观看精品视频| 99性感视频| 99在线热| 极品五月天| 激情五月综合婷婷| 思思久久精品| 丁香婷婷六月激情| 97碰超级人人看| 四虎99热在线观看网站| 天天爽天天| 五月婷婷综合网| 婷婷五月天色网久| 亚洲人妻AV| 丁香五月婷婷综合激情啪啪啪啪啪啪啪| 东京热免费视频| 99久久玖玖| 亚洲avjiujiur91| WWW.久久久久久久| 五月深情久久| 琪琪色网在线| 这里有精品| 噜噜噜狠狠色综| 婷婷五月天美女视频| 欧美成人无码高清一区二区三区| 久久久jd| 九九综合五月欧美| www.91热久久| 日韩一区二区A片免费观看| 综合激情五月天| 久操97| 色婷婷激情| 美女丁香五婷婷| 亚洲色小说在线综合| 99热在线观看| 久久久久久五月天| 亚洲精品国产熟女久久久| 操骚货在线| 97人人草| 亚洲综合激情五月久久| 色情丁香五月天| 欧美日韩成人| 97久久超碰| 超碰日日操| 亚洲色图81p| 超碰在线网站| 久久最新色| 色色五月天婷婷丁香| 亚洲情欲久久| 超碰精品国产首页| 综合网啪| 97久久精品| 日韩不卡DvD| 婷婷中文在线| 婷婷九月| 亚洲激情免费久久| 婷婷五月天综合蜜桃| 九九热免费观看视频| 乱女乱妇熟女熟妇综合网站| 青草视频在线蜜臀| 嫩草AV久久伊人妇女超级A| 精国产品一区二区三区A片| 亚洲色五月| 亚洲精品V天堂中文字幕| 八戒青柠影视剧在线观看| 操91| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 国产精品五月丁香| 四色 爱 婷婷 精品 亚洲 五月天| 丁香婷婷偷拍| 天天开心AV色综合婷婷五月天| 亚洲激情区| 久久99热在线观看| 婷婷综合五月天| 婷婷六月激情| 久草婷婷在线| 成人资源在线| 密黄站| 久久66精品| 99网99热| 操99| 色九九九综合| 91精品无码久久久久久五月天| 色九月婷婷| 狠狠操天天日| 久草狼人| 久久小视频| 九月性爱网| 婷婷97碰碰| 六月丁香婷婷亚洲中文玖玖| 黄色笑话深爱激情网丁香五月婷婷啪啪啪啪啪| 色5月丁香婷婷| 色色色综合色| 夜色爱爱亚洲| 婷婷五月大| 性生活久久朋友人妻| 91色综合网| 免费看欧美成人A片无码| 五月丁香综合网| 97操碰| 五月婷婷亞洲中文| 精品激情| 国产色香蕉精品五夜婷| 六月丁香成人| 思思热高清在线观看| www.婷婷五月天.com| 久久这里只有精品视频15| 大香蕉综合| 五月成人综合| 五月丁香大香蕉| 91综合在线视频| 五月婷婷五月天天| 99精品久久| 日韩三级视频一区二区| 日本狠狠爽| 91人操人人人操人| 欧美熟女视频 色婷婷| 少妇激情基地| 这里只有精品久久| 亚洲中文AV| 婷婷四月 成人 狠狠干| 婷婷成人AV| 99热在线极品极品| 精品色情一区二区三区四区| 亚洲婷婷久久综合| 东北熟女高潮99综合99| 天天舔天天摸天天射| 久9久9久9久9久9久9| 丁香五月成人自拍| 婷婷丁香五月噜噜噜| 色婷婷色99国产综合精品| 玖玖99精品视频| 俺去啦综合网| 激情婷婷狠狠干综合| 午夜色色色极品视频| 97人人操在线| 色丁香五月| 天天澡天天狠天天天做| 色九九中文字幕| 亚洲久久视频| 狠狠爱综合| 婷婷五月天色色| 五月色丁香| 91精品又长又大又粗又爽又猛| 欧美日韩aaaa| 久久久中文| 婷婷性爱五月天| 久久密臀婷婷| 亚洲色 视频| 激情涩播| 婷婷爱五月天人人爱| 久草丁香婷婷1024| 一本综合丁香日日狠狠色| 日本精品久久久久中文字幕| 久er7久热| 饮料下药迷倒漂亮女同事强干| 九九九九综合| 色色综合网站| 色情五月天视频网| 涩涩五月天| 人人操Av| 国产欧美熟妇另类久久久| 五月六月婷| 九九色婷| 色五月婷婷色五月婷婷色五月婷婷| 蜜乳AV成人| 婷婷伊人五月天| 99热欧美| 丁香五月98| 日韩人妻AV在线| 伊人久久丁香婷婷六月五月综合| 免費观看aV在线网址| 欧美日韩成人| 无码免费人妻A片AAA毛片西瓜| 日本色婷婷综合| 中日韩美欧成人一区二区精品在线| 五月丁香欧美综合免费视频| 九九热这里只有精品9| 丁香五月婷婷色| 综合九九久久| 在线99热| 国产26uuu视频| 久久久潮喷-久久久九九-成人AV| 色婷婷五月天在线观看| 日本 欧美在线| 99自拍视频在线| 婷婷五月天亚洲精品| 欧美色色日韩| 亚洲精品午夜国产va久久成人| 色噜噜,噜噜色| 奇米色大香蕉| 狠狠色噜噜狠狠狠狠综合| 五月激情婷婷图片基地| 天堂伊人干| 啪啪视频99| 婷婷欧美综合| 四色 爱 婷婷 精品 亚洲 五月天| 九九丁香社区欧美激情| 狠狠干在线| 欧美噜噜久久久XXX| 色综合视频在线| 任你搞网站| 婷婷伊人激情婷婷| 一起肏在线视频| 夜夜操狠狠操| 五月天啪啪| 97亚洲色 torrent magnet| 99热在线观看| 成人婷婷深爱综合网| 一起操 91N.com| 日本狠狠干| 五月婷婷丁香狠狠撸久久| 超碰97人人操| 婷婷成人av| 丁香五月天堂| 久热免费| 日韩按摩二区| 97久久久| 丁香五月 激情文学| 99热这里只有精品4| 欧美啄木乌丝袜人妻系列| 久久婷综合| 97亚洲精品| 五月天婷婷在线播放| 天天爽日日爽夜夜爽| 99热福利| 五月丁香久久综合色| 亚洲精品白浆高清久久久久久 | 97天堂| 九九激情视频| 天天躁日日躁狠狠躁日日躁2022年5月9日| 六月撸婷婷| 色婷婷丁香五月天| 99久久99热| 六月丁香色色色| 丁香五月瑟瑟| 噼里啪啦完整版中文在线观看| 激情视频综合| www,26uuu,c0m,色情| 天天狠狠插| 超碰人妻在线| 免费看成人747474九号视频在线观看| 激情图片亚洲| JAPANRCEP老熟妇乱子伦视频 | 五月婷激情| WWW.色婷婷.COM| 色五月天综合| 天天开心婷婷丁香五月| 91成人视频| 玖玖色资源| 超碰人人摸AV| 九九九九九999999| 欧美肉大捧一进一出免费视频| 色爱亚洲| 天天干 夜夜爽| 婷婷色色丁香五月天| 99这里只有精| 深爱激情婷| 看国产探花操逼三级片| 色五月婷婷天天操夜夜操| 五月丁香婷婷五月色| 五月天天天综合| 丁香五月激情宗合| 日日干五月天婷婷| 人妻性爱av网站| 99er日韩| 五月婷婷激情四季| 天天玩天天摸| 婷婷激情五月天7| 丁香五月自拍| 色网站99| 婷婷五月天AV激情| 婷婷色日本| 99re思思精品在线观看| 思思99re这里只有| 1995年关宝慧版蜘蛛女| 婷婷五月天激情影片| 五月丁香花激情综合网| 夜夜做夜夜愛| 中文AV网站| 五月天成人免费视频| 六月婷婷久久| 亚洲99热| 日本三级中国三级99人妇网站| 天天日夜夜| 黄色国久久| 日本在线观看aaa 99| 亚洲精品中文字幕成人片| 婷婷六月综合基地| 久久精品婷婷| wwW天天干| SS丁香五月婷婷| 天天综合中文| 美女激情综合| 丁香六月啪| 精品欧美性爱超级爽| 色碰97| 情色婷婷五月天| 狠狠五月激情在线| 俺去也在线官网| 五月亭亭狠狠| 五月色网| 欧美情色一区| 亚洲婷婷激情综合激情999精品| 中文字幕AV在线播放| 天天摸天天舔天天爽| 激情小说 五月天| 夜色综合网| 亚洲激情四射| 婷婷综合伊人| 婷婷综合久久| 97在线精品| 色婷久九| 久色网| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 午夜天堂一区人妻| www久久久久久| 国产人妻操逼| 五月天久久丁香| 久久五月激情| 91狠狠色丁香婷婷综合久久狠丁香综合久久精品 | 亚洲av电影网站| 99热播放| 婷婷丁香在线播放| 国产免费一区二区在线A片视频| 午夜不卡久久精品无码免费| 少妇婷婷五月天| 九九免费视频在线| 夜夜干夜夜操| 中文字幕亚洲-区久久99婷婷| 手机在线日韩视频中文字幕| 五月婷婷激情色情网| 久久精彩视频| 99精彩视频网站在线| 91狠狠色丁香| 日本久久婷| 国产色五月婷婷| 天天日,天天插| 色噜噜狠狠狠狠色综合久欧美| 婷婷丁香色五月亚洲| 99精在线| 欧美三级A做爰在线观看| 中文字幕按摩做爰| 99色五月| 色五婷婷| 少妇人妻人伦A片| 色色色97| 看久久性爱视频| 五月婷婷五月天| 插逼综合网| 停停五月丁香| 日产精品一线二线三线芒果| 色婷婷久久| 综合久久99| www99精品日韩| 亚洲 25P| 五月婷婷之综合激情| 久9视频免费播放| 99久久大片| 少妇出轨做爰高潮A片| 九九国产视频| 91黄址| 热久69| 噜噜色噜噜网| 97综合视频在线| 青青热久精品视频在线观看| 日韩无码专区| 黄网在线免费播放| 婷婷午夜天| 99网址在线观看| 婷婷激情鹿城五月天| 综合久久影院| 生活片五区| 91人人爽人人操| 亚洲第一精品成人999久久精品| 中文字幕精品无码一区二区| 婷婷欧美偷拍综合| 开心五月婷婷| 狠狠色五月激情| www.婷婷六月天| 大香蕉啪啪啪| 婷婷丁香五月综合| 五月婷精品| 99热偷拍| 99热99色| 久热这里只有精品6| 色五月婷婷av| 99无码视频| 玖玖99婷婷| 丁香5月婷婷| 1024久婷| 五月天网站免费欧美| 大香蕉娱乐| 丁香六月婷婷综合缴| 9久9久| 五月综合丁香婷婷| 99精品久久久| 亚洲色另类| 亚洲avjiujiur91| 国产做爰视频免费播放| 天天干天天日日| 亚洲AV在线免费看| 色99热| av无码电影| 超碰成人电影| 一起草AV| 亚洲精品久久久无码| 久久综合天天综合| 字母不卡码人逼| www.久久爱.com| 操人无码| 亚洲精品久久久久久久久久飞鱼 | 色婷大香蕉| 五月丁香自拍| 婷婷激情五月吧| 91精品久久久久久久久久| 亚洲情a| 三级毛片7979| 丁香五月天综合| 99这里只有精品在线| 狠狠色噜噜狠狠亚洲A∨| 性生活视频98791| 噜噜综合网| 丁香五月停停av| 丁香久月| 五月天色婷好好| 色色五月婷婷狠狠| 色老久久| 色色色视频免费无码| 丁香五月婷中字在线| 亚洲五月天激情| 激情综合网丁香| 九九爱激情| 日韩av在线免费观看| 五月激情婷婷图片基地| 婷婷色色色| 婷婷伊人綜合中文字幕| 森林影视大全,最好看的2019年视频| 4399精品一区二区| 99热精品在线观看| 99日韩网站| 九色PORNY9l原创自拍| 婷婷五月花| 啪啪99| 亚洲精品五月| 激情四射网| se色婷婷视频| www,久久久| 色婷五月| 97在线精品| 9999热免费视频视频| 丁香五月在线| 丁香五月香蕉| 侠女刀之记忆电影在线看免费| 天综合日日夜综合7799| 国产亚洲在线观看| 日韩综合久| 五月天激情婷婷小说| 婷婷五月天色色| 丁J香六月首页| 久久婷婷五月天| 99热| 五月丁香做爱视频| 六月婷婷网| 婷婷五月激情的图片| 丁香五月欧美婷婷综合| 超碰国产在线| 99精品色| 99热这里只有精品23| 国产精品成人在线| 色五月97| 国内自拍1区| 色婷婷视频| 色欲av伊人久久大香线蕉影院| 丁香六月视频免费观看| 99热只有精品在线播放| 久久久久久久8| 久9热视频| 日本成人噜噜| 六月五月丁香五月欧美| 婷婷激情性爱| 婷婷久久18| 操操综合网婷婷| 乱岳熟女50岁| 囯产精品久久欠久久久久久九大| 99热这里都是精品| 国产成人+亚洲+欧洲| 婷婷六月丁香色| 五月丁香怕啪啪| 欧美色色色色色| 丁香六月婷| 人人综合91网| 激情婷婷激情在线不卡| 亚洲成人无码专区| 99国产精品白浆在线观看免费| 成人va在线播放| 99热99在线| 久99久在线| 26UUU欧美激情一区二区| 综合久久99| 99热最新| 成人丁香婷婷| 婷婷五月花丁香| 岛国AV网| 久久一热| 丁香五月婷老师| 成人丁香五月天| 婷婷天天色| 99热这里只有精品5| 婷婷性爱五月天| 婷婷激情六月| 亚洲精品永久久久久久| 婷香五月激情视频| 五月婷婷天天| 综合一区二区三区| 国产激情av| 六月婷婷色综合| 特级西西4444www无码| 女人天堂AV| 久久综合婷婷| 狠狠精品干练久久久无码中文字幕| 少妇性按摩无码中文A片| 五月婷婷丁香| 610018岁成人视频| 波多野结衣不卡AV| 丁香五月激情啪啪啪啪| 美女91一起草| 26uuu亚洲欧美| 婷婷五月天亚洲图片| 亚洲激情97五月天| 99热一区| 大香蕉久操| 中文字幕在线免费观看视频| 色婷婷成人做爰A片免费看网站| 超喷97免费在线视频| 综合五月激情| 五月婷婷|欧美| 婷婷久久久| 色婷婷精品小视频| 天天做 天天爱| 色五婷婷在线视频| 亚洲一区国产传媒| 激情五月天视频| 九九热免费观看视频| 丁香五月玖玖| 第四色婷婷色五月| www.色五月天.com| 激情五月天社区| 91精品综合久久久久久五月丁香| 激情综合五月| AV五月丁香| 久久婷婷视频| 日韩99无码| 97性视频| 五月天婷婷三级黄| 亭亭五月天成人| 色99在线视频| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 31色区视频免费看| 色色色国产| 九九在线免费观看| 五月狠狠| 色吧五月婷婷| 婷婷综合| 丁香八月综合激情| 色综合久久综合中文综合网| 激情五月天之五月婷婷| 天天草天天摸| 一本色道久久综合狠狠躁小说| 亚洲激情四射色| 五月婷婷天堂| site:publishdd.com| 国产精品电影网| 日韩精品视频中文字幕| 色色激情五月| 五月婷婷欲色| 日本九九九九| 99热在线播放精品| 黄网在线免费观看| 久久这里有| 五月丁香六月激情在线| 九九九九成人| 五月天激情在线视频| 99re热在线视频观看| 极品人妻VIDEOSSS人妻| 九九色欲网| 丁香六月婷婷综合啪啪| 婷婷五月天社区| 超碰高清在线| 天色综合网站| 丁香五月影院| 操婷婷基地| 伊人狠狠狠综合| 日韩AV大全| 秋霞日本免费毛片A片| site:publishdd.com| 狠狠色综合网| 影视av久久久噜噜噜噜噜三级| av网站中文| 九九热免费视频| 91热久久| 超碰资源在线| 国产一级黄色影片,| 九九热10| 亚洲在线综合| 婷婷五月天激情在线| 国产激情久久久| 中文字幕黄色片| 日韩AV大全| 五月婷婷影视| 五月婷婷色播网| 色色性爱视频| 五月婷中文字幕| 天天综合网在线| 男人的天堂在线婷婷| 艾小青av| 免费无码毛片一区二区A片| 99re6热在线精品视频播放速度| 国产精品爽爽久久久久久| 一区=区操屄高清大全av| 国产精品国产VA片国产| 国产乱人偷精品人妻A片| 婷丁香久综合| 九九综合| 中文字幕婷婷五月天| 综合久| av在线激情| 色噜噜97视频在线观看| 婷婷刺激综合| 九色啦蜜臀| 9久久精品视频| 俺去也综合| 婷婷五月天成人网| www.久久99| 久热99| 91日韩在线| 激情伊人五月天| ww亚洲ww在线观看| 亚洲第一第二网站| 淫视馆aV二区一区| 激情五月天在线视频| 九九99精品视频在线观看| 97色碰| 激情五月天综合网站网站网站| 国产精品色| 日日夜夜青青草|