99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

精品游戲技術(shù)體系拆解:從資源管線到性能優(yōu)化的底層邏輯

精品游戲技術(shù)體系拆解:從資源管線到性能優(yōu)化的底層邏輯 站在臺(tái)下聽完那場(chǎng)分享我腦子里盤旋一個(gè)很樸素的問題精品游戲和普通游戲之間的差距到底是從哪一步開始拉開的美術(shù)玩法策劃都不是。真正的分水嶺往往是那些玩家看不到、甚至很多研發(fā)團(tuán)隊(duì)自己也說不清的東西——基礎(chǔ)技術(shù)體系。那場(chǎng)分享的標(biāo)題叫“談精品游戲的基礎(chǔ)技術(shù)體系”來自某大型游戲公司互動(dòng)娛樂研發(fā)部的技術(shù)總監(jiān)。講的東西不玄乎但信息密度很高從資源管線、加載方案、內(nèi)存管理到性能分析、工具鏈建設(shè)、兼容性治理一整套支撐精品游戲研發(fā)的底層邏輯。今天把這套東西拆開來講結(jié)合我自己在項(xiàng)目里搭技術(shù)底座的經(jīng)歷盡量讓不同基礎(chǔ)的讀者都能看懂也都能用上。1. 精品游戲的“底座”到底是什么1.1 技術(shù)體系不是一堆中間件堆在一起很多人理解基礎(chǔ)技術(shù)體系第一反應(yīng)是“我們有引擎有服務(wù)器框架有熱更新方案這就是體系了?!弊鲆欢螘r(shí)間的項(xiàng)目之后就會(huì)發(fā)現(xiàn)這頂多算“有一堆零件”遠(yuǎn)談不上“體系”。真正的基礎(chǔ)技術(shù)體系解決的是三個(gè)層面的問題第一穩(wěn)定的問題。游戲從立項(xiàng)到上線周期動(dòng)輒兩三年。這期間引擎要升級(jí)、需求要變更、人員要流動(dòng)如果底層技術(shù)沒有一個(gè)穩(wěn)定兜底的方案每次變動(dòng)都可能引發(fā)連鎖故障。我經(jīng)歷過引擎小版本升級(jí)導(dǎo)致整個(gè)場(chǎng)景資源全部需要重新導(dǎo)出的情況一改就是幾百個(gè)G的資產(chǎn)重跑光那一次就白白燒掉一周的人力。第二效率的問題。精品游戲的內(nèi)容量是普通游戲的數(shù)倍場(chǎng)景里可能有上千個(gè)物件、幾百種特效、幾十套UI界面。如果沒有一套統(tǒng)一高效的資源規(guī)范和自動(dòng)化處理管線策劃和美術(shù)每提交一次資源程序都要人工介入處理項(xiàng)目進(jìn)度基本就廢了。第三體驗(yàn)的上限問題。幀率、內(nèi)存、加載速度、包體大小這些硬指標(biāo)直接決定了游戲上線后玩家會(huì)不會(huì)留下?;A(chǔ)技術(shù)體系的核心目標(biāo)之一就是把這些硬指標(biāo)的上限抬高并且讓團(tuán)隊(duì)在制作過程中就能持續(xù)監(jiān)控和優(yōu)化而不是等玩家罵了之后再緊急修。分享里有一句話我印象很深基礎(chǔ)技術(shù)體系不是某個(gè)部門的專屬責(zé)任而是整個(gè)研發(fā)團(tuán)隊(duì)的公共基礎(chǔ)設(shè)施。它的設(shè)計(jì)質(zhì)量、穩(wěn)定性和易用性直接決定了精品游戲能不能“做得出來、做得下去、做出品質(zhì)”。1.2 體系的分層引擎、工具、數(shù)據(jù)、運(yùn)維說白了一套完整的基礎(chǔ)技術(shù)體系大致可以拆成四層引擎內(nèi)核層、工具鏈層、數(shù)據(jù)管理層、線上運(yùn)維層。每一層的定位和關(guān)注點(diǎn)都不一樣。引擎內(nèi)核層管的是“跑得動(dòng)”。渲染、物理、動(dòng)畫、音頻、網(wǎng)絡(luò)同步這些核心模塊決定了游戲表現(xiàn)力和流暢度的天花板。這塊通常由引擎組或引擎合作方負(fù)責(zé)主要工作是版本維護(hù)、定制改造和性能優(yōu)化。工具鏈層管的是“做得快”。包括資源導(dǎo)出插件、場(chǎng)景編輯工具、UI搭建工具、特效預(yù)覽工具、自動(dòng)化測(cè)試框架等。工具鏈好不好用美術(shù)和策劃的體感最直接。很多項(xiàng)目的共性問題是工具缺文檔、缺反饋機(jī)制出了問題只能靠人肉溝通一傳十十傳百效率極其低下。數(shù)據(jù)管理層管的是“不失控”。資源版本管理、配置數(shù)據(jù)表、文件打包分發(fā)、熱更新管線、AB包依賴關(guān)系這些都屬于數(shù)據(jù)層的范疇。數(shù)據(jù)層設(shè)計(jì)得好客戶端包體可控、加載迅速、更新包能精確到MB級(jí)別。設(shè)計(jì)得不好就會(huì)出現(xiàn)“改一行配置要下幾百M(fèi)B整包”這種讓玩家崩潰的體驗(yàn)。線上運(yùn)維層管的是“活得久”。日志收集、崩潰分析、性能監(jiān)控、灰度發(fā)布、在線熱修、兼容性大數(shù)據(jù)平臺(tái)。精品游戲的長線運(yùn)營依賴這一層給研發(fā)團(tuán)隊(duì)提供快速反饋循環(huán)。出問題時(shí)運(yùn)維層能幫你把定位時(shí)間從幾小時(shí)壓縮到幾分鐘。四層之間不是孤立存在的。引擎內(nèi)核提供能力工具鏈把能力變成可操作的流程數(shù)據(jù)層確保流程中的產(chǎn)物能高效流轉(zhuǎn)運(yùn)維層則反哺前幾層的決策數(shù)據(jù)。這樣的聯(lián)動(dòng)關(guān)系才是“體系”二字的真正含義。2. 核心技術(shù)模塊與關(guān)鍵設(shè)計(jì)思路2.1 渲染與畫面好看背后都是算力在談判精品游戲的畫面表現(xiàn)力最終都落在渲染管線的設(shè)計(jì)上。核心問題可以理解為一場(chǎng)談判有限的硬件算力CPU/GPU/內(nèi)存/帶寬和無限的表現(xiàn)需求美術(shù)想要更真實(shí)的光影、更精細(xì)的模型、更流暢的特效如何達(dá)成一個(gè)能穩(wěn)定運(yùn)行的妥協(xié)方案。常見的做法是按平臺(tái)和機(jī)型做渲染分級(jí)。高端機(jī)開啟全特效實(shí)時(shí)全局光照、體積霧、屏幕空間反射、高精度陰影中端機(jī)型砍掉一部分高頻特性比如用烘焙光照替代實(shí)時(shí)光照、降低陰影分辨率、關(guān)閉部分后處理效果低端機(jī)型則進(jìn)一步降級(jí)甚至切到前向渲染管線直接用簡單光照模型保證60幀的穩(wěn)定體驗(yàn)。這里有個(gè)關(guān)鍵點(diǎn)分級(jí)方案不是美術(shù)資源做三套而是同一套資源、跑不同的渲染路徑。實(shí)現(xiàn)方式是在引擎層面提供特性開關(guān)和材質(zhì)宏定義機(jī)制。比如同一顆樹的材質(zhì)在高端機(jī)上走PBR全流程在低端機(jī)上走簡化光照模型。打折但不至于讓畫面崩壞。我的實(shí)操經(jīng)驗(yàn)是渲染分級(jí)方案一定要趁早定最晚在原型階段就要有第一個(gè)可跑的版本。如果等到內(nèi)容大量產(chǎn)出之后再去搞分級(jí)美術(shù)資產(chǎn)里到處都是硬編碼的光照參數(shù)和貼圖依賴你會(huì)陷入“要么全都要要么全都沒有”的兩難境地改起來成本高到讓人絕望。還有一個(gè)容易被忽視的技術(shù)點(diǎn)資源流送。精品游戲的場(chǎng)景資產(chǎn)量巨大一次性全塞進(jìn)內(nèi)存必然爆炸。所謂資源流送就是根據(jù)攝像機(jī)位置動(dòng)態(tài)按需加載、卸載資源。比如玩家站在山腳下時(shí)山背面的樹木和巖石模型只需要保留低精度替身等玩家翻過山脊再加載高精度版本。實(shí)現(xiàn)流送的前提是資源有清晰的分塊邊界和依賴關(guān)系這塊需要在資源管線上花大功夫。2.2 加載與內(nèi)存啟動(dòng)速度是玩家的第一道選擇題玩家點(diǎn)開游戲圖標(biāo)之后多長時(shí)間能進(jìn)入主城這個(gè)數(shù)據(jù)在精品游戲里被反復(fù)打磨。行業(yè)里常見的目標(biāo)是冷啟動(dòng)15秒以內(nèi)、熱啟動(dòng)不超過5秒。為了達(dá)成這個(gè)目標(biāo)加載優(yōu)化通常從兩個(gè)維度切入減少要加載的內(nèi)容量提高加載過程的并行效率。減少內(nèi)容量主要靠兩層。第一層按場(chǎng)景分塊加載初始化只加載主城核心區(qū)域和必要UI外圍建筑延遲到玩家走近時(shí)再加載。第二層資源做細(xì)致化的LOD多細(xì)節(jié)層次和壓縮處理。最常見的浪費(fèi)是美術(shù)在遠(yuǎn)距離視角下還拖著4K貼圖合理配置可見距離和貼圖降級(jí)策略后場(chǎng)景內(nèi)存能直接省下30%以上。提高并行效率的關(guān)鍵是讓CPU、GPU、磁盤IO、網(wǎng)絡(luò)IO各干各的不要互相等待?,F(xiàn)在主流引擎已經(jīng)支持多線程加載但多線程引入的競(jìng)爭條件是資深開發(fā)都容易踩的坑。曾經(jīng)遇到一個(gè)情況——加載場(chǎng)景時(shí)多人同時(shí)訪問一個(gè)沒有加鎖的共享資源表導(dǎo)致極小概率的崩潰。這種問題線上數(shù)據(jù)高峰時(shí)才會(huì)暴露排查極為燒腦。內(nèi)存方面除了總量控制更要關(guān)注峰值的“形狀”。游戲運(yùn)行中內(nèi)存使用曲線如果像鋸齒一樣上下抖動(dòng)多半是資源反復(fù)加載卸載導(dǎo)致GC頻繁表現(xiàn)就是丟幀和卡頓。建議在內(nèi)存管理上引入對(duì)象池和資源常駐表機(jī)制高頻資源常駐內(nèi)存統(tǒng)一管理低頻資源走引用計(jì)數(shù)自動(dòng)釋放讓內(nèi)存曲線保持相對(duì)平緩。2.3 資源與熱更新小包上線、可控分發(fā)現(xiàn)在幾乎沒有不上熱更新的游戲了但熱更新方案設(shè)計(jì)的優(yōu)劣差距非常大。好的熱更新體驗(yàn)是進(jìn)游戲后你幾乎無感知更新包只有幾MB到幾十MB下載進(jìn)度條走得很順。差的熱更新是一上來就提示有幾百M(fèi)B的“資源更新”讓玩家在登錄界面前就開始罵人。熱更新問題的核心在于資源的分包粒度。如果所有資源捆在一個(gè)大包里哪怕只改了一個(gè)裝備圖標(biāo)也要重新下載整個(gè)包的差異內(nèi)容。解決思路是建立精細(xì)的代碼分塊和資源依賴樹把資源和代碼按功能模塊拆分成獨(dú)立小包。某個(gè)模塊有變化時(shí)更新管理器只拉取該模塊對(duì)應(yīng)的增量包。這里值得提醒一個(gè)常見誤區(qū)資源與代碼的更新要完全分離管理。代碼更新涉及邏輯變更哪怕是Lua這種腳本語言也需要嚴(yán)格的灰度機(jī)制防止線上出現(xiàn)大規(guī)模邏輯錯(cuò)誤。資源更新則相對(duì)安全但仍要保證版本回滾能力。我見過最慘痛的案例是熱更新腳本里有個(gè)全局變量沒有重置導(dǎo)致玩家在新舊版本交替期間出現(xiàn)長時(shí)間無法登錄最終只能強(qiáng)制整包更新。所以熱更新的每個(gè)發(fā)布包都必須具備“一鍵回滾”能力這是底線。2.4 多人同步與網(wǎng)絡(luò)聯(lián)機(jī)體驗(yàn)的隱形地基多人聯(lián)機(jī)游戲的網(wǎng)絡(luò)層設(shè)計(jì)是精品游戲技術(shù)體系里最難也最容易出事故的部分。這里的技術(shù)難點(diǎn)不在于“把數(shù)據(jù)發(fā)出去”而在于在復(fù)雜的公網(wǎng)環(huán)境下維持穩(wěn)定、低延遲、可擴(kuò)展的同步體驗(yàn)。首要是狀態(tài)同步和幀同步的選型問題。幀同步適合對(duì)戰(zhàn)類游戲邏輯確定性強(qiáng)省流量但對(duì)網(wǎng)絡(luò)抖動(dòng)極度敏感。狀態(tài)同步適合大世界MMO天然支持跨服和掉線恢復(fù)但服務(wù)器壓力大、帶寬消耗高、邏輯實(shí)現(xiàn)復(fù)雜。實(shí)際項(xiàng)目里經(jīng)常是混合架構(gòu)核心戰(zhàn)斗用幀同步大世界表達(dá)用狀態(tài)同步。選型背后一定要想清楚一個(gè)問題你的游戲是“人人交互實(shí)時(shí)性極高”還是“弱交互、重表現(xiàn)”前者偏向幀同步后者偏向狀態(tài)同步。選錯(cuò)了架構(gòu)后期發(fā)現(xiàn)實(shí)時(shí)性跟不上基本等于要推翻重做這個(gè)代價(jià)任何團(tuán)隊(duì)都承受不起。網(wǎng)絡(luò)層的優(yōu)化永無止境但有幾個(gè)基礎(chǔ)手段可以確保底線UDP之上的可靠消息機(jī)制、增量狀態(tài)壓縮、延遲預(yù)測(cè)與插值算法、斷線重連的快速恢復(fù)。每一層都要做線上數(shù)據(jù)埋點(diǎn)比如幀同步的輸入延遲直方圖、狀態(tài)同步的每秒狀態(tài)量指標(biāo)沒有這些數(shù)據(jù)網(wǎng)絡(luò)優(yōu)化永遠(yuǎn)只能靠感覺。3. 實(shí)操過程與工程落地要點(diǎn)3.1 從零搭建技術(shù)體系分階段推進(jìn)別想一口氣吃成胖子很多團(tuán)隊(duì)一想到搭建基礎(chǔ)技術(shù)體系就試圖一步到位、大而全地鋪開。我的經(jīng)驗(yàn)是這種做法幾乎注定失敗?;A(chǔ)技術(shù)體系不是一次性交付的產(chǎn)品而是隨項(xiàng)目演進(jìn)持續(xù)迭代的基礎(chǔ)設(shè)施。正確路徑是按階段推進(jìn)。第一個(gè)階段也就是原型期只做最小可用集合版本管理規(guī)范、基礎(chǔ)資源管線、能跑通的構(gòu)建出包流程、基礎(chǔ)日志埋點(diǎn)。這四樣?xùn)|西是你接下來一切工作的地基它們不需要精致但必須穩(wěn)定可用。很多團(tuán)隊(duì)原型期連構(gòu)建出包都靠美術(shù)手動(dòng)拷貝資產(chǎn)進(jìn)度一趕起來就會(huì)混亂到不可收拾。第二個(gè)階段內(nèi)容量產(chǎn)期重點(diǎn)補(bǔ)齊工具鏈和自動(dòng)化工裝。資源批量檢查工具、場(chǎng)景自動(dòng)化測(cè)試腳本、UI自動(dòng)截圖對(duì)比、異常上報(bào)系統(tǒng)這些都是在這個(gè)階段需要落地的。量產(chǎn)期的內(nèi)容產(chǎn)出量是爆發(fā)式的沒有自動(dòng)化工具兜底質(zhì)量和效率的雙重目標(biāo)必然崩塌。第三個(gè)階段上線沖刺期完善線上監(jiān)控和運(yùn)營工具。崩潰率、卡頓率、加載時(shí)長、熱更新成功率、兼容性覆蓋度這些指標(biāo)都要在上線前至少穩(wěn)定跟蹤一兩個(gè)月的版本迭代建立基線數(shù)據(jù)讓后續(xù)版本發(fā)布的健康度有參照。我見過最漂亮的推進(jìn)節(jié)奏是每階段結(jié)束都有一輪集體復(fù)盤把各環(huán)節(jié)暴露出來的問題沉淀成下一階段的任務(wù)清單。技術(shù)體系的建設(shè)是一個(gè)持續(xù)反饋、持續(xù)收斂的過程這一點(diǎn)越早意識(shí)到團(tuán)隊(duì)走得越穩(wěn)。3.2 數(shù)據(jù)驅(qū)動(dòng)設(shè)計(jì)用埋點(diǎn)和監(jiān)控替代“我覺得”基礎(chǔ)技術(shù)體系建設(shè)過程中最容易犯的毛病是憑經(jīng)驗(yàn)拍腦袋?!拔矣X得場(chǎng)景加載慢是因?yàn)槟P兔鏀?shù)太高”——先量化再說話。所有的性能問題、體驗(yàn)問題、穩(wěn)定性問題在缺少數(shù)據(jù)支撐的情況下做任何優(yōu)化動(dòng)作都是在碰運(yùn)氣。埋點(diǎn)體系要覆蓋幾個(gè)維度客戶端幀率與卡頓分布、加載耗時(shí)分解資源加載、場(chǎng)景初始化、邏輯啟動(dòng)各占多少、內(nèi)存分模塊占用、網(wǎng)絡(luò)請(qǐng)求耗時(shí)、熱更新失敗率、崩潰現(xiàn)場(chǎng)堆棧聚合。這些數(shù)據(jù)越是細(xì)粒度后續(xù)問題的定位效率就越高。舉一個(gè)實(shí)際案例某個(gè)版本上線后部分機(jī)型的崩潰率從0.5%漲到3.2%。數(shù)據(jù)平臺(tái)聚合出來的崩潰堆棧指向同一段紋理上傳代碼。繼續(xù)追查才發(fā)現(xiàn)崩潰與設(shè)備剩余存儲(chǔ)空間深度相關(guān)是磁盤寫入失敗導(dǎo)致的。這類問題的定位沒有埋點(diǎn)和崩潰聚合是基本不可能靠模擬復(fù)現(xiàn)找到根因的。數(shù)據(jù)驅(qū)動(dòng)的另一面是性能基線的建立與回歸預(yù)警。每周固定版本持續(xù)跑幀率、內(nèi)存、流量的自動(dòng)測(cè)試如果關(guān)鍵指標(biāo)相比上一版本劣化超過閾值系統(tǒng)自動(dòng)標(biāo)紅并阻止合入主干。這個(gè)機(jī)制聽上去簡單真正能堅(jiān)持執(zhí)行的團(tuán)隊(duì)不多但一旦堅(jiān)持住性能劣化基本不會(huì)拖到大版本才爆發(fā)。3.3 工具鏈與工作流美術(shù)和策劃的體驗(yàn)也是核心技術(shù)基礎(chǔ)技術(shù)體系的最終用戶不只是程序員。美術(shù)、策劃、測(cè)試所有人都要在這套體系之上工作。如果工具鏈對(duì)非程序人員不友好大家就會(huì)繞開體系自己搞一套土辦法你的資源規(guī)范和技術(shù)方案就成了一紙空文。工具鏈設(shè)計(jì)有一個(gè)核心原則讓正確的事情做起來最順手。比如美術(shù)導(dǎo)出一個(gè)模型時(shí)工具應(yīng)該自動(dòng)檢測(cè)非法資源、自動(dòng)生成多級(jí)LOD、自動(dòng)選擇壓縮格式。策劃改數(shù)值時(shí)配置表工具應(yīng)該實(shí)時(shí)校驗(yàn)合法性并給出錯(cuò)誤提示而不是把錯(cuò)誤留到運(yùn)行時(shí)才爆出來。我參與的一個(gè)項(xiàng)目在早期工具鏈簡陋美術(shù)導(dǎo)出資源全靠拖拽文件夾經(jīng)常覆蓋錯(cuò)版本。后來做了一個(gè)簡單的導(dǎo)出插件把校驗(yàn)、命名、格式轉(zhuǎn)換、版本遞增全部集成到一個(gè)按鈕操作里。上線兩周后資源相關(guān)的協(xié)作沖突降低了80%。這個(gè)例子說明一個(gè)道理工具鏈的每一點(diǎn)改進(jìn)都是在為整個(gè)團(tuán)隊(duì)節(jié)省生命。還有一點(diǎn)想強(qiáng)調(diào)工具鏈需要反饋機(jī)制。美術(shù)在工具里遇到問題應(yīng)該能一鍵上報(bào)并自動(dòng)附帶操作日志和截圖。開發(fā)者修復(fù)后工具端能明確提示版本更新。建立起這樣的閉環(huán)工具鏈才能在項(xiàng)目周期內(nèi)持續(xù)進(jìn)化。3.4 兼容性治理精品游戲不是只有高端機(jī)精品游戲的名號(hào)不是因?yàn)橹辉谝粌煽罡叨藱C(jī)上跑得順而是要在龐大的設(shè)備矩陣上都保持可用。安卓設(shè)備的碎片化問題不用多說光是分辨率、內(nèi)存、GPU廠商的排列組合就能輕松上千種。兼容性治理本質(zhì)上是在做一個(gè)大型概率工程讓每一種組合下的崩潰率、閃退率都低到可控范圍。兼容性工作要從設(shè)備分級(jí)入手。按CPU檔次、內(nèi)存大小、GPU能力、系統(tǒng)版本把設(shè)備劃分為S/A/B/C幾個(gè)等級(jí)。S級(jí)設(shè)備要求頂級(jí)畫質(zhì)和完整特效A級(jí)設(shè)備保持高幀率但可適度削減特效B級(jí)設(shè)備鎖定中等畫質(zhì)并開啟穩(wěn)妥的性能配置C級(jí)設(shè)備以“能玩”為底線適當(dāng)降低分辨率和視距。然后是自動(dòng)化兼容性測(cè)試系統(tǒng)。真機(jī)矩陣的成本很高但只靠模擬器會(huì)漏掉大量GPU驅(qū)動(dòng)相關(guān)的問題。合理編排是每個(gè)版本跑一遍模擬器冒煙測(cè)試每晚跑一批重點(diǎn)真機(jī)回歸每發(fā)布前做數(shù)百臺(tái)真機(jī)的全量兼容性掃描。配合線上設(shè)備維度的崩潰監(jiān)控基本能夠在新版發(fā)布后24小時(shí)內(nèi)發(fā)現(xiàn)重大兼容性問題并快速止血。分享里提到一個(gè)關(guān)鍵認(rèn)知兼容性不是測(cè)試一個(gè)階段的工作而是從渲染特性選型、資源壓縮格式選擇、內(nèi)存上限劃定、SDK調(diào)用時(shí)序到真機(jī)測(cè)試覆蓋率全程都要考慮的問題。越是前期把兼容性納入技術(shù)選型決策后期擦屁股的成本就越低。4. 常見問題與排查技巧實(shí)錄4.1 加載慢、卡頓、內(nèi)存泄漏等老問題的排查路徑我在一線排查過大量項(xiàng)目問題整理幾個(gè)最典型的高頻故障場(chǎng)景和排查路徑。第一類加載慢。不要只看總耗時(shí)要把加載過程按階段拆開。最常用的方式是打開引擎自帶的加載性能分析工具看每幀加載內(nèi)容、磁盤IO等待、資源轉(zhuǎn)碼耗時(shí)。很多時(shí)候“加載慢”的真相是主線程在做資源反序列化把耗時(shí)操作丟到子線程就能立竿見影。但要注意資源反序列化涉及的數(shù)據(jù)往往存在跨線程依賴需要提前做好只讀設(shè)計(jì)。第二類運(yùn)行時(shí)卡頓。先確認(rèn)卡頓是周期性還是偶發(fā)性。周期性卡頓多與GC或定時(shí)任務(wù)相關(guān)抓一幀C#或腳本的調(diào)用堆?;灸芏ㄎ?。偶發(fā)性卡頓多與資源加載、對(duì)象實(shí)例化和網(wǎng)絡(luò)重連掛鉤。特效集中爆發(fā)時(shí)掉幀優(yōu)先懷疑半透明物體overdraw過高用GPU性能分析工具查看像素填充率。第三類內(nèi)存泄漏。最迷惑人的是“看起來沒有泄漏但內(nèi)存持續(xù)上漲”。這種多半是資源緩存只增不減或事件監(jiān)聽器懸掛導(dǎo)致對(duì)象無法回收。排查方式是內(nèi)存分析工具對(duì)比兩個(gè)相似時(shí)間點(diǎn)的堆快照按對(duì)象類型排序重點(diǎn)看數(shù)量和大小同時(shí)增長的類別。內(nèi)存泄漏很少是單點(diǎn)的往往是一系列小問題累加需要持續(xù)治理。整理成表格方便直接對(duì)照速查現(xiàn)象首選排查工具常見根因快速驗(yàn)證方法冷啟動(dòng)過慢加載性能分析主線程反序列化過重將反序列化移入子線程后對(duì)比耗時(shí)場(chǎng)景切換卡頓引擎Profiler抓幀大批量資源同時(shí)加載檢查資源流送分塊邊界是否合理高頻GC丟幀內(nèi)存快照對(duì)比頻繁創(chuàng)建臨時(shí)對(duì)象檢查循環(huán)體內(nèi)是否有局部對(duì)象分配特效爆發(fā)掉幀GPU Occupancy分析Overdraw過高、填充率超限降低半透明特效層數(shù)后觀察改善內(nèi)存只漲不降堆快照對(duì)比緩存無上限、事件懸掛查看靜態(tài)容器持引用列表4.2 熱更新與版本發(fā)布的隱性陷阱熱更新方案本身跑起來之后會(huì)在版本發(fā)布流程里制造一些隱蔽的坑。最典型的是“新舊資源混用”問題。玩家在更新過程中舊版本代碼引用了新資源格式或新代碼讀取了舊版本數(shù)據(jù)導(dǎo)致紋理花屏、骨骼錯(cuò)亂甚至邏輯崩潰。規(guī)避方案熱更包必須保證代碼和資源的雙向兼容至少在跨一個(gè)版本時(shí)要做到向前兼容。對(duì)每一個(gè)資源字段、數(shù)據(jù)結(jié)構(gòu)文件的修改都要評(píng)估新舊代碼的解析差異必要時(shí)用版本號(hào)加雙讀方案過渡。發(fā)布流程層面還有一個(gè)常被忽略的環(huán)節(jié)增量包生成的確定性。同一版本無論何時(shí)打包增量內(nèi)容的hash都必須完全一致。否則你會(huì)遇到玄學(xué)問題部分玩家收不到更新、更新內(nèi)容跟預(yù)期不一致、回滾后無法再次更新。解決方案是把資源清單的生成和差異計(jì)算做成完全確定性的流程輸入相同則輸出必然相同?;叶劝l(fā)布時(shí)建議先在內(nèi)部渠道小范圍放量同時(shí)盯緊崩潰率、關(guān)鍵轉(zhuǎn)化率和異常日志關(guān)鍵詞確認(rèn)無誤再放全量。很多團(tuán)隊(duì)跳過了內(nèi)部灰度直接全量發(fā)布結(jié)果熱更包有致命缺陷線上幾百萬玩家同時(shí)中招這種事故的輿論代價(jià)選超省下來的那兩天時(shí)間。4.3 線上崩潰與異常處理的黃金三板斧線上出現(xiàn)崩潰最忌諱的是亂了陣腳東改西試。我自己的處理路徑是固定的三板斧分享出來供參考。第一板斧快速定位影響范圍。通過崩潰聚合平臺(tái)按版本、機(jī)型、系統(tǒng)、渠道篩選崩潰率最高的堆棧確認(rèn)是新增崩潰還是歷史低概率尾部集中觸發(fā)。這一步的關(guān)鍵是不要被單個(gè)崩潰樣本帶偏一定要看聚合視角。第二板斧符號(hào)化與上下文還原。拿到堆棧后第一時(shí)間符號(hào)化到源碼行號(hào)同時(shí)查看崩潰前后的日志、網(wǎng)絡(luò)狀態(tài)、資源地址信息。很多崩潰發(fā)生的真正原因不在崩潰現(xiàn)場(chǎng)而在幾十秒前那一次異常資源配置或觸控響應(yīng)中。高質(zhì)量埋點(diǎn)是這個(gè)時(shí)候唯一的救命稻草。第三板斧止血與根治并舉。如果線上影響面大先用熱更關(guān)閉相關(guān)觸發(fā)路徑或降級(jí)效果快速止血。同時(shí)組織力量回歸根因絕不在止血后就把問題擱置。我見過的團(tuán)隊(duì)里最明顯的差距就在這里——優(yōu)秀的團(tuán)隊(duì)每次事故都有復(fù)盤都會(huì)把根因?qū)戇M(jìn)測(cè)試用例防止復(fù)發(fā)。平庸的團(tuán)隊(duì)只做止血于是同一個(gè)問題換一個(gè)機(jī)型再次爆發(fā)周而復(fù)始。提示熱更止血必須謹(jǐn)慎。如果崩潰與熱更包自身強(qiáng)相關(guān)任何熱更操作都可能擴(kuò)大故障面。這種情況下優(yōu)先考慮服務(wù)端配置開關(guān)降級(jí)而不是客戶端熱更。5. 技術(shù)體系之外容易被忽略的幾件事5.1 團(tuán)隊(duì)協(xié)作與規(guī)范意識(shí)體系是工具也是契約基礎(chǔ)技術(shù)體系要發(fā)揮作用光有系統(tǒng)層面建設(shè)是不夠的團(tuán)隊(duì)里的每一個(gè)人都要遵循同一套契約。最有效的方式是讓規(guī)范自動(dòng)嵌在工具鏈里讓人沒有機(jī)會(huì)違反規(guī)范而不是寫一份幾十頁的文檔要求大家“自覺閱讀”。舉例來說與其要求美術(shù)“資源命名必須符合XX規(guī)則且紋理格式統(tǒng)一”不如在導(dǎo)出插件里強(qiáng)制執(zhí)行命名校驗(yàn)不符合規(guī)則直接禁止導(dǎo)出并提示修改點(diǎn)。與其要求程序“所有接口調(diào)用必須考慮線程安全”不如把共享資源的訪問都收斂到統(tǒng)一的線程安全封裝接口里從API層面杜絕誤用。新成員加入項(xiàng)目時(shí)公共wiki和工具鏈自帶的操作引導(dǎo)比任何口頭培訓(xùn)都管用。我在實(shí)際項(xiàng)目中看到過最順暢的交接是新人第一天就通過內(nèi)部的“工具自助講解模式”跑通了從資源導(dǎo)出到真機(jī)運(yùn)行的整套流程。體系化的價(jià)值在這種時(shí)刻體現(xiàn)得淋漓盡致。5.2 技術(shù)債治理精品游戲長線運(yùn)營的隱形挑戰(zhàn)每個(gè)項(xiàng)目都有技術(shù)債精品游戲也不例外。技術(shù)債不可怕可怕的是沒有記賬、沒有還債計(jì)劃。技術(shù)體系里專門劃分一塊“技術(shù)債治理”空間所有臨時(shí)的hack方案、繞過的缺陷、未完成的遷移都記錄在案并定期復(fù)審。治理技術(shù)債的一個(gè)有效手段是設(shè)立“重構(gòu)預(yù)算”。每個(gè)迭代周期預(yù)留一定比例的時(shí)間專門處理債務(wù)而不是等到債務(wù)壓垮團(tuán)隊(duì)時(shí)再緊急停機(jī)。某個(gè)版本線上性能問題叢生后來復(fù)盤發(fā)現(xiàn)是一年多前為趕節(jié)點(diǎn)臨時(shí)引入的一條全局慢路徑一直沒清理。如果當(dāng)時(shí)按重構(gòu)預(yù)算的機(jī)制記錄了這筆債并在后續(xù)三個(gè)版本里攤銷處理就不會(huì)出現(xiàn)那一次上線事故。5.3 創(chuàng)新試錯(cuò)與體系穩(wěn)定性的平衡基礎(chǔ)技術(shù)體系的穩(wěn)定性和創(chuàng)新需求天然存在張力。體系太死團(tuán)隊(duì)不敢嘗試新技術(shù)體系太活線上事故頻發(fā)。成熟的做法是構(gòu)建“隔離的創(chuàng)新跑道”新的渲染特性、動(dòng)態(tài)加載策略、網(wǎng)絡(luò)協(xié)議優(yōu)化先在獨(dú)立的Demo分支和灰度環(huán)境驗(yàn)證驗(yàn)證通過再納入主體系。這個(gè)思路跟游戲行業(yè)常用的玩家分級(jí)灰度邏輯一脈相承新體系先在內(nèi)部版本跑再在部分渠道小流量測(cè)試最后全量放開。整個(gè)過程仍然有明確的技術(shù)指標(biāo)門檻不達(dá)標(biāo)就回滾不將就。讓創(chuàng)新在可控范圍內(nèi)冒頭又不讓體系整體失穩(wěn)這是技術(shù)管理中最考驗(yàn)火候的地方。就我的實(shí)際體會(huì)來說基礎(chǔ)技術(shù)體系建設(shè)的收益不在某一次技術(shù)選型或某一個(gè)工具落地而是多年之后當(dāng)項(xiàng)目面臨巨大內(nèi)容量、多變市場(chǎng)環(huán)境時(shí)團(tuán)隊(duì)依然能保持高效協(xié)同、快速迭代、穩(wěn)定運(yùn)營。把時(shí)間拉長看這幾乎是一個(gè)“今天種樹三年后乘涼”的過程。種樹的時(shí)間就是項(xiàng)目開始時(shí)最容易被壓縮的那部分。希望這篇拆解能讓你在做“種不種樹”這個(gè)決定時(shí)多一些確定的底氣。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
欧美婷婷五月天综合| 天天做天天爱天天做| 成人在线精品| 久久狠狠欧美| 一点色成人网| 99色免费观看全部| 超碰人人色| 伊人婷婷五月天| 综合激情啪啪| 九月停停| 婷婷丁香色情| 午夜九九电影| 停停综合色色| 天天天天干| 思思热思在线精品视频| 久久大香免费| 开心激情婷婷| 曰日爽日日操| 婷婷色播婷婷| 丁香五月天91| 五月天婷婷色色| 欧美激情 日韩无码 婷婷 五月天| 极品少妇高潮啪啪AV无码| 五月婷婷,六月激情| 中文字幕在线视频播放| 五月婷婷与六月丁香图片激情| 国产91视频| 99热这里只有精| 开心五月丁香综合久久| www.久久婷婷| 天天射天天插天天干| 亚洲夜夜操| 99精品视频推荐| 色欲色香综合网| 天天操天天操综合| 综合激情在线| 韩国中文字幕91| 无人精品在线视频| 免费精品66| 激情综合色婷婷啪啪五月天| 久久综合丁香激情五月| 夜丁香五月婷婷| 91色九| 亚州操逼网| 久热99中文字幕| 五月婷色丁香| 亚洲无码黄色| 一点色成人网| 婷婷五月天小说| www.激情五月天。com| 免费无码毛片一区二区A片| 韩国天天婷婷| 欧美丁香六月激情视频| www.99久| 超级碰碰视频无码| 亚洲日本韩国| 99ri在线视频| 亚洲AV色婷婷人禽五月天| 综合激情在线| 久久久999精品| 久色视频首页| 久久婷婷热| 一本婷婷丁香久久| 蜜臀AV在线观看| 五月天激情综合| 青青夜夜狠狠夜夜狠狠| 五月天久久婷婷| 丁香六月在线综合| 99热官网| 久99久视频| 久久婷婷五月综合色丁香| 婷婷五月天色色| 男人大jjc女人免费视频| 超碰免费人妻| 囯产精品久久欠久久久久久九大| 天天天天色天天天天天干| 五月天无码| 丁香婷婷性久久| A片试看50分钟做受视频| 九月色婷婷综合| 激情丁香五月激情婷婷| 人人色人人摸人人看| 狠干综合| 久久久.www| 亚洲午夜AV| 99久久这里只有精品| 米奇激情婷婷| 亚洲色婷婷99一9|| 精品婷婷五月视| 99在线免费视频| 97偷拍对白视频| 极品人妻XXXXOOOO| 超碰久热| 99热这里全都是精品| 婷婷丁香五月网| 天天拍久久| 亚洲网在线观看| 免费黄色片子| 99久久99九九九99九他书对| 日韩成人无码人妻| 91天天操天天干天天射| 91无码视频| 综合久久五月天| 婷婷五月深深爱| 激情婷婷亚洲五月| 亚洲婷婷五月草久| 色综合久久伊伊婷婷五月| 另类图片天天影视在线观看| 99操中文视频| 草草视频91| 免费看无码视频A级| 啪啪日本欧美| 婷婷丁香黄色| 婷婷综合另类| 久久jiuwww| 99热999| 婷婷碰碰| 国产超碰av| 性爱激情综合网| 国产真实乱了老女人视频| 丁香五月婷婷色| 激情综合五月| 国产偷人爽久久久久久老妇APP| 六月激情婷婷| 成人中文网| 97在线观视频免费观看| 伊人喵咪a V| 日韩啪啪网| 中文资源在线a| WWW免费视频碰碰碰碰| 五月天综合久久| 无码99| 五月色丁香| 婷婷五月亚洲一本在线丁香| 久re热视频| 丁香五月中文字幕色播| 色色色免费视频| 九九综合精品| 国产AV一区二区三区最新精品| 国产欧美熟妇另类久久久| 777精品久无码人妻蜜桃| 深爱五月天| 色婷婷亚洲婷婷| 高清一区二区三区日本久| 欧美激情综合| 色婷婷四虎| 午夜日韩久久久网站| 中文字幕网站在线观看| 婷婷五月综合婷婷| 天天夜夜操| 性色天| 午夜九九九九九九九九九九九九九| av色婷婷| 俺也去五月婷婷丁| 天天综合五月天| 久9热在线视频| 狠狠爱综合网| 99福利视频| 婷婷五月天激情基地| 五月丁香六月婷婷激情视频在线观看免费| 另类天堂| 91妻人人爽人人看片| 五月色丁香婷婷综合| 婷婷狠狠操| 狠狠色色| 国语精品探花| 婷婷亚洲天堂| 另类婷婷五月天啪帕帕| 中文字幕成人| 国产资源91在线| 国产无人区大片| 91久操| 国产精品激情AV久久久青桔| 久久一品区| 日本超碰在线| 久久视频在线| 99热精品在线播放| 亚洲色色五月| 婷婷丁香色五月天久久88| 亚洲婷婷丁香五月视频| 五月丁香婷婷在线| 亚州第一黄网| 久久在线视频只有这里有精品| 开心五月婷婷99| 日本九婷婷| 五月天开心网| 成人婷婷| www激情五月天| 天天噜日日噜综合无码| 91精品久| 日日操,日日爽| 激情婷婷五月| av操逼网| 另类五月婷婷| 亚洲成人高清在线| 成人电影AV在线观看| 久久的爱大香蕉| 色色五月天婷婷| 色婷婷五月天成人网| 亚洲婷婷欧美婷婷| 伊人激情综合| 综合激情五月丁香9999久久精| 天天天干夜夜夜操| 青青草伊人婷婷| 99日韩| 97色色在线视频| 青草激情综合| 9191avse| 天天天天干| 少妇高潮呻吟A片免费看软件 | 久久久99婷婷久久久久久| 国产精品久久在线观看技巧| 天天色综网| 操操天堂| www.久久色.com| 99免费综合网| 玖玖综合色| 亚洲AV成人无码精品| 天天干,天天舔| 人妻久久久| 青青久在线视频免费观看| 色五月婷婷在线| 婷婷精品性性性性性性性| 五月综合视频| 五月婷婷啪| 九九在线精点品| se色婷婷视频| 婷婷五月天亚洲天堂| 日日干天天射| 日韩色久| 97碰碰在线看视频免费| 亚洲无码yw| www.色擼擼.com| 日日夜夜干| 五月天激情影院| 五月天激情婷婷| 婷婷久久爱| 久草婷婷视频| 99热这| 1024亚洲无码| 丁香五月天五码婷婷| 99精品网| 亚洲婷婷五月天综合| 亚洲99综合| 狠狠情色| 中文字幕av久久爽一区| 91超碰在线观看| 99色视频| 欧美日韩成人在线观看| 97九色视频| 91丨九色丨老农村| 色五月激情综合| 操人精品| www.henhenl| 97色永久免费视频| 色色色色色色色色五月先| 91视屏在线观看com.wwwvv| 99色热视频在线| 欧美 色婷婷| 国产日批视频| 成人免费120分钟啪啪| 99久久婷婷国产综合精品青桔 | 91久久国产自产拍夜夜91久久精品文字>91麻豆精品国产 | www.久久| 婷婷五月四狠狠| 99视频在线| 欧美日本VA| 丁香五月社区| 色欲日日躁| 无码免费人妻A片AAA毛片西瓜| 99爱欧美| 伊人喵咪a V| 久热精品视频| 五月丁香婷婷啪啪综合| 亚洲综合色色| 亚洲欧洲色色| 91 久热| 色色网五月激情| 婷婷新网址| 色播播婷婷| 国产婷婷综合在线免费视频| 婷婷五月天成人| 丁香综合婷婷开心激情网| 五月综合久久| 九九热这里只有精品12| 97日本在线| 一区二区乱码视频| 婷婷基地成人五月天| 欧美 日韩 人妻 高清 中文| 人人摸人人干人人做| 欧美六月婷婷| 91丨九色丨东北熟女| 天天狠天天狠| 午夜微拍福利| 丁香五月婷婷啪啪啪| 婷婷久久五月天| 免费看欧美成人A片无码| 亚洲综合婷婷五月天| 日韩成人影片在线观看| 东京热免费视频| 五月丁六月香av| 五月丁香婷婷狠狠操| www,超碰| 六月色色综合| 大伊香蕉玖玖爱| 色五月婷婷五月| 五月丁香综合伦理片| 五月丁香六月婷婷激情四射| 久久婷婷综合五月天| 五月婷婷成人网首页| 97成人视频| 色碰碰| 婷婷五月蜜桃成人桃色丁香| 日韩成人电影av| 丁香五月天色婷婷| 亚洲狠狠干| 五月天堂色| 无码视频国内精品久久久| 天天婷婷综合亚洲亚洲| 美女婷婷六月色| 六月丁香成人| 婷婷六月色| 婷婷五月色情天| 色综合网上班开心婷婷久久| 狠狠 久久| 婷婷六月激情| 97色色色| 五月丁香欧美综合免费视频| 人人操99| 日本欧特黄色刺激一区影视久精品无码| 69精品人人人人| 开心五月丁香啪| www.婷婷,com| WWW.亚洲无码| 99无码| www.99视频| 日韩色色网| 月丁香久久久| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 美国天天日天天操| 99热成人永久免费| 色色五月天婷婷丁香| 四虎国产精品永久在线国在线| 色色亚洲视频| 国精产品久久| 精品无码色| 激情图片久久| 抽插特写| 欧美性猛交99久久久久99按摩| 91久久精品无码一区二区三区| 五月五丁香婷婷| 无码99| 五月综合色| 热思思| 久久久久久久综合狠狠综合| 婷婷丁香花五月天| 五月婷久草| 在线观看国产高清视频免费网站| 99视频内射三四| 日本色婷婷| 亚洲AAAA网| 婷婷五月色播网| 婷婷久久图片| 夜色爱爱亚洲| 色色综合网www| 大香蕉啪啪啪| 亚洲综合另类| 99久在线精品99re8热| 婷婷丁香色无五月| 玖玖资源天天无码| 五月天堂在线| 久久深爱激情网| 婷婷激情丁香五月婷婷激情丁香五月婷婷| 9191avse| 97香蕉久久超级碰碰高清版| 婷婷大乡焦噜噜| 久久99网| 久久久色情| 90色免费视频| 97se在线视频| 国产在线视频1234| 综合久久综合综合| 久久综合网桃花| YW无码| 99色综合久久| 成人小说色图婷婷五月| 男人的天堂在线婷婷| 五月天sesese| 亞洲自怕| 婷婷在线日韩综合| 国产av网| 亭亭丁香97| 91丨九色丨国产打屁股网站| 手机在线视频观看9| 99操九九网| 激情涩播| 五月天丁香啪啪网| 激情综合九| 丁香五月停停av| 99综合五月免费视频色婷婷| 人人操超碰| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 人人爱人人草| av在线免费网站 | 五月婷在线观看| 丁香五月影视| 第五色婷婷| 一起草性爱不卡视频| 婷婷五月六月| 久久国产一区二区三区| 伊人99久久| 色综合网页| 伊人超碰在线| www.色婷婷.com| 色婷久| 婷婷五月天亚洲综合| 91色色色| 麻豆观看夏晴子| 在线视频区| 97爱艹婷婷开心丁香激情综合| 婷婷五月激情小说| 日韩一区二区A片免费观看| 丁香五月性爱| 婷婷色中文字幕| 人妻爽爽爽久久久久久久久| av亚洲国产小电影| 五月丁香婷婷伊人| 殴美97色| 91丨九色丨熟女| 五月丁香啪啪啪综合网| 99热色精品| 激情五月丁香色婷婷| 国产美女无遮挡裸体毛片A片 | 天天拍久久| 欧美综合激情| www.五月丁香| 日韩999| 五月色丁香| 99热6这里只有精品6| 国产成人精品一区二三区熟女在线| 激情五月天之六月婷婷| 婷婷五月另类网站| 台湾综合丁香五月蜜桃| 女人被躁到高潮嗷嗷叫小| 亚洲一区二区无码蜜乳av| 微拍92| 天天日天天爽| 91丨九色丨东北熟女| 思思热在线观看| 青青草蜜臀| 久久九九99.www| 五月天婷婷操逼视频| 国产成人网址| 亚洲电影在线观看| 五月天婷婷久久视频| caop在线视频| 色婷婷基地 | 九月丁香五月婷婷| 亚洲综合草草| 97caop| 五月婷婷六月丁香综合| 中文字幕在线免费观看视频| 在线播放人妻| 99热99美国在线观看| 开心五月六月婷婷| 日日夜夜九九| 久久久com| 五月婷婷久久内射| 97久久五月丁香婷婷| 精品皮股午夜AV| 1024你懂的欧美曰韩| 另类激情综合| 色综合网综合| 91黄操| 国产做爰视频免费播放| 久99久热| 深爱五月亚洲| 超碰成人电影| 91操黄| 狠狠丁香| 天天天日天天天干| 激情六月丁香| 69凹凸成人综合网| 婷婷午夜激情| 草逼大片| 天天做综合| 丁香婷婷久久综合在线| 婷婷亚洲在线| 欧美色性色好| 激情综合网五月天天| 婷婷久久婷婷色五月| 小视频久久久aaa| 亚洲国产精品综合色区| 六月丁香婷| 91碰免费视频| 丁香成人五月天| 夜夜爽天天爽| 欧美日韩成人在线网站| 亚洲天堂亚洲色色色| 五月丁香婷婷激情四射迷人| 成人精品在线观看| 91视频精品99| 婷婷五月天激情丁香| 精品五月视频婷婷在线观看| 色噜噜五月丁香婷婷| 蜜桃人妻无码AV天堂三区| 久久这里只有精品99| 开心五月婷婷六月丁香| 91视频一起草| 日噜噜色| 免费看成人AA片无码视频吃奶| 狠狠爱五月婷婷| 久久人妻情侣| 五月丁香婷婷网网网网| 超碰av天堂| 狠狠干.com| 91成人性爱视频| 丰满熟女人妻一区二区三| 久久成人性爱| 大香蕉九操| www99精品亚| 激情婷婷五月天| www.五月婷婷久久.com| 99九九视频| 亚洲、热| 婷婷另类开心| 另类图片天天影视在线观看| 婷婷五月天AV在线| 五月丁香A片| 亚洲日韩一页精品发布| 五月色婷婷综合| 中文字幕成人影视| 97热这里只有精品| 亚洲色 视频| 婷婷永久在线| 五月婷六月综合在线观看| 9福利性视频欧美| 婷婷五月天最新网址| 五月天激情小说网| 五月丁香AV在线| 成人必爱视| 中文字幕,综合,91| 久草嫩草在线观看| 五月婷狠狠| 色135综合网| 97综合在线| 99热老网站| 操逼视频一区| 99riAv1国产在线观看| 97人人操| 激情五月天婷婷| 婷婷中文在线| 大婷婷色呦呦噜噜色呦呦噜噜| 五月天婷婷色播在线网| 五月丁香婷婷无码A∨| 婷婷五月小说色综合| 超碰在线人人| 96精品久久久久久久久| 97视频.干com| 五月丁香久人妻中文| 久久9热| 熟美女麻豆| 肏日网在线看| 日本天堂久久| 婷婷久久18| 91人人妻人人操| 五月黄色婷婷| 大香蕉久久久久久久久| 一区中文字幕电影| .comwww在线观看免费操| 97超级碰碰碰久久久| 激情综合五月丁香六月婷婷| 狠狠色婷| 成人丁香五月婷| 国产精品人妻在线网址| 超碰a女人的天堂| 偷偷操99| 天堂久久精品| 天天性视频| 色欲人妻综合aaaaaaaa网| 91超级碰碰碰| 色五月婷婷天天干| 性爱电影科技贸易有限公司| 欧美色色色| 99热99干| 天天操夜夜操| 色综合激情| 丁香五月伊人| 激情内射人妻1区2区3区| 超碰婷婷色| 在线亚洲综合网| aaa9区免费在线观看| 五月天丁香成人社| 黄色大片又大粗又爽| 九九sese| 婷婷射婷婷舔| h亚洲| 思思热精品在线视频| 婷婷五月天成人网| 亚洲V国产V欧美V久久久久久| 激情综合视频| www.99免费视频| 色婷久九| 丁香五月天色| 五月婷婷手机在线| 欧美黄色韩日网| 五月丁香六月激情网| 久久久精久人妻| 可以直接看的av| 亚洲激情综合网| 婷色五月| 中文字幕av网站| 九九这里是免费的视频5| se99高清无码| 99综合一区| 狠狠干在线| 狠狠干婷婷| 在线成人va| 五月婷婷色色网址| 国产伦理精品高清在线观看网站一区二区 | 色婷婷成人久久| 99久在线| 伊人日日干| 日本婷婷色日| 日本三级日本三级99| 五月天激情小说| 九九色情网五月天| 五月婷成人| 五月丁香六月婷婷在线播放| 九九色大香蕉| www.狠狠| 中文字幕黄色电影网址| 国产噜一噜天天噜| 五月停停激情网| 婷婷伊人久久| A片天天| 亚洲成人在线综合| 深爱网深爱综合网| 开心五月激情网| 日日夜夜干| 婷婷五月丁香色播| 色婷婷最爱五月| 天天操婷婷| 欧美精品999| 欧美成综合在线观看| 丁香综合婷婷开心激情网| 综合激情深爱| 色丁香五月婷婷| 亚洲影院婷婷色| 狠狠舔| 色婷婷裸体色性在线| 久久亚洲激情五码| 五月婷中文娱乐综合| 色情五月天小说| 日韩1区2区| 日韩人妻无码专区| 天天肏天天肏| 五月色无码| 97色啪| 三年高清大片免费观看国语| 性生活视频98791| 日逼免费视频 | 五月丁香五月天现场视频| 99热网站| 人妻丰满精品一区二区A片| 一级二级色大片| 热久久国产视频| www.minyis.com【JT】实力收量可预付QQ2101460746 | 色婷五月天激情| 99精品无码| 99精品久久久久| 天天舔天天摸天天透| 丁香六月综合激情| 91.com男女操| 99热精品在这里| 国产伦亲子伦亲子视频观看| 久久婷五月| 色综合五月| 操91综合网| 视频免费精品免费精品免费精品免费精品免费精品免费精品免费99 | 五月久久噜噜| 亚洲成人免费在线| 婷五月天丁香婷五月| 色色色色色色色色色999| 五月天精品视频| 欧美、日韩、中文、制服、人妻| 丁香五月六月激情| 亚洲欧洲中文日韩久久AV乱码| 色婷婷欧美| 俺去也综合| 超91热| 婷婷天天插天天爱| 日本狠狠色| 亚洲网视屏| 99爱爱网| 97精品综合久久内射| 久久99久久99精品免观看软件| 久久婷婷亚洲| 综合亚洲六月婷婷在线| 色丁香久久| 天堂久久婷婷| 天天做天天爽| 久热精品在看| 色五月丁香六月欧美综合| 久久婷婷五月综合色欧美| 秋霞午夜理论| 九九久久精品| 久婷婷五月丁香在线观看| 人人摸人人搞| 91超级碰碰碰| 丁香六月综合激情| 日韩黄黄| 91综合在线| 日本熟妇精品99| 亚洲午夜一区二区| 大香AV| 婷婷性色| 色婷婷亚洲在线观看| 久久精品亚洲一级牲爱综合 | 超碰97人人操| 激情综合网五月婷婷| 久久久99免费视频| 色五月激情| 欧美在线97| 人妻AV在线观看| 综合久久高清| www.五月婷婷| 无码se| 五月天播播| 五月天天天综合| 色情五月婷婷| 久久狠色噜噜狠狠狠狠97| 国产一区二区三区影院| 九九热思思热| 99色在线观看视频者| 99成人小视频| 九色PORNY在线精品酒店| 久久99热这里只有精品| 成人毛片在线免费观看| 超碰九九热| 久久亚洲婷婷| 日本三级大片| 五月丁香婷中文| 人人摸人人干| 九九这里都是精品| 91疯狂操操操操| 色99在线视频| 去干网av| 麻豆WWWCOM内射软件| 狠狠狠五月婷婷六月丁香| 丁香五月天日韩无码| 开心五月婷婷婷美女| 开心五月婷婷婷美女| 五月婷婷久久综合| 人人亚洲| 久久婷婷五月天丁香| 激情五月六月婷婷| 婷婷内射视频在线| 九九成人视频| 欧美熟女乱又伦| YW无码| 成人精品人妻| 婷婷五月成人有| 精品欧美性爱超级爽| 天天操屄网| 色私五月婷婷| 伊人五月天| 99热只有精| www久久艹| 色色色热| 欧美天天干天天草| 激情亭亭五月| 久久99网| 五月天激情综合10p| 99热99| 色色色色色色色色网站| 五月丁花色综合网| 五月叮香啪| 狠狠操狠狠操| www.夜夜.com| 国产午夜精品一区二区| jiZZdr| 思思热久久爱| 婷婷激情九月| 九九99九九精品免费 | 国产欧美婷婷五月| 久久九九囯产| 很很干天天干| 五月婷婷综合潮喷| 丁香五月日韩| 伊人久久大香线蕉精品| 美国十月色婷婷在线观看| 俺来也综合网精品一区| 影音先锋男人AV资源站| 日本欧美在线| 五月天色婷婷基地| 51成人| 久热婷婷综合| 91丨九色丨白浆秘| 五月婷婷综合色啪首页| 六月撸婷婷| 野战J办公桌椅H| 九九热re99re6在线精品| 五月婷婷综合网在线播放| 丁香五月很很肏| 五月丁香影视| 免费在线观看欧美激情xx小视频| 丁香五月天激情婷婷丁香六月| 丁香婷婷婷婷十二月在线观看视频| 五月天婷婷av| 俺也高清无码高清视频| 26UUU| 日韩精品一区二区刘| 99久久久久| 九九在线精品| 五月开心婷婷| 97久久久久| 91美女啪啪| 九九精品热| 婷婷色操| 五月丁香啪啪综合网| 婷婷久月| 久久久.www| 另类图片五月天| 丁香久月| 极品五月天| 大香蕉久操| 91大神在线免费看视频全集男男一起操| 日本天天色| 丁香五月偷拍| 五月天夜夜爱夜夜操| 日本九九九九| 很很色丁香久久停停| 在线视频区| 99热6这里只有精品| 久久五月天婷婷| 亚洲综合五月天综合| 国产精品成人在线| 欧美WW在线网| 激情婷婷五月丁香啪啪啪| 99热官网| 色九月婷婷综合| 婷婷激情小说| 成 久久| 七七九九色色| 9999三级片| 久久久久久18| 欧美 色婷婷| 激情综合五| 婷婷亚洲综合| 超碰爱爱爱| 99热6这里只有精品| 五月的丁香六月的婷婷| 操操操操操操婷婷五月天| 欧美超级视频97| 无语停婷丁香网| 99久久人妻精品无码二区| 偷拍五月丁香| 五月色婷婷影院| 丁香五月天资源网| 日本va欧美va欧美va| 丁香五月AV综合激情| 思思热国产视频| 日韩综合天堂| 婷婷内射视频在线| 五月天另类图片区99| 欧美偷偷操| 久久se 综合网| 在线观看国产高清视频免费网站 | 九九热手机在线视频| 天天激情视频| 五月天婷婷六月激情网| 丁香久久| 91操在线视频| 亚洲久久日| 久人操| 久久精品噜噜噜成人A∨色欲 | 掩去也综合五月视频| 99操逼视频| 天天日夜夜欢| 国产五月天婷婷| 九月婷婷综合网| 欧美婷婷九月| 月色色综合婷婷网| 狠狠色丁香婷婷| 热久91| 丁香九色不卡aaa| 五月婷婷综合色啪首页| 亚洲中文AV| 草榴视频黄色网| 色婷婷小视频| 婷婷五月丁香性爱| 涩婷婷视频快播人妻| 97亚洲精品| 91热久| 日本97久久久精品| 婷婷成人AV| 色情久久久| 丁香五月色色| 丁香五月激情啪啪| 亚洲色9| 另类五月婷婷| 激情六月五月婷婷综合网| 亚洲色激婷| 青青草深爱激情网| 思思热精品免费视频| 亚洲第精品| 亚洲精品性色| 五月婷婷开心丁香| 噜噜网免费视频| 99热在线播放| 五月婷啪| 亚洲天堂色色| 被强行糟蹋的女人A片| 丰满少妇乱A片无码| 婷婷综合中文字幕| 婷婷热色| 2013AV天堂| 99熟女视频| www.粉嫩av.com| 久久视频这里都是精品| 三十路磁力链接| 婷婷色成人| www.五月天婷婷| 丁香六月激情| 综合色播| 九九热青草| www.九月婷婷丁香.com| 五月丁香婷中文| 色婷婷五月天激情综合| 色噜噜狠狠狠综合曰曰曰| 丁香五月天在线| 夜夜爽天天爽| 成人在线网| 亚洲精品视频在线播放| 中日韩美欧成人一区二区精品在线| 色色网站日本91| ou洲色吧| 國語久久婷| 色 免费网站视频| 678五月丁香亚洲综合| 色婷婷五月天小说| 五月婷婷影| 六月丁香五月天| 九九视频在线观看视频6 | 亚洲成人网址在线观看| 五月丁香在线观看99| 久9热| 五月婷婷色播网| 久久思思精品| 婷婷天堂综合| 校花娇喘呻吟校长陈若雪视频| 国产99久9在线+|+传媒| 亚洲综合婷婷五月| 五月婷婷成人网首页| 五月天久久网站| 婷婷久久99| 粉嫩AV久久一区二区三区| 九九久久腿| 久激情网| 婷婷丁香激情| www.精品99| 免费视频WWW在线观看网站| 综合九色| 天天日天天做天天舔| 91人妻视频| 五月丁香激情婷婷| 国产欧美熟妇另类久久久| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 五月色综合| 久久99jiu9| 天天人人综合| 婷婷色五月天在线观看| 性爱视频99| 91 久热| 99热在线观看免费中文| 啪到高潮激情丁香五月| av色色国产| 69人人操人人爽| 99色这里| 婷婷六月激情| CHINESE熟女老女人HD视频| 99久久精品亚洲综合| 色五月婷婷成人视频| 免费不卡狠操美女视频网| 色婷婷丁香| 丁香五月大香蕉AV| 五月丁香婷婷AV天堂| www.日本91| 免费观看欧美成人AA片爱我多深| 色婷婷91| 丁香五月激情婷婷激情| 91.com男女操| 激情性爱五月天网页| 婷婷色影院| 久久五月天色| 国产精产国品一二三在观看| 小色小蛇伊人婷婷色香五月| 色色日韩无码| 久久激情五月| 久久38视频| 亚洲第一色色色| 99九九在线视频| 日韩色色色色| 五月丁香综合啪啪| 99久久激情视频| 伊人综合网站| av久热| 丁香婷婷基地| 久久A极片| WWW,激情五月天,COM| 色噜噜狠噜噜视频| 五月天丁香久久综合| 99re热精品视频国| 色私五月婷婷| 91啦丨九色丨刺激中文| 五月激情网五月综合网| 色一情一乱一乱一区91Av| 五月丁香久久婷| 婷婷丁香视频| 99精品视频网| 久艹大香蕉| 色婷视频| AV在线不卡播放| 激情五婷精品网在线观看网址| 26uuu欧美| 草久私拍| 精品皮股午夜AV| 国产精品人成A片一区二区| AV在线免费网站| 五月天播播中文字幕| a性生活久久无| 热热久久精品视频| 婷婷久久五月| 射区导航| 亚洲免费婷婷| 成人 在线 日韩| 天天干,天天操,天天射| 五月天激情亚洲| 久久婷婷综合五月| 天天免费成年人视频| 五月丁香婷婷欧美| 伊人久久五月天| 激情综合网激情五月天| 丁香综合久久| 噜噜噜噜噜色| 色啦啦视频| 天天操夜夜夜拍拍拍| 久久久久人妻| 五月色视频| 五月婷婷之综合激情| 久久免费9| 99精品久久久| 99精品视频偷拍| 极品人妻VideOssS人妻| 免费操超碰| 五月色婷婷综合| 综久久久| 五月丁香六月激情欧美综合| 99综合99| 亚洲色激情| 极品五月天| 天天爽天天日天天舔| 丁香五月婷婷av影院| 婷婷色五月色妇| 六月成人网| 五月丁香婷中文字幕| 九九在线热九九在线热99热| 丁香五月亚洲无码| 熟妇内谢69XXXXXA片| 天天网站天天爽| 激情五月婷婷| 深爱网深爱综合网| 亚洲12p| 色综合网综合| 五月天大香焦| 99久久6| 久久丁香九| 色五月播五月| 另类视在线| 九九热啪啪| 日韩操人| 丁香五月影院| xxxx五月| 中字幕视频在线永久在线观看免费| 天天插天天草人人玩| 丰满女老板BD高清A片| 夜夜操少妇| 久99久视频精品| 婷婷五月天激情网站| 久久伊人婷| 五月婷激情影院| 91九色|疯狂|高潮|对白|| 狠狠香蕉| 婷五月丁香俺| 99网| 久热精品视频| 影音先锋天天日| 五月天婷婷影院| 日韩婷婷五月| 婷婷成人基地| 四月婷婷丁香| 婷婷中文字幕网| 色婷| 亚洲色色在线| 五月婷婷电影院| 99热这里只有免费精品| 色色婷婷丁香五月天| 色婷婷导航| 色爱综合视频| 九九丁香社区欧美激情| 狠狠高潮精品亚洲1| www.婷婷五月天| 99热18| 可以直接看的AV网站| 综合九九久久| 我爱大香蕉| 亚洲激情免费久久| 性爱技巧五月| 9l视频自拍9l九色9l成人| 99,色| 综合AV网| 天天综合色| 五月天婷婷综合久久| 99久久66综合| 五月丁香六月色| 丁香六月啪啪| 天天久综合网永久入口18| 婷香五月激情视频| 九九伊人网| 69凹凸成人综合网| 五月丁香综合网| jiujiu热在线视频| 这里只有精品96| 97精品自拍视频| 激情五月天啪啪视频| 男女av免费看| 日韩成人中文字幕| 激情五月综合免费| 婷婷激情四射五月天| 久久XX| 婷婷五月天亚洲精品| 9 99免费视频| 国产午夜精品AV一区二区麻豆| 热久视频| 丁香五月成人| 级人人91| 日本色道视频网站| 99色热综合| 91尤物九色在线| 在线视频区| www.久久久久久久| 99久久思思| 伊人玖玖精品| 婷婷香草网| 六月撸婷婷| 五月花婷婷最新| 国产操B视频| 极品少妇高潮啪啪AV无码| 草五月| 五月天开心成人网| 99热销国产这里有精品| 久热99| 婷婷激情五月| 综合狠狠干| 伊人网碰碰| 午夜亚洲AV日韩无码| 激情婷婷丁香五月天| 五月色婷婷激情| www色婷婷| 婷婷中文综合网| 色播五月网| VfJxEwPH| 婷丁五月| 婷婷五月丁香香蕉| 嫩草AV久久伊人妇女超级A| 操人久久| 开心五月婷婷在线| 五月婷在线| 99热999| 免费无码毛片一区二区A片| 成人网站免费在线播放| 久久这里有精品在线观看| 九九九九九九九九九九九九九国产精品| 思思热在线精品视频网站| 色九月婷婷丁香| WwW色婷婷| 五月天久久婷婷| 伊人在线视频| 九九热区一区二区三区| 丁香色婷婷| 久久中国毛毛片爱久久| 日本欧美成人片AAAA| 亚洲成人一区| 丁香六月激情国产| 日在线V视频在线播放| 激情综合无码| 婷婷激情五月天激情小说 | 99久久婷婷综合| 激情五月激情综合网| 激情六月丁香| 激情文学五月丁香六月婷婷| 深爱开心激情网| 国产精品成人在线| 黄色一极大片| 99久久婷婷国产综合精品电影| 五月丁香六月婷| 久久综合五月天| 欧美色性色好| 丁香五月停停av| 很很操很很操| 五月丁香六月婷婷综合在线| 六月丁香停| 激情色情五月天| 新激情婷婷| www.婷婷五月天| 婷婷99狠狠| 久久精品系列| 色婷婷视频在线| 丁香五月激情无码视频| 六月婷婷狠狠| 97色在线| 99热99久久| CAOBIBI| av首页在线| 五月婷婷操操| 九九成人视频| 色爱五月天| 日良久久| 人人草人人舔| 婷婷va| 五月婷婷网五月在线| 色婷婷五月婷婷五月婷婷五月| 日韩一区二区在线播放| 婷婷伊人中文字幕| AV动漫不卡无码免费| 欧美婷婷综合网| 欧美日韩国产一二区| 婷婷五月丁香青青草在线| 另类图片天天影视在线观看| 国产亚洲99久久精品| 激情综合啪啪| 日韩 中文 欧美| 人人色婷婷| 天天精品视频免费观看| 日日夜夜噜噜爽爽| 婷婷玉月丁香五月在线视频| 五月天激情网图片 - 百度| 天天日天天干天天爱| 五月丁香六月色婷婷综合五月天 | 9久精品| 99久精品视频| 成功精品影院| 五月天综合在线| 婷婷五月天基地| 五月天播播中文字幕 | 九九这里只有精品在线视频| 婷婷丁香五另类网站| 婷婷亚洲综合| 狠狠色色| 丁香六月婷婷综情欧美| 99re热精品视频国| WWW.五月天9999| 激情99。| 婷婷五月天伦理| 亚洲99视频|