欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Java微服務(wù)架構(gòu)在跨境電商平臺(tái)中的設(shè)計(jì)與實(shí)踐

Java微服務(wù)架構(gòu)在跨境電商平臺(tái)中的設(shè)計(jì)與實(shí)踐 簡(jiǎn)介本資源是一套基于Java技術(shù)棧開(kāi)發(fā)的跨境電商平臺(tái)ECO完整源碼面向Java后端開(kāi)發(fā)者、電商平臺(tái)學(xué)習(xí)者及微服務(wù)架構(gòu)實(shí)踐者旨在提供可運(yùn)行、可擴(kuò)展的企業(yè)級(jí)電商系統(tǒng)參考實(shí)現(xiàn)。壓縮包共444個(gè)文件總大小1.84MB涵蓋346個(gè)Java業(yè)務(wù)邏輯與控制器類(lèi)、57個(gè)XML配置與Mapper映射文件、14個(gè)YML環(huán)境配置、7個(gè)Dockerfile支持多環(huán)境容器化部署、以及SQL建表腳本、Maven構(gòu)建腳本和基礎(chǔ)前端靜態(tài)資源等體現(xiàn)典型Spring Boot MyBatis Docker的現(xiàn)代電商技術(shù)組合。已有208人學(xué)習(xí)下載讀者可直接導(dǎo)入IDE運(yùn)行調(diào)試深入理解用戶(hù)中心、商品管理、訂單流程、國(guó)際支付對(duì)接、多語(yǔ)言適配等核心模塊的設(shè)計(jì)與集成方式并借鑒其分層架構(gòu)、RESTful接口規(guī)范及CI/CD初步實(shí)踐。1. 項(xiàng)目緣起為什么選擇Java重寫(xiě)一個(gè)跨境電商平臺(tái)幾年前我接手了一個(gè)用PHP和Node.js混合技術(shù)棧搭建的跨境電商項(xiàng)目。項(xiàng)目初期為了快速上線技術(shù)選型比較隨意隨著業(yè)務(wù)量從日均幾百單增長(zhǎng)到幾萬(wàn)單各種問(wèn)題開(kāi)始集中爆發(fā)訂單處理延遲、庫(kù)存同步錯(cuò)亂、支付回調(diào)丟失、系統(tǒng)在高并發(fā)下頻繁宕機(jī)。更頭疼的是由于早期架構(gòu)設(shè)計(jì)缺乏規(guī)劃代碼耦合嚴(yán)重加一個(gè)促銷(xiāo)活動(dòng)功能可能得改五六個(gè)服務(wù)牽一發(fā)而動(dòng)全身。那段時(shí)間團(tuán)隊(duì)大部分精力都耗在了“救火”和“打補(bǔ)丁”上新業(yè)務(wù)需求根本排不上期。痛定思痛我們決定推倒重來(lái)啟動(dòng)一個(gè)代號(hào)為“ECO”的新平臺(tái)項(xiàng)目。這次我們選擇了Java作為核心開(kāi)發(fā)語(yǔ)言。很多人可能會(huì)問(wèn)現(xiàn)在Go、Python、Node.js不都很火嗎為什么還要用“老牌”的Java這背后是我們基于業(yè)務(wù)特性做的深度權(quán)衡。首先跨境電商的核心是“交易”而交易系統(tǒng)對(duì)一致性、穩(wěn)定性和事務(wù)處理能力的要求是極高的。Java生態(tài)中成熟的ORM框架如MyBatis、JPA和聲明式事務(wù)管理Spring的Transactional能讓我們以相對(duì)低的認(rèn)知成本構(gòu)建出強(qiáng)一致性的業(yè)務(wù)邏輯。其次跨境電商涉及復(fù)雜的供應(yīng)鏈、清關(guān)、多幣種支付、多語(yǔ)言客服等模塊系統(tǒng)本身就是由數(shù)十個(gè)微服務(wù)構(gòu)成的龐大體系。Spring Cloud Alibaba這一套成熟的微服務(wù)全家桶在服務(wù)治理、配置管理、流量控制等方面提供了開(kāi)箱即用的解決方案能極大降低分布式系統(tǒng)的復(fù)雜度。最后團(tuán)隊(duì)成員的技能棧也是重要考量我們有一批經(jīng)驗(yàn)豐富的Java工程師選擇Java能最大化利用現(xiàn)有的人力資源快速推進(jìn)項(xiàng)目。所以ECO項(xiàng)目不是一個(gè)簡(jiǎn)單的Demo它是一個(gè)基于真實(shí)業(yè)務(wù)痛點(diǎn)用Java技術(shù)棧重構(gòu)的、面向高并發(fā)與復(fù)雜業(yè)務(wù)的跨境電商平臺(tái)解決方案。今天我就把這個(gè)項(xiàng)目的核心架構(gòu)設(shè)計(jì)、關(guān)鍵技術(shù)選型以及我們踩過(guò)的那些“坑”分享出來(lái)希望能給正在規(guī)劃或重構(gòu)類(lèi)似系統(tǒng)的朋友一些參考。2. 核心架構(gòu)設(shè)計(jì)如何用微服務(wù)支撐全球電商業(yè)務(wù)一個(gè)健康的電商平臺(tái)架構(gòu)就像人的骨骼系統(tǒng)它決定了平臺(tái)的承載力、靈活性和未來(lái)的成長(zhǎng)空間。ECO平臺(tái)采用了經(jīng)典的前后端分離與微服務(wù)架構(gòu)整體上可以劃分為五層接入層、網(wǎng)關(guān)層、業(yè)務(wù)服務(wù)層、數(shù)據(jù)層和基礎(chǔ)設(shè)施層。2.1 微服務(wù)拆分與領(lǐng)域驅(qū)動(dòng)設(shè)計(jì)DDD微服務(wù)不是拆得越細(xì)越好胡亂拆分只會(huì)帶來(lái)災(zāi)難性的分布式事務(wù)和運(yùn)維復(fù)雜度。我們借鑒了領(lǐng)域驅(qū)動(dòng)設(shè)計(jì)DDD的思想來(lái)指導(dǎo)服務(wù)邊界劃分。DDD的核心是圍繞業(yè)務(wù)領(lǐng)域而非技術(shù)層面進(jìn)行建模。我們組織了多次“事件風(fēng)暴”工作坊邀請(qǐng)產(chǎn)品、運(yùn)營(yíng)、業(yè)務(wù)專(zhuān)家和開(kāi)發(fā)一起通過(guò)梳理“用戶(hù)下單”這個(gè)核心業(yè)務(wù)流程識(shí)別出了多個(gè)限界上下文。例如“訂單”是一個(gè)核心領(lǐng)域。用戶(hù)創(chuàng)建訂單時(shí)需要檢查庫(kù)存庫(kù)存上下文、計(jì)算優(yōu)惠促銷(xiāo)上下文、生成支付單支付上下文。如果把這些邏輯都塞進(jìn)一個(gè)“訂單服務(wù)”它很快就會(huì)變得臃腫不堪。因此我們拆分了用戶(hù)中心服務(wù)負(fù)責(zé)會(huì)員、收貨地址、安全認(rèn)證。商品服務(wù)負(fù)責(zé)商品、類(lèi)目、品牌、庫(kù)存的管理。這里特別注意庫(kù)存管理本身又分為可售庫(kù)存、實(shí)際庫(kù)存、在途庫(kù)存等是一個(gè)復(fù)雜的子域。訂單服務(wù)負(fù)責(zé)訂單生命周期的核心流轉(zhuǎn)如創(chuàng)建、狀態(tài)變更、履約。它不直接操作庫(kù)存而是通過(guò)發(fā)布“訂單已創(chuàng)建”領(lǐng)域事件由庫(kù)存服務(wù)來(lái)異步扣減。購(gòu)物車(chē)服務(wù)一個(gè)輕量的、有時(shí)效性的服務(wù)與訂單服務(wù)解耦。促銷(xiāo)服務(wù)管理優(yōu)惠券、滿(mǎn)減、折扣等活動(dòng)提供統(tǒng)一的優(yōu)惠計(jì)算引擎。支付服務(wù)對(duì)接多個(gè)第三方支付網(wǎng)關(guān)支付寶、微信、PayPal、Stripe處理支付、退款、對(duì)賬。清關(guān)服務(wù)這是跨境電商特有的負(fù)責(zé)組裝報(bào)關(guān)單、與海關(guān)系統(tǒng)對(duì)接。物流服務(wù)對(duì)接多家物流商API實(shí)現(xiàn)運(yùn)單追蹤。每個(gè)服務(wù)對(duì)應(yīng)一個(gè)獨(dú)立的Git倉(cāng)庫(kù)有自己獨(dú)立的數(shù)據(jù)庫(kù)遵循數(shù)據(jù)庫(kù)私有原則通過(guò)API或領(lǐng)域事件進(jìn)行通信。這樣當(dāng)促銷(xiāo)規(guī)則需要頻繁變動(dòng)時(shí)我們只需要修改和部署促銷(xiāo)服務(wù)不會(huì)影響到穩(wěn)定的訂單服務(wù)。2.2 技術(shù)棧選型與Spring Cloud生態(tài)確定了服務(wù)邊界接下來(lái)就是技術(shù)選型。我們以Spring Boot作為每個(gè)微服務(wù)的開(kāi)發(fā)框架它約定大于配置的理念能讓我們快速搭建一個(gè)可獨(dú)立運(yùn)行的服務(wù)。微服務(wù)治理方面我們選擇了Spring Cloud Alibaba原因在于它功能齊全、中文文檔豐富并且在國(guó)內(nèi)經(jīng)過(guò)大量實(shí)踐驗(yàn)證。服務(wù)注冊(cè)與發(fā)現(xiàn)Nacos。對(duì)比Eureka和ConsulNacos不僅提供了服務(wù)注冊(cè)發(fā)現(xiàn)還集成了配置中心功能一舉兩得。它的控制臺(tái)UI友好服務(wù)健康狀態(tài)一目了然。配置中心Nacos Config。將所有服務(wù)的配置數(shù)據(jù)庫(kù)連接、Redis地址、開(kāi)關(guān)配置等集中管理。在Nacos控制臺(tái)修改一個(gè)配置項(xiàng)相關(guān)服務(wù)能近乎實(shí)時(shí)地感知并刷新無(wú)需重啟。這對(duì)線上問(wèn)題排查和功能灰度發(fā)布至關(guān)重要。網(wǎng)關(guān)Spring Cloud Gateway。作為所有流量入口它負(fù)責(zé)路由轉(zhuǎn)發(fā)、權(quán)限校驗(yàn)、限流熔斷、日志記錄。我們編寫(xiě)了全局過(guò)濾器用來(lái)驗(yàn)證JWT令牌、將用戶(hù)信息放入請(qǐng)求頭傳遞給下游服務(wù)。熔斷與降級(jí)Sentinel。在“雙十一”大促期間如果支付服務(wù)響應(yīng)緩慢大量訂單請(qǐng)求堆積會(huì)拖垮整個(gè)系統(tǒng)。Sentinel可以實(shí)時(shí)監(jiān)控服務(wù)間的調(diào)用當(dāng)失敗率達(dá)到閾值或響應(yīng)時(shí)間過(guò)長(zhǎng)時(shí)自動(dòng)進(jìn)行熔斷快速失敗并返回一個(gè)友好的降級(jí)結(jié)果如“系統(tǒng)繁忙請(qǐng)稍后再試”保護(hù)系統(tǒng)不被雪崩。分布式事務(wù)Seata。這是微服務(wù)架構(gòu)下最棘手的問(wèn)題之一。比如“下單扣庫(kù)存”這個(gè)操作就涉及訂單服務(wù)和庫(kù)存服務(wù)。我們采用了Seata的AT模式。它的原理是攔截業(yè)務(wù)SQL生成前后鏡像保存到undo_log表中。在全局事務(wù)提交時(shí)各個(gè)分支事務(wù)正常提交如果需要回滾Seata會(huì)根據(jù)undo_log中的前后鏡像數(shù)據(jù)生成反向SQL進(jìn)行補(bǔ)償。對(duì)于大部分業(yè)務(wù)場(chǎng)景這已經(jīng)足夠。但對(duì)于極致性能要求的場(chǎng)景我們也會(huì)結(jié)合使用本地消息表、最終一致性方案。注意Seata的AT模式對(duì)數(shù)據(jù)庫(kù)支持有要求并且會(huì)帶來(lái)一定的性能損耗。在選型時(shí)一定要根據(jù)業(yè)務(wù)對(duì)一致性的要求級(jí)別強(qiáng)一致、最終一致來(lái)權(quán)衡。我們內(nèi)部有一條原則能用異步和最終一致性解決的就不用分布式事務(wù)。2.3 數(shù)據(jù)一致性設(shè)計(jì)從CAP理論到實(shí)踐在分布式系統(tǒng)中數(shù)據(jù)一致性是靈魂。我們根據(jù)業(yè)務(wù)場(chǎng)景采用了混合策略強(qiáng)一致性場(chǎng)景核心交易鏈路如創(chuàng)建訂單時(shí)扣減庫(kù)存。我們使用Seata的AT模式來(lái)保證。雖然性能有損耗但保證了資金的絕對(duì)正確這個(gè)代價(jià)是值得的。最終一致性場(chǎng)景大部分場(chǎng)景如訂單支付成功后發(fā)送短信通知、更新用戶(hù)積分、同步數(shù)據(jù)到數(shù)據(jù)分析平臺(tái)。我們使用RocketMQ作為消息中間件。訂單服務(wù)在本地事務(wù)提交后發(fā)送一條“訂單已支付”消息到RocketMQ。積分服務(wù)、短信服務(wù)作為消費(fèi)者訂閱該消息各自處理。即使某個(gè)消費(fèi)者暫時(shí)失敗消息也會(huì)在Broker中重試直到成功從而保證數(shù)據(jù)最終一致。讀寫(xiě)分離與數(shù)據(jù)同步對(duì)于商品詳情、用戶(hù)查詢(xún)這類(lèi)讀多寫(xiě)少的場(chǎng)景我們使用主從數(shù)據(jù)庫(kù)寫(xiě)操作走主庫(kù)讀操作走從庫(kù)用Canal監(jiān)聽(tīng)主庫(kù)的binlog近乎實(shí)時(shí)地同步數(shù)據(jù)到Elasticsearch提供復(fù)雜的商品搜索和篩選功能。這套混合架構(gòu)讓我們?cè)诒WC核心交易穩(wěn)定的前提下兼顧了系統(tǒng)的吞吐量和擴(kuò)展性。3. 核心業(yè)務(wù)模塊實(shí)現(xiàn)深度解析有了穩(wěn)固的架構(gòu)我們來(lái)深入幾個(gè)最具挑戰(zhàn)的業(yè)務(wù)模塊看看代碼是如何落地的。3.1 商品與庫(kù)存服務(wù)如何應(yīng)對(duì)高并發(fā)秒殺商品服務(wù)看似簡(jiǎn)單但庫(kù)存管理是電商的“命門(mén)”。我們?cè)O(shè)計(jì)了多層庫(kù)存模型可售庫(kù)存前臺(tái)用戶(hù)可見(jiàn)、可購(gòu)買(mǎi)的數(shù)量。鎖定庫(kù)存用戶(hù)下單后從可售庫(kù)存中扣除放入鎖定庫(kù)存防止超賣(mài)。實(shí)際庫(kù)存?zhèn)}庫(kù)中的物理庫(kù)存。當(dāng)用戶(hù)下單時(shí)扣減庫(kù)存的偽代碼邏輯如下Service public class InventoryServiceImpl implements InventoryService { Autowired private RedisTemplateString, String redisTemplate; Autowired private InventoryMapper inventoryMapper; Transactional(rollbackFor Exception.class) Override public boolean reduceStock(Long skuId, Integer quantity) { // 1. 校驗(yàn)參數(shù) if (skuId null || quantity 0) { throw new BizException(參數(shù)錯(cuò)誤); } // 2. Redis預(yù)減庫(kù)存應(yīng)對(duì)超高并發(fā) String key stock:cache: skuId; Long result redisTemplate.opsForValue().decrement(key, quantity); if (result ! null result 0) { // 庫(kù)存不足回滾Redis redisTemplate.opsForValue().increment(key, quantity); throw new BizException(庫(kù)存不足); } // 3. 數(shù)據(jù)庫(kù)扣減保證最終正確性 int updatedRows inventoryMapper.reduceActualStock(skuId, quantity); if (updatedRows 0) { // 數(shù)據(jù)庫(kù)扣減失敗回滾Redis redisTemplate.opsForValue().increment(key, quantity); throw new BizException(庫(kù)存扣減失敗請(qǐng)重試); } // 4. 異步更新其他庫(kù)存數(shù)據(jù)如鎖定庫(kù)存 // 發(fā)送MQ消息... return true; } }關(guān)鍵點(diǎn)解析Redis預(yù)減這是應(yīng)對(duì)秒殺的核心。所有請(qǐng)求先走Redis利用其單線程和內(nèi)存操作的特性快速判斷庫(kù)存是否充足將絕大部分無(wú)效請(qǐng)求攔截在數(shù)據(jù)庫(kù)之外。Redis中的庫(kù)存數(shù)可以略少于實(shí)際庫(kù)存作為緩沖。數(shù)據(jù)庫(kù)兜底R(shí)edis可能會(huì)因?yàn)榫W(wǎng)絡(luò)分區(qū)、重啟等原因丟失數(shù)據(jù)因此數(shù)據(jù)庫(kù)是庫(kù)存數(shù)據(jù)的最終權(quán)威存儲(chǔ)。任何Redis操作都要有對(duì)應(yīng)的數(shù)據(jù)庫(kù)操作和補(bǔ)償機(jī)制。異步化扣減實(shí)際庫(kù)存后更新鎖定庫(kù)存等操作可以通過(guò)消息隊(duì)列異步進(jìn)行避免長(zhǎng)事務(wù)提升響應(yīng)速度。我們?cè)谶@個(gè)環(huán)節(jié)踩過(guò)一個(gè)大坑早期我們只用了Redis做庫(kù)存扣減在一次Redis集群主從切換導(dǎo)致數(shù)據(jù)短暫不一致時(shí)發(fā)生了少量超賣(mài)。教訓(xùn)就是緩存只能用于加速和緩沖不能作為唯一可信數(shù)據(jù)源。3.2 訂單服務(wù)狀態(tài)機(jī)與分布式ID生成訂單的狀態(tài)流轉(zhuǎn)非常復(fù)雜從“待付款”、“已付款”、“待發(fā)貨”、“已發(fā)貨”到“已完成”或“已取消”中間還可能穿插“退款中”等狀態(tài)。如果用簡(jiǎn)單的if-else來(lái)控制狀態(tài)變更代碼會(huì)很快變成一團(tuán)亂麻。我們引入了狀態(tài)模式并配合使用Spring StateMachine框架。我們將訂單狀態(tài)和可能觸發(fā)狀態(tài)變更的事件如“用戶(hù)支付”、“商家發(fā)貨”定義出來(lái)在配置文件中清晰地描述狀態(tài)轉(zhuǎn)換規(guī)則Configuration EnableStateMachine(name orderStateMachine) public class OrderStateMachineConfig extends EnumStateMachineConfigurerAdapterOrderStatus, OrderEvent { Override public void configure(StateMachineStateConfigurerOrderStatus, OrderEvent states) throws Exception { states .withStates() .initial(OrderStatus.PENDING_PAYMENT) .states(EnumSet.allOf(OrderStatus.class)); } Override public void configure(StateMachineTransitionConfigurerOrderStatus, OrderEvent transitions) throws Exception { transitions .withExternal() .source(OrderStatus.PENDING_PAYMENT).target(OrderStatus.PAID) .event(OrderEvent.PAY_SUCCESS) .and() .withExternal() .source(OrderStatus.PAID).target(OrderStatus.TO_BE_SHIPPED) .event(OrderEvent.MERCHANT_CONFIRM) .and() // ... 更多轉(zhuǎn)換規(guī)則 } }這樣業(yè)務(wù)代碼里只需要stateMachine.sendEvent(OrderEvent.PAY_SUCCESS)狀態(tài)機(jī)就會(huì)自動(dòng)根據(jù)當(dāng)前狀態(tài)和事件判斷能否轉(zhuǎn)換并執(zhí)行相應(yīng)的動(dòng)作如支付成功后觸發(fā)發(fā)送短信的動(dòng)作監(jiān)聽(tīng)器。代碼清晰且不易出現(xiàn)非法狀態(tài)流轉(zhuǎn)。另一個(gè)關(guān)鍵點(diǎn)是訂單號(hào)生成。單調(diào)遞增的數(shù)據(jù)庫(kù)自增ID會(huì)暴露業(yè)務(wù)量也不適合分庫(kù)分表。我們采用了Snowflake雪花算法的變體來(lái)生成全局唯一的訂單號(hào)。算法生成的ID是64位的Long型數(shù)字包含時(shí)間戳、工作機(jī)器ID、序列號(hào)等信息趨勢(shì)遞增、高性能、無(wú)需中心化協(xié)調(diào)。我們對(duì)其做了小幅改造將一部分位用于表示業(yè)務(wù)類(lèi)型如普通訂單、秒殺訂單方便日后根據(jù)訂單號(hào)快速路由。3.3 支付與清關(guān)處理跨境業(yè)務(wù)復(fù)雜性支付是資金入口必須穩(wěn)如磐石。我們抽象了一個(gè)統(tǒng)一的支付網(wǎng)關(guān)服務(wù)內(nèi)部定義了PaymentStrategy策略接口針對(duì)支付寶、微信、PayPal等不同支付渠道實(shí)現(xiàn)不同的策略類(lèi)。這樣當(dāng)需要接入一個(gè)新的支付方式時(shí)只需要新增一個(gè)策略實(shí)現(xiàn)即可對(duì)主流程代碼無(wú)侵入。支付回調(diào)處理是重中之重必須做到冪等。第三方支付平臺(tái)可能會(huì)因?yàn)榫W(wǎng)絡(luò)問(wèn)題多次發(fā)送相同的回調(diào)通知。我們的處理邏輯是回調(diào)接口首先根據(jù)第三方支付單號(hào)查詢(xún)本地是否已處理過(guò)該筆回調(diào)。如果已處理并成功直接返回“success”。如果未處理則在一個(gè)分布式鎖的保護(hù)下進(jìn)行訂單狀態(tài)更新、記賬等操作。處理完成后將第三方支付單號(hào)和處理結(jié)果記錄到“支付回調(diào)日志表”。無(wú)論成功失敗都記錄日志并做好監(jiān)控告警。對(duì)于跨境電商清關(guān)是另一個(gè)復(fù)雜環(huán)節(jié)。不同國(guó)家、不同品類(lèi)的商品申報(bào)要求、稅率都不同。我們?cè)O(shè)計(jì)了一個(gè)可配置的“清關(guān)模板”系統(tǒng)。商品上架時(shí)運(yùn)營(yíng)人員需要填寫(xiě)HS編碼、原產(chǎn)地、申報(bào)要素等。當(dāng)訂單生成后清關(guān)服務(wù)會(huì)根據(jù)收貨地址國(guó)家、商品信息自動(dòng)匹配模板組裝成符合海關(guān)要求的報(bào)文格式通過(guò)第三方清關(guān)代理系統(tǒng)進(jìn)行申報(bào)。這個(gè)過(guò)程也是異步的通過(guò)消息隊(duì)列驅(qū)動(dòng)避免阻塞主訂單流程。4. 性能優(yōu)化與穩(wěn)定性保障實(shí)戰(zhàn)系統(tǒng)能跑起來(lái)只是第一步能在大流量下穩(wěn)定運(yùn)行才是真本事。我們?cè)谶@方面投入了巨大的精力。4.1 緩存策略與數(shù)據(jù)庫(kù)優(yōu)化緩存是提升性能的銀彈但用不好就是炸彈。我們制定了多級(jí)緩存策略一級(jí)緩存本地緩存使用Caffeine或Guava Cache緩存一些極少變更的數(shù)據(jù)如國(guó)家地區(qū)編碼、貨幣匯率短期。設(shè)置合理的過(guò)期時(shí)間如5分鐘和最大容量防止內(nèi)存溢出。二級(jí)緩存分布式緩存使用Redis集群緩存熱點(diǎn)數(shù)據(jù)如商品詳情頁(yè)信息、用戶(hù)會(huì)話、購(gòu)物車(chē)數(shù)據(jù)。這里的關(guān)鍵是緩存鍵的設(shè)計(jì)和過(guò)期策略。例如商品詳情緩存的Key可以設(shè)計(jì)為product:detail:{skuId}:{lang}包含語(yǔ)言維度。我們大量使用Hash結(jié)構(gòu)來(lái)存儲(chǔ)對(duì)象減少網(wǎng)絡(luò)傳輸?shù)男ey數(shù)量。緩存穿透、擊穿、雪崩應(yīng)對(duì)穿透對(duì)于不存在的商品ID查詢(xún)將空值null也緩存一小段時(shí)間如30秒避免惡意請(qǐng)求直接打到數(shù)據(jù)庫(kù)。擊穿對(duì)于熱點(diǎn)Key如爆款商品使用Redis的setnx命令實(shí)現(xiàn)分布式互斥鎖。當(dāng)緩存失效時(shí)只有一個(gè)線程能去數(shù)據(jù)庫(kù)加載數(shù)據(jù)其他線程等待或返回舊數(shù)據(jù)。雪崩給緩存Key設(shè)置隨機(jī)的過(guò)期時(shí)間避免大量Key在同一時(shí)刻失效。數(shù)據(jù)庫(kù)層面除了主從讀寫(xiě)分離我們對(duì)單表數(shù)據(jù)量過(guò)大的表如訂單表進(jìn)行了分庫(kù)分表。使用ShardingSphere-JDBC作為中間件按照用戶(hù)ID的哈希值進(jìn)行分片。這里要特別注意涉及分片鍵的查詢(xún)效率很高但非分片鍵的查詢(xún)?nèi)绨从唵螘r(shí)間范圍查詢(xún)就會(huì)很麻煩。我們的做法是建立訂單創(chuàng)建時(shí)間的月度歸檔表或者將這類(lèi)查詢(xún)導(dǎo)向Elasticsearch。4.2 全鏈路監(jiān)控與告警系統(tǒng)復(fù)雜了出問(wèn)題是難免的關(guān)鍵是要能快速發(fā)現(xiàn)、定位、解決。我們搭建了基于Prometheus Grafana Alertmanager的監(jiān)控告警體系。應(yīng)用指標(biāo)每個(gè)Spring Boot服務(wù)都通過(guò)micrometer暴露JVM內(nèi)存、GC、線程池、HTTP請(qǐng)求量、耗時(shí)、錯(cuò)誤率等指標(biāo)給Prometheus。業(yè)務(wù)指標(biāo)我們自定義了業(yè)務(wù)埋點(diǎn)如下單量、支付成功率、庫(kù)存扣減失敗次數(shù)等同樣上報(bào)到Prometheus。鏈路追蹤集成SkyWalking每個(gè)外部請(qǐng)求都會(huì)生成一個(gè)唯一的traceId貫穿經(jīng)過(guò)的所有微服務(wù)。在Grafana上可以清晰地看到一個(gè)請(qǐng)求的完整調(diào)用鏈每個(gè)環(huán)節(jié)的耗時(shí)一目了然。當(dāng)接口變慢時(shí)我們能迅速定位是哪個(gè)服務(wù)、甚至是哪個(gè)數(shù)據(jù)庫(kù)查詢(xún)拖了后腿。日志收集所有服務(wù)的日志統(tǒng)一輸出為JSON格式通過(guò)Filebeat收集發(fā)送到Elasticsearch用Kibana進(jìn)行查看和搜索。通過(guò)traceId可以把一次請(qǐng)求的所有相關(guān)日志串聯(lián)起來(lái)排查問(wèn)題效率倍增。告警規(guī)則我們?cè)O(shè)置得很細(xì)致比如某個(gè)服務(wù)的錯(cuò)誤率在5分鐘內(nèi)持續(xù)高于1%某個(gè)接口的P99響應(yīng)時(shí)間超過(guò)1秒數(shù)據(jù)庫(kù)連接池使用率超過(guò)80%等。告警會(huì)通過(guò)釘釘、短信第一時(shí)間通知到值班人員。4.3 容器化部署與CI/CD為了提升部署效率和資源利用率我們將所有服務(wù)都進(jìn)行了Docker容器化。每個(gè)服務(wù)對(duì)應(yīng)一個(gè)Dockerfile里面定義了運(yùn)行所需的基礎(chǔ)鏡像、JVM參數(shù)、時(shí)區(qū)等。我們利用Jenkins搭建了完整的CI/CD流水線。開(kāi)發(fā)人員提交代碼到Git分支后Jenkins自動(dòng)觸發(fā)代碼質(zhì)量檢查運(yùn)行SonarQube掃描檢查代碼規(guī)范、漏洞和壞味道。單元測(cè)試運(yùn)行項(xiàng)目的單元測(cè)試確保覆蓋率。構(gòu)建鏡像通過(guò)Maven打包然后執(zhí)行docker build生成鏡像并推送到私有的Harbor鏡像倉(cāng)庫(kù)。部署到測(cè)試環(huán)境通過(guò)調(diào)用Kubernetes的API更新測(cè)試環(huán)境的Deployment滾動(dòng)更新服務(wù)。集成測(cè)試自動(dòng)運(yùn)行一組接口測(cè)試用例。人工確認(rèn)后一鍵部署生產(chǎn)。生產(chǎn)環(huán)境我們使用Kubernetes進(jìn)行編排管理。Kubernetes的Deployment保證了服務(wù)的高可用多副本Service提供了內(nèi)部服務(wù)發(fā)現(xiàn)Ingress作為外部流量入口。配合HPA水平Pod自動(dòng)擴(kuò)縮容我們?cè)O(shè)置了基于CPU利用率的自動(dòng)伸縮規(guī)則在大流量來(lái)臨前系統(tǒng)就能自動(dòng)擴(kuò)容實(shí)例流量低谷時(shí)自動(dòng)縮容極大地節(jié)省了服務(wù)器成本。5. 開(kāi)發(fā)與運(yùn)維中的“血淚”經(jīng)驗(yàn)談最后這部分分享一些在ECO項(xiàng)目開(kāi)發(fā)和運(yùn)維過(guò)程中用“學(xué)費(fèi)”換來(lái)的經(jīng)驗(yàn)這些在官方文檔里通常找不到。經(jīng)驗(yàn)一接口設(shè)計(jì)要“笨”一點(diǎn)兼容性要強(qiáng)一點(diǎn)。早期我們?cè)O(shè)計(jì)接口時(shí)追求“優(yōu)雅”經(jīng)常使用枚舉類(lèi)型作為參數(shù)或返回值。后來(lái)發(fā)現(xiàn)當(dāng)需要新增一個(gè)枚舉值時(shí)所有調(diào)用方包括前端、其他服務(wù)都必須同步升級(jí)否則就會(huì)反序列化失敗。后來(lái)我們定下規(guī)矩核心對(duì)外的API盡量使用字符串或整型常量并在文檔中明確其含義。這樣服務(wù)端可以向后兼容地添加新?tīng)顟B(tài)舊的調(diào)用方雖然不認(rèn)識(shí)新值但不會(huì)崩潰。內(nèi)部服務(wù)間通信可以使用Protobuf等強(qiáng)類(lèi)型協(xié)議但也要有版本管理意識(shí)。經(jīng)驗(yàn)二數(shù)據(jù)庫(kù)字段寧寬勿緊。在設(shè)計(jì)商品表時(shí)有個(gè)字段是“商品特性標(biāo)簽”產(chǎn)品經(jīng)理說(shuō)最多就三五個(gè)標(biāo)簽。我們圖省事就定義了一個(gè)varchar(50)。結(jié)果業(yè)務(wù)發(fā)展起來(lái)運(yùn)營(yíng)希望給商品打上幾十個(gè)標(biāo)簽還要支持搜索。改字段類(lèi)型是痛苦的涉及數(shù)據(jù)遷移和停服?,F(xiàn)在的做法是對(duì)于可能擴(kuò)展的、非核心的文本字段直接使用varchar(255)甚至text類(lèi)型。存儲(chǔ)成本在今天已經(jīng)很低但線上修改數(shù)據(jù)結(jié)構(gòu)的風(fēng)險(xiǎn)極高。經(jīng)驗(yàn)三異步消息一定要有補(bǔ)償和監(jiān)控。我們?cè)驗(yàn)橐粋€(gè)促銷(xiāo)活動(dòng)向消息隊(duì)列里狂發(fā)消息導(dǎo)致消費(fèi)者處理不過(guò)來(lái)消息大量堆積。更糟的是有些消息格式錯(cuò)誤消費(fèi)者一直報(bào)錯(cuò)、重試形成死循環(huán)拖垮了整個(gè)隊(duì)列。教訓(xùn)是生產(chǎn)端必須做流量控制不能無(wú)節(jié)制地發(fā)。消費(fèi)端一定要做好冪等和異常處理對(duì)于格式錯(cuò)誤、處理失敗的消息不能無(wú)限重試應(yīng)該轉(zhuǎn)移到死信隊(duì)列并發(fā)出告警讓人工介入處理。必須監(jiān)控消息隊(duì)列的堆積情況設(shè)置堆積告警閾值。經(jīng)驗(yàn)四不要過(guò)度設(shè)計(jì)但要為擴(kuò)展留好“錨點(diǎn)”。微服務(wù)不是萬(wàn)能解藥。在項(xiàng)目初期如果業(yè)務(wù)邊界還不清晰盲目拆分微服務(wù)只會(huì)增加運(yùn)維和聯(lián)調(diào)成本。我們的策略是初期可以做成一個(gè)“單體”但要在代碼層面做好模塊化隔離比如清晰的包結(jié)構(gòu)領(lǐng)域?qū)印?yīng)用層分離。同時(shí)在可能未來(lái)需要拆分的模塊之間優(yōu)先通過(guò)領(lǐng)域事件或API進(jìn)行通信而不是直接調(diào)用內(nèi)部方法。這樣當(dāng)這個(gè)模塊真的需要獨(dú)立成服務(wù)時(shí)遷移成本會(huì)低很多。這個(gè)通信接口就是預(yù)留的“錨點(diǎn)”。ECO項(xiàng)目從零到一再到穩(wěn)定支撐百萬(wàn)級(jí)用戶(hù)整個(gè)過(guò)程充滿(mǎn)了挑戰(zhàn)。技術(shù)選型沒(méi)有銀彈架構(gòu)設(shè)計(jì)也總是在做權(quán)衡。最重要的是團(tuán)隊(duì)要形成一套適合自己業(yè)務(wù)節(jié)奏和人員能力的方法論在追求技術(shù)先進(jìn)性的同時(shí)更要保證系統(tǒng)的穩(wěn)定和可維護(hù)性。這套源碼和其中蘊(yùn)含的設(shè)計(jì)思想是我們團(tuán)隊(duì)過(guò)去幾年經(jīng)驗(yàn)的結(jié)晶希望能為你帶來(lái)啟發(fā)。如果你在搭建類(lèi)似系統(tǒng)時(shí)遇到具體問(wèn)題歡迎交流探討。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
色啦啦视频| a九九热www| 操操操Av| 色婷婷丁香五月观看| 丁香色啪综合| 在线观看av网站| 色色丁香| 9久热在线视频精品| 色噜噜狠狠色综| 在线免费视频caop| 色婷婷狠狠| 日日操日日干| 色婷婷久久综合久色| 99久久国产综合精品五月天喷水\| 色五月天成人| 亭亭五月天黑人2014| 丁香五月激情网| 9久精品| 人人做天天爱| WWW.桔色成人.COM入口| 激情综合女人网五月播播| 99视频在线看| 一本婷婷丁香久久| 日韩成人不卡| 中字幕视频在线永久在线观看免费 | 人人亚洲| 五月天激情综合在线| 一级无码作爱片| 婷婷五月天福利| 婷香五月激情视频| 亚洲欧美999| 五月天丁香六月综合| 色婷婷精| 欧美碰碰| 久久99久久久久久久噜噜| 色婷婷99| 婷婷久久五月丁香| 日本成人噜噜噜| 久久这里只有精品网| 91色综合| 97热久久五月婷婷| 伊人三级激情| 五月丁香综合成人社区| 丁香综合网| 五月丁色AV| 99碰网站| 人人97碰| 婷婷九月丁香| 婷婷激情六月综合| 超碰在线人人| 五月天色色网站| 97色永久免费视频| 久久性爱视频| 日韩不卡DvD| 欧美日韩中国| 色五月激情| 五月婷婷成人| 大香蕉五月天婷婷| 大香蕉综合在线| 极品色丁香| 9久9久| 91主播在线| 狠狠插.com| 香蕉AV777XXX色综合一区| 婷婷中文字幕| 熟女人妻视频| www网站在线观看| 日韩AC在线免费观看| 熟女人妻视频| 99日视频在线| 精品网站:999WWW| 9色操| 五月婷视频在线观看| 综合久久激情久久| 亚洲乱啪| 99久在线精品99re8| 99免费热视频在线| 天天天天天天天干| 亚洲 小说 欧美 激情 另类| 婷婷五月激情天| 97婷婷五月天| 精品在线网站| 99色亚洲| 亚洲六月色| 色婷婷五月天av在线| 国产XXXX搡XXXXX搡麻豆| 97丨九色丨国产丨PORNY| 四川女人毛多水多A片| 成片免费播放| 丁香婷婷婷婷十二月在线观看视频| 午夜精品久久久久久久爽| 丁香婷婷老熟女综合网| 色婷婷色情| 久久伊人婷婷| 九九色综合九九色| 五月天婷婷网站| 亚洲无aV在线中文字幕 | 婷婷视频在线碰| 91a片爽| 亚洲激情五月| 五月婷婷香蕉| www.91婷婷| 97干97色| 国产操B视频| 色五月综合在线| 丁香九月婷| 国产噜一噜天天噜| 丁香激情综合| 五月天激情网站| 亚洲精品又粗又大又爽A片| 91在线精品一区二区| 日本久久人| 一区二区三区视频| 亚洲欧美一区二区三区四区爱爱动图| 九九热这里只有精品6| 久久er99热精品一区二区| 婷婷最新地址| 九九av| 亚洲十月婷婷综合| 色色色色综合网| 嫩草AV久久伊人妇女超级A| 中文字幕人妻一区二区| 成人做爰A片免费看视频| 亚洲成人网址在线观看| 玖玖爱资源站| 丁香五月开心婷婷| 六月色色| 67194成I人在线观看线路1| 在线成人网站| 色色丁香五月天社区| 色情综合网| 丁香五月婷婷激情视频播放| 亚洲色网络| 91人人爱| 激情美女五月天| 亚洲操b| 国产精品久久久久久白浆色欲| 丁香五月激情啪啪| 日韩精品999| 狠狠色狠狠色综合日日91| 51国精产品自偷自偷综合| 六月激情婷婷| 99久久9| 久久成人综合五月天| 性热视频99精品| 51精品国自产在线| 99在线观看| 综合色播| 六月丁香啪| 电影蜘蛛女| 天天射影院| 婷婷99综合| 欧美色色色色色| 亚洲色视频| 日韩在线观看网址| 亚洲色情激情丁香五月| 久久婷婷影院| 五月天婷婷永久免费视频| 婷婷五月天色综合翘| 丁香五月婷婷色情综合| 亚洲色网络| 野战J办公桌椅H| 九九热九九| 永久精品| 国产婷婷久久| 99爱视频在线播放| 中文字幕久久婷九女同| 一级操逼内射在线视频| 亚洲丁香婷婷| 婷婷五月18永久免费视频| 国产成人亚洲综合A∨婷婷| 亚洲AV无码一区二| 男女免费视频999| 日逼影音先锋男人资源站| 五月丁香六月婷婷精品| 色婷婷综合视频| 婷婷综合色图| 五月婷中文娱乐综合| 欧美性爱五月天| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 国产免费AV在线| 亚洲啪啪精品| 五夜丁香| 伊人99热| 婷婷97狠狠成人网站| 99热这里只有精品268| 婷婷丁香在线| 六月丁香射婷婷欧美色图片| 亚洲成人免费在线| 激情丁香五月激情婷婷| 日本韩国视频在线观看社区免费的9| 狠狠操天天操天天操| 丁香六月婷婷| 久久思思热视频| 伊人免费视频9| 日日激情网| 国产首页在线| 久久婷婷五月综合啪| 五月丁香色婷婷色| 五月丁香在线看| 五月天激情图片| 五月在线| 色情综合网| 五月天婷婷社区| 国产噜一噜天天噜| 激情久久综合| xxx综合在线| 大地9中文在线观看免费高清 | 亚洲亚洲人成综合网络| 色五月综合在线| 五月天综合久久| 在线观看中文字幕| 91日本在线| 婷婷五月色情天| 婷婷啪啪| 97超级碰人人| 狠狠色综合网| 婷婷丁香五月六月激情| 亚洲无码yw| 五月丁香无码| 很操日本7| 婷婷伊人综合| 五月天综合| 91婷色| 任你日视频| 五月色婷婷综合色| 99久操视频| 婷婷情爱五月天6| 丁香五月婷婷基地| 五月婷久久综合| 香蕉操亚洲| 丁香五月婷婷亚洲色图| 婷婷综合av| 91成人品| 五月天婷婷视频| 欧美色色色色色色色| 大香蕉九九| 婷婷六月激情在线视频| 亚州欧美国产久精国产99综合视频| 精品久久穴| 五月丁香六月激情视频| 欧美天天综合网站上去吧| 色综合中文综合网| 99久在线精品99re8热| 日日操,夜夜爽| 综合激情在线观看| 日韩欧美不卡| 亚洲无码99| 亚洲色婷婷99一9|| 都市激情亚洲| 久久性爱网| 精品99在线| 色婷婷色久综| 久久机热这里只有精品免费视频| 中文字幕黄色电影网址| 欧美五月婷婷综合| 欧美久热| 99毛片| 四色女婷婷| 99色在线视频| 琪琪色五月天| 神马欧美精| 九九九九精品精| 色色热| 天插天啪天啪天啪| 草综合网| 91人妻人人做人碰人人爽九色| 久婷婷视平| 曰曰久久| 思思热热久久| 伍月激情天| 丁香六月综合| 亚洲欧洲中文日韩久久AV乱码| 婷色五月| 亚洲无码九九| 丁香五月亚洲无码| 99这里有精品视频| 五月丁香啪啪综合网| 99超碰欧美| 热久久这里只有精品| 天天爽天天做| 99视频网| 狠狠五月综合在线 | 天天cha成人综合网| 婷婷五月丁香基地在线视频官网| 色婷婷丁香综合中文字幕| 婷婷五月六月丁香综合| 噜噜噜噜噜日本视频| 丁香六月婷婷综合激情欧美| 97碰| 五月丁香色色网| 免费看欧美成人A片无码| 丁香五月五婷| 俺也去在线视频| 乱乱av| 特级西西4444www无码| 伊人婷婷五月| 亚州性爱99| 五月欧美色色五月| 国产精品香蕉| 成人丁香五月| 丁香婷婷色情| 伊人久久婷| 丁香五月欧美午夜视频| www,色婷婷| 4399人妻无码久久久| 99精品视频网| 久久人人超| 五月综合视频| 啪啪婷婷五月天激情| 五月天久久综合婷婷| 日本色狠狠| 99亚洲精品视频| 天天干天天干天天操| 97色干在线观看| 九月色婷婷| 超碰久热| 久99久视频精品| 精品99*| 婷婷色色亚洲| 五月丁香久久综合色| 超碰五月婷婷五月天| 在线观看日韩12345区| 五月天婷婷无码| 91成人电影| 久久思思热视频| 婷婷五月天激情AV影院| 六月婷婷亚洲| 欧美色小说婷婷| 天天色天天爱天天爽| 射久久丁香五月| 深爱激情丁香| 在线色色| 日本三久久| 超碰AV在线| www.久久爱.com| 91在线日| 色色三级视频| 九九九九九九毛片| 色很很96| 亚洲婷婷丁香五月亚洲| 欧美va亚洲va在线播放| 色五婷婷在线视频| 97自拍视频在线| 国自产拍偷拍精品啪啪一区二区| 深夜婷婷 丁香| 老师高潮流白浆喷水的A片| 亚洲 成人 电影av在线观看| 我去色色网五雨天| 九九热这里有精品23| 色久影院| 第一区久久网站| 天天操婷婷| 激情五月天婷婷五月天| 色婷婷av综合网| 97在线/亚洲| 亚洲激情免费久久| 精品丁香五月天在线播放| 色婷婷综合久久久久| 大香蕉啪啪啪| 91婷婷色 | 狠狠干五月天| 九九九激情综合| 91人碰| 五月婷婷丁香五月亚洲色| 亚洲激情五月婷婷日日| 五月久久婷婷天堂视频| 99青青草99| 最新色色五月天| 色五月开心开心五月激情五月| 婷婷丁香十月| 69超碰在线| 日本一级特黄大片AAAAA级| 欧洲亚洲免费视频区| 中文av网站| www.色婷婷.com| 婷婷五月天午夜激情影院| 久久亚洲网| 99男人的天堂| 天堂在线婷婷| 丁香六月天AV| 婷婷午夜精品久久久| www.lchjjc.com| 草综合网| 五月婷婷婷| 激情六月婷婷| www.99精品视频| 婷婷五月天综合蜜桃| 玖玖无码中文| 玖玖婷婷色| 欧美久热| 玖玖爱综合网| 色婷婷丁香社综合| 五月天婷婷中文字幕在线播放| 六月丁香五月天| 激情婷婷网| 丁香五月婷婷天激情| 九热视频| 久久综合影院| 五月丁花六月丁香综合| 9 7总站超级碰免费视频| 婷婷欧美色| 9久热免费视频99| 五月婷婷丁香大香蕉| 婷婷一本和五月丁香| 亚洲日日日| 欧美WW在线网| 五月丁香婷婷欧美| 国产在线自| 婷婷丁香人妻久久在线观看| 日韩AV中文在线观看| 五月色婷婷亚洲| 日夜操B| WWW99视频| 五月婷婷六月丁香在线视频| 国产AV一区二区三区最新精品| 99热九九这里只有精品| 在线综合网| 婷婷99中文字幕| 欧美大道不卡| 99人碰碰碰| 色婷婷的五月天| 成人亚洲精品久久久久 | 婷婷成人丁香色情基地30| 99ri精品| 美女天天久久| 亚洲精品久久久无码| 天天草婷婷五月| 最近中文字幕大全免费版在线| 丁香五月激情六月欧亚激情综合导航| 久久97| 色色色999| 99在线观看视频| 欧美激情综合色综合啪啪五月| 熟女激情五月天| 狠狠色丁香久久综合婷婷亚洲成人福利 | 91九色在线视频| 欧美三级黄色片久久| 五月天婷婷深深爱| 久久色吧| 九色91视频| 亚洲天堂爱爱| 国产精品色色| 人人爽欧美婷婷久久久五月丁香 | 精品视频99看在线视频| 香蕉网婷婷| 99成人小视频| 91视频五月丁香| 日韩人妻在线观看| 婷婷亚洲激情在线观看视频| 99精品偷自拍| 国产欧美日韩一区二区三区| 影音先锋五月天婷婷丁香在线观看| 热热久久99| www.爱婷婷.com| 99热这里只有精品86| 九九热视频在线观看| 九九美女视频| 99啪啪| 婷婷五月天,影院| 伊综合蕉| 五月丁香六月激情综合在线| 激情小说五月天| 丁香五月天无码| 久久婷婷午夜| 色婷五月天激情| 久久久宗合| 婷婷五月色| 激情婷婷另类| 99热精品观看| 国产精品人人做人人爽人人添| 精品少妇蜜臀91| AV在线不卡网站| 黄色成人网站在线播放| 米奇激情婷婷| 91九色中文字幕女在线观看| 色色99| 亚洲丁香五月| 金桔一区二区ab地址| 黄色国久久| 激情网五月天| 亚洲 无码 中文字幕 中出| 综合久久8| 久综合网| 五月天激情AV| 秋霞午夜理论| 天啪天啪天啪天啪| 大香网伊人久久综合| 偷偷与邻居做爰完整视频| 日本特黄aaaaa| 五月丁香婷婷综合网色欲| 激情五月天色色| 丁香五月综合在线播放| 中文字幕在线播放视频| 久久99草五月婷婷| 大香蕉综合| 开心婷婷中文字幕| 狠狠色官网| 五月天激情网址| 国产精品99久久久久久久女警| 激情综合五月开心狠狠| 色播五月婷婷综合| 91xxxx九色| 国产精产国品一二三在观看 | 91性高潮久久久久久久久| 99热.com| 五月婷深深爱激情网| 久99视频| 一本九九色| 国产精品VIDEOSSEX久久发布| 五月婷婷丁香六月| 夜夜做夜夜愛| 色五月在线| 大香蕉五月天婷婷丁香91| 国产黄色在线| 天天色粽合合合合合合合| 九九热免费视频| 天天做天天双| 九九九精品视频免费观看| 大香蕉伊在| 激情五月天天| 午夜天堂一区人妻| 欧美一级色| 另类A片| 激情伊人五月天| 色情五月天视频网| 9色在线视频| 99热久久日本| 97干资源在线观看| 91伦| 一区二区乱视频码| 内射在线CHINESE| 五月天色区| 五月久久婷婷丁香| 色综合久久综合中文综合网| 欧美狠狠色| 天天草比天天爽| 婷婷五月AV| 日本91在线播放| A久久| 99热色在线精品| 色五月婷婷、老熟女| 精品视频这里只有精品| 久久婷婷视频| 久久精品五月| 9久热在线视频精品| 国产免费一区二区三州老师F1……| 激情婷婷| 九九热精品| 97色碰| 大香蕉啪啪网| 亚洲天堂啪啪| 97视频.干com| 99在线视频播放| 激情无码网| 五月天婷婷高清无码| 99热在线中文字幕| 欧美激情五月| 亚洲热热视频| 日日干日日| 五月丁香成年黄色| 五月婷婷亚洲| 狠狠操综合| 色哟哟精品| 五月天狠狠色| 色综合99| 成人中文网| 日本44久久在线| 啪啪五月婷婷| 色噜噜五月天| 久久五月视频| 色五月丁香总合网| 天天日夜夜夜操操操操| 视频色色色色色色| 玖玖婷婷五月天| 国产精品色婷婷99久久精品| 久久99久久99精品免视看婷| 99精品综合视频| 色播激情五月天| 色色日韩| 97精品人人A片免费看| 免费无码毛片一区二区A片 | 97干在线看| 性热视频99精品| 丁香婷婷性爱| 五月天婷婷青青| 99精品在这里| 五月天亭亭俺也| 婷婷五月天福利| AA片在线观看视频在线播放| 五月天大香蕉视频| 五月丁香六月综合基地| 无码一区二区三区四区五区| 日日狠狠久久偷偷四色综合免费 | 亚洲情色一区| 天天日夜夜高潮| 五月丁香花激情综合网| 婷婷永久在线| 在线播放人妻| 五月丁香婷婷色色色| 蜘蛛女免费观看完整版高清电影| 桔色成人在线| 色色色色色综合| 色五月丁香五| 色欲丁香| 精品色色色| 五月婷婷丁香啪啪| 免费黄网不卡AV| 激情综合在线观看| 日本va欧美va欧美| 思思久久精品| 9 9 9色色| 激情六月丁香综合| 六月激情网| 亚洲综合色网| 丁香五月激情啪| 色色aⅤ網| 思思99久久| 色欲色欲久久宗合网| 九九人人看| 五月丁香婷婷成人伊人网| 九热免费视频| 婷婷社区五月天| 五月色亚洲| 99riAV成人在线视频| 99热个人在线| 色综合色| 激情五月久久| 成人龟情网丁香五月| 激情综合色| 六月丁香五月天| 亚洲乱码精品久久久久..| 日韩美女在线视频19| 天天肏天天插| 色屌丝中文字幕| 一起草av在线观看| Www,五月天| 成人做爰A片免费看视频| 色久女| 99在线精品视频免费观看20| 无码免费人妻A片AAA毛片西瓜| 婷婷六月久久| 26uuu91| 色噜噜狠狠色综合日日| 久久精品婷婷| 噜噜狠狠色综合久| 狠狠综合区| 九九色99| 亚洲天堂婷婷丁香| 九九热只有这里是精品| 亚洲AV成人在线| 在线中文av| 日日操日日撸| 亚洲国产黄色电影| 国产裸舞表演WWWW| 伊人九九68| 奸逼视频| 久久综合婷婷| 亚洲色啪| 开心激情五月天网| 婷婷六月丁香综合| 成功精品影院| 丁香五月婷婷啪| 狠狠草狠狠草| 狠狠做五月| 草草视频91| 日韩综合网络男女香蕉a片| 天堂五月婷婷| 色婷婷激情| 六月丁香av| 97色在线观看视频| 97视频.干com| 玖玖婷婷五月天| 人人摸人人搞| 伊人五月天日日夜夜久久久天天| 婷婷五月综合激情| 99热这里有精品6| 99国产精品久久久久久久久久久| 婷婷色5月天在线。| 九九在线精品| 四色女婷婷| 三日本无码| 天天干com| 天天综合网色欲香| 综合性爱网| 大香AV| 9热视频在线观看| 色播六月| 久久99久久99久久99人受| 都市激情五月婷婷综合| 欧美精品在线观看| 99色色色色| 九九久久高清| 色婷婷五月在线| 日韩肏屄网| 91九色国产在线| 丁香六月婷婷开心| 国产精品大香蕉| 五月丁香婷婷在线综合蜜桃| 国产性爱在线| 亚洲性爱99在线| 国产精产国品一二三在观看 | 丁香五月综合| 激情二色月| 9 1大香蕉| 六月婷婷久久大全| Av九九| www.色99| 色婷婷丁香五月天激情综合网| 色约约视频一区二区三区四区五区 | 丁香五月六月激情| 五月婷婷成人| 狠狠色婷婷7777久| 久久 视频这里只有精总| 一起肏在线视频| 婷婷五月丁香基地| 激情五月综合ì香亚洲| 婷婷九月在线| 日本欧美成人片AAAA| 丁香五月激情鲁| 91超级碰在线视频| 婷婷爱五月天| 久久久精品色| 色婷婷瘦婷婷日韩| 97干干干丁香| 色婷婷中文在线| 五月婷婷六月爱| 精品亚洲日韩99欧美片| 丁香六月啪啪| 五月婷婷成人| 99热在线中文字幕| 99啪| 大香蕉丁香婷婷| 99热这里只有精品1025| 久噜久噜| 91狠狠色丁香婷婷综合久久精品| 99色嘟嘟精品网站| 婷婷五月天激情小说| 婷婷五月伦理网站| 六月丁香婷婷五月天| 久9热视频在线| 97色色色色色| 色婷婷五月天不卡| 婷婷亚洲日本| 九九综合网色全集| 大香蕉久久视频久久视频 | 国产伦亲子伦亲子视频观看| 5月婷婷6月六月丁香| 99热这里只有精品2016| 91ncom.色| 五月婷婷导航| 成人国产网| 无码色| 久久99久久久久久| 狠狠色狠狠色综合日日91| 婷婷伊人网| 九九综合图片网| 久久99最新地址| 99免费在线视频| 婷婷五月天成人小说| 五月丁香婷色| 夜夜夜天天操| 国产综合婷婷| 成人一区在线观看| 久久婷婷五月丁香蜜桃网| 五月天伊人| 站长推荐无码播放| 丁香五月在线| 天天色综合综合| 男人综合网| 中文AV在线播放| 97香蕉人人在线观看| 久久六月天| 涩婷婷五月天在线精品视频| 久久婷婷婷婷伊人| 99久久9| 9精品视频在线| 美女被肏网站在线看| 欧美成人AAA片一区国产精品| 26uuu最新地址| 国产在线黄色| 婷婷五月综合社区| 免费国产视频| 99热精品无码| 久久久免费精彩视频| 五月天六月天| 日本nghangse中文字幕| 高清无码网址| 日日做A爰片久久毛片A片英语| 久久99热免费最新版| 一起草AV| 97欧美在线| 九九精品9| 超碰在线免费| 五月丁香婷婷综合网| 色婷婷成人做爰A片免费看网站| 99超级超级超级碰| Av性爱网| 大香蕉人妻| 婷婷六月色情| 狠狠激情五月天| 午夜性做爰电影| 久久亚洲婷婷| 丁香婷婷五月综合| 久久久免费图片视频| 天天射影视综合网| 另类少妇人与禽zOZZ0性伦| 成人网站在线观看视频| 日本天堂免费99| 国产精品成人网站| 日夜夜久久| 99超超碰| 六月婷婷色五月| 五月天丁香网| 五月婷婷免费在线| 9l视频自拍9l九色成人| 91AV婷婷| www.色9| 七七色综合| 男女久久婷婷五月天| 色欲一区二区三区精品A片| 久久视这里只有精品| 91精品无码| 色综合色| 97热久久五月婷婷| XX久久| …亚洲黄色在线播放日韩、av中文a…| 丁香五月在线视频黑人| 日本一级黄色电影| 天天插天天插天天日| 在线观看免费狠狠色丁香香综合| 91热久88| 丁香五月六月婷婷殴美综合| 综合网精品99| 五月天 另类图片| 狠狠色综合无线观看| 日日艹思思热| 五月婷婷久久大片| 乱轮A片| 无码色| 五月综合婷婷开心网| 内射爽无广熟女亚洲| 2025最新亚洲激情在线| 四川女人毛多水多A片| 九九热视频免费观看| 激情婷婷狠狠干综合| 特级片神马电影| avh片在线观看| 色丁香五月婷婷| 久久色婷婷| 中文字幕视频在线播放| 超碰免费成人| 久久精品爱爱| 99热精品中文字幕| 91丨九色丨东北熟女| 婷婷激情综合| 激情宗合哪里能看| 一级片操逼视频| 婷婷五月天激情综合深爱激情| 9热在线视频| AV成人在线播放| 色婷婷综合综合网| 久9热| 婷婷五月天播| 99热这里有精品| 婷婷五月天美女视频| 五月天丁香欧美激情| 超碰人人干| 色色丁香| 开心激情站| 99.色| 日韩伊人大香蕉| 九九99免费理论| 色色色777| 精品国产乱码久久久久夜深人妻 | 无码AV免费精品一区二区三区 | 99自拍视频在线观看| 丁香婷婷基地| 日韩六六久久电影| 九月丁香欧美综合| 九九Av| 五月天婷婷伊人| 97婷婷五月丁香| 亚洲综合无码| 婷婷丁香五月天综合网| 国产片XXXXA片国语对白| 久久亚洲婷婷| 一级黄色操B| 婷婷伊人| 丁香六月天婷婷开心综合| 操操精品| 中文字幕黄色片| 久久久久思思热| 1区2区视频| 五月婷婷久久综合| 激情五月婷婷丁香综合网| 色玖玖综合网| 亚洲国产精品VA在线看黑人| 色色色色网站| 做爱夜夜干天天操| 日本9区视频| 成人视频在线免费播放| 思思视频精品| 九9九9无码| 99爱精品| 狠狠草狠狠草| www.99久久久| 国产精女同一区二区三区久| 丁香九月婷| 国产成人va在线| 天天搡日日搡aaaaⅩ| 亚洲精品第一色色色色色色| 五月婷婷中文字幕| 婷激情五月| av九九| 97ai婷婷| 国产JK精品白丝AV在线观看| 五月天激情综合| 亚洲avjiujiur91| 九九十99视频| 五月天综合在线网| 九九综合色| 丁香六月婷婷一区二区三区| 欧洲激情网站| 日91高清无玛| 国产成人一区二区三区在线观看 | 色婷婷香蕉| 激情五月丁香五月| 激情综合网,婷婷五月天| 五月婷婷六月天| 色色色色色日韩午夜激情 | 欧美日韩中文国产一区发布| 激情婷婷丁香五月天| 在线1青婷| 婷婷五月丁香狠狠| 五月天狠狠网站| 狠狠色丁香久久婷婷综合五月| 情欲禁地| 成人片在线播放| 播四月婷婷六月丁香| 激情伍月 欧美| a在线观看| 色天堂操| 日本www免费九九| 玖玖午夜视频| 亚洲第一精品网站| 亚洲久久婷婷丁香五月天| 丁香久久| 成人五月天丁香婷| 五月丁香亭亭AV女优| AV片一区在线观看| 久热大香蕉| 激情五月小说婷婷| SS丁香五月婷婷| 这里只有精9| 久久九九99| 五月丁香久人妻中文| 人妻激情网| 亚洲xx在线| 亚洲无AV在线中文字幕| 丁香久久| 成人 在线 日韩| 婷婷伊人网| 成人狠狠成人狠狠成人狠狠成人狠狠| 色婷婷五月天亚洲| 99亚洲天堂| 91操片| 黄色99热| 欧美超碰亚洲| 91re色综合视频| 91人人人人人| 国产精品99久久久久久久女警| 色婷婷视频| 天天干天天日天天操| 狠狠激情五月天| 色六月视频| 天天天天天操| 色五月婷婷开心| 激情婷婷丁香五月| 天天操夜夜玩!| 五月婷婷伊人网| 色网站99| 亚洲综合色网站| 五月天色婷婷激情综合| 激情五月婷黄版| 五月激情日本在线| 天天日日人| 91碰| 九九热欧美| 亚洲啪啪网| av在线中文| 丁香狠狠色婷婷| 日本色色视频| 31色区视频免费看| 丁香五月综合激情久久潮喷| 狠狠爱丁香婷| 综合 蜜月 婷婷| 92久操视频| 狠狠色噜噜狠| ztEJj| 久久婷婷五月综合色丁香花| 色婷婷激情Av久久久| 91丨九色丨国产| 久久久.www| 99视频在线观看视频| 另类亚洲电影| 色综合香蕉| 99ri久久| 99热免费网站| 99色最新在线视频| 九九热99精品在线| 五月天亭亭俺也| 日韩啊啊啊| 99热天堂| 99久久婷婷| 天天插天天射| 九月婷婷在线视频| 超级碰碰视频无码| 婷婷色色欧美| 国产免费一区二区三州老师F1F1| 91爱啪啪| 停停色综合伊人| 欧美性爱5月天天天看| 久久人妻伦理| 超碰com| 26uuu欧美日本| 九九热超碰| 五月丁小婷婷激情四射| 色播五月丁香综合| 婷婷五月天久久| 97超碰人人操| 六月色色综合| 这里只有免费的精品| 婷婷五月天堂| 婷婷五月色| 熟妇人妻中文字幕无码老熟妇| 国产九月婷婷| 久久激情视频| a网站免费观看| 亚洲综合丁香婷婷六月天| 天天摸夜夜夜| 色综合久久天天综合网| 中文成人在线| Aα在线免费观看| 超碰AV在线| 这里只有精彩视| 碰碰女| 97久久久久久久久久久| 黄色一极大片| 人人澡天天色天天做| 婷婷激情五月天在线| 婷婷五月AV| 无码激情AAAAA片-区区| 日韩美女羞羞网站在线观看| 婷婷爱爱蜜臀天天操| 伍月婷丁香婷| 高清无码视频网址| 开心激情站| 91主播在线| 天天久久66xxx| 日韩操| 精品激情| 久久综合最新网址| 婷婷伊人| 泰州成人视频| 曰曰久久| 玖玖色综合色| 五月丁香激| 99综合99| 91一起操| www.韩日视频| 中文字幕婷婷五月天| se影音资源在线观看| 伊人婷婷五月天| 激情婷| 婷婷色五月亚洲| 久超超碰| 日韩少妇内射免费播放| 亚洲AV网址| 色情免费视频播放| 久久婷婷五月综合| 殴美97色| 日本色色色| 噜噜五月天综合| 国产精品第一国产精品| 91人人操.COM| 夜夜干天天干| 免费看欧美成人A片无码| 天堂网亚洲色图| 99惹| 丁香五月激情啪| 中文字幕成人版| 天干干夜夜操| 九月丁香| 9婷婷内射| 狠狠草综合网| 五月婷婷激情综合| 中文资源在线a| 丁香六月婷婷综合欧美| 性爱视频久久| 人碰91| 色噜综| 99视频在线| 丁香婷婷六月天| av狠狠操| 亚洲三级无码| 天天操夜夜啊| 欧美影院婷婷| 玖玖99精品视频| 1995年关宝慧版蜘蛛女| 丁香五月婷婷基地| 亚洲成人在线综合| 激情五月综合网最新| 国产精品a无线| 任我肏| 激情 婷婷| 久久蜜臀婷婷| 婷婷娱乐丁香综合网| 少妇性按摩无码中文A片| 婷色五月| 国产9色在线/日韩| 综合久久激情久久| 五月亭亭激情综合| 九九激情网| 97人人草| 九九99免费视频| 欧美色色色色色色色色色色| dingxiangtingtingliuyue| www婷婷色| 99久久99九九九99九他书对| 色情五月婷| 蜜桃婷婷狠狠久久综合| 色99热| 亚洲影院婷婷色| 天天干com| www超碰| 五月人人丁香婷婷五月人人丁香| 99久久极情精品一区| 《久久综合九色综合97婷婷| 亚洲AV色婷婷人禽五月天| 欧美性色A片免费免费观看的| 狠狠色婷婷在线| 综合激情站| www.五月天色色色| 五月丁香六月香综合激情| 色5月婷婷色| 天天操夜夜操| 色婷婷偷拍| 天天操屄网| 六月婷婷日| 九九Y精品热播| www.色婷婷| 青青热视频| 在线天堂9| 99热高清在线| 荷兰av一级| 超碰伊人碰婷婷五月| 天天综合网在线| 四月婷婷五月丁香| 激情网五月| 婷婷97狠狠干| 专区无日本视频高清8| 亚洲激情五月婷婷日日| 中国丰满熟女A片免费观| 这里只有精品99视频| 国产毛片欧美毛片久久久| 五月激情婷婷图片基地| 丁香婷婷色五月| 噜一噜免费视频| 国产乱子轮XXX农村| 国产日日夜夜操| 91丁香综合| 五月天婷婷激情在线色图| 91久久九色| 五月丁香六月婷婷在线观看| 亚洲AV另类| 网站免费一站二站| 欧美天堂久久| 五月天色影院| 九九av| 1000部毛片A片免费观看| 伊人午夜综合色啪| 熟女人妻一区二区三区免费看| 久热中文字幕在线线观看 | 深爱激情网噜噜色| AV网在线观看| 五月天丁香婷婷社区| 天天肏视频| 六月婷婷日| 日韩aaaaa| 欧美色色色色色色色| 丁香五月天视频| 激情五月婷婷综合网| 日韩啪啪自拍| 九九热123| 狠狠色丁香婷婷基地| 婷婷五月在线影院| 淑女丝袜bi操逼123| 玖玖综合色区在线观看| www,超碰| 99在线er热| 99精品综合| 久久综合天天综合| 9999热在线免费观看| 中文字幕人妻在线| 五月天色婷婷视频| 九九九九九999999| 日婷婷| 日本色噜| 婷婷丁香六月天激情四射网| 天天日天天插| 丁香五月天在线视频| 人妻有码乱操| 人妻人人操| 久久婷婷五月激情网站| 免费啪啪啪网站| 成人在线99| 五月激情久久综合网| 六月婷婷综合久久| 九九在线视频| 99热色精品| 色色色视频免费无码| 97国产精品女人碰碰| 日本三级黄色大片| 婷婷丁香五月天亚洲| 五月婷婷激情久久| 激情婷婷丁香| 五月丁香另类图片| WWW.夜夜操.com| 亚洲第二AV| 国产欧美日韩综合精品一区二区| 激情五月影院| 五月丁香综合啪啪啪啪啪| 婷婷综合干| 99热欧美| 亚洲色婷婷视频| 一起草AV| 9 1大香蕉| 天天噜噜| 五月丁香六月婷婷亚洲视频| 成人色五月天婷婷| 亚洲成人av在线播放| 青草视频在线观看视频| 大香蕉啪啪| 亚洲日韩欧美综合VA| 香蕉婷婷色五月| 在线观看亚洲AV| 日本一級黃色一級片| 操碰99| 国产精品热搜丁香五月婷婷| 婷婷香香五月| 天天肏天天肏天天肏| 亚洲人妻av伦理| 热99精品视频五月| 色婷婷九月| 97狠狠色| 亚洲视频在线网| 亚洲愉拍99热成人精品| 久久精品99| 色中色综合| 五月婷综合网| 婷婷五月在线综合| 综合伊人久久| 亚洲中文字幕翔田千里| 欧美在线视频99| 久机视频这只有精品|