網站架構設計(什麼才是真正的架構設計)

一. 什麼是架構和架構本質在軟件行業,對於什麼是架構,都有很多的爭論,每個人都有自己的理解。此君說的架構和彼君理解的架構未必是一回事。因此我們在討論架構之前,我們先討論架構的概念定義,概念是人認識這個世界的基礎,並用來溝通的手段,如果對架構概念理解不一樣,那溝通起來自然不順暢。Linux有架構,MySQL有架構,JVM也有架構,使用Java開發、MySQL存儲、跑在Linux上的業務系統也有架構,應該關註哪一個?想要清楚以上問題需要梳理幾個有關系又相似的概念:系統與子系統、模塊與組建、框架與架構:1.1. 系統與子系統系統:泛指由一群有關聯的個體組成,根據某種規則運作,能完成個別元件不能獨立完成的工作能力的群體。子系統:也是由一群關聯的個體組成的系統,多半是在更大的系統中的一部分。1.2. 模塊與組件都是系統的組成部分,從不同角度拆分系統而已。模塊是邏輯單元,組件是物理單元。模塊就是從邏輯上將系統分解, 即分而治之, 將復雜問題簡單化。模塊的粒度可大可小, 可以是系統,幾個子系統、某個服務,函數, 類,方法、 功能塊等等。組件可以包括應用服務、數據庫、網絡、物理機、還可以包括MQ、容器、Nginx等技術組件。1.3. 框架與架構框架是組件實現的規范,例如:MVC、MVP、MVVM等,是提供基礎功能的產品,例如開源框架:Ruby on Rails、Spring、Laravel、Django等,這是可以拿來直接使用或者在此基礎上二次開發。框架是規范,架構是結構。我在這重新定義架構:軟件架構指軟件系統的頂層結構。架構是經過系統性地思考, 權衡利弊之後在現有資源約束下的最合理決策, 最終明確的系統骨架: 包括子系統, 模塊, 組件. 以及他們之間協作關系, 約束規范, 指導原則.並由它來指導團隊中的每個人思想層面上的一致。涉及四方面:系統性思考的合理決策:比如技術選型、解決方案等。明確的系統骨架:明確系統有哪些部分組成。系統協作關系:各個組成部分如何協作來實現業務請求。約束規范和指導原則:保證系統有序,高效、穩定運行。因此架構師具備能力:理解業務,全局把控,選擇合適技術,解決關鍵問題、指導研發落地實施。架構的本質就是對系統進行有序化地重構以致符合當前業務的發展,並可以快速擴展。那什麼樣的系統要考慮做架構設計 技術不會平白無故的出和自驅動發展起來,而架構的發展和需求是基於業務的驅動。架構設計完全是為瞭業務,需求相對復雜.非功能性需求在整個系統占據重要位置.系統生命周期長,有擴展性需求.系統基於組件或者集成的需要.業務流程再造的需要.二. 架構分層和分類架構分類可細分為業務架構、應用架構、技術架構, 代碼架構, 部署架構業務架構是戰略,應用架構是戰術,技術架構是裝備。其中應用架構承上啟下,一方面承接業務架構的落地,另一方面影響技術選型。熟悉業務,形成業務架構,根據業務架構,做出相應的應用架構,最後技術架構落地實施。如何針對當前需求,選擇合適的應用架構,如何面向未來,保證架構平滑過渡,這個是軟件開發者,特別是架構師,都需要深入思考的問題。2.1. 業務架構(俯視架構):包括業務規劃,業務模塊、業務流程,對整個系統的業務進行拆分,對領域模型進行設計,把現實的業務轉化成抽象對象。沒有最優的架構,隻有最合適的架構,一切系統設計原則都要以解決業務問題為最終目標,脫離實際業務的技術情懷架構往往會給系統帶入大坑,任何不基於業務做異想天開的架構都是耍流氓。所有問題的前提要搞清楚我們今天面臨的業務量有多大,增長走勢是什麼樣,而且解決高並發的過程,一定是一個循序漸進逐步的過程。合理的架構能夠提前預見業務發展1~2年為宜。這樣可以付出較為合理的代價換來真正達到技術引領業務成長的效果。看看京東業務架構(網上分享圖):2.2. 應用架構(剖面架構,也叫邏輯架構圖):硬件到應用的抽象,包括抽象層和編程接口。應用架構和業務架構是相輔相成的關系。業務架構的每一部分都有應用架構。類似:應用架構:應用作為獨立可部署的單元,為系統劃分瞭明確的邊界,深刻影響系統功能組織、代碼開發、部署和運維等各方面. 應用架構定義系統有哪些應用、以及應用之間如何分工和合作。這裡所謂應用就是各個邏輯模塊或者子系統。應用架構圖關鍵有2點:①. 職責劃分: 明確應用(各個邏輯模塊或者子系統)邊界邏輯分層子系統、模塊定義。關鍵類。②. 職責之間的協作:接口協議:應用對外輸出的接口。協作關系:應用之間的調用關系。應用分層有兩種方式:一種是水平分(橫向),按照功能處理順序劃分應用,比如把系統分為web前端/中間服務/後臺任務,這是面向業務深度的劃分。另一種是垂直分(縱向),按照不同的業務類型劃分應用,比如進銷存系統可以劃分為三個獨立的應用,這是面向業務廣度的劃分。應用的合反映應用之間如何協作,共同完成復雜的業務case,主要體現在應用之間的通訊機制和數據格式,通訊機制可以是同步調用/異步消息/共享DB訪問等,數據格式可以是文本/XML/JSON/二進制等。應用的分偏向於業務,反映業務架構,應用的合偏向於技術,影響技術架構。分降低瞭業務復雜度,系統更有序,合增加瞭技術復雜度,系統更無序。應用架構的本質是通過系統拆分,平衡業務和技術復雜性,保證系統形散神不散。系統采用什麼樣的應用架構,受業務復雜性影響,包括企業發展階段和業務特點;同時受技術復雜性影響,包括IT技術發展階段和內部技術人員水平。業務復雜性(包括業務量大)必然帶來技術復雜性,應用架構目標是解決業務復雜性的同時,避免技術太復雜,確保業務架構落地。2.3. 數據架構數據架構指導數據庫的設計. 不僅僅要考慮開發中涉及到的數據庫,實體模型,也要考慮物理架構中數據存儲的設計。2.4. 代碼架構(也叫開發架構):子系統代碼架構主要為開發人員提供切實可行的指導,如果代碼架構設計不足,就會造成影響全局的架構設計。比如公司內不同的開發團隊使用不同的技術棧或者組件,結果公司整體架構設計就會失控。代碼架構主要定義:①. 代碼單元:配置設計框架、類庫。②. 代碼單元組織:編碼規范,編碼的慣例。項目模塊劃分頂層文件結構設計,比如mvc設計。依賴關系2.5. 技術架構技術架構:確定組成應用系統的實際運行組件(lvs,nginx,tomcat,php-fpm等),這些運行組件之間的關系,以及部署到硬件的策略。技術架構主要考慮系統的非功能性特征,對系統的高可用、高性能、擴展、安全、伸縮性、簡潔等做系統級的把握。系統架構的設計要求架構師具備軟件和硬件的功能和性能的過硬知識,這也是架構設計工作中最為困難的工作。2.6. 部署拓撲架構圖(實際物理架構圖):拓撲架構,包括架構部署瞭幾個節點,節點之間的關系,服務器的高可用,網路接口和協議等,決定瞭應用如何運行,運行的性能,可維護性,可擴展性,是所有架構的基礎。這個圖主要是運維工程師主要關註的對象。物理架構主要考慮硬件選擇和拓撲結構,軟件到硬件的映射,軟硬件的相互影響。三. 架構級別我們使用金字塔的架構級別來說明,上層級別包含下層:系統級:即整個系統內各部分的關系以及如何治理:分層應用級:即單個應用的整體架構,及其與系統內單個應用的關系等。模塊級:即應用內部的模塊架構,如代碼的模塊化、數據和狀態的管理等。代碼級:即從代碼級別保障架構實施。戰略設計與戰術設計基於架構金字塔,我們有瞭系統架構的戰略設計與戰術設計的完美結合:戰略設計:業務架構用於指導架構師如何進行系統架構設計。戰術設計:應用架構要根據業務架構來設計。戰術實施:應用架構確定以後,就是技術選型。四. 應用架構演進業務架構是生產力,應用架構是生產關系,技術架構是生產工具。業務架構決定應用架構,應用架構需要適配業務架構,並隨著業務架構不斷進化,同時應用架構依托技術架構最終落地。架構演進路程:單體應用→分佈式應用服務化→微服務4.1. 單體應用企業一開始業務比較簡單,隻應用某個簡單場景,應用服務支持數據增刪改查和簡單的邏輯即可,單體應用可以滿足要求。典型的三級架構,前端(Web/手機端)+中間業務邏輯層+數據庫層。這是一種典型的Java Spring MVC或者Python Django框架的應用。其架構圖如下所示:針對單體應用,非功能性需求的做法:性能需求:使用緩存改善性能並發需求:使用集群改善並發讀寫分離:數據庫地讀寫分離使用反向代理和cdn加速使用分佈式文件和分佈式數據庫單體架構的應用比較容易部署、測試, 在項目的初期,單體應用可以很好地運行。然而,隨著需求的不斷增加, 越來越多的人加入開發團隊,代碼庫也在飛速地膨脹。慢慢地,單體應用變得越來越臃腫,可維護性、靈活性逐漸降低,維護成本越來越高。下面是單體架構應用的一些缺點:復雜性高:以一個百萬行級別的單體應用為例,整個項目包含的模塊非常多、模塊的邊界模糊、 依賴關系不清晰、 代碼質量參差不齊、 混亂地堆砌在一起。可想而知整個項目非常復雜。每次修改代碼都心驚膽戰, 甚至添加一個簡單的功能, 或者修改一個Bug都會帶來隱含的缺陷。技術債務:隨著時間推移、需求變更和人員更迭,會逐漸形成應用程序的技術債務, 並且越積 越多。“ 不壞不修”, 這在軟件開發中非常常見, 在單體應用中這種思想更甚。已使用的系統設計或代碼難以被修改,因為應用程序中的其他模塊可能會以意料之外的方式使用它。部署頻率低:隨著代碼的增多,構建和部署的時間也會增加。而在單體應用中, 每次功能的變更或缺陷的修復都會導致需要重新部署整個應用。全量部署的方式耗時長、 影響范圍大、 風險高, 這使得單體應用項目上線部署的頻率較低。而部署頻率低又導致兩次發佈之間會有大量的功能變更和缺陷修復,出錯率比較高。可靠性差:某個應用Bug,例如死循環、內存溢出等, 可能會導致整個應用的崩潰。擴展能力受限:單體應用隻能作為一個整體進行擴展,無法根據業務模塊的需要進行伸縮。例如,應用中有的模塊是計算密集型的,它需要強勁的CPU;有的模塊則是IO密集型的,需要更大的內存。由於這些模塊部署在一起,不得不在硬件的選擇上做出妥協。阻礙技術創新:單體應用往往使用統一的技術平臺或方案解決所有的問題, 團隊中的每個成員 都必須使用相同的開發語言和框架,要想引入新框架或新技術平臺會非常困難。4.2. 分佈式隨著業務深入,業務要求的產品功能越來越多,每個業務模塊邏輯也都變得更加復雜,業務的深度和廣度都增加,使得單體應用變得越來越臃腫,可維護性、靈活性逐漸降低,增加新功能開發周期越來越長,維護成本越來越高。這時需要對系統按照業務功能模塊拆分,將各個模塊服務化,變成一個分佈式系統。業務模塊分別部署在不同的服務器上,各個業務模塊之間通過接口進行數據交互。該架構相對於單體架構來說,這種架構提供瞭負載均衡的能力,大大提高瞭系統負載能力,解決瞭網站高並發的需求。另外還有以下特點:降低瞭耦合度:把模塊拆分,使用接口通信,降低模塊之間的耦合度。責任清晰:把項目拆分成若幹個子項目,不同的團隊負責不同的子項目。擴展方便:增加功能時隻需要再增加一個子項目,調用其他系統的接口就可以。部署方便:可以靈活的進行分佈式部署。提高代碼的復用性:比如Service層,如果不采用分佈式rest服務方式架構就會在手機Wap商城,微信商城,PC,Android,iOS每個端都要寫一個Service層邏輯,開發量大,難以維護一起升級,這時候就可以采用分佈式rest服務方式,公用一個service層。缺點:系統之間的交互要使用遠程通信,接口開發增大工作量,但是利大於弊。4.3. 微服務緊接著業務模式越來越復雜,訂單、商品、庫存、價格等各個模塊都很深入,比如價格區分會員等級,訪問渠道(app還是PC),銷售方式(團購還是普通)等,還有大量的價格促銷,這些規則很復雜,容易相互沖突,需要把分散到各個業務的價格邏輯進行統一管理,以基礎價格服務的方式透明地提供給上層應用,變成一個微內核的服務化架構,即微服務。微服務的特點:易於開發和維護:一個微服務隻會關註一個特定的業務功能,所以它業務清晰、代碼量較少。開發和維護單個微服務相對簡單。而整個應用是由若幹個微服務構建而成的,所以整個應用也會被維持在一個可控狀態。單個微服務啟動較快:單個微服務代碼量較少, 所以啟動會比較快。局部修改容易部署:單體應用隻要有修改,就得重新部署整個應用,微服務解決瞭這樣的問題。一般來說,對某個微服務進行修改,隻需要重新部署這個服務即可。技術棧不受限:在微服務架構中,可以結合項目業務及團隊的特點,合理地選擇技術棧。例如某些服務可使用關系型數據庫MySQL;某些微服務有圖形計算的需求,可以使用Neo4j;甚至可根據需要,部分微服務使用Java開發,部分微服務使用Node.js開發。微服務雖然有很多吸引人的地方,但它並不是免費的午餐,使用它是有代價的。使用微服務架構面臨的挑戰。運維要求較高:更多的服務意味著更多的運維投入。在單體架構中,隻需要保證一個應用的正常運行。而在微服務中,需要保證幾十甚至幾百個服務服務的正常運行與協作,這給運維帶來瞭很大的挑戰。分佈式固有的復雜性:使用微服務構建的是分佈式系統。對於一個分佈式系統,系統容錯、網絡延遲、分佈式事務等都會帶來巨大的挑戰。接口調整成本高:微服務之間通過接口進行通信。如果修改某一個微服務的API,可能所有使用瞭該接口的微服務都需要做調整。重復勞動:很多服務可能都會使用到相同的功能,而這個功能並沒有達到分解為一個微服務的程度,這個時候,可能各個服務都會開發這一功能,從而導致代碼重復。盡管可以使用共享庫來解決這個問題(例如可以將這個功能封裝成公共組件,需要該功能的微服務引用該組件),但共享庫在多語言環境下就不一定行得通瞭。五. 衡量架構的合理性架構為業務服務,沒有最優的架構,隻有最合適的架構,架構始終以高效,穩定,安全為目標來衡量其合理性。合理的架構設計:5.1. 業務需求角度能解決當下業務需求和問題高效完成業務需求: 能以優雅且可復用的方式解決當下所有業務問題前瞻性設計: 能在未來一段時間都能以第2種方式滿足業務,從而不會每次當業務進行演變時,導致架構翻天覆地的變化。5.2. 非業務需求角度①. 穩定性。指標:高可用:要盡可能的提高軟件的可用性,我想每個操作人都不願意看到自己的工作無法正常進行。黑盒白盒測試、單元測試、自動化測試、故障註入測試、提高測試覆蓋率等方式來一步一步推進。②. 高效指標:文檔化:不管是整體還是部分的整個生命周期內都必須做好文檔化,變動的來源包括但不限於BUG,需求。可擴展:軟件的設計秉承著低耦合的理念去做,註意在合理的地方抽象。方便功能更改、新增和運用技術的迭代,並且支持在適時對架構做出重構。高復用:為瞭避免重復勞動,為瞭降低成本,我們希望能夠重用之前的代碼、之前的設計。這點對於架構環境的依賴是最大的。③. 安全指標安全:組織的運作過程中產生的數據都是具有商業價值的,保證數據的安全也是刻不容緩的一部分。以免出現XX門之類醜聞。加密、https等為普遍手段六. 常見架構誤區開高走落不到實處遺漏關鍵性約束與非功能需求為虛無的未來埋單而過度設計過早做出關鍵性決策客戶說啥就是啥成為傳話筒埋頭幹活兒缺乏前瞻性架構設計還要考慮系統可測性架構設計不要企圖一步到位常見誤區誤區1——架構專門由架構師來做,業務開發人員無需關註:架構的再好,最終還是需要代碼來落地,並且組織越大這個落地的難度越大。不單單是系統架構,每個解決方案每個項目也由自己的架構,如分層、設計模式等。如果每一塊磚瓦不夠堅固,那麼整個系統還是會由崩塌的風險。所謂“千裡之堤,潰於蟻穴”。誤區2——架構師確定瞭架構藍圖之後任務就結束瞭:架構不是“空中樓閣”,最終還是要落地的,但是架構師完全不去深入到第一線怎麼知道“地”在哪?怎麼才能落的穩穩當當。誤區3——不做出完美的架構設計不開工:世上沒有最好架構,隻有最合適的架構,不要企圖一步到位。我們需要的不是一下子造出一輛汽車,而是從單輪車→自行車→摩托車,最後再到汽車。想象一下2年後才能造出的產品,當初市場還存在嗎?誤區4—— 為虛無的未來埋單而過度設計:在創業公司初期,業務場景和需求邊界很難把握,產品需要快速迭代和變現,需求頻繁更新,這個時候需要的是快速實現。不要過多考慮未來的擴展,說不定功能做完,效果不好就無用瞭。如果業務模式和應用場景邊界都已經比較清晰,是應該適當的考慮未來的擴展性設計。誤區5——一味追隨大公司的解決方案:由於大公司巨大成功的光環效應,再加上從大公司挖來的技術高手的影響,網站在討論架構決策時,最有說服力的一句話就成瞭“淘寶就是這麼搞的”或者“騰訊 就是這麼搞的”。大公司的經驗和成功模式固然重要,值得學習借鑒,但如果因此而變得盲從,就失去瞭堅持自我的勇氣,在架構演化的道路上遲早會迷路。誤區6——為瞭技術而技術:技術是為業務而存在的,除此毫無意義。在技術選型和架構設計中,脫離網站業務發展的實際,一味追求時髦的新技術,可能會將技術發展引入崎嶇小道,架構之路越走越難。考慮實現成本、時間、人員等各方面都要綜合考慮,理想與現實需要折中。七. 架構知識體系7.1. 架構演進初始階段:LAMP,部署在一臺服務器應用服務器和數據服務器分離使用緩存改善性能使用集群改善並發數據庫地讀寫分離使用反向代理和cdn加速使用分佈式文件和分佈式數據庫業務拆分分佈式服務7.2. 架構模式分層:橫向分層:應用層,服務層,數據層分割:縱向分割:拆分功能和服務分佈式分佈式應用和服務分佈式靜態資源分佈式數據和存儲分佈式計算集群:提高並發和可用性緩存:優化系統性能cdn方向代理訪問資源本地緩存分佈式緩存異步:降低系統的耦合性提供系統的可用性加快響應速度冗餘:冷備和熱備,保證系統的可用性自動化:發佈,測試,部署,監控,報警,失效轉移,故障恢復安全:7.3. 架構核心要素高性能:網站的靈魂性能測試前端優化應用優化數據庫優化可用性:保證服務器不宕機,一般通過冗餘部署備份服務器來完成負載均衡數據備份自動發佈灰度發佈監控報警伸縮性:建集群,是否快速應對大規模增長的流量,容易添加新的機器集群負載均衡緩存負載均衡可擴展性:主要關註功能需求,應對業務的擴展,快速響應業務的變化。是否做法開閉原則,系統耦合依賴分佈式消息服務化安全性:網站的各種攻擊,各種漏洞是否堵住,架構是否可以做到限流作用,防止ddos攻擊。xss攻擊sql註入csr攻擊web防火墻漏洞安全漏洞ssl查看更多:https://merak.aliyun-inc.com/#/delivery/info/12304285上雲就看雲棲號:更多雲資訊,上雲案例,最佳實踐,產品入門,訪問:https://yqh.aliyun.com/


本文出自快速备案,转载时请注明出处及相应链接。

本文永久链接: https://www.xiaosb.com/beian/51778/