一、什麼是架構和架構本質
在軟件行業,對於什麼是架構,都有不少的爭論,每一個人都有本身的理解。 此君說的架構和彼君理解的架構未必是一回事。php
LInux有架構,MySQL有架構,JVM也有架構,使用Java開發、MySQL存儲、跑在Linux上的業務系統也有架構,應該關注哪個?想要清楚以上問題須要梳理幾個有關係又類似的概念:系統與子系統、模塊與組建、框架與架構: 前端
1、系統與子系統nginx
系統:泛指由一羣有關聯的個體組成,根據某種規則運做,能完成個別元件不能獨立完成的工做能力的羣體。web
子系統:也是由一羣關聯的個體組成的系統,多半是在更大的系統中的一部分。sql
2、模塊與組件數據庫
都是系統的組成部分,從不一樣角度拆分系統而已。模塊是邏輯單元,組件是物理單元。編程
模塊就是從邏輯上將系統分解, 即分而治之, 將複雜問題簡單化。模塊的粒度可大可小, 能夠是系統,幾個子系統、某個服務,函數, 類,方法、 功能塊等等。設計模式
3、框架與架構緩存
框架是組件的規範,例如:MVC、MVP、MVVM等,是提供基礎功能的產品,例如:Ruby on Rails、Spring、Laravel、Django等。tomcat
框架是規範,架構是結構。
我在這從新定義架構:軟件架構指軟件系統的頂層結構。
架構是通過系統性地思考, 權衡利弊以後在現有資源約束下的最合理決策, 最終明確的系統骨架: 包括子系統, 模塊, 組件. 以及他們之間協做關係, 約束規範, 指導原則. 並由它來指導團隊中的每一個人思想層面上的一致
這相似建築設計規劃,城市整體規劃等,其實就是架構,只是應用的場景不一樣。蓋一座小房子,能夠拍腦殼幹起來,可是當你要蓋一座大樓,若是沒有一個建築設計規劃,能夠想象搭理最後是什麼樣?
架構的本質就是對系統進行有序化地重構以至符合當前業務的發展,並能夠快速擴展。
那什麼樣的系統要考慮作架構設計?
1. 需求相對複雜.
2. 非功能性需求在整個系統佔據重要位置.
3. 系統生命週期長,有擴展性需求.
4.系統基於組件或者集成的須要.
5.業務流程再造的須要
二、架構分類
架構可細分爲業務架構、應用架構、技術架構, 代碼架構, 部署架構,.
業務架構是戰略,應用架構是戰術,技術架構是裝備。其中應用架構承上啓下,一方面承接業務架構的落地,另外一方面影響技術選型。
熟悉業務,造成業務架構,根據業務架構,作出相應的應用架構,最後技術架構落地實施。
如何針對當前需求,選擇合適的應用架構,如何面向將來,保證架構平滑過渡,這個是軟件開發者,特別是架構師,都須要深刻思考的問題。
1、業務架構(俯視架構):
包括業務規劃,業務模塊、業務流程,對整個系統的業務進行拆分,對領域模型進行設計,把現實的業務轉化成抽象對象。
沒有最優的架構,只有最合適的架構,一切系統設計原則都要以解決業務問題爲最終目標,脫離實際業務的技術情懷架構每每會給系統帶入大坑,任何不基於業務作異想天開的架構都是耍流氓。
全部問題的前提要搞清楚咱們今天面臨的業務量有多大,增加走勢是什麼樣,並且解決高併發的過程,必定是一個按部就班逐步的過程。 合理的架構可以提早預見業務發展1~2年爲宜。這樣能夠付出較爲合理的代價換來真正達到技術引領業務成長的效果。
看看京東業務架構(網上分享圖):
硬件到應用的抽象,包括抽象層和編程接口。應用架構和業務架構是相輔相成的關係。業務架構的每一部分都有應用架構。
相似:
應用架構:應用做爲獨立可部署的單元,爲系統劃分了明確的邊界,深入影響系統功能組織、代碼開發、部署和運維等各方面. 應用架構定義系統有哪些應用、以及應用之間如何分工和合做。這裏所謂應用就是各個邏輯模塊或者子系統。
應用架構圖關鍵有2點:
一、職責劃分: 明確應用(各個邏輯模塊或者子系統)邊界
1)邏輯分層
2)子系統、模塊定義。
3)關鍵類。
二、職責之間的協做:
1)接口協議:應用對外輸出的接口。
2)協做關係:應用之間的調用關係。
應用分層有兩種方式:
一種是水平分(橫向),按照功能處理順序劃分應用,好比把系統分爲web前端/中間服務/後臺任務,這是面向業務深度的劃分。
另外一種是垂直分(縱向),按照不一樣的業務類型劃分應用,好比進銷存系統能夠劃分爲三個獨立的應用,這是面向業務廣度的劃分。
應用的合反映應用之間如何協做,共同完成複雜的業務case,主要體如今應用之間的通信機制和數據格式,通信機制能夠是同步調用/異步消息/共享DB訪問等,數據格式能夠是文本/XML/JSON/二進制等。
應用的分偏向於業務,反映業務架構,應用的合偏向於技術,影響技術架構。分下降了業務複雜度,系統更有序,合增長了技術複雜度,系統更無序。
應用架構的本質是經過系統拆分,平衡業務和技術複雜性,保證系統形散神不散。
系統採用什麼樣的應用架構,受業務複雜性影響,包括企業發展階段和業務特色;同時受技術複雜性影響,包括IT技術發展階段和內部技術人員水平。業務複雜性(包括業務量大)必然帶來技術複雜性,應用架構目標是解決業務複雜性的同時,避免技術太複雜,確保業務架構落地。
3、數據架構
數據架構指導數據庫的設計. 不只僅要考慮開發中涉及到的數據庫,實體模型,也要考慮物理架構中數據存儲的設計。
No.
考慮的方面
產出物
工具
說明
1
數據是集中仍是分佈存儲的?如何考慮分佈式存儲?
數據架構圖
2
領域模型到數據庫表的轉換?表結構關係的設計?
邏輯模型
物理模型
ER圖
Power Designer
Visio
3
實體如何設計?充血模型和貧血模型?
UML類圖
4
使用什麼數據庫?關係型仍是非關係型?
選型結果
4、代碼架構(也叫開發架構):
子系統代碼架構主要爲開發人員提供切實可行的指導,若是代碼架構設計不足,就會形成影響全局的架構設計。好比公司內不一樣的開發團隊使用不一樣的技術棧或者組件,結果公司總體架構設計就會失控。
代碼架構主要定義:
1、代碼單元:
一、配置設計
二、框架、類庫。
2、代碼單元組織:
一、編碼規範,編碼的慣例。
二、項目模塊劃分
三、頂層文件結構設計,好比mvc設計。
四、依賴關係
No.
考慮的方面
產出物
工具
說明
1
分層結構設計
分層架構圖(開發架構圖)
各類繪圖工具
好的分層結構支持自動化測試
2
開發技術選項
開發語言
開發框架
開發工具
考慮商用產品、開源框架、自研框架
3
模塊劃分
源碼工程;Project目錄結構;
分包(分庫)
4
開發規範
開發/編碼規範文檔;
5
軟件質量屬性
分析和決策結果
考慮運行期和開發期軟件質量屬性,並權衡利弊進行決策。
6、技術架構
技術架構:肯定組成應用系統的實際運行組件(lvs,nginx,tomcat,php-fpm等),這些運行組件之間的關係,以及部署到硬件的策略。
技術架構主要考慮系統的非功能性特徵,對系統的高可用、高性能、擴展、安全、伸縮性、簡潔等作系統級的把握。
系統架構的設計要求架構師具有軟件和硬件的功能和性能的過硬知識,這也是架構設計工做中最爲困難的工做。
5、部署拓撲架構圖(實際物理架構圖):
拓撲架構,包括架構部署了幾個節點,節點之間的關係,服務器的高可用,網路接口和協議等,決定了應用如何運行,運行的性能,可維護性,可擴展性,是全部架構的基礎。這個圖主要是運維工程師主要關注的對象。
物理架構主要考慮硬件選擇和拓撲結構,軟件到硬件的映射,軟硬件的相互影響。
考慮的方面
產出物
工具
說明
1
網絡方面:網絡拓撲;網絡設備;安全機制
拓撲圖
安全規範
2
性能方面:可靠性、可伸縮性
須要什麼樣設備性能
3
部署方面:集中式仍是分佈式;組件部署
部署圖
三、應用架構演進
業務架構是生產力,應用架構是生產關係,技術架構是生產工具。業務架構決定應用架構,應用架構須要適配業務架構,並隨着業務架構不斷進化,同時應用架構依託技術架構最終落地。
架構演進路程:單體應用->分佈式應用服務化-> 微服務
一、單體應用
企業一開始業務比較簡單,只應用某個簡單場景,應用服務支持數據增刪改查和簡單的邏輯便可,單體應用能夠知足要求。
典型的三級架構,前端(Web/手機端)+中間業務邏輯層+數據庫層。這是一種典型的Java Spring MVC或者Python Django框架的應用。其架構圖以下所示:
針對單體應用,非功能性需求的作法:
一、性能需求:使用緩存改善性能
二、併發需求:使用集羣改善併發
三、讀寫分離:數據庫地讀寫分離
四、使用反向代理和cdn加速
五、使用分佈式文件和分佈式數據庫
單體架構的應用比較容易部署、測試, 在項目的初期,單體應用能夠很好地運行。然而,隨着需求的不斷增長, 愈來愈多的人加入開發團隊,代碼庫也在飛速地膨脹。慢慢地,單體應用變得愈來愈臃腫,可維護性、靈活性逐漸下降,維護成本愈來愈高。下面是單體架構應用的一些缺點:
複雜性高:
以一個百萬行級別的單體應用爲例,整個項目包含的模塊很是多、模塊的邊界模糊、 依賴關係不清晰、 代碼質量良莠不齊、 混亂地堆砌在一塊兒。可想而知整個項目很是複雜。 每次修改代碼都心驚膽戰, 甚至添加一個簡單的功能, 或者修改一個Bug都會帶來隱含的缺陷。
技術債務: 隨着時間推移、需求變動和人員更迭,會逐漸造成應用程序的技術債務, 而且越積 越多。「 不壞不修」, 這在軟件開發中很是常見, 在單體應用中這種思想更甚。 已使用的系統設計或代碼難以被修改,由於應用程序中的其餘模塊可能會以意料以外的方式使用它。
部署頻率低: 隨着代碼的增多,構建和部署的時間也會增長。而在單體應用中, 每次功能的變動或缺陷的修復都會致使須要從新部署整個應用。全量部署的方式耗時長、 影響範圍大、 風險高, 這使得單體應用項目上線部署的頻率較低。 而部署頻率低又致使兩次發佈之間會有大量的功能變動和缺陷修復,出錯率比較高。
可靠性差: 某個應用Bug,例如死循環、內存溢出等, 可能會致使整個應用的崩潰。
擴展能力受限: 單體應用只能做爲一個總體進行擴展,沒法根據業務模塊的須要進行伸縮。例如,應用中有的模塊是計算密集型的,它須要強勁的CPU; 有的模塊則是IO密集型的,須要更大的內存。 因爲這些模塊部署在一塊兒,不得不在硬件的選擇上作出妥協。
阻礙技術創新: 單體應用每每使用統一的技術平臺或方案解決全部的問題, 團隊中的每一個成員 都必須使用相同的開發語言和框架,要想引入新框架或新技術平臺會很是困難。
二、分佈式
隨着業務深刻,業務要求的產品功能愈來愈多,每一個業務模塊邏輯也都變得更加複雜,業務的深度和廣度都增長,使得單體應用變得愈來愈臃腫,可維護性、靈活性逐漸下降,增長新功能開發週期愈來愈長,維護成本愈來愈高。
這時須要對系統按照業務功能模塊拆分,將各個模塊服務化,變成一個分佈式系統。業務模塊分別部署在不一樣的服務器上,各個業務模塊之間經過接口進行數據交互。
該架構相對於單體架構來講,這種架構提供了負載均衡的能力,大大提升了系統負載能力,解決了網站高併發的需求。另外還有如下特色:
下降了耦合度:把模塊拆分,使用接口通訊,下降模塊之間的耦合度。
責任清晰:把項目拆分紅若干個子項目,不一樣的團隊負責不一樣的子項目。
擴展方便:增長功能時只須要再增長一個子項目,調用其餘系統的接口就能夠。
部署方便:能夠靈活的進行分佈式部署。
提升代碼的複用性:好比Service層,若是不採用分佈式rest服務方式架構就會在手機Wap商城,微信商城,PC,Android,iOS每一個端都要寫一個Service層邏輯,開發量大,難以維護一塊兒升級,這時候就能夠採用分佈式rest服務方式,公用一個service層。
缺點:系統之間的交互要使用遠程通訊,接口開發增大工做量,可是利大於弊。
三、微服務
緊接着業務模式愈來愈複雜,訂單、商品、庫存、價格等各個模塊都很深刻,好比價格區分會員等級,訪問渠道(app仍是PC),銷售方式(團購仍是普通)等,還有大量的價格促銷,這些規則很複雜,容易相互衝突,須要把分散到各個業務的價格邏輯進行統一管理,以基礎價格服務的方式透明地提供給上層應用,變成一個微內核的服務化架構,即微服務。
微服務的特色:
易於開發和維護: 一個微服務只會關注一個特定的業務功能,因此它業務清晰、代碼量較少。 開發和維護單個微服務相對簡單。而整個應用是由若干個微服務構建而成的,因此整個應用也會被維持在一個可控狀態。
單個微服務啓動較快: 單個微服務代碼量較少, 因此啓動會比較快。
局部修改容易部署: 單體應用只要有修改,就得從新部署整個應用,微服務解決了這樣的問題。 通常來講,對某個微服務進行修改,只須要從新部署這個服務便可。
技術棧不受限:在微服務架構中,能夠結合項目業務及團隊的特色,合理地選擇技術棧。例如某些服務可以使用關係型數據庫MySQL;某些微服務有圖形計算的需求,可使用Neo4j;甚至可根據須要,部分微服務使用Java開發,部分微服務使用Node.js開發。
微服務雖然有不少吸引人的地方,但它並非免費的午飯,使用它是有代價的。使用微服務架構面臨的挑戰。
運維要求較高:更多的服務意味着更多的運維投入。在單體架構中,只須要保證一個應用的正常運行。而在微服務中,須要保證幾十甚至幾百個服務服務的正常運行與協做,這給運維帶來了很大的挑戰。
分佈式固有的複雜性:使用微服務構建的是分佈式系統。對於一個分佈式系統,系統容錯、網絡延遲、分佈式事務等都會帶來巨大的挑戰。
接口調整成本高:微服務之間經過接口進行通訊。若是修改某一個微服務的API,可能全部使用了該接口的微服務都須要作調整。
重複勞動:不少服務可能都會使用到相同的功能,而這個功能並無達到分解爲一個微服務的程度,這個時候,可能各個服務都會開發這一功能,從而致使代碼重複。儘管可使用共享庫來解決這個問題(例如能夠將這個功能封裝成公共組件,須要該功能的微服務引用該組件),但共享庫在多語言環境下就不必定行得通了。
四、衡量架構的合理性
架構爲業務服務,沒有最優的架構,只有最合適的架構, 架構始終以高效,穩定,安全爲目標來衡量其合理性。
1、穩定性。指標:
1. 高可用:要儘量的提升軟件的可用性,我想每一個操做人都不肯意看到本身的工做沒法正常進行。黑盒白盒測試、單元測試、自動化測試、故障注入測試、提升測試覆蓋率等方式來一步一步推動。
2、高效指標:
1. 文檔化:無論是總體仍是部分的整個生命週期內都必須作好文檔化,變更的來源包括但不限於BUG,需求。
2. 可擴展:軟件的設計秉承着低耦合的理念去作,注意在合理的地方抽象。方便功能更改、新增和運用技術的迭代,而且支持在適時對架構作出重構。
3. 高複用:爲了不重複勞動,爲了下降成本,咱們但願可以重用以前的代碼、以前的設計。這點對於架構環境的依賴是最大的。
3、安全指標
1. 安全:組織的運做過程當中產生的數據都是具備商業價值的,保證數據的安全也是刻不容緩的一部分。以避免出現XX門之類醜聞。加密、https等爲廣泛手段
五、常見架構誤區
誤區1——架構專門由架構師來作,業務開發人員無需關注:架構的再好,最終仍是須要代碼來落地,而且組織越大這個落地的難度越大。不僅僅是系統架構,每一個解決方案每一個項目也由本身的架構,如分層、設計模式等。若是每一塊磚瓦不夠堅固,那麼整個系統仍是會由崩塌的風險。所謂「千里之堤,潰於蟻穴」。
誤區2——架構師肯定了架構藍圖以後任務就結束了:架構不是「空中樓閣」,最終仍是要落地的,可是架構師徹底不去深刻到第一線怎麼知道「地」在哪?怎麼才能落的穩妥當當。
誤區3——不作出完美的架構設計不開工:世上沒有最好架構,只有最合適的架構,不要企圖一步到位。咱們須要的不是一會兒造出一輛汽車,而是從單輪車 --> 自行車 --> 摩托車,最後再到汽車。想象一下2年後才能造出的產品,當初市場還存在嗎?
誤區4—— 爲虛無的將來埋單而過分設計
誤區5——埋頭幹活兒缺少前瞻性
六、架構知識體系
架構演進
初始階段:LAMP,部署在一臺服務器
應用服務器和數據服務器分離
使用緩存改善性能
使用集羣改善併發
數據庫地讀寫分離
使用反向代理和cdn加速
使用分佈式文件和分佈式數據庫
業務拆分
分佈式服務
架構模式
分層:橫向分層:應用層,服務層,數據層
分割:縱向分割:拆分功能和服務
分佈式
分佈式應用和服務
分佈式靜態資源
分佈式數據和存儲
分佈式計算
集羣:提升併發和可用性
緩存:優化系統性能
cdn
方向代理訪問資源
本地緩存
分佈式緩存
異步:下降系統的耦合性
提供系統的可用性
加快響應速度
冗餘:冷備和熱備,保證系統的可用性
自動化:發佈,測試,部署,監控,報警,失效轉移,故障恢復
安全:
架構核心要素
高性能:網站的靈魂
性能測試
前端優化
應用優化
數據庫優化
可用性:保證服務器不宕機,通常經過冗餘部署備份服務器來完成
負載均衡
數據備份
自動發佈
灰度發佈
監控報警
伸縮性:建集羣,是否快速應對大規模增加的流量,容易添加新的機器
集羣
負載均衡
緩存負載均衡
可擴展性:主要關注功能需求,應對業務的擴展,快速響應業務的變化。是否作法開閉原則,系統耦合依賴
分佈式消息
服務化
安全性:網站的各類攻擊,各類漏洞是否堵住,架構是否能夠作到限流做用,防止ddos攻擊。
xss攻擊
sql注入
csr攻擊
web防火牆漏洞
安全漏洞
ssl
七、架構書籍推薦
1. 《大型網站技術架構:核心原理與案例分析》
這是比較早,比較系統介紹大型網站技術架構的書,通俗易懂又充滿智慧,即使你以前徹底沒接觸過網站開發,通讀前幾章,也能快速獲取到常見的網站技術架構及其應用場景。很是贊。
2. 《億級流量網站架構核心技術》
相比《大型網站技術架構》的高屋建瓴,開濤的這本《億級流量網站架構核心技術》則落實到細節,網站架構中常見的各類技術,好比緩存、隊列、線程池、代理……,通通都講到了,並且配有核心代碼。甚至連 Nginx 的配置都有!
若是你想在實現大流量網站時找參考技術和代碼,這本書最合適啦。
3. 《架構即將來》
這是一本「神書」啦,超越具體技術層面,着重剖析架構問題的根源,幫助咱們弄清楚應該以何種方式管理、領導、組織和配置團隊。
4. 《分佈式服務架構:原理、設計與實戰》
這本書全面介紹了分佈式服務架構的原理與設計,並結合做者在實施微服務架構過程當中的實踐經驗,總結了保障線上服務健康、可靠的最佳方案,是一本架構級、實戰型的重量級著做。
5. 《聊聊架構》
這算是架構方面的一本神書了,從架構的原初談起,從業務的拆分談起,談到架構的目的,架構師的角色,架構師如何將架構落地……強烈推薦。
不過,對於沒有架構實踐經驗的小夥伴來說,可能會以爲這本書比較虛,概念多,實戰少。但若是你有過一兩個項目的架構經驗,就會深深認同書中追本溯源探討的架構理念。
6. 《軟件架構師的12項修煉》
大多數時候所謂的「技術之玻璃天花板」其實只是缺少軟技能而已。這些技能能夠學到,缺少的知識能夠經過決定改變的努力來彌補。
總結參考:
《大型網站技術架構》、《軟件架構師設計》
http://www.rowkey.me/blog/2017/08/24/arch/
https://mp.weixin.qq.com/s?__biz=MjM5MDE0Mjc4MA==&mid=2650992472&idx=1&sn=ab1234fff936fda3e5cf1f6780cb733d&mpshare=1&scene=23&srcid=1017To1tEophZ2h3McPAESCO##
總結參考:
《大型網站技術架構》 ———————————————— 版權聲明:本文爲CSDN博主「規速」的原創文章,遵循CC 4.0 by-sa版權協議,轉載請附上原文出處連接及本聲明。原文連接:https://blog.csdn.net/hguisu/article/details/78258430