大型網(wǎng)站架構(gòu)演化 大型網(wǎng)站軟件系統(tǒng)的特點 大型網(wǎng)站架構(gòu)演化發(fā)展歷程 初始階段 應(yīng)用服務(wù)和數(shù)據(jù)服務(wù)分離 使用緩存改善網(wǎng)站性能 緩存類型 本地緩存 分布式緩存 緩存產(chǎn)品 redis 業(yè)界主流 memcached 解決問題 數(shù)據(jù)庫訪問 使用應(yīng)用服務(wù)器集群改善網(wǎng)站的并發(fā)處理能力 問題: 負(fù)載均衡情況下session狀態(tài)的保持? 解決方案: 基于DNS的負(fù)載均衡 反向代理 ngix JK2 數(shù)據(jù)庫的讀寫分離 問題: 讀庫與寫庫的數(shù)據(jù)同步 解決方案: 不同的數(shù)據(jù)庫都有自己的數(shù)據(jù)庫的主從復(fù)制功能 使用反向代理與CDN加速網(wǎng)站響應(yīng) 反向代理產(chǎn)品 ngix 使用分布式文件系統(tǒng)和分布式數(shù)據(jù)庫系統(tǒng) 使用no-sql和搜索引擎 站內(nèi)搜索 lucene nutch 分詞器 no-sql庫 mongodb hadoop 業(yè)務(wù)拆分 web service restful 分布式服務(wù) 大型網(wǎng)站架構(gòu)演化的價值觀 核心價值：隨網(wǎng)站所需靈活應(yīng)對 驅(qū)動力量：網(wǎng)站的業(yè)務(wù)發(fā)展 網(wǎng)站架構(gòu)設(shè)計誤區(qū) 一味追隨大公司的解決方案 為技術(shù)而技術(shù) 企圖用技術(shù)解決一切問題 大型網(wǎng)站架構(gòu)模式 架構(gòu)模式 分層 分割 分布式 分布式應(yīng)用和服務(wù) 分布式靜態(tài)資源 分布式數(shù)據(jù)和存儲 分布式計算 集群 緩存 CDN 反向代理 本地緩存 分布式緩存 異步 冗佘 冷備份 主從分離，實時同步實現(xiàn)熱備份 災(zāi)備數(shù)據(jù)中心 自動化 發(fā)布過程自動化 ant maven. 自動化代碼管理 svn cvs github 自動化測試 loadrunner hudson. 自動化安全測試 自動化部署 自動化報警 自動化失效轉(zhuǎn)移 自動化失效恢復(fù) 自動化降級 自動化分配資源 安全 密碼和手機校驗碼 數(shù)據(jù)庫中的密碼加密后存 -> 不可ni -> md5 加密 子主題 1 驗證碼 防止機器登錄 對于攻擊網(wǎng)站的XSS攻擊，SQL注入，進(jìn)行編碼轉(zhuǎn)換 對垃圾信息，敏感信息進(jìn)行過濾 對交易轉(zhuǎn)賬等重要操作根據(jù)交易模式和交易信息進(jìn)行風(fēng)險控制 Sina微博的應(yīng)用 大型網(wǎng)站架構(gòu)要素 性能 可用性 伸縮性 擴展性 安全性 瞬時響應(yīng)：網(wǎng)站的高性能架構(gòu) 網(wǎng)站的性能測試 不同的視角 用戶的視角 開發(fā)人員的視角 運維人員的視角 性能測試指標(biāo) 響應(yīng)時間 并發(fā)數(shù) 吞吐量 性能測試方法 性能測試 負(fù)載測試 壓力測試 穩(wěn)定性測試 web 前端性能優(yōu)化 瀏覽器優(yōu)化 減少http請求 使用瀏覽器緩存 啟用壓縮 css上，js下 減少cookie傳輸， 靜態(tài)資源使用獨立域名訪問 CDN加速 反向代理 應(yīng)用服務(wù)器性能優(yōu)化 分布式緩存 緩存的原理 合理使用緩存 頻繁修改的數(shù)據(jù) 沒有熱點的訪問 數(shù)據(jù)不一致和臟讀 緩存可用性 緩存預(yù)熱 緩存穿透 緩存架構(gòu) jboss cache為代表的需要更新同步的分布式級緩存 以memcached為代表的不互相通信的分布式緩存 異步操作 使用集群 代碼優(yōu)化 多線程 資源復(fù)用 單例 對象池 數(shù)據(jù)結(jié)構(gòu) 垃圾回收 存儲性能優(yōu)化 固態(tài)硬盤 RAID與HDFS 萬無一失：網(wǎng)站的高可用性 高可性的度量與考核 度量 考核 高可用的網(wǎng)站架構(gòu) 高可用的應(yīng)用 高可用的服務(wù) 高可用的數(shù)據(jù) CAP原理 數(shù)據(jù)備份 失效轉(zhuǎn)移 高可用網(wǎng)站的軟件質(zhì)量保證 網(wǎng)站發(fā)布 自動化測試 預(yù)發(fā)布驗證 代碼控制 自動化發(fā)布 灰度發(fā)布 網(wǎng)站運行臨控 臨控數(shù)據(jù)采集 臨控管理 永無止境：網(wǎng)站的可伸縮性 網(wǎng)站架構(gòu)的伸縮性設(shè)計 不同功能進(jìn)行物理分離實現(xiàn)伸縮 單一功能通過集群規(guī)模實現(xiàn)伸縮 應(yīng)用服務(wù)器集群的伸縮性設(shè)計 http重定向負(fù)載均衡 DNS域名解析負(fù)載均衡 反向代理負(fù)載均衡 ip負(fù)載均衡 數(shù)據(jù)鏈路層負(fù)載均衡 負(fù)載均衡算法 分布式緩存集群的伸縮性設(shè)計 mem