在近日上海舉辦的“2013中華架構師大會(huì )”上，來(lái)自多個(gè)互聯(lián)網(wǎng)領(lǐng)域的架構師們分享有關(guān)大數據架構、電商技術(shù)架構、網(wǎng)頁(yè)游戲架構等技術(shù)以及實(shí)踐案例，從中，使架構師們相互了解到不同產(chǎn)品及需求所需要的架構設計、支撐系統以及大數據處理及存儲等方面的干貨。

在當天的架構分享中，來(lái)自唯品會(huì )的架構師主要介紹了唯品會(huì )網(wǎng)站的日志平臺架構方面的數據收集及海量處理和實(shí)時(shí)處理，對于電商網(wǎng)站而言，數據的收集和處理關(guān)乎著(zhù)網(wǎng)站是否能更好的挖掘到有用信息以及更好的運用，唯品會(huì )的平臺架構中主要運用了Flume、Kafka、ElasticSearch、Storm、Zookeeper、Redis、MySQL、Hive這幾種工具，其中Kafka是一個(gè)高吞吐量分布式消息系統，kafka的數據只會(huì )順序append，數據的刪除策略是累積到一定程度或者超過(guò)一定時(shí)間再刪除。Kafka另一個(gè)獨特的地方是將消費者信息保存在客戶(hù)端而不是MQ服務(wù)器，這樣服務(wù)器就不用記錄消息的投遞過(guò)程，每個(gè)客戶(hù)端都自己知道自己下一次應該從什么地方什么位置讀取消息，消息的投遞過(guò)程也是采用客戶(hù)端主動(dòng)pull的模型，這樣大大減輕了服務(wù)器的負擔。

針對這樣的架構設計，用戶(hù)在網(wǎng)頁(yè)的瀏覽和體驗方面，也同樣離不開(kāi)頁(yè)面加速架構，以帝聯(lián)科技的靜態(tài)頁(yè)面加速為例：首先，靜態(tài)頁(yè)面包含了圖片、文字、flash動(dòng)畫(huà)等文件，所以對于CDN的節點(diǎn)架構就需要考慮到靜態(tài)頁(yè)面的文件屬性。靜態(tài)頁(yè)面區別于其他動(dòng)態(tài)以及流媒體文件，它的更新頻率相對來(lái)說(shuō)較低，所以利用緩存技術(shù)是優(yōu)質(zhì)的快速加載方法。

帝聯(lián)科技的靜態(tài)頁(yè)面加速服務(wù)是針對ICP運營(yíng)商網(wǎng)站上的html文件、flash動(dòng)畫(huà)以及各種文件類(lèi)型的圖片而專(zhuān)門(mén)設計的加速產(chǎn)品，它的CDN架構屬性是建立在緩存技術(shù)的基礎上，在終端用戶(hù)的訪(fǎng)問(wèn)周邊建立Cache節點(diǎn)，同時(shí)網(wǎng)站上的所有文件可以通過(guò)定期和不定期的方式在帝聯(lián)CDN節點(diǎn)上進(jìn)行更新，定期更新時(shí)CDN中心網(wǎng)絡(luò )主動(dòng)更新源站數據，再通過(guò)智能解析系統將內容進(jìn)行優(yōu)化分發(fā)到帝聯(lián)CDN邊緣節點(diǎn)，不定期更新可以通過(guò)帝聯(lián)CDN客戶(hù)服務(wù)系統進(jìn)行主動(dòng)推送更新完成。這樣便構成了靜態(tài)頁(yè)面加速的CDN架構系統，以此保證終端用戶(hù)的高速訪(fǎng)問(wèn)和網(wǎng)絡(luò )體驗。

除了走在前端的架構師需要思考更多的架構設計和數據收集處理等方面的知識，作為維護平臺運轉的運維也是其中不可忽視的重要環(huán)節，架構師做運維需要有工匠之心，一定要保證數據的準確性（不要不在乎0.1%的數據差異），因為網(wǎng)站的核心內容即是數據，同時(shí)需要更加細心以及有大局觀(guān)。