WOT2015何岳娟：數(shù)據(jù)分析助電商笑對用戶蜂擁而至這件好事

原創(chuàng)
作者：于雪 2015-11-30 01:35:20

云計算 大數(shù)據(jù)技術的發(fā)展引發(fā)眾多電商架構(gòu)師思考，在面對用戶蜂擁而至這件好事，如何在海量數(shù)據(jù)處理中實時發(fā)現(xiàn)有效信息，為構(gòu)建穩(wěn)定高效的系統(tǒng)架構(gòu)設計提供指導。在【W(wǎng)OT2015"互聯(lián)網(wǎng)+"時代大數(shù)據(jù)技術峰會】 現(xiàn)場，魅族電商平臺高級架構(gòu)師 何岳娟就魅族電商平臺架構(gòu)變遷之路的經(jīng)驗和體會和51CTO記者進行交流。

成都創(chuàng)新互聯(lián)公司專注于福田網(wǎng)站建設服務及定制，我們擁有豐富的企業(yè)做網(wǎng)站經(jīng)驗。 熱誠為您提供福田營銷型網(wǎng)站建設，福田網(wǎng)站制作、福田網(wǎng)頁設計、福田網(wǎng)站官網(wǎng)定制、微信小程序服務，打造福田網(wǎng)絡公司原創(chuàng)品牌,更為您提供福田網(wǎng)站排名全網(wǎng)營銷落地服務。

許多電商平臺都會經(jīng)歷相似的過程：流量和業(yè)績每年以幾倍至十幾倍的速度增長；瞬間訪問量可能是平時的幾十倍；網(wǎng)絡帶寬被占滿，用戶響應很慢；機器負載高甚至宕機；數(shù)據(jù)庫壓力過大導致服務不可用……

大數(shù)據(jù)技術的發(fā)展引發(fā)眾多電商架構(gòu)師思考，在面對用戶蜂擁而至這件好事，如何在海量數(shù)據(jù)處理中實時發(fā)現(xiàn)有效信息，為構(gòu)建穩(wěn)定高效的系統(tǒng)架構(gòu)設計提供指導。在【W(wǎng)OT2015"互聯(lián)網(wǎng)+"時代大數(shù)據(jù)技術峰會】 現(xiàn)場，魅族電商平臺高級架構(gòu)師  何岳娟就魅族電商平臺架構(gòu)變遷之路的經(jīng)驗和體會和51CTO記者進行交流。

高速發(fā)展下的問題

何岳娟告訴記者，魅族電商架構(gòu)分為四個層級：

• 業(yè)務層：第三方天貓，京東，蘇寧與官網(wǎng)的商城及APP；
• 業(yè)務服務層：交易，新品發(fā)布，手機導購，推薦服務為各平臺提供營銷策略；
• 基礎服務層：訂單，用戶，支付，庫存，圖片等為業(yè)務服務與營銷層提供基本的服務點；
• 據(jù)層存儲層：MySQL, NoSQL, MQ , HBase以及一些分布式文件系統(tǒng)

基于這四個層級產(chǎn)生的數(shù)據(jù)建立分析平臺， 對用戶行為用戶需求進行分析。

隨著魅族近兩年的發(fā)展，用戶對其電商平臺的關注度越來越高，用戶增長速度非常快。在享受這種進步的同時，平臺性能也在經(jīng)歷嚴峻考驗。談及貫穿平臺架構(gòu)變遷之路的指導思想，何岳娟將提升高可用、高并發(fā)、容災性三個能力的提升視為核心，來實現(xiàn)對網(wǎng)站穩(wěn)定性能的保障。搶購場景中LVS崩潰、DDoS攻擊、刷單帶來的高并發(fā)以及搶購時服務器如何實現(xiàn)快速擴容等，都是在業(yè)務高速發(fā)展下迫切需要解決的問題。

變遷之路繞了哪些遠

在針對這些問題進行平臺架構(gòu)變遷的過程中，何岳娟和魅族技術團隊曾經(jīng)也走過許多彎路。比如說之前用GLSB、OSPF、智能DS分發(fā)解決數(shù)據(jù)容災問題。但采用OSPF時，要對整個機房交換部署模式進行變造，影響非常大。而且，OSPF也并不能很好地解決魅族電商平臺高并發(fā)故障遷移的問題。

這是因為在遭遇高并發(fā)時，LS、分發(fā)服務器不保證不會崩潰，一旦崩潰，轉(zhuǎn)給其他的分發(fā)服務器，其他的分發(fā)服務器也不具備承受能力。魅族后來直接放棄了這個方案，結(jié)合業(yè)務需求和自身能力，改為族采用放棄一部分用戶然后采用活動能正常的進行下去來做LS斷點的問題。

新方案的優(yōu)勢在于，當一個機房的LS宕或是群宕掉時，可以自動切換到其他機房。何岳娟秀露，魅族計劃采用GLSB，進行大LS的方案解決以后更高并發(fā)的模式以及以后跨機房容災的問題。

利用數(shù)據(jù)評級防止誤傷

對于“黃?！边@個世界性難題，魅族在最開始把只它看成功能性防御。但實際上，這種數(shù)據(jù)請求的模式極有可能出現(xiàn)偽造數(shù)據(jù)。因此，魅族通過對用戶行為數(shù)據(jù)分析構(gòu)建了信用分值評估系統(tǒng)，如果用戶行為數(shù)據(jù)是偽造數(shù)據(jù)的話，在進行分析時可以看到，這些數(shù)據(jù)非?！八腊濉薄?/p>

所謂“死板”，就是說黃牛一般只會注冊一個帳戶，而不會關注魅族官網(wǎng)，在網(wǎng)站只留下非常有限的行為信息，可以將具有這種特點的用戶看作是是死點用戶。而如果是在整個官網(wǎng)體系里比較活躍的用戶，系統(tǒng)會將他評為優(yōu)質(zhì)用戶。

一般來講，面對評級較低的用戶，系統(tǒng)在做防殺時會有一些“誤傷”的現(xiàn)象。為了避免一些評級較低的用戶無法正常方問，在做防殺的時候，魅族不會沒有把所有的數(shù)據(jù)全部“干死”，而是將自有數(shù)據(jù)與第三方數(shù)據(jù)進行交換，引入第三方的數(shù)據(jù)評級，對兩者數(shù)據(jù)分析結(jié)果進行對比之后再進行防御。

跨機房容災和數(shù)據(jù)同步仍待探索

何岳娟表示，跨機房容災和跨機房的數(shù)據(jù)同步問題，仍然是魅族在未來一段時間內(nèi)關注的重點。魅族在這些方面一直在努力，比如在魅族有一個OKR評級功能，這個評級會根據(jù)業(yè)務故障時間來評級。這種互聯(lián)網(wǎng)評級模式不可能做到不產(chǎn)生故障，但可以盡量減少故障產(chǎn)品的產(chǎn)生。

對于技術和工具的選型，何岳娟的建議在選用新功能前，一定要對性能進行前期測試。一旦產(chǎn)生問題，通過測試可以及時暴露出來，引導我們尋找解決方案。對于實在解決不了的問題，魅族會選擇直接放棄這種模式，而在上線采用第三方服務。當然，還是要注意對服務進行大規(guī)模、全方位的測試，來避免之后突發(fā)情況下的措手不及。

 戳下方圖片，更有料！

（WOT2015大數(shù)據(jù)技術峰會總結(jié)專題）

文章題目：WOT2015何岳娟：數(shù)據(jù)分析助電商笑對用戶蜂擁而至這件好事
URL分享：http://www.5511xx.com/article/dhosded.html