京東云首席架構(gòu)師楊海明:數(shù)據(jù)鏈接未來—京東云踐行云計算
原創(chuàng)作者:劉曉旭
2016年8月26-27日,由51CTO.com主辦的【W(wǎng)OT2016移動互聯(lián)網(wǎng)技術(shù)峰會】在北京粵財JW萬豪酒店隆重召開。自2012年以來,WOT品牌大會秉承專注技術(shù)、服務(wù)技術(shù)人員的理念已經(jīng)成功舉辦十一屆,不僅積累了大量的專家資源,更獲得廣大IT從業(yè)者和技術(shù)愛好者的認可和好評,并成為業(yè)界重要的技術(shù)分享及人脈拓展平臺。
2016年8月26-27日,由51CTO.com主辦的【W(wǎng)OT2016移動互聯(lián)網(wǎng)技術(shù)峰會】在北京粵財JW萬豪酒店隆重召開。自2012年以來,WOT品牌大會秉承專注技術(shù)、服務(wù)技術(shù)人員的理念已經(jīng)成功舉辦十一屆,不僅積累了大量的專家資源,更獲得廣大IT從業(yè)者和技術(shù)愛好者的認可和好評,并成為業(yè)界重要的技術(shù)分享及人脈拓展平臺。
本次【W(wǎng)OT2016移動互聯(lián)網(wǎng)技術(shù)峰會】分為10大技術(shù)主題,分別是應(yīng)用架構(gòu)、平臺技術(shù)、創(chuàng)新技術(shù)、VR技術(shù)、前端技術(shù)、性能優(yōu)化、直播技術(shù)、運維與安全、數(shù)據(jù)分析、APP技術(shù)專場。51CTO.com作為本次大會的主辦方,將通過快速報道、現(xiàn)場專訪與后期視頻等多種形式,向廣大用戶全方位展示這場技術(shù)盛宴。
下面是大會主會場上來自京東云的首席架構(gòu)師楊海明老師帶來的主題為《數(shù)據(jù)鏈接未來—京東云踐行云計算》的演講實錄。
大家好,我做了這么多年的工程,有一個感覺,技術(shù)上沒有一個絕對的對錯,就是是否你做的東西就是適應(yīng)這個業(yè)務(wù)場景?我后面把一個PPT改了一下,我應(yīng)該描述一個場景,一個業(yè)務(wù)場景,尤其就是在京東這個場景,京東是什么?早上下單,下午送過來的快遞小哥,過程就是JD.COM,或者就是一些大倉庫,對于京東來講,不是大家看到的一些東西。而在后面有一個更龐大的體系在支撐我們每天看到的這些物流,看到的這些電商網(wǎng)站,而且,面對就是很特殊場景,互聯(lián)網(wǎng)場景里面,大家往往看到了什么?這個規(guī)律一開始都是什么了?都是有很好的想法。很多人資本進來了。我做一個什么東西?2012還是2013年的時候,宣傳大戰(zhàn),團購是特別好一個場景。然后,就是很好的一個網(wǎng)站。第二年,很多團購就是死亡了,現(xiàn)在就是幾家團購網(wǎng)站。所以,對于這個電商來講,大家也是看到了出現(xiàn)一個收斂的態(tài)勢。最開始很多的電商到現(xiàn)在,看起來只有2、3家比較大的電商。而且,兩家電商在各自構(gòu)成一個壁壘,這樣就是導致了這種狀態(tài)的后面一個技術(shù)架構(gòu)一些變化。
首先,介紹一下京東集團,不僅僅是一個JD.COM,也是跟著這個時代崛起的。5、6年前生活狀態(tài)是什么?現(xiàn)在就是中產(chǎn)階級的崛起,京東口號多快好省,品質(zhì)生活。這些對于價格不是特別敏感,但是對于品質(zhì)特別敏感的群體來說,不是對于奢侈品追求,是對于生活質(zhì)量一個追求。整個人群的崛起,其實也是伴隨著京東崛起,這兩個所謂的中國中產(chǎn)階級的局限這個增長。大家可以看到,京東的崛起也是跟著3C品類崛起比較契合的。10年前,那個時候有手機,那個時候的手機什么樣子?很小黑白屏幕,上面就是可以打一個電話,還就是彩鈴,這個是當時的賣點。現(xiàn)在一天都不碰筆記本電話,現(xiàn)在都是智能手機上面完成這個事情。所以,對于這個品類崛起,也是跟著中產(chǎn)階級生活方式崛起,三條曲線是吻合的。
對于品質(zhì)品牌戰(zhàn)略,這個也是未來得趨勢。因為我們最早,現(xiàn)在5線城市還是追求便宜的東西。但是在一線北上廣這種城市,就是先問什么牌子,給家里面人買手機,第一個問題,買什么手機,是蘋果的還是Android?如果選擇Android?是華為還是小米,對于品牌比較在意。這個品牌塑造人的特性。有一些極客,喜歡新鮮的就是追求小米。然后,對于生活調(diào)調(diào)高一點的就是追求蘋果。所以,這個品質(zhì)品牌戰(zhàn)略讓家庭生活更好。然后,就是一個公平競爭的環(huán)境,京東業(yè)務(wù)模式,大家可以看到一個字。所以,這個自營,從京東上面走一圈需要開發(fā)票的。開發(fā)票的結(jié)果就是交稅。所以,如果中國每一個商家都是按照這種方式操作,我們可以很低的價格去沖擊這個市場。但是,這個并不是一個良性市場。我們希望這個市場最后留下來的都是高品質(zhì),高質(zhì)量,然后高效率的公司。而不是說就是一個低價。所以,京東的業(yè)務(wù)模式其實就是符合這個供給側(cè)改革的重塑的商業(yè)思路。
下面就是金融業(yè)務(wù),大概就是三個,電商,金融,技術(shù)。這一塊兒,剛剛也是提到了生活狀態(tài)一個變化,就是移動互聯(lián)網(wǎng),因為最早10年前,其實京東最早起來的時候,大家如果看一下京東歷史,就是賣光盤的,大概那個狀態(tài)。在非典的時候,從純線下的店轉(zhuǎn)到線上的店。線上什么?大家就是筆記本上買一點東西,現(xiàn)在呢?基本上從手機AP,大家手機上都是京東JD一個應(yīng)用,同時,京東跟騰訊的合作,會導致騰訊購物就是自營精選,這個是一個品類。這個就是移動互聯(lián)網(wǎng)。從線下到互聯(lián)網(wǎng),到移動互聯(lián)網(wǎng),這樣的改變,我們整個集團就是電商群,提升的就是電商效果,包括線上流量轉(zhuǎn)化,線下交易效率提升。京東業(yè)務(wù)模式,就是自營模式,就是從買這個東西,送到這個終端客戶手里面,通過中間分銷商,到超市,到客戶手里面。如果是有很多人來做,每人做一次就是加價,這個就是互補式,效率就不是很高。京東來說,這個事情我來做。所以,生產(chǎn)端到消費端,整個電商都是做這個的。所以,你可以看到什么呢?整個有一個體系。然后,我們要解決最后的問題,跟一號店的合作,這些都是我們在電商領(lǐng)域提升電商效果的場景。然后,金融、信用卡,這些傳統(tǒng)金融業(yè)務(wù),或者放貸,我們做的就是產(chǎn)業(yè)鏈的金融,提供融資貸款,幫助生產(chǎn)端,幫助消費端快速消費。這個是金融,技術(shù),支撐這兩個。
互聯(lián)網(wǎng)金融,還有互聯(lián)網(wǎng)的電商形態(tài)是一個標準的云的場景。就是店慶,平常容量就是什么呢?就是那一天的峰值就是平常的7到10倍這樣一個量級。而且,在京東上可以看到很多有意思的形態(tài),閃購,10秒以內(nèi)就是把2000多個貨清空。這種技術(shù)業(yè)務(wù)的形態(tài)就推動技術(shù)變化。我們的技術(shù)脫胎與原來服務(wù)與我們電商金融體系,我們現(xiàn)在產(chǎn)品化提供給外面。所以,如果你的業(yè)務(wù)特性跟京東很相似,京東業(yè)務(wù)也是很多的。所以,對于京東技術(shù)研發(fā)體系,對于這個保障,這個基本上是比較的類似。
這個是前一陣子變成了全球財富500強公司,就是中國第一大自營電商。交易數(shù)字在增加,我想說后面這一句,我們移動端的量,是很大的。因為前面也是說了,我們從手機來的量,已經(jīng)超過了固定桌面的流量。所以,是會推動技術(shù)體系的變化。所以,我們的幾個流量入口,移動端流量入口就是什么了?QQ上面的是我們?nèi)肟冢覀冏约篈P上面有入口,我們通過騰訊微信,這個上面有入口。所以,其實大概也是可以看到,和騰訊這個合作開始,我們切入這個入口,我們的定單在攀升,就是逐漸地把這個數(shù)字給上來了。這一塊兒,流量就是整個電商領(lǐng)域一個什么呢?就是非常致命一個東西。這個里面一個怎么把流量引到平臺上面?第二,怎么把你的流量轉(zhuǎn)化成實際購買的量?所以,這個是整個移動互聯(lián)網(wǎng)下面的這種效果提升是什么?我們可以在網(wǎng)上打很多的廣告,可以訪問別的網(wǎng)站的時候,可以看到JD.COM,點進去,著手流量來了。但是,這個流量到這里,留存時間是多少?這個目的是什么?用戶到底是什么特制?這個里面都是需要解決問題,就是移動互聯(lián)網(wǎng)場景解決問題。導致下面一個數(shù)據(jù),就是整個技術(shù)體系的一個變化。比如說,我們有很多流量來了,我們可以容納下這些流量,這個是第一個解決的問題。第二個解決的問題,你的用戶這個來了以后,我要快速地判斷這用戶的目的是什么。所以,這個就是解決你的流量轉(zhuǎn)化的問題。第三,就是我們的所謂大數(shù)據(jù)能力,可以快速推送出,你有可能想要的,或者我們希望買的東西。所以,這個就是一個精準推送的問題。我們可以很方便地說,這個就是一些問題,我們可以用一些高級數(shù)據(jù)解決。
我想核心改變思路,我們有一個場景,核心場景解決這個問題。京東這個場景,剛剛描述三個里面,首先,我有足夠大的池子容納下這些流量。第二,盡快判斷出這個用戶什么樣子特性?因為統(tǒng)計數(shù)字來講,移動端來的這些流量就是用戶,平均留存時間就是20分鐘左右。所以,肯定比20分鐘短,這個很短的10到15分鐘之內(nèi),把用戶弄出來。到底是一個什么樣子的人?會基于一些歷史數(shù)據(jù),這個就是導致什么呢?就是離線數(shù)據(jù)分析。這一次來,雖然這個用戶在我們京東的數(shù)據(jù)庫里面,就是數(shù)據(jù)分析平臺里面,生一個小孩。最近買奶粉比較多,這個是歷史留存數(shù)據(jù)。但是,這一次來,可能就是小孩100天了,給夫人買一些所謂的禮物。雖然這個商品是買尿布,買奶粉。但是,在這一次來的目的,不是買尿布,可能買花,可能買鉆戒,就是這種行為。所以,這一次來的目的就是一個在線的數(shù)據(jù)分析。通過這一次的人,就是在移動端,他的瀏覽,還有點擊的東西,就是最快時間判斷一下他干什么。第三層面就是推送,如果我們判定這一次目的就是什么,我們要給他一個什么樣子東西。這個里面還有一個目的,就是后面一個意思,你在移動端的時候就是可以判定這個人位置的。這個在原來的傳統(tǒng)桌面系統(tǒng)來講很難做這個事情。因為傳統(tǒng)桌面就是什么?就是IP地址,上級運營商分配的IP地址斷了,但是,現(xiàn)在手機基本上都是有GPS芯片,都是知道位置在哪里。所以,這樣就是導致后臺整個配送體系一個判斷,你在萬豪酒店買東西,后面整個倉配。如果下單以后,立刻就是一下離你最近位置點。現(xiàn)在有鮮花這些東西嗎?如果沒有,可能就是判定一下,我需要是找自己的倉庫解決?還是把這個給別的第三方的倉配解決呢?用戶體驗很重要。早上下單買,這樣的話肯定就是希望盡量快一點。最后,也沒有錯。但是,現(xiàn)在都是在追求極致體驗。現(xiàn)在都是這樣一個思路推廣。用戶行為推到后面各種各樣的,就是剛剛描述的整個,就是我們技術(shù)體系為了解決這個移動端這個問題所做的思維邏輯。下面的技術(shù),就是剛剛說了,基于用戶畫像這樣一個場景。
這個里面就是京東云干什么的?這個里面我們說4件事情。第一,我們是技術(shù)平臺,我們剛剛描述了整個技術(shù)解決問題的思路。第二,就是一個數(shù)據(jù)會聚治理平臺。第三,一個能力開放平臺,第四生態(tài)平臺。簡單說一下,我們技術(shù)平臺,就是我說的網(wǎng)絡(luò)計算存儲安全。整個京東技術(shù)研究,最早都是物理機會開始的。因為當時沒有別的選擇,10年前左右,后來發(fā)現(xiàn)虛擬化技術(shù),整個體系還是不同的階段。然后,后來技術(shù)越來越成熟,我們漸漸地從商用體系轉(zhuǎn)到開源體系。現(xiàn)在發(fā)現(xiàn)我們是容器的體系解決大彈性這樣一個場景。支撐上面的電商物流,還有金融的能力。
我們在整個平臺上面積攢大量數(shù)據(jù),什么數(shù)據(jù)?就是結(jié)構(gòu)化數(shù)據(jù),非結(jié)構(gòu)化數(shù)據(jù)。結(jié)構(gòu)化數(shù)據(jù),每一個人注冊京東帳號的時候,你都會寫你的電話號碼,注冊比較詳細,性別,年齡,最重要就是你的家庭住址,因為我們在網(wǎng)上注冊的時候,大家都是經(jīng)歷過,我可能填一個假 名字,位置,地址不是假的。這個是假的,這個東西就是運不到了,而且電話號碼一定是真的。最后快遞小哥一定打電話,放你家里面。大家可以看到國外有一個職業(yè)社交,找工作,獵頭找你,找工作互相推薦一個網(wǎng)站,那個上面的信息比人臉信息真實一些。因為你絕對不可能在那個上面做假,一做假。首先就是面試,你什么都會,最后什么都是不會。來的履歷,最后對調(diào)發(fā)現(xiàn)根本沒有這個公司做過。所以,那個上面做假成本太高。那個上面數(shù)據(jù)是非常的純潔干凈的。
京東上面呢?同樣也是這個道理。社會關(guān)系都是可以的,這個里面舉一個例子。我記得有這樣一個,看是不是真愛?幫他買東西,朋友給你發(fā)一個什么東西,你幫我把這個買了,一定跟你關(guān)系特別好的人就是干這個事情。這個通過這種方式構(gòu)建關(guān)系網(wǎng),平常也是看不出來誰跟誰的關(guān)系好。但是,通過這個方式是可以快速地構(gòu)建你的核心的親密的朋友。而通過構(gòu)建的網(wǎng)絡(luò)快速地發(fā)現(xiàn)這個信息。所以,如果讓你買東西,說明還是跟你關(guān)系還是不錯的。
這樣什么意思?我們之前很多的數(shù)據(jù)就是一個割裂數(shù)據(jù),這個人數(shù)據(jù)是什么?行為習慣是什么?但是,通過這種所謂的業(yè)務(wù)層面一些設(shè)計,推動了技術(shù)上面的一個變化。我們做這個事情就是把數(shù)據(jù)集進行了交互。就是兩個人數(shù)據(jù)進行了交互,產(chǎn)生出來一些更新的一種購物習慣,幫助更多的銷售。所以,非結(jié)構(gòu)數(shù)據(jù)化就是用戶行為數(shù)據(jù),網(wǎng)站上面可能這一次看了這些東西。下一次看那些東西。這個時候不會造假,這個也是對于數(shù)據(jù)品質(zhì)是什么?所以,我們在電商圈里面看到很多的數(shù)據(jù)。比如說,交易量數(shù)據(jù),還有用戶行為數(shù)據(jù),這些數(shù)據(jù)首先就是在京東上面有庫存的。所以,這些數(shù)據(jù)對于京東來講,京東對于外面來講,這個純潔度質(zhì)量非常高。不太可能造假。假帳號就是很簡單,不太可能買東西。因為我們買任何一個東西都是開發(fā)票的。所以,這個買完東西就是達不到刷單,沒有好處,沒有利益驅(qū)動。
現(xiàn)在什么趨勢?移動互聯(lián)網(wǎng)背景下,因為你這個個體各個地方都是有的,需要服務(wù)的時候,無論何時何地都是需要服務(wù)。你買的多少就是賺的多,現(xiàn)在改變成就自己變成了成就多人。所以,這樣導致一個技術(shù)變化。技術(shù)體系模塊化,第二API化方式。API,為什么寫這些API?實在不理解。做久了以后,任何一個API對應(yīng)就是一個業(yè)務(wù)邏輯。就是你能夠把這些的你想要的事情,API化,比如說IT,做云的時候,就是創(chuàng)建機,需要一些存儲。就是IT邏輯,移動互聯(lián)網(wǎng)場景下,你需要位置信息,你需要拿到什么服務(wù),而且,需要大概什么樣子的字段,這個里面描述就是平臺化。里面給你提供商家的,就是商家這種許可下,就是提供一些數(shù)據(jù),這樣提供更好的思路。
再下面就是生態(tài)。因為你提供了平臺,需要有人經(jīng)營這個平臺,構(gòu)建更大生意,平臺化這一塊就是基于技術(shù)體系,數(shù)據(jù)體系,還有能力開放體系的生態(tài)的擴展。因為任何一個成功的公司,或者可以成就一個新興的行業(yè),一定是需要一個生態(tài)。這個生態(tài)不僅僅是技術(shù)生態(tài),是一個業(yè)務(wù)模式清楚一個生態(tài)。
下面就是京東做的幾個事情。第一,基礎(chǔ)資源,第二,基礎(chǔ)IT邏輯,業(yè)界就是叫做安全存儲,就是云數(shù)據(jù)庫。再往上,就是描述一個中間件,這個就是辦公OA,就是數(shù)據(jù)庫,對于我們來講,現(xiàn)在新型的就是一個大數(shù)據(jù)平臺體系,這個里面對于數(shù)據(jù)可視化,以及開發(fā)平臺,交易平臺,分析平臺。然后,統(tǒng)一數(shù)據(jù)管理,這些都是移動互聯(lián)網(wǎng)場景下。我們?nèi)绾螐哪愕氖謾C端提取數(shù)據(jù)?現(xiàn)在來講,所有的大型電商都是一個AP,這個AP上面就留了很多的點。不太好的就是拿到這些東西,在上面就是整個生態(tài)和方案。生態(tài),我們需要ERP合作伙伴,CRM合作伙伴。我們需要OA,行業(yè)應(yīng)用,流程協(xié)作。往上,你最擅長什么?你擅長小孩這個群體。你不擅長是什么?你對于產(chǎn)品質(zhì)量的把控。還有對于產(chǎn)品的效率的把控,而這個是京東強項。
你可以解決前端流量問題,我?guī)湍愫蠖巳肟诘膯栴},就是這個產(chǎn)品的問題。所以,這個是一個非常非常好的模型。你負責前端,云時代,專業(yè)人做專業(yè)事情。這個領(lǐng)域多年解決這個問題,后面的項目我來解決,物流也是這樣的。整個中國物流體系還是比較的落后,大量的手工,還有人的操作。而且,整個物流上面,物流收費,搬次數(shù)多就是收費高。因為也是不懂這個物流應(yīng)該什么樣子。所以,經(jīng)常有時候被人坑,這個時候是需要什么呢?就是需要一個標準,就是一個物流的事情來做。你可以理解一個物聯(lián)網(wǎng),就是萬物互聯(lián),通過一個京東一個智能平臺。產(chǎn)業(yè)呢?這個里面比較有趣。我們京東最在意商品,就是把商品效率提的更高?
這個是我們是可以幫助到產(chǎn)業(yè),京東在任何地方的投入,不是去那個地方吸取。而是在當?shù)貢湟恍﹤}庫配送,這個在我們整個農(nóng)村電商的里面都是做到了。而且,這個農(nóng)村電商,往往會伴隨著運營商,跟運營商合作。中國運營商會在當?shù)芈浜芏嗟幕荆@些移動互聯(lián)網(wǎng)跟我們的整個商品體系的匹配,其實是產(chǎn)生了更大的聲音。
再往下,就是我們跟移動互聯(lián)網(wǎng)做什么事情?這個里面,第一個是微聯(lián),移動互聯(lián)網(wǎng)幾個業(yè)務(wù)場景。就是最上面就是我們的應(yīng)用,京東的用戶,這個是生態(tài),海爾,格力一些體系。第三方的應(yīng)用,因為應(yīng)用就是伴隨著智能硬件體系來去做的。而通過這些應(yīng)用調(diào)研API就是下面的所謂的微聯(lián)智能云。這個里面就是整個在移動互聯(lián)網(wǎng)情況下的場景。對于接口來說,這樣一個應(yīng)用就是構(gòu)建增值服務(wù),基于硬件體系。最下面通過微聯(lián)智能平臺實現(xiàn)的。另外,就是開普勒,這個里面把整個京東商城無線互聯(lián),把無線跟移動弄成了什么了?把京東整個能力開放給移動互聯(lián)網(wǎng)生態(tài),幫助構(gòu)成技術(shù)體系這些東西。如果你需要整個類似于B2C平臺,這個是可以通過這個體系來幫助實現(xiàn)的。
這個里面核心優(yōu)勢就是什么呢?就是電商金融合作模式,還有技術(shù)。技術(shù)這一塊兒,我們?yōu)榱藨?yīng)對這個無線互聯(lián)網(wǎng)中的場景,我們支撐著兩個業(yè)務(wù),一個合作。這個里面就是一個合作案例。這個東西,我不是給做這個做廣告,海量商品,還有整合倉配服務(wù),還有消費者解決的就是什么呢?就是消費者前端的這個體驗之后,就是深耕整個消費行為習慣。然后,我們在后面給他保證后面的商品這個體系。所以,你擅長用戶體驗,我擅長的產(chǎn)品體驗,就構(gòu)造了一個新的垂直電商。就是剛剛我說了,整個通用的電商未來在互聯(lián)網(wǎng)場景下應(yīng)該會逐漸收斂到2家半。對于垂直領(lǐng)域電商,因為你擅長什么?就是擅長這個群體優(yōu)勢,這個一定存在的。人類都是追求個性的東西,一個時間點,可能大家說通用東西比較好。用著一定會發(fā)現(xiàn)這個東西不好。對于上面什么呢?有很多倉配角度來講成本不合算,不規(guī)矩,我就是不要這個東西了。但是,對于一些很個性化的東西,我就是喜歡那個冰箱,6層冰箱在京東上面是很難賣出去。但是,這個人就是喜歡這個。有很多專業(yè)垂直領(lǐng)域電商出現(xiàn)。所以,這個也是電商下一步發(fā)展什么狀態(tài),這個是一個移動電商,你在任何時間,任何地點都是可以訪問到這個電商平臺。
這個是在京東移動互聯(lián)網(wǎng)的實踐,謝謝。
以上是51CTO.com記者從【W(wǎng)OT2016移動互聯(lián)網(wǎng)技術(shù)峰會】一線為您帶來的精彩報道。一大波精彩內(nèi)容報道正在襲來,敬請持續(xù)關(guān)注!
責任編輯:關(guān)崇
來源:
51CTO