0
| 本文作者： 岑大師 | 2018-06-21 09:20 |
最近幾個(gè)月來(lái)，螞蟻金服對(duì)外技術(shù)合作的步伐正在加速。
在銀行合作方面，從5月中旬開(kāi)始一個(gè)月的時(shí)間，螞蟻金服已經(jīng)與華夏、光大、浦發(fā)、中信4家大型銀行，以及城商行天津銀行等分別簽署了戰(zhàn)略合作協(xié)議，在分布式架構(gòu)、手機(jī)銀行、風(fēng)險(xiǎn)管理、普惠金融等領(lǐng)域展開(kāi)合作。
盡管在這一波銀行擁抱金融科技的浪潮中，螞蟻金服開(kāi)放勢(shì)頭迅速，但在螞蟻金服看來(lái)，未來(lái)還有很大空間。
“我們?cè)诤献骰锇楹徒鹑跈C(jī)構(gòu)的合作當(dāng)中發(fā)現(xiàn)，大家還是有技術(shù)瓶頸，如果不開(kāi)放、不解決大家共同面臨的問(wèn)題，沒(méi)法把支撐業(yè)務(wù)作數(shù)字化轉(zhuǎn)型進(jìn)行地更徹底?！痹诮照匍_(kāi)的GIAC全球互聯(lián)網(wǎng)架構(gòu)大會(huì)上，螞蟻金服基礎(chǔ)技術(shù)部中間件團(tuán)隊(duì)負(fù)責(zé)人楊冰告訴雷鋒網(wǎng)。而在這次大會(huì)上，楊冰也為剛于4月底開(kāi)源的金融級(jí)分布式中間件SOFA代言，面向華南技術(shù)社區(qū)分享數(shù)字金融時(shí)代的云原生架構(gòu)轉(zhuǎn)型路徑。
(圖為楊冰在GIAC全球互聯(lián)網(wǎng)架構(gòu)大會(huì)上發(fā)表演講)
螞蟻金服對(duì)外技術(shù)輸出的故事，要從“去IOE”說(shuō)起。
2008年，前微軟亞洲研究院常務(wù)副院長(zhǎng)王堅(jiān)空降阿里巴巴，出任集團(tuán)首席架構(gòu)師。在到任后不久，王堅(jiān)就提出了相當(dāng)超前的“去IOE”理念，即在阿里巴巴的IT架構(gòu)中，去掉IBM的小型機(jī)、Oracle的數(shù)據(jù)庫(kù)和EMC存儲(chǔ)設(shè)備，代之以自主可控的自主研發(fā)技術(shù)。
“去IOE”計(jì)劃2009年在阿里開(kāi)始實(shí)施，標(biāo)志著阿里技術(shù)開(kāi)始全面邁向云計(jì)算架構(gòu)，此舉也推動(dòng)了阿里云業(yè)務(wù)的發(fā)展，這一年9月，“阿里云計(jì)算有限公司”正式成立。
而在另一邊，后來(lái)讓所有網(wǎng)民瘋狂的“雙11”購(gòu)物節(jié)也在2009年首次到來(lái)。第一個(gè)“雙11”購(gòu)物節(jié)雖然只有27個(gè)商家參與，銷售額“僅有”5200萬(wàn)元，但當(dāng)時(shí)幾乎所有的人都沒(méi)有意識(shí)到這個(gè)活動(dòng)的潛力。
“2009年雙11支付寶是差點(diǎn)有宕機(jī)的危險(xiǎn)的?！睏畋嬖V雷鋒網(wǎng)。“當(dāng)時(shí)是支付寶第一次經(jīng)歷雙十一，實(shí)際的流量高峰超出所有人的預(yù)期，當(dāng)然也超出了系統(tǒng)的承受能力，當(dāng)時(shí)賬務(wù)庫(kù)和會(huì)計(jì)庫(kù)是部署在一起的，眼看數(shù)據(jù)庫(kù)快要跪了，我們以最快速度把會(huì)計(jì)的應(yīng)用給 kill 掉，才勉強(qiáng)撐過(guò)去。從此便啟動(dòng)了各種大型的技術(shù)改造，并堅(jiān)定的走上了自研道路。”
據(jù)楊冰介紹，在06年以前，支付寶關(guān)注的還是“快”，即如何更好地響應(yīng)淘寶的支付業(yè)務(wù)需求問(wèn)題，當(dāng)時(shí)在技術(shù)上也是基于“煙囪式”的經(jīng)典單體應(yīng)用架構(gòu)體系；06年以后支付寶的體系架構(gòu)進(jìn)入第二個(gè)階段，魯肅（雷鋒網(wǎng)注：即阿里巴巴合伙人，螞蟻金服CTO程立）、阿璽（雷鋒網(wǎng)注：即螞蟻金服副CTO胡喜）等人幫助支付寶整體架構(gòu)往SOA（Service Oriented Architecture，面向服務(wù)架構(gòu)）化的方向進(jìn)行設(shè)計(jì)。
但SOA的架構(gòu)更多講的是“怎么樣把功能單元進(jìn)行標(biāo)準(zhǔn)定義，通過(guò)接口和統(tǒng)一的約定對(duì)外提供服務(wù)”的方式，而對(duì)于在分布式架構(gòu)下對(duì)大規(guī)模服務(wù)和計(jì)算資源作有效管控治理并沒(méi)有過(guò)多涉及。在這樣的背景下，螞蟻分布式中間件SOFA應(yīng)運(yùn)而生——當(dāng)時(shí)叫做Service Oriented Fabric Architecture，即在SOA的基礎(chǔ)上加入了“Fabric”（編排、編織）的概念，確保支付寶所有服務(wù)如賬務(wù)、交易、支付等系統(tǒng)能通過(guò)服務(wù)化、模塊化的方式高效組織和協(xié)同。到08年支付寶已經(jīng)實(shí)現(xiàn)關(guān)鍵核心系統(tǒng)的模塊化拆改造。
楊冰介紹，當(dāng)時(shí)支付寶已經(jīng)按中臺(tái)化模式在運(yùn)作，部分核心的系統(tǒng)都是以中臺(tái)的模式沉浸在底層，有共性的業(yè)務(wù)能力也服務(wù)化的方式沉淀下來(lái)，幫助前臺(tái)應(yīng)用快速響應(yīng)業(yè)務(wù)需求和變更。
而2009年“雙11”暴露出小型機(jī)和商業(yè)數(shù)據(jù)庫(kù)缺乏彈性、無(wú)法適應(yīng)業(yè)務(wù)急劇變化的瓶頸，則加速了支付寶在分布式架構(gòu)上的進(jìn)一步演化。
當(dāng)時(shí)的支付寶正處于一個(gè)飛快的增長(zhǎng)時(shí)期——從2009年到2013年，支付寶的業(yè)務(wù)量每年都在以兩三倍增長(zhǎng)，而且一般來(lái)說(shuō)，當(dāng)年的峰值會(huì)是下一年的平均的業(yè)務(wù)量。新的架構(gòu)不僅需要考慮滿足業(yè)務(wù)演進(jìn)，而且還要考慮下一年可能翻倍的容量峰值變化，無(wú)論從成本上還是技術(shù)上，推進(jìn)微服務(wù)化、分布式架構(gòu)看起來(lái)都是最適合的選擇，希望能通過(guò)成本低廉的設(shè)備集群來(lái)提供一個(gè)高性能容易擴(kuò)展且總體穩(wěn)定的系統(tǒng)。
這樣的轉(zhuǎn)變同時(shí)也遇到了很大的技術(shù)難題：首先是服務(wù)拆分后的一致性問(wèn)題，但同時(shí)需要考慮的另一個(gè)問(wèn)題則是效率，支付寶當(dāng)時(shí)的交易量已經(jīng)處于一個(gè)相當(dāng)高的水平。當(dāng)時(shí)業(yè)務(wù)已經(jīng)多以支付為主，為保證資金安全，技術(shù)團(tuán)隊(duì)當(dāng)時(shí)已經(jīng)開(kāi)始通過(guò)“分布式事務(wù)”解決跨多個(gè)服務(wù)和數(shù)據(jù)庫(kù)的交易一致性問(wèn)題，同時(shí)兼顧性能。
此外對(duì)容災(zāi)、業(yè)務(wù)的連續(xù)性也是一個(gè)考驗(yàn)點(diǎn)。但對(duì)當(dāng)時(shí)的支付寶來(lái)說(shuō)，如果仍然采用舊有架構(gòu)、通過(guò)一般常見(jiàn)的數(shù)據(jù)分庫(kù)分表的方式修修補(bǔ)補(bǔ)，是沒(méi)有辦法滿足系統(tǒng)大規(guī)模擴(kuò)展的需求的，對(duì)同城甚至異地的多機(jī)房部署也帶來(lái)了很大挑戰(zhàn)。支付寶的架構(gòu)通過(guò)一種“單元化”的方式進(jìn)行改造，使整體業(yè)務(wù)處理能力得以在機(jī)房層級(jí)進(jìn)行橫向伸縮。
彼時(shí)，從早期淘寶收藏夾項(xiàng)目里逐步發(fā)展起來(lái)的一個(gè)分布式數(shù)據(jù)庫(kù)OceanBase已經(jīng)開(kāi)始納入到整個(gè)支付寶的技術(shù)架構(gòu)當(dāng)中，并按契合金融級(jí)需求的方式去發(fā)展，從數(shù)據(jù)庫(kù)的層面解決容災(zāi)和擴(kuò)展性的問(wèn)題。支付寶開(kāi)始逐步形成了一套以自研數(shù)據(jù)庫(kù)，自研中間件和云平臺(tái)架構(gòu)為支撐的這樣的一套三代架構(gòu)，在三代架構(gòu)上，所支持的上層應(yīng)用會(huì)變得更豐富，而支撐業(yè)務(wù)的技術(shù)中臺(tái)能力也變得越來(lái)越強(qiáng)。
在此過(guò)程中，SOFA也經(jīng)歷了若干次的邊界延伸。最初的SOFA是一個(gè)重點(diǎn)在“模塊化”和“服務(wù)化”上的開(kāi)發(fā)框架，隨著公司的技術(shù)架構(gòu)的升級(jí)，SOFA的邊界也擴(kuò)大到應(yīng)用和底層設(shè)施之間的中間件；而再往后，這個(gè)邊界又被擴(kuò)大到DevOps
平臺(tái)和金融業(yè)務(wù)通用組件BPaaS 平臺(tái)，在架構(gòu)上也從單體架構(gòu)轉(zhuǎn)到服務(wù)化架構(gòu)，在向著云原生（Cloud-Native）的方向發(fā)展同時(shí)，更進(jìn)一步地實(shí)現(xiàn)異地多活、無(wú)損容災(zāi)等金融級(jí)特性，而現(xiàn)在SOFA已經(jīng)從中間件這一層開(kāi)始，逐漸對(duì)外進(jìn)行開(kāi)放和開(kāi)源。
“業(yè)務(wù)在前面沖的很猛，技術(shù)必須不斷尋求突破，除了每次要像救火一樣，必須還要有額外的儲(chǔ)備和沉淀，每一次大促都會(huì)讓我們變的更強(qiáng)，讓平臺(tái)的演進(jìn)從業(yè)務(wù)驅(qū)動(dòng)逐步轉(zhuǎn)變?yōu)轵?qū)動(dòng)業(yè)務(wù)?！被貞浧鹫麄€(gè)發(fā)展歷程，楊冰頗有感慨。
2013年5月17日，阿里最后一臺(tái)小型機(jī)從支付寶下線，這對(duì)阿里的“去IOE”來(lái)說(shuō)是一個(gè)里程碑式的節(jié)點(diǎn)，標(biāo)志著新的互聯(lián)網(wǎng)技術(shù)和架構(gòu)開(kāi)始在阿里內(nèi)部取代了傳統(tǒng)的IT技術(shù)和架構(gòu)。
相比起以底層基礎(chǔ)設(shè)施的改變，阿里IT架構(gòu)的整體改造的更大意義在于應(yīng)用架構(gòu)的重建，推動(dòng)了應(yīng)用的云化和微服務(wù)化，為業(yè)務(wù)創(chuàng)新插上了翅膀，新的IT格局不僅重構(gòu)了阿里的技術(shù)框架，更讓阿里從一家電商基因的公司進(jìn)化成一家技術(shù)公司，并重新定義了企業(yè)IT和業(yè)務(wù)的邊界。
如同喬布斯所說(shuō)的“Connecting the dots”，從當(dāng)初的“去IOE”開(kāi)始，引發(fā)的支付寶IT體系的變化和架構(gòu)的重建，支付寶的技術(shù)人員通過(guò)將一個(gè)又一個(gè)的變化連接在一起，在實(shí)現(xiàn)技術(shù)架構(gòu)的基礎(chǔ)上延伸出更多的新業(yè)務(wù)，最終勾勒出今日螞蟻金服業(yè)務(wù)布局的基礎(chǔ)。
2014年，螞蟻金服成立。2015年9月，螞蟻金服推出了“互聯(lián)網(wǎng)推進(jìn)器”計(jì)劃，提出將推動(dòng)平臺(tái)、數(shù)據(jù)和技術(shù)方面的能力全面對(duì)外開(kāi)放，在5年內(nèi)助力超過(guò)1000家金融機(jī)構(gòu)向新金融轉(zhuǎn)型升級(jí)。
“對(duì)內(nèi)服務(wù)”到“對(duì)外服務(wù)”的改變，也導(dǎo)致了螞蟻金服技術(shù)架構(gòu)的第三次升級(jí)：以前螞蟻金服的一些技術(shù)只要對(duì)內(nèi)服務(wù)好性能，控制好性能成本，效率各方面就可以了，在這一階段則要變得更兼容、更開(kāi)放，讓合作伙伴可以在上面做二次開(kāi)發(fā)。
為配合合作伙伴轉(zhuǎn)型升級(jí)，從2015年起，螞蟻金服開(kāi)始針對(duì)金融客戶需求做金融科技開(kāi)放。長(zhǎng)久以來(lái)，銀行對(duì)于金融IT系統(tǒng)要求極高，金融級(jí)的技術(shù)要求一直秉承這樣的原則：資金安全，交易強(qiáng)一致、數(shù)據(jù)強(qiáng)一致、準(zhǔn)實(shí)時(shí)交易、資金核對(duì)、異常熔斷、快速恢復(fù)；達(dá)到99.99%以上的高可用性和異地多活容災(zāi)能力；安全，多層檢測(cè)、感知與防御各類安全攻擊；性能，包括響應(yīng)時(shí)間、并發(fā)能力、快速調(diào)集資源；單筆交易和峰值交易平均成本；全鏈路數(shù)據(jù)質(zhì)量管理與治理能力等六大要求?？梢哉f(shuō)這些需求，在螞蟻金服的業(yè)務(wù)和技術(shù)升級(jí)中都有所涉及。
但對(duì)于同樣場(chǎng)景復(fù)雜程度很高的業(yè)務(wù)場(chǎng)景，銀行和互聯(lián)網(wǎng)公司采用了不同的IT架構(gòu)模式：與螞蟻金服的“大中臺(tái)”的做法和分布式架構(gòu)不同，銀行的IT架構(gòu)仍以IOE為主，很多產(chǎn)品邏輯和業(yè)務(wù)邏輯沉淀到了數(shù)據(jù)庫(kù)層面，應(yīng)用系統(tǒng)則做得很薄，通過(guò)簡(jiǎn)單指令交互和數(shù)據(jù)組裝來(lái)完成業(yè)務(wù)邏輯，架構(gòu)模式正好與螞蟻金服反過(guò)來(lái)。對(duì)于許多銀行來(lái)說(shuō)，這種近乎“推翻重來(lái)”的做法接受起來(lái)要困難一些。
盡管如此，“業(yè)務(wù)上云”對(duì)于銀行來(lái)說(shuō)仍然有著強(qiáng)大的吸引力。對(duì)于銀行來(lái)說(shuō)，“互聯(lián)網(wǎng)化”是金融創(chuàng)新的主要趨勢(shì)，將自身業(yè)務(wù)上云，本質(zhì)上是可以將原來(lái)固定場(chǎng)景化的業(yè)務(wù)抽象成隨時(shí)可以被調(diào)用的、面向消費(fèi)者的服務(wù)，可以讓銀行形成一個(gè)敏捷的架構(gòu)，從而更好更靈活地根據(jù)客戶需求設(shè)計(jì)新的業(yè)務(wù)和為客戶服務(wù)。
“令人欣喜的是，在銀行業(yè)中云計(jì)算的價(jià)值已經(jīng)深入人心?！睏畋f(shuō)?！八园⒗镆卜浅Ｖ卑椎靥岢?，上云就上阿里云。大家覺(jué)得云是可伸縮的，是一個(gè)在效率方面可以帶來(lái)提升的，成本方面帶來(lái)下降的技術(shù)?！?nbsp;
同時(shí)楊冰還提到，盡管銀行都在往云平臺(tái)上走，很多時(shí)候大家的理念是相通的，但由于金融領(lǐng)域的特殊性，無(wú)論是業(yè)界提得比較多的云原生，還是在分布式的架構(gòu)方面都還存在認(rèn)識(shí)上的差異。大多數(shù)銀行在這方面的實(shí)踐僅停留在一些比較初級(jí)的遠(yuǎn)程調(diào)用組件、分布式文件系統(tǒng)等階段，由于金融領(lǐng)域?qū)σ恢滦?、無(wú)損容災(zāi)、彈性伸縮和成本的極致性的要求上的差異，其實(shí)已經(jīng)相差的比較遠(yuǎn)了。如果銀行還是僅僅是去看業(yè)界本身的非常普世的建議的話，“可能還會(huì)踩到一些我們踩過(guò)的坑?！?nbsp;
一方面在短期內(nèi)無(wú)法離開(kāi)IOE，一方面希望最大程度利用云計(jì)算的靈活性、敏捷性，雙模IT成了很多銀行嘗試數(shù)字化轉(zhuǎn)型時(shí)最合適選擇。
楊冰告訴雷鋒網(wǎng)，以螞蟻金服、阿里云共同與南京銀行合作的“鑫云+”互聯(lián)網(wǎng)金融平臺(tái)為例，保留了銀行可靠穩(wěn)定的傳統(tǒng)核心系統(tǒng)，同時(shí)采用業(yè)界成熟可信的分布式架構(gòu)技術(shù)搭建新平臺(tái)，建立一個(gè)更開(kāi)放、靈活、松耦合、高性能、易擴(kuò)展的第二核心。新平臺(tái)需要兼顧敏捷性和穩(wěn)定性，滿足業(yè)務(wù)快速迭代和技術(shù)架構(gòu)彈性擴(kuò)展的需求。
楊冰還告訴雷鋒網(wǎng)，在做對(duì)外的技術(shù)開(kāi)放的時(shí)候，螞蟻金服不是重復(fù)發(fā)明一個(gè)輪子開(kāi)放給外部的合作伙伴用，而是把現(xiàn)有技術(shù)作充分的產(chǎn)品化改造，開(kāi)放和開(kāi)源的產(chǎn)品都是“自己先吃的狗糧”（開(kāi)發(fā)梗，“eat your own dog food”，即內(nèi)部先使用自己的產(chǎn)品），包括SOFA在內(nèi)，同步給內(nèi)部和外部用是同一個(gè)版本。
“不過(guò)，我們還有一些要去做歷史兼容的東西不太適合去開(kāi)源，另外一些比較超前的東西，包括全業(yè)務(wù)混部這樣的本身也還在演進(jìn)的、或者對(duì)于大多數(shù)合作伙伴和機(jī)構(gòu)客戶還暫時(shí)不太需要的技術(shù)，可能我們會(huì)先在內(nèi)部發(fā)展?！睏畋f(shuō)。
這對(duì)于合作伙伴來(lái)說(shuō)是一件好事。這意味著在螞蟻的開(kāi)源平臺(tái)上，用到的都是經(jīng)過(guò)螞蟻嚴(yán)苛業(yè)務(wù)場(chǎng)景充分驗(yàn)證過(guò)的成熟技術(shù)。而從產(chǎn)品發(fā)展的角度，螞蟻金服也是在把多年來(lái)在支付寶上積累的技術(shù)和運(yùn)營(yíng)經(jīng)驗(yàn)開(kāi)放給銀行客戶去推出下一代的數(shù)字化銀行，搭建更多場(chǎng)景服務(wù)，在更多場(chǎng)景下去鍛煉，最終構(gòu)建一個(gè)相互都能獲益的社區(qū)生態(tài)。
基于這種思想，SOFA在開(kāi)源的時(shí)候并沒(méi)有選擇類似“全家桶”必須全套采用的形式，整套開(kāi)源項(xiàng)目由許多非常小但又是可以被獨(dú)立拿出去用的類庫(kù)和組件組成，如果用戶發(fā)現(xiàn)SOFA里面某一個(gè)東西很好，他期望拿過(guò)來(lái)用時(shí)，既可以合在一起用，又可以拆開(kāi)用，這樣的話就非常有利于開(kāi)源社區(qū)的豐富和活躍。
“我們覺(jué)得社區(qū)肯定是要大家一起玩的，只有這樣才能稱之為社區(qū)?！睏畋f(shuō)?！拔覀兯O(shè)計(jì)的并不是一個(gè)特別定制化的產(chǎn)品，我們會(huì)考慮跟外部的一些平臺(tái)做融合。所以，我們?cè)谠O(shè)計(jì)框架也好，微服務(wù)也好，或者是我們將來(lái)會(huì)開(kāi)放的其他組件也好，會(huì)優(yōu)先考慮跟周邊生態(tài)有很好的結(jié)合性。”
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見(jiàn)轉(zhuǎn)載須知。
