0
| 本文作者： 岑大師 | 2018-06-21 09:20 |
最近幾個月來，螞蟻金服對外技術(shù)合作的步伐正在加速。
在銀行合作方面，從5月中旬開始一個月的時間，螞蟻金服已經(jīng)與華夏、光大、浦發(fā)、中信4家大型銀行，以及城商行天津銀行等分別簽署了戰(zhàn)略合作協(xié)議，在分布式架構(gòu)、手機(jī)銀行、風(fēng)險管理、普惠金融等領(lǐng)域展開合作。
盡管在這一波銀行擁抱金融科技的浪潮中，螞蟻金服開放勢頭迅速，但在螞蟻金服看來，未來還有很大空間。
“我們在合作伙伴和金融機(jī)構(gòu)的合作當(dāng)中發(fā)現(xiàn)，大家還是有技術(shù)瓶頸，如果不開放、不解決大家共同面臨的問題，沒法把支撐業(yè)務(wù)作數(shù)字化轉(zhuǎn)型進(jìn)行地更徹底?！痹诮照匍_的GIAC全球互聯(lián)網(wǎng)架構(gòu)大會上，螞蟻金服基礎(chǔ)技術(shù)部中間件團(tuán)隊(duì)負(fù)責(zé)人楊冰告訴雷鋒網(wǎng)。而在這次大會上，楊冰也為剛于4月底開源的金融級分布式中間件SOFA代言，面向華南技術(shù)社區(qū)分享數(shù)字金融時代的云原生架構(gòu)轉(zhuǎn)型路徑。
(圖為楊冰在GIAC全球互聯(lián)網(wǎng)架構(gòu)大會上發(fā)表演講)
螞蟻金服對外技術(shù)輸出的故事，要從“去IOE”說起。
2008年，前微軟亞洲研究院常務(wù)副院長王堅(jiān)空降阿里巴巴，出任集團(tuán)首席架構(gòu)師。在到任后不久，王堅(jiān)就提出了相當(dāng)超前的“去IOE”理念，即在阿里巴巴的IT架構(gòu)中，去掉IBM的小型機(jī)、Oracle的數(shù)據(jù)庫和EMC存儲設(shè)備，代之以自主可控的自主研發(fā)技術(shù)。
“去IOE”計劃2009年在阿里開始實(shí)施，標(biāo)志著阿里技術(shù)開始全面邁向云計算架構(gòu)，此舉也推動了阿里云業(yè)務(wù)的發(fā)展，這一年9月，“阿里云計算有限公司”正式成立。
而在另一邊，后來讓所有網(wǎng)民瘋狂的“雙11”購物節(jié)也在2009年首次到來。第一個“雙11”購物節(jié)雖然只有27個商家參與，銷售額“僅有”5200萬元，但當(dāng)時幾乎所有的人都沒有意識到這個活動的潛力。
“2009年雙11支付寶是差點(diǎn)有宕機(jī)的危險的?！睏畋嬖V雷鋒網(wǎng)?！爱?dāng)時是支付寶第一次經(jīng)歷雙十一，實(shí)際的流量高峰超出所有人的預(yù)期，當(dāng)然也超出了系統(tǒng)的承受能力，當(dāng)時賬務(wù)庫和會計庫是部署在一起的，眼看數(shù)據(jù)庫快要跪了，我們以最快速度把會計的應(yīng)用給 kill 掉，才勉強(qiáng)撐過去。從此便啟動了各種大型的技術(shù)改造，并堅(jiān)定的走上了自研道路?！?nbsp;
據(jù)楊冰介紹，在06年以前，支付寶關(guān)注的還是“快”，即如何更好地響應(yīng)淘寶的支付業(yè)務(wù)需求問題，當(dāng)時在技術(shù)上也是基于“煙囪式”的經(jīng)典單體應(yīng)用架構(gòu)體系；06年以后支付寶的體系架構(gòu)進(jìn)入第二個階段，魯肅（雷鋒網(wǎng)注：即阿里巴巴合伙人，螞蟻金服CTO程立）、阿璽（雷鋒網(wǎng)注：即螞蟻金服副CTO胡喜）等人幫助支付寶整體架構(gòu)往SOA（Service Oriented Architecture，面向服務(wù)架構(gòu)）化的方向進(jìn)行設(shè)計。
但SOA的架構(gòu)更多講的是“怎么樣把功能單元進(jìn)行標(biāo)準(zhǔn)定義，通過接口和統(tǒng)一的約定對外提供服務(wù)”的方式，而對于在分布式架構(gòu)下對大規(guī)模服務(wù)和計算資源作有效管控治理并沒有過多涉及。在這樣的背景下，螞蟻分布式中間件SOFA應(yīng)運(yùn)而生——當(dāng)時叫做Service Oriented Fabric Architecture，即在SOA的基礎(chǔ)上加入了“Fabric”（編排、編織）的概念，確保支付寶所有服務(wù)如賬務(wù)、交易、支付等系統(tǒng)能通過服務(wù)化、模塊化的方式高效組織和協(xié)同。到08年支付寶已經(jīng)實(shí)現(xiàn)關(guān)鍵核心系統(tǒng)的模塊化拆改造。
楊冰介紹，當(dāng)時支付寶已經(jīng)按中臺化模式在運(yùn)作，部分核心的系統(tǒng)都是以中臺的模式沉浸在底層，有共性的業(yè)務(wù)能力也服務(wù)化的方式沉淀下來，幫助前臺應(yīng)用快速響應(yīng)業(yè)務(wù)需求和變更。
而2009年“雙11”暴露出小型機(jī)和商業(yè)數(shù)據(jù)庫缺乏彈性、無法適應(yīng)業(yè)務(wù)急劇變化的瓶頸，則加速了支付寶在分布式架構(gòu)上的進(jìn)一步演化。
當(dāng)時的支付寶正處于一個飛快的增長時期——從2009年到2013年，支付寶的業(yè)務(wù)量每年都在以兩三倍增長，而且一般來說，當(dāng)年的峰值會是下一年的平均的業(yè)務(wù)量。新的架構(gòu)不僅需要考慮滿足業(yè)務(wù)演進(jìn)，而且還要考慮下一年可能翻倍的容量峰值變化，無論從成本上還是技術(shù)上，推進(jìn)微服務(wù)化、分布式架構(gòu)看起來都是最適合的選擇，希望能通過成本低廉的設(shè)備集群來提供一個高性能容易擴(kuò)展且總體穩(wěn)定的系統(tǒng)。
這樣的轉(zhuǎn)變同時也遇到了很大的技術(shù)難題：首先是服務(wù)拆分后的一致性問題，但同時需要考慮的另一個問題則是效率，支付寶當(dāng)時的交易量已經(jīng)處于一個相當(dāng)高的水平。當(dāng)時業(yè)務(wù)已經(jīng)多以支付為主，為保證資金安全，技術(shù)團(tuán)隊(duì)當(dāng)時已經(jīng)開始通過“分布式事務(wù)”解決跨多個服務(wù)和數(shù)據(jù)庫的交易一致性問題，同時兼顧性能。
此外對容災(zāi)、業(yè)務(wù)的連續(xù)性也是一個考驗(yàn)點(diǎn)。但對當(dāng)時的支付寶來說，如果仍然采用舊有架構(gòu)、通過一般常見的數(shù)據(jù)分庫分表的方式修修補(bǔ)補(bǔ)，是沒有辦法滿足系統(tǒng)大規(guī)模擴(kuò)展的需求的，對同城甚至異地的多機(jī)房部署也帶來了很大挑戰(zhàn)。支付寶的架構(gòu)通過一種“單元化”的方式進(jìn)行改造，使整體業(yè)務(wù)處理能力得以在機(jī)房層級進(jìn)行橫向伸縮。
彼時，從早期淘寶收藏夾項(xiàng)目里逐步發(fā)展起來的一個分布式數(shù)據(jù)庫OceanBase已經(jīng)開始納入到整個支付寶的技術(shù)架構(gòu)當(dāng)中，并按契合金融級需求的方式去發(fā)展，從數(shù)據(jù)庫的層面解決容災(zāi)和擴(kuò)展性的問題。支付寶開始逐步形成了一套以自研數(shù)據(jù)庫，自研中間件和云平臺架構(gòu)為支撐的這樣的一套三代架構(gòu)，在三代架構(gòu)上，所支持的上層應(yīng)用會變得更豐富，而支撐業(yè)務(wù)的技術(shù)中臺能力也變得越來越強(qiáng)。
在此過程中，SOFA也經(jīng)歷了若干次的邊界延伸。最初的SOFA是一個重點(diǎn)在“模塊化”和“服務(wù)化”上的開發(fā)框架，隨著公司的技術(shù)架構(gòu)的升級，SOFA的邊界也擴(kuò)大到應(yīng)用和底層設(shè)施之間的中間件；而再往后，這個邊界又被擴(kuò)大到DevOps
平臺和金融業(yè)務(wù)通用組件BPaaS 平臺，在架構(gòu)上也從單體架構(gòu)轉(zhuǎn)到服務(wù)化架構(gòu)，在向著云原生（Cloud-Native）的方向發(fā)展同時，更進(jìn)一步地實(shí)現(xiàn)異地多活、無損容災(zāi)等金融級特性，而現(xiàn)在SOFA已經(jīng)從中間件這一層開始，逐漸對外進(jìn)行開放和開源。
“業(yè)務(wù)在前面沖的很猛，技術(shù)必須不斷尋求突破，除了每次要像救火一樣，必須還要有額外的儲備和沉淀，每一次大促都會讓我們變的更強(qiáng)，讓平臺的演進(jìn)從業(yè)務(wù)驅(qū)動逐步轉(zhuǎn)變?yōu)轵?qū)動業(yè)務(wù)。”回憶起整個發(fā)展歷程，楊冰頗有感慨。
2013年5月17日，阿里最后一臺小型機(jī)從支付寶下線，這對阿里的“去IOE”來說是一個里程碑式的節(jié)點(diǎn)，標(biāo)志著新的互聯(lián)網(wǎng)技術(shù)和架構(gòu)開始在阿里內(nèi)部取代了傳統(tǒng)的IT技術(shù)和架構(gòu)。
相比起以底層基礎(chǔ)設(shè)施的改變，阿里IT架構(gòu)的整體改造的更大意義在于應(yīng)用架構(gòu)的重建，推動了應(yīng)用的云化和微服務(wù)化，為業(yè)務(wù)創(chuàng)新插上了翅膀，新的IT格局不僅重構(gòu)了阿里的技術(shù)框架，更讓阿里從一家電商基因的公司進(jìn)化成一家技術(shù)公司，并重新定義了企業(yè)IT和業(yè)務(wù)的邊界。
如同喬布斯所說的“Connecting the dots”，從當(dāng)初的“去IOE”開始，引發(fā)的支付寶IT體系的變化和架構(gòu)的重建，支付寶的技術(shù)人員通過將一個又一個的變化連接在一起，在實(shí)現(xiàn)技術(shù)架構(gòu)的基礎(chǔ)上延伸出更多的新業(yè)務(wù)，最終勾勒出今日螞蟻金服業(yè)務(wù)布局的基礎(chǔ)。
2014年，螞蟻金服成立。2015年9月，螞蟻金服推出了“互聯(lián)網(wǎng)推進(jìn)器”計劃，提出將推動平臺、數(shù)據(jù)和技術(shù)方面的能力全面對外開放，在5年內(nèi)助力超過1000家金融機(jī)構(gòu)向新金融轉(zhuǎn)型升級。
“對內(nèi)服務(wù)”到“對外服務(wù)”的改變，也導(dǎo)致了螞蟻金服技術(shù)架構(gòu)的第三次升級：以前螞蟻金服的一些技術(shù)只要對內(nèi)服務(wù)好性能，控制好性能成本，效率各方面就可以了，在這一階段則要變得更兼容、更開放，讓合作伙伴可以在上面做二次開發(fā)。
為配合合作伙伴轉(zhuǎn)型升級，從2015年起，螞蟻金服開始針對金融客戶需求做金融科技開放。長久以來，銀行對于金融IT系統(tǒng)要求極高，金融級的技術(shù)要求一直秉承這樣的原則：資金安全，交易強(qiáng)一致、數(shù)據(jù)強(qiáng)一致、準(zhǔn)實(shí)時交易、資金核對、異常熔斷、快速恢復(fù)；達(dá)到99.99%以上的高可用性和異地多活容災(zāi)能力；安全，多層檢測、感知與防御各類安全攻擊；性能，包括響應(yīng)時間、并發(fā)能力、快速調(diào)集資源；單筆交易和峰值交易平均成本；全鏈路數(shù)據(jù)質(zhì)量管理與治理能力等六大要求?？梢哉f這些需求，在螞蟻金服的業(yè)務(wù)和技術(shù)升級中都有所涉及。
但對于同樣場景復(fù)雜程度很高的業(yè)務(wù)場景，銀行和互聯(lián)網(wǎng)公司采用了不同的IT架構(gòu)模式：與螞蟻金服的“大中臺”的做法和分布式架構(gòu)不同，銀行的IT架構(gòu)仍以IOE為主，很多產(chǎn)品邏輯和業(yè)務(wù)邏輯沉淀到了數(shù)據(jù)庫層面，應(yīng)用系統(tǒng)則做得很薄，通過簡單指令交互和數(shù)據(jù)組裝來完成業(yè)務(wù)邏輯，架構(gòu)模式正好與螞蟻金服反過來。對于許多銀行來說，這種近乎“推翻重來”的做法接受起來要困難一些。
盡管如此，“業(yè)務(wù)上云”對于銀行來說仍然有著強(qiáng)大的吸引力。對于銀行來說，“互聯(lián)網(wǎng)化”是金融創(chuàng)新的主要趨勢，將自身業(yè)務(wù)上云，本質(zhì)上是可以將原來固定場景化的業(yè)務(wù)抽象成隨時可以被調(diào)用的、面向消費(fèi)者的服務(wù)，可以讓銀行形成一個敏捷的架構(gòu)，從而更好更靈活地根據(jù)客戶需求設(shè)計新的業(yè)務(wù)和為客戶服務(wù)。
“令人欣喜的是，在銀行業(yè)中云計算的價值已經(jīng)深入人心?！睏畋f?！八园⒗镆卜浅Ｖ卑椎靥岢?，上云就上阿里云。大家覺得云是可伸縮的，是一個在效率方面可以帶來提升的，成本方面帶來下降的技術(shù)?！?nbsp;
同時楊冰還提到，盡管銀行都在往云平臺上走，很多時候大家的理念是相通的，但由于金融領(lǐng)域的特殊性，無論是業(yè)界提得比較多的云原生，還是在分布式的架構(gòu)方面都還存在認(rèn)識上的差異。大多數(shù)銀行在這方面的實(shí)踐僅停留在一些比較初級的遠(yuǎn)程調(diào)用組件、分布式文件系統(tǒng)等階段，由于金融領(lǐng)域?qū)σ恢滦?、無損容災(zāi)、彈性伸縮和成本的極致性的要求上的差異，其實(shí)已經(jīng)相差的比較遠(yuǎn)了。如果銀行還是僅僅是去看業(yè)界本身的非常普世的建議的話，“可能還會踩到一些我們踩過的坑?！?nbsp;
一方面在短期內(nèi)無法離開IOE，一方面希望最大程度利用云計算的靈活性、敏捷性，雙模IT成了很多銀行嘗試數(shù)字化轉(zhuǎn)型時最合適選擇。
楊冰告訴雷鋒網(wǎng)，以螞蟻金服、阿里云共同與南京銀行合作的“鑫云+”互聯(lián)網(wǎng)金融平臺為例，保留了銀行可靠穩(wěn)定的傳統(tǒng)核心系統(tǒng)，同時采用業(yè)界成熟可信的分布式架構(gòu)技術(shù)搭建新平臺，建立一個更開放、靈活、松耦合、高性能、易擴(kuò)展的第二核心。新平臺需要兼顧敏捷性和穩(wěn)定性，滿足業(yè)務(wù)快速迭代和技術(shù)架構(gòu)彈性擴(kuò)展的需求。
楊冰還告訴雷鋒網(wǎng)，在做對外的技術(shù)開放的時候，螞蟻金服不是重復(fù)發(fā)明一個輪子開放給外部的合作伙伴用，而是把現(xiàn)有技術(shù)作充分的產(chǎn)品化改造，開放和開源的產(chǎn)品都是“自己先吃的狗糧”（開發(fā)梗，“eat your own dog food”，即內(nèi)部先使用自己的產(chǎn)品），包括SOFA在內(nèi)，同步給內(nèi)部和外部用是同一個版本。
“不過，我們還有一些要去做歷史兼容的東西不太適合去開源，另外一些比較超前的東西，包括全業(yè)務(wù)混部這樣的本身也還在演進(jìn)的、或者對于大多數(shù)合作伙伴和機(jī)構(gòu)客戶還暫時不太需要的技術(shù)，可能我們會先在內(nèi)部發(fā)展?！睏畋f。
這對于合作伙伴來說是一件好事。這意味著在螞蟻的開源平臺上，用到的都是經(jīng)過螞蟻嚴(yán)苛業(yè)務(wù)場景充分驗(yàn)證過的成熟技術(shù)。而從產(chǎn)品發(fā)展的角度，螞蟻金服也是在把多年來在支付寶上積累的技術(shù)和運(yùn)營經(jīng)驗(yàn)開放給銀行客戶去推出下一代的數(shù)字化銀行，搭建更多場景服務(wù)，在更多場景下去鍛煉，最終構(gòu)建一個相互都能獲益的社區(qū)生態(tài)。
基于這種思想，SOFA在開源的時候并沒有選擇類似“全家桶”必須全套采用的形式，整套開源項(xiàng)目由許多非常小但又是可以被獨(dú)立拿出去用的類庫和組件組成，如果用戶發(fā)現(xiàn)SOFA里面某一個東西很好，他期望拿過來用時，既可以合在一起用，又可以拆開用，這樣的話就非常有利于開源社區(qū)的豐富和活躍。
“我們覺得社區(qū)肯定是要大家一起玩的，只有這樣才能稱之為社區(qū)?！睏畋f。“我們所設(shè)計的并不是一個特別定制化的產(chǎn)品，我們會考慮跟外部的一些平臺做融合。所以，我們在設(shè)計框架也好，微服務(wù)也好，或者是我們將來會開放的其他組件也好，會優(yōu)先考慮跟周邊生態(tài)有很好的結(jié)合性?！?/p>
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。
