嘉賓美孚rdp研發(fā)總監(jiān)董玉棟、美孚高級研發(fā)經(jīng)理趙儀、美孚公司架構(gòu)總監(jiān)陳強

年，湯姆森路透社金融和風(fēng)險商業(yè)部門獨立成為refinitiv (美孚)。 美孚在湯森路透社金融數(shù)據(jù)和市場知識的積累上，利用先進的技術(shù)、新聞、分解方法繼續(xù)為領(lǐng)域人士服務(wù)。 目前，美孚正在推出金融數(shù)據(jù)平臺。 ( refinitiv Elektron Data平臺，簡稱rdp ) )進一步發(fā)揮該領(lǐng)域積累的特征。 infoq記者采訪了美孚rdp研發(fā)總監(jiān)董玉棟、美孚高級研發(fā)經(jīng)理趙儀、美孚公司架構(gòu)總監(jiān)陳強，揭露了rdp的設(shè)計理念和技術(shù)亮點。

從之前流傳下來的金融數(shù)據(jù)管理到現(xiàn)代金融數(shù)據(jù)管理，金融領(lǐng)域迎來了巨大的轉(zhuǎn)變。 為了應(yīng)對數(shù)據(jù)量增長帶來的壓力，以及監(jiān)管機構(gòu)和顧客的訴求，更多的金融機構(gòu)開始認(rèn)識到“數(shù)據(jù)驅(qū)動”的重要性，但全面釋放數(shù)據(jù)價值的過程并不順利。

金融領(lǐng)域在數(shù)據(jù)管理中面臨著那些痛點？

美孚公司的架構(gòu)總監(jiān)陳強說，在金融領(lǐng)域，數(shù)據(jù)源非常多，非常復(fù)雜。 面對各種數(shù)據(jù)提供制造商、數(shù)據(jù)類型和數(shù)據(jù)提供方法，企業(yè)要獲取、解決和分解所需的金融數(shù)據(jù)，價格并不低。 一點點的小型金融機構(gòu)即使取得了數(shù)據(jù)，也沒有足夠的技術(shù)力量解決。

從另一個角度看，美孚高級研發(fā)經(jīng)理趙儀解釋說，數(shù)據(jù)一般受到兩類人的關(guān)注。 一種是數(shù)據(jù)提供者，另一種是數(shù)據(jù)客戶。 對于數(shù)據(jù)提供者來說，數(shù)據(jù)的權(quán)限管理、權(quán)限的相繼發(fā)布機制、數(shù)據(jù)的合規(guī)性等一直是備受打擊的數(shù)據(jù)客戶，如何處理數(shù)據(jù)源差異、風(fēng)格不一致、不一致等問題就顯得尤為緊迫。

綜合來看，金融機構(gòu)面臨的首要痛點如下。

數(shù)據(jù)源多種多樣，在部門、業(yè)務(wù)系統(tǒng)和行業(yè)的不同組織之間缺乏數(shù)據(jù)流動性和共享性。

數(shù)據(jù)標(biāo)準(zhǔn)化程度低。 來自不同業(yè)務(wù)、缺勤期的數(shù)據(jù)，在用途、結(jié)構(gòu)、價值和質(zhì)量水平等方面差異很大，數(shù)據(jù)的提取、整理、分解、采用的難度會變大。

價格問題。 隨著客戶數(shù)量和數(shù)據(jù)量的增加，數(shù)據(jù)訪問和采用的價格也大幅上升。

目前，金融機構(gòu)可用的數(shù)據(jù)大部分仍是以前流傳下來的業(yè)務(wù)產(chǎn)生的數(shù)據(jù)，但外部數(shù)據(jù)源的擴展不足，缺乏更高層次的協(xié)調(diào)以支持全面的數(shù)據(jù)觀察和采用。

正是出于這些原因，美孚推出了自己開發(fā)的金融數(shù)據(jù)平臺rdp。 該平臺應(yīng)用統(tǒng)一的存儲分層功能，可以從全球收集大量金融數(shù)據(jù)，經(jīng)過精細的清洗、分解和增值解決流程，然后集中分發(fā)給客戶。

rdp研發(fā)負責(zé)人董玉棟表示，美孚已經(jīng)與全球證券交易所、期貨交易所等機構(gòu)建立了合作關(guān)系，從數(shù)據(jù)生產(chǎn)方獲得了一手?jǐn)?shù)據(jù)，面向全球披露了數(shù)據(jù)費用的一部分。 簡單地說，就是“被世界接受，被送到世界”。

可以說，rdp是全球金融領(lǐng)域數(shù)據(jù)的協(xié)調(diào)中心，其目的是使金融從業(yè)者更容易獲得全面領(lǐng)域的數(shù)據(jù)，最大限度地降低客戶價格，提高數(shù)據(jù)價值。

rdp如何幫助金融人員以較低的價格訪問和采用數(shù)據(jù)？

據(jù)了解，公司在數(shù)據(jù)傳輸過程中，除了從上游不同的業(yè)務(wù)數(shù)據(jù)庫實時、定時傳輸?shù)较掠蜗到y(tǒng)外，還需要從外部合作者、供應(yīng)商獲取業(yè)務(wù)數(shù)據(jù)。 rdp中有大數(shù)據(jù)級別的域數(shù)據(jù)，但如何讓金融從業(yè)人員以低廉的價格輕松訪問和采用數(shù)據(jù)呢？

rdp的處理構(gòu)想是將其核心數(shù)據(jù)保存在aws中，并向顧客提供元數(shù)據(jù)庫的統(tǒng)一的api接口。 rdp數(shù)據(jù)和api接口可以從主要的公共云產(chǎn)品、私有云設(shè)施和企業(yè)專用數(shù)據(jù)中心訪問。

從顧客的角度來看，元數(shù)據(jù)庫的訪問大大簡化了顧客的數(shù)據(jù)采用。 但是，數(shù)據(jù)訪問越容易，意味著開發(fā)難度越大。 董玉棟也表示，統(tǒng)一api的背后，必須能夠理解并有效執(zhí)行顧客不同類型的要求，但云本地的api網(wǎng)關(guān)不能完全實現(xiàn)這一特點。

api網(wǎng)關(guān)位于客戶端和各微服務(wù)之間，充當(dāng)反向代理的角色，將不同的請求路由到相應(yīng)的微服務(wù)。 api網(wǎng)關(guān)可以解決客戶端訴求與個別微服務(wù)暴露出的細粒度api不匹配、部分服務(wù)采用的協(xié)議不友好網(wǎng)絡(luò)等問題。

為了提高api的性能，滿足顧客不同類型的訪問要求，移動自主開發(fā)了api網(wǎng)關(guān)和顧客數(shù)據(jù)權(quán)限管理系統(tǒng)。 aws的api網(wǎng)關(guān)注冊所有的rdp api。 這包括內(nèi)部使用的api和面向客戶的api。 當(dāng)客戶的請求到達時，api網(wǎng)關(guān)將自動驗證客戶的權(quán)限，并確保后續(xù)的合法數(shù)據(jù)請求迅速提交到相應(yīng)的服務(wù)。 超出服務(wù)范圍的請求將被自動拒絕。 董玉棟表示，所有rdp下的產(chǎn)品設(shè)計都是從api定義開始的，這有助于實現(xiàn)將顧客訴求放在首位的目標(biāo)，避免重復(fù)實現(xiàn)相同的功能，從而最大化各種api和服務(wù)的可重用性。