Pivotal劉偉光：顛覆行業(yè) 用互聯(lián)網(wǎng)思維打造企業(yè)級(jí)基礎(chǔ)平臺(tái)

近日，在Pivotal溝通會(huì)上，Pivotal大中華區(qū)總經(jīng)理劉偉光介紹了Pivotal的整體戰(zhàn)略、產(chǎn)品情況以及在中國的運(yùn)營情況。

Pivotal大中華區(qū)總經(jīng)理劉偉光

首先給大家普及一下Pivotal的背景，它是去年4月份，由EMC、VMware、Ge共同投資成立了Pivotal公司，由Winodws之父、前VMware CEO Paul Maritz掌舵，致力于為企業(yè)級(jí)用戶打造企業(yè)級(jí)云平臺(tái)和大數(shù)據(jù)平臺(tái)。自此，Pivotal就成為EMC公司在第三平臺(tái)趨勢(shì)下的重要布局。

會(huì)上，劉偉光表示隨著用戶規(guī)模和用戶應(yīng)用空前豐富，使得企業(yè)的IT基礎(chǔ)平臺(tái)需要適應(yīng)全新的環(huán)境，企業(yè)IT發(fā)展在經(jīng)歷了第一和第二平臺(tái)之后，現(xiàn)在正在逐漸向第三平臺(tái)發(fā)展。

劉偉光講到：“沒有任何一個(gè)單獨(dú)的大數(shù)據(jù)產(chǎn)品能夠勝任企業(yè)的大數(shù)據(jù)處理挑戰(zhàn)。”他表示Pivotal公司是將原有EMC和VMware的一些優(yōu)良的軟件資產(chǎn)進(jìn)行整合，整合之后構(gòu)建了一個(gè)全新的整合的基礎(chǔ)架構(gòu)平臺(tái)，重要產(chǎn)品包括數(shù)據(jù)分析：GreenPlum數(shù)據(jù)倉庫、Hadoop、內(nèi)存計(jì)算GemFire等；應(yīng)用開發(fā)：Spring中間件、MySQL Dev等；云自動(dòng)化：Cloud Foundry軟件。Pivotal通過對(duì)這些重要產(chǎn)品整合打造出全新的基礎(chǔ)架構(gòu)平臺(tái)----Pivotal One，涵蓋了數(shù)據(jù)支撐平臺(tái)、應(yīng)用支撐平臺(tái)、云支撐平臺(tái)以及專業(yè)服務(wù)?！癙ivotal有一個(gè)很大的使命就是把很多在互聯(lián)網(wǎng)行業(yè)當(dāng)中優(yōu)秀的組合與傳統(tǒng)企業(yè)所需要的技術(shù)進(jìn)行集成，為企業(yè)級(jí)用戶提供企業(yè)級(jí)云平臺(tái)和大數(shù)據(jù)平臺(tái)。這里面涵蓋了EMC、VMware和Pivotal各自的拳頭技術(shù)，我們真的要打造一個(gè)全新平臺(tái)，不僅針對(duì)原有的存儲(chǔ)市場，還針對(duì)我們的友商市場，顛覆整個(gè)行業(yè)?！眲ス獗硎?。

據(jù)了解，Pivotal在中國非常重要的一個(gè)客戶就是12306，鐵道部通過Pivotal的內(nèi)存計(jì)算產(chǎn)品 GemFire來解決高峰時(shí)期訂票和余票查詢的瓶頸。劉偉光表示：“12306在春節(jié)高峰時(shí)期應(yīng)該是世界上單點(diǎn)訪問量、并發(fā)量最高的，它的訪問瓶頸、性能壓力一直困擾著鐵道部。Pivotal的技術(shù)將所有計(jì)算任務(wù)平均分配到每一臺(tái)X86服務(wù)器上，而不像過去將所有計(jì)算資源都集中在某幾臺(tái)大型Unix服務(wù)器上，通過低成本的硬件來為用戶提供最高性能和用戶體驗(yàn)?！被仡^是不是應(yīng)該讓12306的技術(shù)出來聊聊呢？ 

接下來劉偉光解釋了具體產(chǎn)品之間的流動(dòng)性。我們從左到右看這個(gè)圖，最左邊是可能產(chǎn)生的數(shù)據(jù)源，從互聯(lián)網(wǎng)、從網(wǎng)端、從各種各樣的地方產(chǎn)生的數(shù)據(jù)源，送到后臺(tái)的大數(shù)據(jù)處理平臺(tái)，我們提供的SpringXD，可以提供統(tǒng)一的數(shù)據(jù)管理、統(tǒng)一的數(shù)據(jù)轉(zhuǎn)換，可以統(tǒng)一的送到后臺(tái)的數(shù)據(jù)源。也可能你需要的是高性能的計(jì)算能力，可以迅速的送到這里進(jìn)行計(jì)算，計(jì)算完的結(jié)果可以直接傳送到數(shù)據(jù)庫當(dāng)中去做歸檔。如果這個(gè)計(jì)算結(jié)果沒那么重要，也可以轉(zhuǎn)到Hadoop上去，所以可以有很多種選擇。

當(dāng)記者問及GemFire和Hadoop之間是通過哪些技術(shù)來實(shí)現(xiàn)的？以及這些數(shù)據(jù)從一個(gè)地方轉(zhuǎn)移到另外一個(gè)地方，數(shù)據(jù)的轉(zhuǎn)移有沒有一些數(shù)據(jù)保護(hù)之類的措施？

劉偉光表示：“當(dāng)客戶在實(shí)行整個(gè)大數(shù)據(jù)系統(tǒng)構(gòu)建的時(shí)候，先期采用了相對(duì)獨(dú)立的產(chǎn)品，比如Greenplum產(chǎn)品，或者GemFire產(chǎn)品，比如以GemFire為例，它有很多接口來實(shí)現(xiàn)數(shù)據(jù)的持久化，可以放到數(shù)據(jù)庫里，當(dāng)我的GemFire數(shù)據(jù)庫啟動(dòng)的時(shí)候，可以把這些數(shù)據(jù)全部從這里加載。我這個(gè)數(shù)據(jù)是熱點(diǎn)數(shù)據(jù)，用GemFire來處理這些數(shù)據(jù)存在哪里，其實(shí)是可以放在GemFireXD上，只不過我需要通過GemFire進(jìn)行規(guī)則的定制，它們之間訪問的接口都是可以實(shí)現(xiàn)的。

至于用GemFire去訪問Hadoop上的數(shù)據(jù)，用一些什么樣的協(xié)議去實(shí)現(xiàn)呢？可以用GemFire的這種方式，這就是我們GemFireXD，通過GemFire的方式去訪問，數(shù)據(jù)可以直接通過JDBC的方式去訪問，GemFire是非常靈活的產(chǎn)品，可以實(shí)現(xiàn)數(shù)據(jù)的交互，也可以通過JAVA的程序去實(shí)現(xiàn)，方式可以更加靈活，可以直接調(diào)用第三方數(shù)據(jù)訪問的接口，沒有什么嚴(yán)格的限制。”

Pivotal這款產(chǎn)品的定位和現(xiàn)在很流行的HANA或者最近Oracle出的數(shù)據(jù)庫軟件，這些東西它們是在一個(gè)層面上的東西嗎？它的優(yōu)勢(shì)在哪里？

GemFire是基于開放平臺(tái)的標(biāo)準(zhǔn)產(chǎn)品，跟很多廠家的產(chǎn)品定位是不太一樣的，因?yàn)樵谡麄€(gè)云計(jì)算時(shí)代來臨的時(shí)候，我們一直在講要做開放、要做標(biāo)準(zhǔn)，從開放的特點(diǎn)來看，比如SAP的HANA，最重要的定位在HANA出現(xiàn)的時(shí)候，首先要服務(wù)于他們?cè)械暮芏嗫蛻?。我們的產(chǎn)品是通過接口來實(shí)現(xiàn)廣泛的途徑。到目前為止，除了像12306的案例以外，在國內(nèi)我們有很多其他行業(yè)，包括政府行業(yè)、金融行業(yè)，很多行業(yè)都有成功推廣的經(jīng)驗(yàn)，甚至在制造業(yè)也有成功的經(jīng)驗(yàn)。

在產(chǎn)品技術(shù)的實(shí)現(xiàn)上，這個(gè)產(chǎn)品在剛剛出現(xiàn)的時(shí)候，它的定位就是要做快速的數(shù)據(jù)的及時(shí)處理，并且對(duì)于一些特定狀況能夠做出及時(shí)反應(yīng)，因?yàn)檫@是證券行業(yè)很重要的特性。在云計(jì)算包括大數(shù)據(jù)市場不斷發(fā)展、不斷推廣的時(shí)候，對(duì)于快速的數(shù)據(jù)處理方面也有類似的需求在產(chǎn)生，所以我們這個(gè)產(chǎn)品，特別是流式數(shù)據(jù)處理及時(shí)性方面，特點(diǎn)是非常強(qiáng)的。

關(guān)于大數(shù)據(jù)最新趨勢(shì)，Pivotal 有哪些獨(dú)特的觀察？認(rèn)同怎樣的大數(shù)據(jù)經(jīng)濟(jì)模式？

劉偉光：大數(shù)據(jù)最新的趨勢(shì)來看，Pivotal有如下的一些觀點(diǎn)。

• Pivotal認(rèn)為沒有單一的大數(shù)據(jù)產(chǎn)品能夠滿足互聯(lián)網(wǎng)時(shí)代的傳統(tǒng)企業(yè)的大數(shù)據(jù)需求。無論是Hadoop變得越來越像分布式數(shù)據(jù)庫還是傳統(tǒng)的數(shù)據(jù)庫技術(shù)變得越來越像Hadoop類型的分布式處理框架。而只有通過組合這些單獨(dú)的產(chǎn)品，形成新型企業(yè)的完整的大數(shù)據(jù)處理架構(gòu)，才有可能應(yīng)對(duì)大數(shù)據(jù)帶來的挑戰(zhàn)

• 云與大數(shù)據(jù)將會(huì)結(jié)合得越來越緊密。單獨(dú)的大數(shù)據(jù)環(huán)境已經(jīng)逐漸顯現(xiàn)出其不足之處，如缺乏足夠的彈性，無法支撐快速的迭代開發(fā)，高成本的大規(guī)模集群的管理維護(hù)，功能變得越來越復(fù)雜的同時(shí)，需要的技能越來越多，要求越來越高。而這些正是云架構(gòu)擅長的領(lǐng)域，大數(shù)據(jù)與PaaS的結(jié)合是未來大數(shù)據(jù)升華的唯一途經(jīng)。認(rèn)同APP+DATA+ANALYTIC構(gòu)成的完整閉環(huán)才能夠全面應(yīng)對(duì)互聯(lián)網(wǎng)化帶來的挑戰(zhàn)，缺一不可，并發(fā)揮出傳統(tǒng)企業(yè)的數(shù)據(jù)價(jià)值。

Pivotal如何定義快數(shù)據(jù)？在快數(shù)據(jù)方面，Pivotal有哪些技術(shù)和解決方案？

劉偉光：快數(shù)據(jù)即能夠以超低時(shí)延和超高并發(fā)的方式來處理各種類型的數(shù)據(jù)，天下武功，唯快不破?？鞌?shù)據(jù)方面，Pivotal有分布式內(nèi)存網(wǎng)格技術(shù)Gemfire(12306的案例)，分布式內(nèi)存數(shù)據(jù)庫技術(shù)SQLFire以及業(yè)界唯一能夠在Hadoop上運(yùn)行高性能OLTP類型應(yīng)用的分布式內(nèi)存技術(shù)GemfireXD。

GemfireXD目前已經(jīng)在幾個(gè)對(duì)于并發(fā)和時(shí)延要求極端苛刻的金融客戶中通過了嚴(yán)格的考驗(yàn)，是我們最新的大數(shù)據(jù)解決方案之一。

Pivotal是使用SQL+Hadoop作為大數(shù)據(jù)解決方案，在這方面哪些最新進(jìn)展？

劉偉光：我們的SQL on Hadoop方案有了更完善的模塊，Pivotal HAWQ技術(shù)已經(jīng)是業(yè)界唯一的純SQL on Hadoop方案，性能包括SQL的支撐能力業(yè)界第一。

同時(shí)，我們發(fā)布了OLTP on Hadoop的方案 Pivotal Gemfire XD，該方案是對(duì)整個(gè)Pivotal的大數(shù)據(jù)體系的有益補(bǔ)充，它使得客戶不光能在Hadoop上做高性能的MPP級(jí)別的復(fù)雜SQL分析，還能在Hadoop平臺(tái)中，也是業(yè)界唯一的廠商，能夠做OLTP級(jí)別的數(shù)據(jù)訪問支持，并不僅僅是簡單的HBase這種KV級(jí)別的數(shù)據(jù)查詢。

相比其他做大數(shù)據(jù)的廠商（如HP、甲骨文等），Pivotal大數(shù)據(jù)套件有哪些優(yōu)勢(shì)？

劉偉光：優(yōu)勢(shì)有3點(diǎn)：第一，統(tǒng)一定價(jià)模型，整合大數(shù)據(jù)產(chǎn)品，簡化企業(yè)的選擇和流程；第二，流動(dòng)許可證模型，保證客戶的大數(shù)據(jù)技術(shù)投資與靈活的部署，從容應(yīng)對(duì)未知的大數(shù)據(jù)挑戰(zhàn)；第三，套件里的每一款產(chǎn)品都是業(yè)界領(lǐng)先的技術(shù)，擁有眾多的成熟國內(nèi)外頂級(jí)客戶案例，遍布各行各業(yè)，同時(shí)這些產(chǎn)品之間還能夠無縫的數(shù)據(jù)集成，自由流動(dòng)。

Pivotal大數(shù)據(jù)套件的技術(shù)架構(gòu)，對(duì)給底層以及上層用戶操作界面帶來怎樣的價(jià)值？

劉偉光：大數(shù)據(jù)套件的技術(shù)架構(gòu)涵蓋了數(shù)據(jù)處理領(lǐng)域所有的需求。

關(guān)系型數(shù)據(jù)庫,NoSQL,流計(jì)算，SQL on Hadoop, OLAP on Hadoop, OLTP on Hadoop，cache緩存，In-Memory DB, In-Memory DataGrid，非關(guān)系型數(shù)據(jù)庫，等等。

并且這些模塊之間的數(shù)據(jù)是互聯(lián)互通，自由流動(dòng)，可以任意搭配來構(gòu)建靈活的企業(yè)級(jí)第三平臺(tái)數(shù)據(jù)架構(gòu)。

對(duì)于底層用戶來說，互操作性以及標(biāo)準(zhǔn)SQL的支持使得應(yīng)用開發(fā)和維護(hù)人員更容易上手，學(xué)習(xí)曲線降低。使得項(xiàng)目和應(yīng)用投產(chǎn)的周期縮短，風(fēng)險(xiǎn)降低。

對(duì)于上層用戶來說，大數(shù)據(jù)套件完善友好的界面以及豐富的操作接口可以使得沒有任何經(jīng)驗(yàn)的數(shù)據(jù)分析和使用人員也能很快的進(jìn)入狀態(tài)，專注于業(yè)務(wù)和邏輯的分析應(yīng)用。

---

免費(fèi)訂閱“CSDN云計(jì)算”微信公眾號(hào)，實(shí)時(shí)掌握第一手云中消息！

CSDN作為國內(nèi)最專業(yè)的云計(jì)算服務(wù)平臺(tái)，提供云計(jì)算、大數(shù)據(jù)、虛擬化、數(shù)據(jù)中心、OpenStack、CloudStack、Hadoop、Spark、機(jī)器學(xué)習(xí)、智能算法等相關(guān)云計(jì)算觀點(diǎn)，云計(jì)算技術(shù)，云計(jì)算平臺(tái)，云計(jì)算實(shí)踐，云計(jì)算產(chǎn)業(yè)資訊等服務(wù)。