劉剛：從互聯(lián)網(wǎng)到傳統(tǒng)行業(yè) Hadoop發(fā)展迅猛！

2014年05月20日，CSDN攜手ChinaHadoop小象社區(qū)將打造一場涵蓋分布式在線存儲系統(tǒng)HBase、數(shù)據(jù)倉庫Hive、Hadoop在電信運營商的應(yīng)用實踐等內(nèi)容的“Hadoop在企業(yè)中的應(yīng)用實戰(zhàn)”高端技術(shù)培訓(xùn)。

此次“Hadoop在企業(yè)中的應(yīng)用實戰(zhàn)”培訓(xùn)的起因很簡單，時下數(shù)據(jù)已經(jīng)成為當(dāng)今企業(yè)的核心競爭力，擁有大數(shù)據(jù)并智慧地使用和運營數(shù)據(jù)成為企業(yè)不可缺少的成功要素。Hadoop生態(tài)系統(tǒng)提供了一種實用的、經(jīng)濟(jì)有效的、可擴(kuò)展的架構(gòu)，幫助企業(yè)存儲、管理和處理海量數(shù)據(jù)。業(yè)界在Hadoop上的興趣和投資形成了包括開源軟件和商業(yè)化軟件的整個生態(tài)系統(tǒng)，Hadoop迅速成為大數(shù)據(jù)處理方面的業(yè)界事實標(biāo)準(zhǔn)。越來越多的企業(yè)急需引入Hadoop技術(shù)人才！于是CSDN攜手ChinaHadoop小象社區(qū)共同打造了此次“Hadoop在企業(yè)中的應(yīng)用實戰(zhàn)”！

在本次培訓(xùn)開始前，我和本次培訓(xùn)的講師劉剛做了一次簡單的溝通，他表示將會在5月20日“Hadoop在企業(yè)中的應(yīng)用實戰(zhàn)” 分享Hive實戰(zhàn)課程，希望通過這次分享，能夠讓大家掌握使用Hive來分析Hadoop上面的數(shù)據(jù)。這次講課以一個Hive的項目開始，來逐一講解Hive的常用功能和實戰(zhàn)經(jīng)驗。報名點擊！

劉剛          ChinaHadoop小象社區(qū)核心成員

多年Hadoop開發(fā)和維護(hù)工作，擅長搭建基于Hadoop的海量數(shù)據(jù)平臺和處理TB級數(shù)據(jù)。 擅長基于MR的算法開發(fā)，參與多個Hive、HBase和Mahout的行業(yè)應(yīng)用案例。 《Hadoop應(yīng)用開發(fā)技術(shù)詳解》作者，《海量數(shù)據(jù)基于記錄級別的容錯》專利所有人。

以下是采訪原文

-什么原因吸引你鉆研Hadoop技術(shù)？

記得四年前跟著PKU的曹老師做項目的時候，曹老師讓我去調(diào)研大數(shù)據(jù)技術(shù)，那個時候hadoop資料很少，只能去看官方的文檔。印象最深的是花了兩周搭建了一個節(jié)點的hadoop集群。過程雖然困難，當(dāng)搭建成功的那一刻，所有的困難全部變成了寶貴的經(jīng)驗。

Hadoop自帶了分布式存儲(HDFS)和分布式計算(MapReduce),隨著互聯(lián)網(wǎng)的快速發(fā)展，網(wǎng)絡(luò)上產(chǎn)生的數(shù)據(jù)量越來越大，這些數(shù)據(jù)80%以上是非結(jié)構(gòu)花的，所以存在傳統(tǒng)的Oracle或者M(jìn)ysql里面已經(jīng)不合適了。這個時候，Hadoop可以完美的解決這個問題。不僅解決了存儲問題，同時計算的問題也解決了。

-對于解決哪些問題Hadoop獨具優(yōu)勢？

Hadoop在國內(nèi)使用差不多快6年左右了，目前來看Hadoop在互聯(lián)網(wǎng)行業(yè)使用的比較廣泛，主要用于：   
  1）日志的存儲和離線分析。
  2）基于Mahout的推薦挖掘。
  3）使用Hbase來實現(xiàn)一些半實時的應(yīng)用。

-目前企業(yè)應(yīng)用Hadoop最大的困難是什么？

在互聯(lián)網(wǎng)企業(yè)Hadoop的使用還是比較好的，但是在傳統(tǒng)的行業(yè)里面(銀行、電信)，使用Hadoop還是有困難的。   
  1）Hadoop的安全性不能滿足他們的需求。
  2）Hadoop的人才缺少。
  3）最重要的是怎么把傳統(tǒng)的業(yè)務(wù)遷移到Hadoop平臺上來處理。

-根據(jù)您的了解，目前Hadoop發(fā)展的情況如何？

Hadoop在未來5-10年還是海量數(shù)據(jù)存儲和計算的首選工具，目前發(fā)展的非常迅速，而且正在從互聯(lián)網(wǎng)行業(yè)向傳統(tǒng)行業(yè)發(fā)展。

-請談?wù)勀阍谶@次Hadoop培訓(xùn)上即將分享的話題。

我將會分享Hive實戰(zhàn)課程，希望通過這次分享，能夠讓大家掌握使用Hive來分析Hadoop上面的數(shù)據(jù)。這次講課以一個Hive的項目開始，來逐一講解Hive的常用功能和實戰(zhàn)經(jīng)驗。

-哪些人群應(yīng)該來參加本次培訓(xùn)？會對他們有哪些幫助？

  1）對Hadoop感興趣的人
  2）數(shù)據(jù)分析師
  3）DBA

更多精彩盡在2014年5月20日“Hadoop在企業(yè)中的應(yīng)用實戰(zhàn)”培訓(xùn)，目前報名可享受三人成團(tuán)優(yōu)惠價！馬上報名！

往期采訪文章：

董西成：Hadoop將在高速發(fā)展和完善中擴(kuò)大優(yōu)勢！

冼茂源：HBase在垂直搜索業(yè)務(wù)以及數(shù)據(jù)存儲中的應(yīng)用！

葉琪：Hadoop不是萬能的 要明確場景揚長避短

生活不易，碼農(nóng)辛苦
如果您覺得本網(wǎng)站對您的學(xué)習(xí)有所幫助,可以手機(jī)掃描二維碼進(jìn)行捐贈