欧美麻豆久久久久久中文_成年免费观看_男人天堂亚洲成人_中国一级片_动漫黄网站免费永久在线观看_国产精品自产av一区二区三区

中培偉業(yè)IT資訊頻道
您現在的位置:首頁 > IT資訊 > 大數據 > 關于Hadoop的六大誤解

關于Hadoop的六大誤解

2016-06-20 15:20:51 | 來源:中培企業(yè)IT培訓網

Hadoop作為一種用于存儲和分析大型數據的分布式系統(tǒng)基礎架構,能夠對分布在多個現有服務器中的數據進行處理。Hadoop適合處理來自手機、電子郵件、社交媒體、傳感器網絡和其它不同渠道的多樣化、大負荷的數據,因此通常被認為是一種大數據操作系統(tǒng)。
  Hadoop的這種特性,讓其在很多人眼中成為大數據的同義詞,而這正是對Hadoop產生誤解的來源。隨著大數據的炒作不斷升溫,實際上也出現了很多對Hadoop如何應用于大數據的誤解。中培偉業(yè)負責《大數據Hadoop與Spark架構應用實戰(zhàn)》培訓的專家鐘老師認為,Hadoop與大數據存在一定區(qū)別,因此并不能與大數據畫上等號。鐘老師進一步指出,目前在互聯(lián)網行業(yè),很多人對Hadoop存在6大誤解:
誤解一:Hadoop是一個完整的解決方案。
  鐘老師認為事實并非如此。無論你把它稱為“框架”或“平臺”都可以,只是不能認為Hadoop可以解決大數據方面的所有問題。
  首先,由于Hadoop是開源項目,許多其他Hadoop相關的項目,如Cassandra和HBase,都可以滿足特定的需求。HBase提供的分布式數據庫,支持大數據表的結構化數據存儲。
  此外,正像紅帽、IBM和其他廠商將Linux打包成各種用戶友好的產品一樣,有很多大數據方面的創(chuàng)業(yè)公司,正在對Hadoop做同樣的事情。所以,雖然Hadoop本身不是一個完整的解決方案,大多數企業(yè)實際上還是會在比較完整的大數據解決方案中遇到它。
誤解二:Hadoop是數據庫當中一種類型。
  實際上很多人都將Hadoop當成數據庫當中的一種,但事實并非如此。Damballa安保公司的一名軟件工程師,Marshall Bockrath-Vandegrift說:“Hadoop核心中沒有任何類似于查詢或索引的核心平臺。”Damballa公司利用Hadoop來分析實時的安全風險。
      “我們使用HBase來幫助我們的風險分析師針對被動DNS數據運行實時查詢。HBase和其他實時技術不僅與Hadoop是互補的,而且多數依賴Hadoop核心的分布式存儲技術(HDFS)來實現高性能的分布式數據集的訪問。”他補充說。
  Bloom Reach數據營銷分析公司的科學家Prateek Gupta也表示:“Hadoop不是為替代數據庫系統(tǒng)而生的,但卻可以用來建立數據庫系統(tǒng)。”
誤解三:對企業(yè)級Hadoop應用是一種冒險。
  許多企業(yè)擔心Hadoop太新,未經考驗,不適合企業(yè)級應用。沒有什么想法比這更錯誤的了。別忘了,Hadoop是基于谷歌文件系統(tǒng)的分布式存儲平臺和運行于該文件系統(tǒng)上的GoogleMapReduce數據分析工具建立的。雅虎在Hadoop上投入了資金和精力,并于2008年推出其第一個大型Hadoop應用,一種搜索“站點地圖”,可對所有已知的網頁和相應的元數據進行索引,從而完成對這些頁面的搜索。
  現在,Hadoop被包括Netflix、Twitter和eBay等公司所采用,包括微軟、IBM和甲骨文這樣的公司都有Hadoop工具出售。目前,將Hadoop稱為“成熟”的技術還為時尚早,這一點與任何大數據平臺的情況類似,然而它確實已經得到了大型企業(yè)的采納和驗證。
  這不意味著它是一種沒有風險的平臺,安全問題本身就是一個比較棘手的問題。但企業(yè)遠不該就因此被Hadoop平臺的年輕而嚇跑。
誤解四: Hadoop的使用需要大量程序員進行維護。
  取決于你要做的事情,這個說法或許是對的。如果你計劃開發(fā)優(yōu)秀的下一代Hadoop大數據套件,可能需要專業(yè)的Java和MapReduce編程人員。反過來,如果你愿意利用他人的成就,編程就不是一個問題。數據集成供應商Syncsort的建議分析師們利用Hadoop兼容的數據集成工具來運行高級查詢,這樣做無需任何編碼工作。
  大多數數據集成工具都有圖形化界面,可以屏蔽MapReduce編程的復雜性,很多還帶有預置的模板。此外,包括Alpine Data Labs、Continuuity和Hortonworks在內的創(chuàng)業(yè)型公司,還提供可以簡化大數據和Hadoop應用的工具。
誤解五:中小企業(yè)不適合用Hadoop。
  許多中小企業(yè)擔心會被“大數據”的趨勢拒之門外。IBM、甲骨文等大型廠商自然傾向于兜售大而昂貴的解決方案。這并不意味著市場上沒有適合中小企業(yè)的相關工具。
  云計算正在迅速推動一些尖端技術的大眾化應用。“云計算正將資本支出轉化為運營成本,”《大數據》的作者菲爾·西蒙指出。“你可以和Netflix利用相同的云服務。同樣的事情也開始發(fā)生在大數據領域,一個只有五個員工的企業(yè),照樣可以使用Kaggle。”
  Kaggle稱自己為“在數據問題和數據方案間搭建橋梁的市場。”例如,創(chuàng)業(yè)公司Jetpac以5000美元懸賞一種算法,以找出最有吸引力的度假照片。多數度假照并不好,而從中篩選是一個繁瑣,耗時的過程。
  Jetpac讓人手工評選出了30000張照片,并且尋求一種能夠與人工方式類似,只是通過分析元數據(照片大小、標題,描述信息)來進行排序的算法。如果該公司自行開發(fā)這一算法,花的錢絕對不止5000美元。而且他們只能得到一種方案,而不是從各種方案中優(yōu)選。Jetpac的圖像處理工具,最終幫助其獲得了240萬美元的風投資金。
誤解六:Hadoop比較便宜。
  這個誤解對任何開放源代碼的軟件都適用。省下最初的采購成本,并不意味著你一定會省錢。例如,云計算的問題之一就是,要在亞馬遜平臺上建立一個科研項目非常容易,以致于很多人都在AWS建立了自己的項目,在持續(xù)付費的同時,卻忘了這些項目本身。
  虛擬服務器的盲目擴張,已經使物理服務器的增加相形見絀。雖然Hadoop可以幫助你存儲和分析數據,但你又如何將老的數據導入到新的系統(tǒng)中?如何實現數據的可視化?如何分享數據?對于這些會更多被大家分享的數據,你又如何去保護它?
  Hadoop實際上一種東拼西湊的解決方案。你可以從Cloudera這樣的公司獲得完整的企業(yè)級解決方案,也可以著手建立自己高度定制化的解決方案。無論你選擇的路線如何,都要認真做好預算,因為免費軟件從來都不是真正免費的。
  最后,鐘老師總結道,Hadoop作為一種分布式系統(tǒng)基礎架構,其強大的功能和廣泛的應用價值,讓其具有廣闊的發(fā)展空間,尤其是大數據的飛速發(fā)展,也為Hadoop的發(fā)展提供了強勁的動力。但是在這個過程中,我們首先要做到的就是正確的認識它,以上的六大誤解無疑為正確認識和廣泛應用Hadoop帶來了阻礙。

標簽: hadoop
主站蜘蛛池模板: a级三级毛片| 观看亚洲色欲色欲色欲WWW | 无码人妻一区二区三区免费看 | 永久免费精品视频 | 亚洲极美女高清视频 | 精品国产福利在线观看网址 | 亚洲高清国产拍精品26u | 亚洲AV无码久久无遮挡 | 五月丁香综合激情六月久久 | 久久精品中文字幕免费 | 亚洲第一区在线视频 | 国产第一区在线 | 中国美女a级毛片 | www.艹艹艹| 亚洲有码转帖 | 无码人妻丰满熟妇啪啪网不卡 | 精品亚洲成a人片在线观看少妇 | 全程不付费看污软件片 | 毛片网站免费观看 | 顶级欧美做受XXX000 | 在线亚洲区 | 无码人妻丰满熟妇区96 | 黑人外教啪啪中国女留学生 | 在线精品亚洲一区二区动态图 | 国产成人无码AV在线影院 | 超级碰碰色偷偷免费视频 | 久久久无码精品无码国产人妻丝瓜 | 日韩欧美不卡在线 | 一个人看的www视频免费观看 | 日本丰满岳乱妇在线观看 | 国产日韩欧美亚欧在线 | 欧美黑人又粗又大XXXX | 三级三级久久三级久久18 | 免费无码又爽又刺激A片软件 | 亚洲欧美另类成人综合图片 | 一级黄色片看看吧 | 成在线人免费视频一区二区 | 67149中文无码久久 | 真实嫖妓大龄熟妇 | 欧美精品一级二级 | 高清日韩av在线影院 |