欧美麻豆久久久久久中文_成年免费观看_男人天堂亚洲成人_中国一级片_动漫黄网站免费永久在线观看_国产精品自产av一区二区三区

中培偉業(yè)IT資訊頻道
您現在的位置:首頁 > IT資訊 > 大數據 > 關于Hadoop的六大誤解

關于Hadoop的六大誤解

2016-06-20 15:20:51 | 來源:中培企業(yè)IT培訓網

Hadoop作為一種用于存儲和分析大型數據的分布式系統(tǒng)基礎架構,能夠對分布在多個現有服務器中的數據進行處理。Hadoop適合處理來自手機、電子郵件、社交媒體、傳感器網絡和其它不同渠道的多樣化、大負荷的數據,因此通常被認為是一種大數據操作系統(tǒng)。
  Hadoop的這種特性,讓其在很多人眼中成為大數據的同義詞,而這正是對Hadoop產生誤解的來源。隨著大數據的炒作不斷升溫,實際上也出現了很多對Hadoop如何應用于大數據的誤解。中培偉業(yè)負責《大數據Hadoop與Spark架構應用實戰(zhàn)》培訓的專家鐘老師認為,Hadoop與大數據存在一定區(qū)別,因此并不能與大數據畫上等號。鐘老師進一步指出,目前在互聯(lián)網行業(yè),很多人對Hadoop存在6大誤解:
誤解一:Hadoop是一個完整的解決方案。
  鐘老師認為事實并非如此。無論你把它稱為“框架”或“平臺”都可以,只是不能認為Hadoop可以解決大數據方面的所有問題。
  首先,由于Hadoop是開源項目,許多其他Hadoop相關的項目,如Cassandra和HBase,都可以滿足特定的需求。HBase提供的分布式數據庫,支持大數據表的結構化數據存儲。
  此外,正像紅帽、IBM和其他廠商將Linux打包成各種用戶友好的產品一樣,有很多大數據方面的創(chuàng)業(yè)公司,正在對Hadoop做同樣的事情。所以,雖然Hadoop本身不是一個完整的解決方案,大多數企業(yè)實際上還是會在比較完整的大數據解決方案中遇到它。
誤解二:Hadoop是數據庫當中一種類型。
  實際上很多人都將Hadoop當成數據庫當中的一種,但事實并非如此。Damballa安保公司的一名軟件工程師,Marshall Bockrath-Vandegrift說:“Hadoop核心中沒有任何類似于查詢或索引的核心平臺。”Damballa公司利用Hadoop來分析實時的安全風險。
      “我們使用HBase來幫助我們的風險分析師針對被動DNS數據運行實時查詢。HBase和其他實時技術不僅與Hadoop是互補的,而且多數依賴Hadoop核心的分布式存儲技術(HDFS)來實現高性能的分布式數據集的訪問。”他補充說。
  Bloom Reach數據營銷分析公司的科學家Prateek Gupta也表示:“Hadoop不是為替代數據庫系統(tǒng)而生的,但卻可以用來建立數據庫系統(tǒng)。”
誤解三:對企業(yè)級Hadoop應用是一種冒險。
  許多企業(yè)擔心Hadoop太新,未經考驗,不適合企業(yè)級應用。沒有什么想法比這更錯誤的了。別忘了,Hadoop是基于谷歌文件系統(tǒng)的分布式存儲平臺和運行于該文件系統(tǒng)上的GoogleMapReduce數據分析工具建立的。雅虎在Hadoop上投入了資金和精力,并于2008年推出其第一個大型Hadoop應用,一種搜索“站點地圖”,可對所有已知的網頁和相應的元數據進行索引,從而完成對這些頁面的搜索。
  現在,Hadoop被包括Netflix、Twitter和eBay等公司所采用,包括微軟、IBM和甲骨文這樣的公司都有Hadoop工具出售。目前,將Hadoop稱為“成熟”的技術還為時尚早,這一點與任何大數據平臺的情況類似,然而它確實已經得到了大型企業(yè)的采納和驗證。
  這不意味著它是一種沒有風險的平臺,安全問題本身就是一個比較棘手的問題。但企業(yè)遠不該就因此被Hadoop平臺的年輕而嚇跑。
誤解四: Hadoop的使用需要大量程序員進行維護。
  取決于你要做的事情,這個說法或許是對的。如果你計劃開發(fā)優(yōu)秀的下一代Hadoop大數據套件,可能需要專業(yè)的Java和MapReduce編程人員。反過來,如果你愿意利用他人的成就,編程就不是一個問題。數據集成供應商Syncsort的建議分析師們利用Hadoop兼容的數據集成工具來運行高級查詢,這樣做無需任何編碼工作。
  大多數數據集成工具都有圖形化界面,可以屏蔽MapReduce編程的復雜性,很多還帶有預置的模板。此外,包括Alpine Data Labs、Continuuity和Hortonworks在內的創(chuàng)業(yè)型公司,還提供可以簡化大數據和Hadoop應用的工具。
誤解五:中小企業(yè)不適合用Hadoop。
  許多中小企業(yè)擔心會被“大數據”的趨勢拒之門外。IBM、甲骨文等大型廠商自然傾向于兜售大而昂貴的解決方案。這并不意味著市場上沒有適合中小企業(yè)的相關工具。
  云計算正在迅速推動一些尖端技術的大眾化應用。“云計算正將資本支出轉化為運營成本,”《大數據》的作者菲爾·西蒙指出。“你可以和Netflix利用相同的云服務。同樣的事情也開始發(fā)生在大數據領域,一個只有五個員工的企業(yè),照樣可以使用Kaggle。”
  Kaggle稱自己為“在數據問題和數據方案間搭建橋梁的市場。”例如,創(chuàng)業(yè)公司Jetpac以5000美元懸賞一種算法,以找出最有吸引力的度假照片。多數度假照并不好,而從中篩選是一個繁瑣,耗時的過程。
  Jetpac讓人手工評選出了30000張照片,并且尋求一種能夠與人工方式類似,只是通過分析元數據(照片大小、標題,描述信息)來進行排序的算法。如果該公司自行開發(fā)這一算法,花的錢絕對不止5000美元。而且他們只能得到一種方案,而不是從各種方案中優(yōu)選。Jetpac的圖像處理工具,最終幫助其獲得了240萬美元的風投資金。
誤解六:Hadoop比較便宜。
  這個誤解對任何開放源代碼的軟件都適用。省下最初的采購成本,并不意味著你一定會省錢。例如,云計算的問題之一就是,要在亞馬遜平臺上建立一個科研項目非常容易,以致于很多人都在AWS建立了自己的項目,在持續(xù)付費的同時,卻忘了這些項目本身。
  虛擬服務器的盲目擴張,已經使物理服務器的增加相形見絀。雖然Hadoop可以幫助你存儲和分析數據,但你又如何將老的數據導入到新的系統(tǒng)中?如何實現數據的可視化?如何分享數據?對于這些會更多被大家分享的數據,你又如何去保護它?
  Hadoop實際上一種東拼西湊的解決方案。你可以從Cloudera這樣的公司獲得完整的企業(yè)級解決方案,也可以著手建立自己高度定制化的解決方案。無論你選擇的路線如何,都要認真做好預算,因為免費軟件從來都不是真正免費的。
  最后,鐘老師總結道,Hadoop作為一種分布式系統(tǒng)基礎架構,其強大的功能和廣泛的應用價值,讓其具有廣闊的發(fā)展空間,尤其是大數據的飛速發(fā)展,也為Hadoop的發(fā)展提供了強勁的動力。但是在這個過程中,我們首先要做到的就是正確的認識它,以上的六大誤解無疑為正確認識和廣泛應用Hadoop帶來了阻礙。

標簽: hadoop
主站蜘蛛池模板: 国产精品青草久久久久福利99 | 亚洲午夜精品a片一区二区无码l | 把极品白丝班长啪到腿软 | 波多野结衣视频在线 | 亚洲精品中国国产嫩草影院美女 | 日本最大色倩网站WWW | 无码视频免费一区二三区 | 日韩A片无码毛片免费看 | 99精产国品一二三产区区别网站 | 久久精品人人做人人爽97 | 精品国产福利在线观看网址 | 日本女人一级片 | av鲁丝一区鲁丝二区鲁丝三区 | 1000部拍拍拍18勿入免费视频 | 用舌头去添高潮无码AV在线观看 | 免费人成视频在线播放视频 | 啊啊啊啊啊好爽视频 | 麻豆视频网页 | 熟妇高潮精品一区二区三区 | 国内精品伊人久久久久影院麻豆 | ww欧日韩视频高清在线 | 黑人巨大av在线播放无码 | 亚洲大尺度无码无码专线一区 | 女人与拘性猛交视频 | 小13箩利洗澡无码视频免费网站 | 日韩av无码一区二区三区不卡毛片 | 免费观看亚洲人成网站 | 日日碰狠狠躁久久躁孕妇 | 亚洲av国产国产久青草 | 无遮高潮国产免费观看 | 黄色的网站色干网 | 免费无码AV片在线观看网址 | 亚洲AV成人片无码WWW | 星空天美mv视频大全免费观看 | gogogo免费高清看中国 | 中文字幕视频一区二区三区久 | 美女张开腿让人桶 | 国产乱人伦精品一区二区三区 | 西西人体大胆午夜视频 | 羞羞影院午夜男女爽爽 | 窝窝AV青青一区二区 |