在大數(shù)據(jù)時代,我們的日常生活,尤其是企業(yè)的日常運(yùn)作,都離不開大數(shù)據(jù),可以毫不夸張地說,大數(shù)據(jù)將伴隨著企業(yè)從最初的建立,到發(fā)展長到的全過程,不管是產(chǎn)品的生產(chǎn)還是銷售,都將越來越注重對大數(shù)據(jù)的依賴。如何獲得游泳的核心數(shù)據(jù),并管理和使用好這些大數(shù)據(jù),也幾個成為影響企業(yè)成敗的關(guān)鍵。
在國內(nèi),目前的阿里巴巴、百度和騰訊成為三足鼎立之勢,這三家公司不僅是國內(nèi)IT業(yè)績的三巨頭,也是最具實(shí)力的大數(shù)據(jù)提供方。亨氏如此,他們呢才會在激烈的市場競爭中不斷發(fā)展壯大。
知己知彼,百戰(zhàn)不殆。在現(xiàn)代企業(yè)的運(yùn)營發(fā)展中同樣如此,誰擁有了更多更有價(jià)值的信息,誰就將掌握是常規(guī)的主動權(quán)。
作為大數(shù)據(jù)使用的先驅(qū),IBM正式推出InfoSphere大數(shù)據(jù)分析平臺。InfoSphere大數(shù)據(jù)分析平臺包括 BigInsights和Streams,二者互補(bǔ),Biglnsights基于Hadoop,對大規(guī)模的靜態(tài)數(shù)據(jù)進(jìn)行分析,它提供多節(jié)點(diǎn)的分布式計(jì)算,可以隨時增加節(jié)點(diǎn),提升數(shù)據(jù)處理能力。Streams采用內(nèi)存計(jì)算方式分析實(shí)時數(shù)據(jù)。InfoSphere大數(shù)據(jù)分析平臺還集成了數(shù)據(jù)倉庫、數(shù)據(jù)庫、數(shù)據(jù)集成、業(yè)務(wù)流程管理等組件。
另一家IT也巨頭,亞馬遜公司同樣不甘人后,對于云計(jì)算和大數(shù)據(jù),亞馬遜絕對具有先見之明,早在2009年就推出了亞馬遜彈性MapReduce(Amazon Elastic MapReduce),亞馬遜對Hadoop的需求和應(yīng)用可謂了若指掌,無論是中小型企業(yè)還是大型組織。彈性MapReduce是一項(xiàng)能夠迅速擴(kuò)展的Web服務(wù),運(yùn)行在亞馬遜彈性計(jì)算云(Amazon EC2)和亞馬遜簡單存儲服務(wù)(Amazon S3)上。這可是貨真價(jià)實(shí)的云:面對數(shù)據(jù)密集型任務(wù),比如互聯(lián)網(wǎng)索引、數(shù)據(jù)挖掘、日志文件分析、機(jī)器學(xué)習(xí)、金融分析、科學(xué)模擬和生物信息學(xué)研究,用戶需要多大容量,立即就能配置到多大容量。
除了數(shù)據(jù)處理外,用戶還可以使用Karmasphere Analyst的基于服務(wù)的版本,Karmasphere Analyst是一種可視化工作區(qū),用于在亞馬遜彈性MapReduce上分析數(shù)據(jù)。用戶還可以提取結(jié)果文件,以便在數(shù)據(jù)庫或者微軟Excel或Tableau等工具中使用。
對于甲骨文公司,人們對它最熟悉的產(chǎn)品應(yīng)該就是Oracle數(shù)據(jù)庫,這也讓加顧問龔成為大數(shù)據(jù)時代,重要的參與者之一。racle數(shù)據(jù)庫,大數(shù)據(jù)機(jī)(Oracle Big Data Appliance)為許多企業(yè)提供了一種處理海量非結(jié)構(gòu)化數(shù)據(jù)的方法。在2011年10月初召開的Oracle OpenWorld 2011大會上甲骨文正式推出了Oracle大數(shù)據(jù)機(jī)。對于那些正在尋求以更高效的方法來采集、組織和分析海量非結(jié)構(gòu)化數(shù)據(jù)的企業(yè)而言,該產(chǎn)品具有很大的吸引力。
與甲骨文近期推出的其他一體化產(chǎn)品一樣,Oracle大數(shù)據(jù)機(jī)集成了硬件、存儲和軟件,包括Apache Hadoop軟件的開源代碼分發(fā)、新的甲骨文NoSQL數(shù)據(jù)庫和用于統(tǒng)計(jì)分析的R語言開源代碼分發(fā)。該產(chǎn)品被設(shè)計(jì)為能夠與甲骨文Database 11g、Oracle Exadata數(shù)據(jù)庫云服務(wù)器,以及針對商業(yè)智能應(yīng)用的新的Oracle Exalytics商業(yè)智能云服務(wù)器一起協(xié)同工作
谷歌一直是科技行業(yè)的領(lǐng)軍者,近年來幾乎在任何一項(xiàng)互聯(lián)網(wǎng)科技項(xiàng)目你都能看到谷歌的身影,大數(shù)據(jù)時代谷歌自然不會錯過。何況如果對其擁有的海量數(shù)據(jù)進(jìn)行深入挖掘,這對于提升谷歌搜索乃至所有谷歌服務(wù)的價(jià)值無可估量。
BigQuery是Google推出的一項(xiàng)Web服務(wù),用來在云端處理大數(shù)據(jù)。該服務(wù)讓開發(fā)者可以使用Google的架構(gòu)來運(yùn)行SQL語句對超級大的數(shù)據(jù)庫進(jìn)行操作。 BigQuery允許用戶上傳他們的超大量數(shù)據(jù)并通過其直接進(jìn)行交互式分析,從而不必投資建立自己的數(shù)據(jù)中心。Google曾表示BigQuery引擎可 以快速掃描高達(dá)70TB未經(jīng)壓縮處理的數(shù)據(jù),并且可馬上得到分析結(jié)果。大數(shù)據(jù)在云端模型具備很多優(yōu)勢,BigQuery服務(wù)無需組織提供或建立數(shù)據(jù)倉庫。而BigQuery在安全性和數(shù)據(jù)備份服務(wù)也相當(dāng)完善。
去年底該服務(wù)只向一小部分開發(fā)者開放,現(xiàn)在任何人都可以注冊這項(xiàng)服務(wù)。免費(fèi)賬號可以讓你每月訪問高達(dá)100GB的數(shù)據(jù),你也可以付費(fèi)使用額外查詢和存儲空間。
微軟研究部門從2006年起就一直致力于某種非常類似于Hadoop的項(xiàng)目,被稱為“Dryad”。今年年初,該計(jì)劃通過與SQL Server和Windows Azure云的集成實(shí)現(xiàn)了Dryad的產(chǎn)品化。雖然現(xiàn)在微軟還沒有更新,但看上去Dryad似乎將成為在SQL Server平臺上影響大數(shù)據(jù)愛好者的有力競爭者。
微軟進(jìn)入這一市場可謂“姍姍來遲”,而且在一定程度上說,數(shù)據(jù)倉庫分析和內(nèi)存分析計(jì)算市場落下了后腿。2011年初微軟發(fā)布的SQL Server R2 Parallel Data Warehouse(PDW,并行數(shù)據(jù)倉庫),PDW使用了大規(guī)模并行處理來支持高擴(kuò)展性,它可以幫助客戶擴(kuò)展部署數(shù)百TB級別數(shù)據(jù)的分析解決方案。微軟目前已經(jīng)開始提供Hadoop Connector for SQL Server Parallel Data Warehouse和Hadoop Connector for SQL Server社區(qū)技術(shù)預(yù)覽版本的連接器。 該連接器是雙向的,你可以在Hadoop和微軟數(shù)據(jù)庫服務(wù)器之間向前或者向后遷移數(shù)據(jù)。
微軟在去年推出了基于Azure云平臺的測試版Hadoop服務(wù),今年它承諾會推出與Windows兼容的基于Hadoop的大數(shù)據(jù)解決方案(Big Data Solution),這是微軟SQL Server 2012版本(首發(fā)日期還不知道)的一部分,現(xiàn)在也不清楚微軟是否會與其他硬件合作伙伴或者相關(guān)大數(shù)據(jù)設(shè)備廠商合作。
在國內(nèi),阿里巴巴應(yīng)該是大數(shù)據(jù)市場的中堅(jiān)力量,無論是對大數(shù)據(jù)的獲取,運(yùn)用,還是將大數(shù)據(jù)真正變?yōu)橐环N商品投放市場,阿里巴巴都是當(dāng)之無愧的大數(shù)據(jù)龍頭之一。
中培大數(shù)據(jù)專家鐘老師指出,總體而言,目前國內(nèi)的大多數(shù)企業(yè)還沒有真正從大數(shù)據(jù)中獲利。在數(shù)據(jù)庫、商業(yè)智能等領(lǐng)域基礎(chǔ)薄弱,IT尤其是軟件企業(yè)在布局大數(shù)據(jù)方面,已經(jīng)遠(yuǎn)遠(yuǎn)落后于國外先進(jìn)企業(yè)。對于哪些企業(yè)將來有可能成功進(jìn)入大數(shù)據(jù)領(lǐng)域,挑起大數(shù)據(jù)利用國產(chǎn)化的重?fù)?dān),不少人表示看好百度、阿里巴巴、騰訊等國內(nèi)互聯(lián)網(wǎng)巨頭,因?yàn)樗鼈儾粌H具有資金、技術(shù)等方面的實(shí)力,而且一直在與數(shù)據(jù)打交道方面具有先發(fā)優(yōu)勢,其本身業(yè)務(wù)的發(fā)展趨勢與大數(shù)據(jù)發(fā)展趨勢相符。
實(shí)際上,作為中國最大的電子商務(wù)公司阿里巴巴已經(jīng)在利用大數(shù)據(jù)技術(shù)提供具體服務(wù),主要內(nèi)容就是阿里信用貸款與淘寶數(shù)據(jù)魔方這兩部分業(yè)務(wù)。
以阿里信用貸款為例,阿里巴巴通過掌握的企業(yè)交易數(shù)據(jù),借助大數(shù)據(jù)技術(shù)自動分析判定是否給予企業(yè)貸款,全程不會出現(xiàn)人工干預(yù)。據(jù)透露,截至目前阿里巴巴已經(jīng)放貸300多億元,壞賬率約0.3%左右,大大低于商業(yè)銀行。
淘寶數(shù)據(jù)魔方則是淘寶平臺上的大數(shù)據(jù)應(yīng)用方案。通過這一服務(wù),商家可以了解淘寶平臺上的行業(yè)宏觀情況、自己品牌的市場狀況、消費(fèi)者行為情況等,并可以據(jù)此作出經(jīng)營決策。
除了互聯(lián)網(wǎng)企業(yè)以外,也許還有一家不可忽略的企業(yè)極有可能在大數(shù)據(jù)領(lǐng)域異軍突起,那就是華為。盡管華為公司在大數(shù)據(jù)領(lǐng)域一直保持低調(diào)狀態(tài),但仍有相當(dāng)一部分中國用戶期待華為產(chǎn)品和方案,這主要得益于多年來華為精心打造的“國產(chǎn)IT網(wǎng)絡(luò)通信產(chǎn)品、方案領(lǐng)導(dǎo)者”的品牌形象。
近年來,尤其是2012年以來,大數(shù)據(jù)漸漸地開始成為一個人們耳熟能詳?shù)男g(shù)語。有許多人認(rèn)為2012年應(yīng)該是大數(shù)據(jù)元年,更有甚者預(yù)測,下一個Facebook會誕生在大數(shù)據(jù)領(lǐng)域,不管這些看法有沒有道理,但至少我們可以看到大數(shù)據(jù)時代的帷幕已經(jīng)開啟。
想了解更多IT資訊,請?jiān)L問中培偉業(yè)官網(wǎng):中培偉業(yè)