Hadoop亂象

雅虎開發者Doug Cutting六年前創建了一個用于管理，存儲和分析大量數據的平臺，用他兒子的玩具大象命名，并把它交給阿帕奇軟件基金會。鑒于圍繞Hadoop建立的 整個行業的迅速，這會使某些人覺得非常驚訝，那就是阿帕奇軟件基金會最近才推出了Apache Hadoop 1.0——被認為是足夠穩定而成為“企業就緒”的第一個版本。

但這并沒有延緩創業和建立供應商加入Hadoop的隊伍。隨著大數據這一熱點，解決方案提供商需要跟上行業中的關鍵角色。以下就是圍繞Hadoop的11個創新業務。

1. Cloudera

Cloudera，成立于2008年，也許是最成立的年輕的致力于 Hadoop的公司。 帕洛阿爾托，加州公司提供了一個Apache Hadoop軟件的商業發行版叫做Cloudera Enterprise，它包括支持，咨詢服務，培訓和一個稱為Cloudera Management Suite的軟件。

一個例子說明了Cloudera的技術如何尋求廣泛使用，Oracle在一月表示它已經將Cloudera的Hadoop發行版和Cloudera Manager整合到Oracle Big Data Appliance中。

Cloudera在2009年聘請Doug Cutting擔任“架構師”時有了炫耀的資本。Cutting是原阿帕奇軟件基金會Hadoop項目的創始人并且是現任董事。

2. Datameer

業務產生和存儲的數據量每三年翻一番。加之數據是結構化和非結構化信息的混合體這一事實，往往分散在不同的IT系統，對于有商業智能項目的任何公司都是一個嚴重的挑戰。

Datameer分析解決方案始于Datameer(2009年于加州圣馬刁成立)，用一個電子表格界面與Apache Hadoop結合，幫助企業用戶對非常大的數據集進行分析——多種來源的結構化和非結構化數據——無需編程。

雖然分析大型數據一直是一個大的公司難題，但Datameer作出令人信服的觀點：中小企業現在面臨著類似的挑戰，成本低的商品存儲使收集大量的數據在經濟上可行的。

3. Hadapt

Hadapt稱其Hadapt自適應分析平臺結合了Hadoop和關系數據庫管理軟件的優點成為一個單獨的數據平臺。其成果就是一個高性能分析系統，對結構化和非結構化數據都能很好處理。

公 司成立于2010年七月，在十月的第一輪融資公司募集950萬美元并在十一月推出了Hadapt 1.0，為潛在客戶試用。依照公司稱，該軟件對Hadoop和其蜂巢數據倉儲技術做了“巨大的性能改進”。軟件有云和企業版，不久還有一個免費的社區版。 它們可運行在所有主流的Hadoop發行版上，包括Amazon EMR, Apache, Cloudera, EMC, Hortonworks, IBM和MapR。

4. Hortonworks

2011年七月推出的Hortonworks是雅虎Hadoop工程團隊的一個分拆，提供其自有的 Hadoop版本稱為Hortonworks數據平臺。相對年輕的公司，阿帕奇項目的貢獻者，這都被廣泛視為Cloudera的主要競爭對手。一月公司推 出Hortonworks數據平臺第二版，通過下一代MapReduce架構提供更好的性能和可用性，用Hadoop分布式文件系統(HDFS)提高可擴 展性，并且由HDFS名字節點的高可用性提高了數據完整性。

對了，加利福尼亞州，桑尼維爾，公司的名字來自于蘇斯博士的書《霍頓與無名氏》，為了符合Hadoop大象主題。

5. HStreaming

雖然Hadoop事實上也許是處理大量數據的引擎，但它主要用于批處理。實時分析數據把Hadoop的價值提升到一個全新的水平。這就是HStreaming的由來。

成立于2010年，位于芝加哥的HStreaming是一個建立在Hadoop上的可擴展的，可持續的數據分析系統。它可以分析，可視化并處理大量連續數據——比如一個金融交易系統——實時。

6. Hyve Solutions

雖然大多數Hadoop相關的公司都是獨立創業，但Hyve Solutions是聯強IT經銷商的一個部門。成立于去年，Hyve Solutions提供了成套的配置，稱為Big D Series 8，公司表示它能讓開發基于Hadoop的大數據分析系統在數天完成而不是數月。

Hyve Solutions平臺包含了Zettaset的基于Hadoop的容錯系統，Arista Networks的云網絡設備，Solarflare Communications的網絡接口硬件和軟件，還有Fusion-io的閃存數據存儲技術。

7. Karmasphere

位于加州庫比提諾的Karmasphere稱自己為“大數據智能”引領者，其軟件工具可從Hadoop提取和分析數據。

Karmasphere Analyst為信息分析員提供對Hadoop中結構化和非結構化數據的訪問，使他們能夠進行點對點查詢，對結果可視化并可操作。Karmasphere Studio提供了用于開發運行于Hadoop自定義算法的工具。Karmasphere Analytics Engine(分析引擎)是公司軟件的基礎。

Karmasphere，2010年三月推出，已經于幾乎Hadoop的所有供應商和組織合作 過，包括阿帕奇軟件基金會，IBM，Cloudera，亞馬遜云計算服務(AWS)和Hortonworks。公司在二月推出Karmasphere Analyst 1.8，帶有新的并行查詢功能。

8. MapR Technologies

MapR Technologies提供了一個Apache Hadoop的發行版，將之與Cloudera和HortonWorks還有其他公司競爭。公司成立于2009年年六月，有一些關鍵優勢，包括與EMC有 戰略聯盟，并且在八月的第二輪融資募集2000萬美元資金。

MapR位于加州圣若澤，十二月的MapR Hadoop發行版1.2有新的虛擬機功能，高性能的本地訪問庫，Mac和Windows客戶端，和利用MapReduce 2.0技術的能力。

9. Mortar Data

Mortar Data宣稱自己是“Hadoop，沒有復雜性”。總部設在紐約，該公司為那些“沒有充分利用數據”的客戶提供基于云的Hadoop服務，并表示它可以請客戶來且運行不到一小時。

Mortar Data，成立于2010年，為客戶的大數據項目建立私有的，按需求的Hadoop集群，并使用Pig和Python建立“為執行優化過的工作”。亞馬遜 的S3云存儲用于數據讀寫。客戶只在運行他們任務時支付，沒有與之相關的基礎設施和雇傭和培訓工程師的費用。

10. Tidemark Systems

Tidemark Systems，位于加州紅木城，開發其稱為第一個企業級性能管理平臺和為云計算建立的應用。因為Tidemark EPM應用系統是建立在Cloudera的Hadoop發行版基礎上，大數據隨之而來，它可以從海量復雜數據中進行提取。

公司成立于2010年，Tidemark主要面向制造業，消費電子產品，零售業和高科技公司上的應用。一月公司從風險投資家和仁科創始人戴夫杜菲爾德獲得240萬美元的第三輪融資。

11. Zettaset

最早與2009年以GOTO Metrics的名字推出，Zettaset已經開發出建立在Hadoop和其他用于聚集和大量數據分析的開源技術上的一個容錯系統。依照公司所稱，該技術有助于掌控整個企業Hadoop系統的健康度，安全性和管理。

Zettaset位于加州山景城，在十二月推出其第四版，帶有新的服務管理特性和一個獨特的可視化用戶界面。公司在七月(獲得三百萬美元融資后)根據zettabyte更名——等于一百萬petabyte或一億terabyte的數據。

文章來源：http://cloud.doit.com.cn/article/2012/0416/9007432.shtml