Big data-related open source application

我有興趣的是1.4.5.6.  6 之前寫過. 遊戲業很早已有用Hadoop, 關鍵還是在應用的規模, 技術包山包海,我也只能挑重點看, 且戰且走,  Java Scirpt npm 裡有20幾萬個modules,  根本不可能線性學習, 必須博觀而約取.

1. Hadoop
OS:Windows、Linux 和 OS X
Reference : http://hadoop.apache.org

2.Hypertable

Hypertable 在互联网公司当中非常流行,它由谷歌开发,用来提高数据库的可扩展性。
与 Hadoop 兼容,提供商业支持和培训
OS:Linux 和 OS X
Reference:http://www.hypertable.com

3.Mesos

Apache Mesos 是一种资源抽象工具,有了它,企业就可以鼗整个数据中心当成一个资源池,它在又在运行 Hadoop、Spark 及类似应用程序的公司当中很流行
OS:Linux 和 OS X
Reference:http://mesos.apache.org

4.Presto

Presto 由 Facebook 开发,自称是“一款开源分布式 SQL 查询引擎,用于对大大小小(从 GB 级到 PB 级)的数据源运行交互式分析查询。”Facebook 表示,它将 Presto 用于对 300PB 大小的数据仓库执行查询

OS:Linux
Reference:https://prestodb.io

5. Solr

这种“快若闪电”的企业搜索平台声称高度可靠、扩展和容错

OS:与操作系统无关
Reference:http://Lucene.apache.org/solr/

6.Spark

Apache Spark 声称,“它在内存中运行程序的速度比 Hadoop MapReduce 最多快 100 倍,在磁盘上快 10 倍。

OS:Windows、Linux 和 OS X
Reference:http://spark.apache.org

7.Storm

Apache Storm 用来处理实时数据
OS:Linux
Reference:https://storm.apache.org

Advertisements
發表留言

發表迴響

在下方填入你的資料或按右方圖示以社群網站登入:

WordPress.com Logo

您的留言將使用 WordPress.com 帳號。 登出 / 變更 )

Twitter picture

您的留言將使用 Twitter 帳號。 登出 / 變更 )

Facebook照片

您的留言將使用 Facebook 帳號。 登出 / 變更 )

Google+ photo

您的留言將使用 Google+ 帳號。 登出 / 變更 )

連結到 %s

%d 位部落客按了讚: