强烈推荐!大数据领域的顶级开源工具大集合

随着大数据与预测分析的成熟,开源作为底层技术授权解决方案的最大贡献者的优势越来越明显。如今,从小型初创企业到行业巨头,各种规模的供应商都在使用开源来处理大数据和运行预测分析。借助开源与云计算技术,新兴公司甚至在很多方面都可以与大厂商抗衡。

以下是一些大数据方面的顶级开源工具,分为四个领域:数据存储、开发平台、开发工具和集成、分析和报告工具。

数据存储:

  • Apache Hadoop– Cloud Foundry(VMware), Hortonworks, Hadapt
  • NoSql 数据库 – MongoDB, Cassandra, Hbase
  • SQL 数据库 – MySql(Oracle), MariaDB, PostgreSQL, TokuDB

开发平台:

  • Apache Hadoop平台 – Impala(开源大数据分析引擎); Lingual(ANSI SQL);Pattern(analytics); Cascading(开源大数据应用程序开发框架)
  • Apache Lucene和 Solr平台
  • OpenStack(构建私有云和公有云)
  • Red Hat (搭载 Hadoop 服务器的标准 Linux 发行版)
  • REEF(微软的Hadoop开发者平台)
  • Storm(集成了各种排队系统和数据库系统)

开发工具和集成:

  • Apache Mahout(机器学习的编程语言)
  • Python 和 R(预测分析编程语言)

分析和报告工具:

  • Jaspersoft(报告和分析服务器)
  • Pentaho(数据集成和业务分析)
  • Splunk(IT分析平台)
  • Talend(大数据集成,数据管理和应用集成)

以上就是我们总结的大数据方面不错的工具,希望对您有所帮助。

原文发布于微信公众号 - CSDN技术头条(CSDN_Tech)

原文发表时间:2014-07-28

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏知晓程序

小程序搜索功能不容忽视,背后大有深意

1532
来自专栏张善友的专栏

深港澳大湾区第三次.NET技术交流会圆满成功

1776
来自专栏纯洁的微笑

学习Spring Boot 2.0 和大数据治理课程,送51CTO定制T恤!

1165
来自专栏BestSDK

Snips推出语音助手SDK,支持离线工作

Snips是一家法国初创公司,其提供的服务主要是为用户建立自定义语音助手。Snips并不使用亚马逊的Alexa语音服务或谷歌助手SDK,而是帮助用户建立自己的语...

5704
来自专栏程序员的知识天地

安卓手机为什么越用越卡, 程序员来告诉你!

其实就内存配置,手机硬件来讲,安卓手机是比我们现在的苹果手机IOS等等要高几个级别的。例如现在iPhone X的运存也是3GB,而我们现在的安卓旗舰已经是8G起...

1762
来自专栏我是攻城师

六个藉藉无名但迅速崛起的Apache大数据项目

3705
来自专栏hadoop学习笔记

hadoop框架结构的说明介绍

近年,随着互联网的发展特别是移动互联网的发展,数据的增长呈现出一种爆炸式的成长势头。单是谷歌的爬虫程序每天下载的网页超过1亿个(2000年数据,)数据的爆炸式增...

1010
来自专栏Cloud Native - 产品级敏捷

Cloud-Native 微服务的世界里, 你不能忽略的关键人物与解决方案

这张 Cloud-Native 微服务的图, 是来自世界十大架构师之一;Chris Richardson ; 的书中。

2357
来自专栏微信公众号:Java团长

Java程序员该如何突破瓶颈!

源码分析是一种临界知识,掌握了这种临界知识,能不变应万变,源码分析对于很多人来说很枯燥,生涩难懂。

943
来自专栏杨建荣的学习笔记

一半技术一半生活(r7笔记第51天)

都说工作生活要平衡,今天就写一篇技术+生活的文章。 目前有一套系统,最近会有新的业务上线,所以负载会大大提高,而且有的时候负载会有很大的抖动。有很多历史的原因,...

3539

扫码关注云+社区

领取腾讯云代金券