想搞大数据??你这样是自寻死路!!

近日来,家住北京市朝阳区的程序员诸葛建国非常郁闷。因为他的公司审时度势,附庸风雅牵强附会的上了一套大数据系统,可谓麻雀虽小五脏俱全,包括了:

  1. 分布式文件系统HDFS
  2. 分布式数据库hbase,mongodb,kudu
  3. 分布式内存文件系统alluxio
  4. 用于多维分析的druid
  5. 实时流计算系统storm

正所谓,覆巢之下,安有完卵。这些产品虽然好用,但是却给诸葛建国带来了很多烦恼。为了安装软件,他要重复重复再重复的登录一台又一台的服务器;为了修改某个参数,他又要重复重复再重复的登录一台又一台的服务器;为了监控服务的运行状态,他要不择手段的查看服务的端口或者进程;为了启动某个挂掉的服务,他要记住那些诘屈聱牙晦涩难懂的linux命令。更让他细思极恐的是,如果某个底层服务中节点发生了增减或者迁移,所有依赖这个服务的服务都要修改配置并重新启动。所以这一段时间以来,诸葛建国殚精竭虑,夙夜忧叹,觉得自己搞大数据真是自寻死路,恨不得举身赴清池,自挂东南枝。

虽然他掌握了同时操作多台服务器的技巧,然而人心不足蛇吞象,诸葛建国欲壑难填得陇望蜀,他迫切的希望有产品能釜底抽薪,一劳永逸的解决他的问题。

他希望有一款产品能一站式管理大数据平台

管理多种服务

能全程图形化安装

图形化安装

能自动处理好服务中错综复杂的关系

自定义角色

能一键修改服务参数

修改参数

能一键执行他永远记不住的linux命令

一键执行命令

还好他的同事夏侯富贵给了诸葛建国一个提示。既然诸葛建国已经使用了cloudera来管理大数据组件,完全可以再次扩展cloudera manager,让它管理更多的分布式系统。

项目地址是https://github.com/kabike/jdt-csd

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏腾讯Bugly的专栏

Android 开发者必知必会的权限管理知识

导语 本文主要讲解了Android 权限管理方面几个点: Android 权限背景知识; 权限检查及权限兼容; 跳转到app管理权限页面 一、Android 权...

3916
来自专栏非著名程序员

看大神如何玩转微信小程序日历插件?

1333
来自专栏Golang语言社区

Goroutine调度器

在了解Go的运行时的scheduler之前,需要先了解为什么需要它,因为我们可能会想,OS内核不是已经有一个线程scheduler了嘛?

822
来自专栏徐祖亮的专栏

HTML5 直播协议之 WebSocket 和 MSE

今天我要向大家介绍一下 WebSocket 与 MSE 相关的内容, 并在最后通过一个实际的例子, 来展示其具体的用法.。

1K11
来自专栏iKcamp

iKcamp|基于Koa2搭建Node.js实战(含视频)☞ 处理静态资源

视频地址:https://www.cctalk.com/v/15114923882788 处理静态资源 无非花开花落,静静。 指定静态资源目录 这里我们使用第...

4387
来自专栏FreeBuf

雪人行动:利用IE10 0day漏洞的APT攻击剑指美国军方情报

二月十一日,FireEye捕获了一次基于0day漏洞的攻击,这次攻击针对美国的一个退伍兵网站(bfw.org)。 我们确信这次攻击是针对美国高层军方人员的一次...

1908
来自专栏北京马哥教育

你的Ubuntu还可以这么美

先上两张桌面和开发环境见下图 ? ? 系统优化 更新源 更新前先设置源为aliyun的,国内访问速度快。 ? 1 2 sudo apt-get update s...

3955
来自专栏hotqin888的专栏

电子规范管理系统(2)

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/hotqin888/article/det...

901
来自专栏Youngxj

多合一收款二维码原理以及源码

2735
来自专栏知晓程序

腾讯出品!这个免费网盘小程序,让你快速「找私货」| 亲儿子 #17

在 2017 年 1 月 16 日前,腾讯微云为每个帐号分配了非常大的网盘容量,很多人都用它来当照片、文件等的「仓库」。

930

扫码关注云+社区