信息化漫谈-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

信息化漫谈

专栏成员

152

文章

310704

阅读量

35

订阅数

图文简述flume的巨大用途

缓存 kafka 大数据 ftp hbase

谈到大数据，我们很常会想到hdfs、mapreduce、hbase、spark、hive等高大上的大数据工具或底层组件，但我们不能忘了饮水思源，我们的大数据的数据从哪里来呢？有来自于mysql、oracle等关系型的结构化数据库，也有来自html、log等半结构数据，但问题来了！log类的文本如何采集、如何上传到hdfs或kafka中？大家可能会想到采用ftp等手工传输方式，但实际是根据不可行，ftp如何保证数据保存至hdfs、kafka中。好，今天，我来们讲一种工具，flume，帮助您自动采集前端数据，并自动帮您保存至您想保存至的数据目的地。

希望的田野

2019-09-24

6360

云主机一般可以用来做什么

云服务器私有网络 ftp

最近，经常有市场一线同事问：“我们向客户销售了云主机后，客户究竟可以用来做什么”？一般的回答是网站，除了以后，好像脑袋里一片空白，核心是因为我们对客户了解不够或者自己的IT专业技能缺乏。我们今天简单聊一聊云主机的客户场景化用途。

希望的田野

2019-09-24

7K0

用了天翼云，为什么FTP无法使用了？

ftp 云服务器 ssh 网络安全

最近因为公司举行云生态大会，节奏非常紧急，公众号断了几天，不管工作再忙，学习不能断，今天继续补上。

希望的田野

2019-09-24

2.5K0

没有更多了

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态