首页
学习
活动
专区
工具
TVP
发布

大数据开发

专栏作者
212
文章
209257
阅读量
25
订阅数
大数据开发:Hadoop技术原理简介
在大数据技术体系当中,Hadoop技术框架无疑是重点当中的重点,目前主流的大数据开发任务,都是基于Hadoop来进行的。对于很多初入门或者想要学习大数据的同学们,对于大数据Hadoop原理想必是比较好奇的,今天我们就主要为大家分享大数据Hadoop技术体系详解。
成都加米谷大数据
2021-07-23
9790
大数据分析:基于Hadoop的数据分析平台
互联网的发展,带来了各种数据的爆发式增长,所以接入互联网的相关操作行为,都化为虚拟的数据被记录了下来。大数据时代的带来,一个明显的变化就是全样本数据分析,面对TB/PB级及以上的数据规模,Hadoop始终占据优势。今天的大数据学习分享,我们来聊聊基于Hadoop的数据分析平台。
成都加米谷大数据
2021-06-21
1.8K0
大数据计算引擎对比:Hadoop vs Spark vs Flink
Hadoop学习可以说是大数据学习当中的重难点,很多同学都在Hadoop的学习当中存在各种各样的疑问。很多同学都问过这样一个问题,针对于大数据处理,有Hadoop、Spark、Flink等,这三者有何不同,下面就为大家分享Hadoop、Spark和Flink之间的比较。
成都加米谷大数据
2021-06-15
2.1K0
大数据开发:Kafka入门须知的几组概念
Kafka在目前的大数据技术生态体系当中,是尤其得到重用的,尤其是针对于实时消息流处理,Kafka的性能是值得称赞的。Kafka学习,也是大数据学习当中的重要一课。今天的大数据开发学习分享,我们就主要来讲讲Kafka入门须知的几组核心概念。
成都加米谷大数据
2021-06-11
2460
大数据开发:Spark core核心讲解
关于Spark框架在大数据生态当中的地位,相信不必多说大家也明白,作为大数据公认的第二代计算引擎,Spark至今仍然占据重要的市场份额,只要提到大数据,那么Spark一定是如影随形的。今天的大数据开发学习分享,我们就主要来讲讲Spark框架核心Spark Core。
成都加米谷大数据
2021-06-10
1.2K0
大数据开发:离线数仓与实时数仓
进入大数据时代,大数据存储的解决方案,往往涉及到数据仓库的选型策略。从传统时期的数据仓库,到大数据环境下的数据仓库,其核心的技术架构是在随着最新技术趋势而变化的。今天的大数据开发学习分享,我们就来讲讲,大数据环境下的数据仓库。
成都加米谷大数据
2021-06-09
4K0
大数据入门到进阶:Hadoop学习路线规划
在大数据处理的各项技术当中,Hadoop的地位无疑是得到充分肯定的,做大数据,避不开Hadoop,学大数据,当然也必学Hadoop。而对于很多零基础学习者,学Hadoop不知道该从何着手,那么今天的大数据入门到及进阶,我们来分享一下Hadoop学习路线规划。
成都加米谷大数据
2021-06-08
8590
大数据开发:Hadoop、Spark、Flink三大框架对比
目前来说,大数据领域最为活跃的三个计算框架,当属Hadoop、Spark以及Flink这三者。三个框架在不同的大数据处理场景当中,表现各有优势,因此也常常被拿来做比较。今天我们也来做个Hadoop对比,看看Hadoop、Spark、Flink三大框架,各自的优势劣势如何。
成都加米谷大数据
2021-06-07
2.3K0
大数据开发:Flume分布式日志系统简介
在企业级的平台系统当中,对于日志的收集和分析,一方面对于运维优化有着相应的作用,另一方面日志数据,作为大数据的一种形式,也蕴含着诸多价值。今天的大数据开发学习分享,我们就主要来讲讲,Flume分布式日志系统。
成都加米谷大数据
2021-06-04
8750
大数据开发:数仓建模常见数据模型
在数据仓库搭建的过程当中,根据需求合理地选择数据模型,是非常关键的一个环节。对于数仓建模,很多人说不就是建表吗,哪有那么复杂,事实上,这是非常错误的思想。今天的大数据开发分享,我们来聊聊数仓建模常见的几种数据模型。
成都加米谷大数据
2021-01-27
3K0
大数据开发:数据仓库建模方法与模型
大数据平台当中的数据仓库,往往需要通过建模来更好地对数据进行存储和管理,这其中涉及到性能、成本、效率、质量等多方面的综合考量,对于工程师来说,也需要细细规划。今天的大数据开发分享,我们主要来讲讲数据仓库建模方法与模型。
成都加米谷大数据
2021-01-26
9900
大数据开发:OLAP开源数据分析引擎简介
针对于不断新增的海量数据资源,企业需要通过及时地数据分析处理,才能从中挖掘出价值线索,反哺业务,实现数据驱动业务发展。而企业级的数据分析场景,多是采用OLAP数据分析引擎。今天的大数据开发分享,我们就主要来讲讲主流的几个OLAP开源数据分析引擎。
成都加米谷大数据
2021-01-14
1.2K0
大数据开发:分布式文件存储系统简介
在分布存储式存储技术体系当中,分布式文件存储是其中的分类之一,也是大数据架构当中常常用到的。得益于Hadoop的高人气,Hadoop原生的HDFS分布式文件系统,也广泛为人所知。但是分布式文件存储系统,并非只有HDFS。今天的大数据开发分享,我们就主要来讲讲常见的分布式文件存储系统。
成都加米谷大数据
2021-01-13
1.4K0
大数据开发:Kafka工作原理入门
Kafka在大数据技术生态当中,以作为消息系统而闻名,面对活跃的流式数据,提供高吞吐量的服务,在实时大数据处理场景下,可以说是一大利器,国内外大厂都有应用。今天的大数据开发分享,我们就主要来讲讲Kafka框架的工作原理。
成都加米谷大数据
2021-01-08
6900
大数据开发:基于Hadoop的数仓设计
企业级的大数据平台,Hadoop至今仍然占据重要的地位,而基于Hadoop去进行数据平台的架构设计,是非常关键且重要的一步,在实际工作当中,往往需要有经验的开发工程师或者架构师去完成。今天的大数据开发分享,我们就来讲讲,基于Hadoop的数仓设计。
成都加米谷大数据
2021-01-07
8610
Java大数据基础:Mybatis和Hibernate对比分析
在Java企业级平台开发任务当中,持久层框架的选择,Mybatis和Hibernate都占据一定的市场。从大趋势来说,传统企业偏爱Hibernate,而互联网更偏爱Mybatis。今天的大数据基础分享,我们就来对Mybatis和Hibernate两个框架做个简单的对比分析。
成都加米谷大数据
2020-12-22
7680
大数据学习:Mybatis基础入门
对于大数据技术开发者而言,Mybatis作为一个优秀的持久层框架,是需要具备的一项重要基础。涉及到数据存储、数据查询,Mybatis内部封装好JDBC,可以大大提升开发效率。今天的大数据学习分享,我们就来讲讲Mybatis基础入门。
成都加米谷大数据
2020-12-18
5690
Java大数据:数据库开发从入门到精通
在Java大数据开发任务当中,数据存储是非常关键的一环,涉及到分布式文件系统、分布式数据库,数据库是后端系统当中支持数据存储的重要组件。今天我们就来聊聊Java大数据,数据库开发从入门到精通,应该如何去一步步掌握。
成都加米谷大数据
2020-11-10
9210
学大数据需要学哪些内容?大数据主流技术栈简介
被广泛关注的大数据,这几年在国内的发展,可以说是进入了比较平稳的一个时期,基本上企业对于技术开发人员的要求,都开始与大数据接轨。那么学大数据需要学哪些内容,今天我们从大数据主流技术栈开始,为大家做个简单介绍。
成都加米谷大数据
2020-11-03
1.1K0
大数据平台搭建:大数据基础架构选型
大数据越来越受到重视的今天,企业级数据平台搭建,也成为更加普遍的需求。而要搭建起符合自身需求以及提供稳定支持的数据平台系统,基础架构的选型是非常重要的。今天我们就来聊聊大数据基础架构选型。
成都加米谷大数据
2020-10-21
1.1K0
点击加载更多
社区活动
RAG七天入门训练营
鹅厂大牛手把手带你上手实战
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档