首页
学习
活动
专区
工具
TVP
发布

JavaEdge

关注公众号:JavaEdge,加入全国最大的后端交流群。
专栏作者
2430
文章
2490657
阅读量
176
订阅数
Spark Sreaming实战(一)-教程概述
1 实战目标 至今实战教程的访问量 至今从搜索引擎引流过来的实战教程的访问量 2 实战流程 📷 3 可视化显示 使用Spring Boot整合Echarts 阿里云DataV数据可视化框架 4 教程概要 📷 5 计划 整合Flume、Kafka、 Spark Streaming打造通用的流处理平台基础 Spark Streaming项目实战 数据处理结果可视化 拓展 6 预备知识 熟悉Linux基本命令 熟悉Scala、Python、 Java中的任何一门编程语言 有Hadoop和Spark基础 7 环境
JavaEdge
2022-11-30
4510
分布式系统面试连环炮
有一些同学,之前呢主要是做传统行业,外包项目,互联网公司,一直是那种小的公司,技术一直都搞的比较简单。共同的一个问题,就是都没怎么搞过分布式系统,现在互联网公司,一般都是做分布式的系统,大家都不是做底层的分布式系统,分布式存储系统,hadoop hdfs,分布式计算系统,hadoop mapreduce,spark,分布式流式计算系统,storm。
JavaEdge
2022-11-30
1850
macOS下 Hive 2.x 的安装与配置
Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的[SQL]查询功能,可以将SQL语句转换为MapReduce任务进行运行。其优点是学习成本低,可以通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapReduce应用,十分适合数据仓库的统计分析。
JavaEdge
2022-11-30
7980
文件服务器存储解决方案探索
文件服务器(file servers)是一种器件,它的功能就是向服务器提供文件。 它加强了存储器的功能,简化了网络数据的管理。 它一则改善了系统的性能,提高了数据的可用性,二则减少了管理的复杂程度,降低了运营费用。
JavaEdge
2022-11-30
2.2K0
Hive 到底有什么用?
MapReduce简化大数据编程难度,但对经常需大数据计算的人,如从事研究BI的数据分析师,他们通常使用SQL进行大数据分析和统计,MapReduce编程还是有门槛。且若每次统计和分析都开发相应MapReduce程序,成本确实太高。
JavaEdge
2022-11-28
1.5K0
关注专栏作者,随时接收最新技术干货
JavaEdge
华为软件开发工程师
HDFS伪分布式环境搭建
HDFS是主/从式的架构。一个HDFS集群会有一个NameNode(简称NN),也就是命名节点,该节点作为主服务器存在(master server).
JavaEdge
2021-12-07
3220
HDFS伪分布式环境搭建
HDFS是主/从式的架构。一个HDFS集群会有一个NameNode(简称NN),也就是命名节点,该节点作为主服务器存在(master server).
JavaEdge
2021-10-18
5580
史上最快! 10小时大数据入门实战(六)- Hadoop 项目实战1 用户行为日志概述离线数据处理架构3 项目需求4 UserAgent 类实现5
1 用户行为日志概述 离线数据处理架构 3 项目需求 4 UserAgent 类实现 使用工具框架 5
JavaEdge
2018-07-05
4960
史上最快! 10小时大数据入门实战(八)- Hadoop 集成 Spring 的使用1 Spring Hadoop 开发环境搭建及访问 HDFS 文件系统
目录 https://spring.io/projects/spring-hadoop 1 Spring Hadoop 开发环境搭建及访问 HDFS 文件系统 完成配置文件 生成目录成功 编写属性配置文件 直接拷贝官网头文件 运行成功
JavaEdge
2018-07-04
4680
史上最快! 10小时大数据入门实战(十)-Hadoop3.x新特性Hadoop3.x概述
Hadoop3.x概述
JavaEdge
2018-07-04
3290
大数据入门(二)-初识Hadoop
将文件切分成指定大小的数据块,并以多副本的存储在多个机器上。数据切分、多副本、容错等操作对用户是透明的。
JavaEdge
2018-06-19
4870
入门 spark
CentOS项目组织结构内容 image.png 启动 Hadoop
JavaEdge
2018-05-16
4940
没有更多了
社区活动
RAG七天入门训练营
鹅厂大牛手把手带你上手实战
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档