程序员小姐姐的烦恼_快速上手大数据ETL神器Kettle(xls导入mysql)

一文快速搞懂系列讲究快速入门掌握一个新的大数据组件,帮助新手了解大数据技术,以下是系列文章:

[新星计划]导师嫌我Sql写的太low？要求我重写还加了三个需求？——二战Spark电影评分数据分析

这是我的上篇博文，当时仅是做了一个实现案例（demo级别 ），没想到居然让我押中了题，还让我稳稳的及格了（这次测试试卷难度极大，考60分都能在班上排进前10） ...

[新星计划]一文快速了解Elastic Search 开源搜索引擎（技术选型+启动命令）

Elasticsearch是一个基于Apache Lucene™的开源搜索引擎。无论在开源还是专有领域， Lucene可以被认为是迄今为止最先进、性能最好的、...

[新星计划]Spark综合练习——电影评分数据分析

老师：给定需求统计评分次数>200的电影平均分Top10，并写入Mysql数据库中

大数据生态思维导图____2021最新最全Spark生态圈思维导图!(待更新)

好了，本篇主要为大家带来的就是菜鸡博主为大家贡献的Spark的思维导图，看完了是不是有种想要关注博主的冲动呢(￣▽￣)*受益的朋友或对大数据技术感兴趣的伙伴记得...

大数据系列思考题----[持续更新]

个人理解: hdfs启动流程 hdfs是Hadoop Distribute File System 的简称,即分布式文件系统,用于存储海量数据. hdfs...

知行教育项目介绍

开发环境： jdk：Jdk1.8 Scala：2.11.8 CDH6.2.1： zookeeper-3.4.5-cdh6.2.1、hadoop-3.0.0...

JDK.TomCat.Mysql安装部署

Java面试题_String 相加

答： 第一条语句打印的结果为false，（1分） 第二条语句打印的结果为true，（1分） （1分）javac编译可以对字符串常量直接相加的表达式进行优化，...

疯狂Java讲义_五子棋代码

04.Scala：高阶函数、隐式转换

scala 混合了面向对象和函数式的特性，在函数式编程语言中，函数是“头等公民”，它和Int、String、Class等其他类型处于同等的地位，可以像其他类型的...

03.Scala：样例类、模式匹配、Option、偏函数、泛型

样例类是一种特殊类，它可以用来快速定义一个用于保存数据的类（类似于Java POJO类），在后续要学习并发编程和spark、flink这些框架也都会经常使用它。

02.Scala：面向对象、Object、抽象类、内部类、特质Trait

scala是支持面向对象的，也有类和对象的概念。我们依然可以基于scala语言来开发面向对象的应用程序。

01.Scala：开发环境搭建、变量、判断、循环、函数、集合

早期，scala刚出现的时候，并没有怎么引起重视，随着Kafka和Spark这样基于scala的大数据框架的兴起，scala逐步进入大数据开发者的眼帘。scal...

2021-04-06

未被 external 修饰的是内部表（managed table），被 external 修饰的为外部表 （external table）

大数据面试题百日更新_Hadoop专题_Yarn专题(Day11)

YARN 的基本设计思想是将 MapReduce V1 中的 JobTracker 拆分为两个独立的服务：ResourceManager 和 Applicati...

Kafka可视化工具_Kafka-Eagle

3.2.2 安装Kafka-Eagle 1.安装JDK，并配置好JAVA_HOME。 2.将kafka_eagle上传，并解压到 /export/serve...

大数据面试题百日更新_Hadoop专题(Day10)

大数据面试题百日更新_Hadoop专题(Day09)

Map的输出到内存 Map将数据传入环形缓冲区，默认100MB 可修改，环形缓冲区中的数据到达一定的阈值时，默认0.8 可修改，进行溢写生成好多临时文件，多个...

分布式实时消息队列Kafka（一）

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-RaU9EfHR-1617011887969)(20210329_分布式实时消息...