腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

黑泽君的专栏

专栏作者

708

文章

1685507

阅读量

102

订阅数

大数据技术之_32_大数据面试题_01_Hive 基本面试 + Hive 数据分析面试 + Flume + Kafka 面试

一、Hive 基本面试1、什么是 metastore2、metastore 安装方式有什么区别3、什么是 Managed Table 跟 External Table？4、什么时候使用 Managed Table 跟 External Table？5、hive 有哪些复合数据类型？6、hive 分区有什么好处？7、hive 分区跟分桶的区别8、hive 如何动态分区9、map join 优化手段10、如何创建 bucket 表？11、hive 有哪些 file formats12、hive 最优的 file formats 是什么？13、hive 传参14、order by 和 sort by 的区别15、hive 跟 hbase 的区别二、Hive 数据分析面试1、分组 TopN，选出今年每个学校、每个年级、分数前三的科目2、今年，北航，每个班级，每科的分数，及分数上下浮动 2 分的总和3、where 与 having：今年，清华 1 年级，总成绩大于 200 分的学生以及学生数三、Flume + Kafka 面试1、flume 如何保证数据的可靠性？2、kafka 数据丢失问题，及如何保证？3、kafka 工作流程原理4、kafka 保证消息顺序5、zero copy 原理及如何使用？6、spark Join 常见分类以及基本实现机制

2019-06-19

1.8K0

大数据技术之_09_Hive学习_复习与总结

hive 存储编程算法

在讲解中我们需要贯串一个例子，所以需要设计一个情景，对应还要有一个表结构和填充数据。如下：有 3 个字段，分别为 personId 标识某一个人，company 标识一家公司名称，money 标识该公司每年盈利收入（单位：万元人民币）

2019-03-21

7680

【MySQL 】MySQL 中的 int(11) 到底代表什么意思？

存储云数据库 SQL Server 数据库 sql

在工作中经常要与 mysql 打交道，但是对 mysql 的各个字段类型一直都是一知半解，因此写本文总结记录一番。

2019-03-20

2.9K0

大数据技术之_09_Flume学习_Flume概述+Flume快速入门+Flume企业开发案例+Flume监控之Ganglia+Flume高级之自定义MySQLSource+Flume企业真实面试题（

混合云存储存储

Flume(水槽) 是 Cloudera 提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。在2009年Flume被捐赠了apache软件基金会，为hadoop相关组件之一。尤其近几年随着flume的不断被完善以及升级版本的逐一推出，特别是flume-ng;，同时flume内部的各种组件不断丰富，用户在开发的过程中使用的便利性得到很大的改善，现已成为apache top项目之一。

2019-03-15

1.2K0

day65_Lucene学习笔记

jar 搜索引擎全文检索 apache 存储

注意由于语言不同分析器的切分规则也不同，本例子使用StandardAnalyzer，它可以对用英文进行分词。如下是org.apache.lucene.analysis.standard.standardAnalyzer的部分源码：

2018-12-12

8710

day62_Mybatis学习笔记_02

mybatis 缓存 spring 存储数据库

（1）创建扩展PO类一般User.java类要和数据表表字段一致，最好不要在这里面添加其他字段，今天学习mybatis的逆向工程时，会根据表结构，生成po类，如果在po类中扩展字段，此时会被覆盖掉。所以针对要扩展的po类，我们需要创建一个扩展类，来继承它。

2018-11-09

8710

java中，方法参数是基本类型和引用类型的区别

当参数是基本类型时，在调用方法时将值传递到方法中，运行方法，运行结束方法退出，对原本main中定义的变量没有任何操作（方法中没有return）。即：此时只跟栈有关系，方法执行完之后（方法中没有return），会弹栈。

2018-11-07

1.4K0

对象数组的内存图解

对象数组的概述和案例(掌握) (1)对象数组的概述　　　　数组既可以存储基本数据类型，也可以存储引用类型。它存储引用类型的时候的数组就叫对象数组。 (2)对象数组的案例　　　　我有5个学生，请把这个5个学生的信息存储到数组中，并遍历学生数组，获取得到每一个学生的信息。

2018-10-12

1.7K0

Java中，局部内部类

局部内部类 A:局部内部类可以直接访问外部类的成员。 B:局部内部类在局部位置可以创建内部类对象，通过内部类对象调用内部类方法，来使用局部内部类功能。 C:局部内部类访问局部变量，局部变量必须加final修饰。为什么呢？　　　　因为局部变量会随着方法的调用完毕而消失，这个时候，局部对象并没有立马从堆内存中消失，　　　　局部对象还要使用这个局部变量。为了让数据还能继续被使用，就用fianl修饰局部变量，　　　　这样，在堆内存里面存储的其实是一个常量值。通过反编译工具可以看一下。　　　　通过反编译工具我们看到了，加入final后，堆内存直接存储的是值，而不是局部变量名。

2018-10-12

7300

Java主函数解释、java/javac命令解释、classpath解释

java jdk 存储

任何一段程序必须要有一个执行的起始点，有一个入口，这个入口就是主函数，本质上这个主函数就被虚拟机所调用。即：主函数是一个入口、它被虚拟机所调用、有了主函数就能保证一个类的独立运行，一个类里有且只有一个主函数。

2018-10-11

1.5K0

51单片机数据传送指令

单片机存储

51单片机数据传送指令 51单片机数据传送指令　　数据传送指令共有29条，数据传送指令一般的操作是把源操作数传送到目的操作数，指令执行完成后，源操作数不变，目的操作数等于源操作数。　　如果要求在进行数据传送时，目的操作数不丢失，则不能用直接传送指令，而采用交换型的数据传送指令，数据传送指令不影响标志C,AC和OV，但可能会对奇偶标志P有影响。以累加器A为目的操作数类指令（4条）　　这4条指令的作用是把源操作数指向的内容送到累加器A。有直接、立即数、寄存器和寄存器间接寻址方式： MOV A,data

2018-10-11

1.1K0

静态变量和成员变量的区别 && 成员变量和局部变量的区别

=============================================================================

2018-10-11

1.4K0

Java中方法重写的两个面试题

java ide 存储

　　方法重写：　　　　在子类中，出现和父类中一模一样的方法声明的现象。(包含方法名、参数列表和返回值类型都一样) 　　方法重载：　　　　同一个类中，出现的方法名相同，参数列表不同，与返回值类型无关的现象。

2018-10-11

6120

ANSI是什么？

ANSI是一种字符代码，为使计算机支持更多语言，通常使用 0x00~0x7f（即0000 0000~0111 1111）范围的1 个字节来表示1个英文字符。超出此范围的使用0x80~0xFFFF（即 1000 0000~1111 1111 1111 1111）来编码，即扩展的ASCII编码。

2018-10-11

1.7K0

UltraEdit(UE)如何设置去掉.bak备份文件？

使用UltraEdit(UE)打开文件，修改保存后，会产生.bak备份文件，感觉很不爽，如何去掉呢？

2018-10-11

2.3K0

Java语言中：float数据类型在内存中是怎么存储的？

java 存储编程算法

============================================================================= java语言中，float类型数字在计算机中用4个字节来存储。遵循IEEE-754格式标准：即：一个浮点数有2部分组成：底数m和指数e --------------------------------------- 底数m部分：使用二进制数来表示此浮点数的实际值。指数e部分：占用8bit(1个字节)的二进制数，可表示数值范围为0-255。 --------------------------------------- 但是指数可正可负，所以，IEEE规定，此处算出的次方必须减去127才是真正的指数。所以，float类型的指数可从-126到128。 --------------------------------------- 底数部分实际是占用24bit(3个字节)的一个值，但是最高位始终为1，所以，最高位省去不存储，在存储中占23bit。 --------------------------------------- 科学计数法。　　格式： SEEEEEEE EMMMMMMM MMMMMMMM MMMMMMMM 　　　　S表示浮点数正负；　　　　E表示指数加上127后的值后得二进制数据；　　　　M表示底数。　　举例：　　　　17.625在内存中的存储为：　　　　首先要把17.625换算成二进制：10001.101 --------------------------------------- 　　　　整数部分：除以2，直到商为0，余数反转。（即：模2取余法）　　　　17 / 2 = 8 --- 1 　　　　8 / 2 = 4 --- 0 　　　　4 / 2 = 2 --- 0 　　　　2 / 2 = 1 --- 0 　　　　1 / 2 = 0 --- 1 　　　　小数部分：乘以2，直到乘位为0，进位顺序取。（即：乘2取整法）　　　　按如下算法进行：　　　　　　1）首先给小数部分乘2，得到的数，如果小数点前为1；则计1，为0，则计0。　　　　　　2）再对剩下的小数部分乘2，再计出1或0。　　　　　　3）重复以上步骤，直至达到需要的精度。　　　　0.625 x 2 = 1.3 --- 计为1 　　　　0.3 x 2 = 0.6 --- 计为0 　　　　0.6 x 2 = 1.2 --- 计为1 　　　　0.2 x 2 = 0.4 --- 计为0 ......（算到需要的精度为止）

2018-10-11

1.2K0

使用 Notepad++ 编辑 .java 文件时的相关配置

java 存储 windows

　　ANSI是一种字符代码，为使计算机支持更多语言，通常使用 0x00~0x7f 范围的1 个字节来表示 1 个英文字符。超出此范围的使用0x80~0xFFFF来编码，即扩展的ASCII编码。

2018-10-11

6170

java基础学习_面向对象(下)01_day08总结

java ide 存储

============================================================================= ============================================================================= 涉及到的知识点有： 1：继承(掌握) 　　(0)Java继承概述　　(1)继承定义　　(2)Java中如何表示继承呢？格式是什么呢？　　(3)继承的好处　　(4)继承的弊端　　　　A:让类的耦合性增强。这样某个类的改变，就会影响其他和该类相关的类。　　　　B:打破了封装性。　　(5)Java中继承的特点　　(6)继承的注意事项　　　　A:Java中类只支持单继承，不支持多继承。　　　　B:Java中可以多层(重)继承(继承体系) (7)那么什么时候使用继承呢？　　　　A:继承体现的是：is a的关系。　　　　B:采用假设法。 (8)Java继承中的成员关系　　　　A:成员变量　　　　B:构造方法　　　　C:成员方法 (9)方法重写：(方法=成员方法) 　　(10)方法重写的两个面试题　　　　A:Override和Overload的区别？Overload是否可以改变返回值类型？　　　　B:this和super的区别和各自的作用？ (11)数据初始化的面试题　　　　A:一个类的初始化过程　　　　B:子父类的构造执行过程　　　　C:子父类的初始化(分层初始化) (12)继承案例　　　　A:学生和老师案例　　　　B:猫狗案例的分析和实现 ============================================================================= ============================================================================= 1：继承(掌握) (0)Java继承概述 (1)继承定义：把多个类中相同的成员给提取出来定义到一个独立的类中。然后让这多个类和该独立的类产生一个关系，这多个类就具备了这些内容。这个关系叫继承。 (2)Java中如何表示继承呢？格式是什么呢？ A:用关键字extends表示。 B:格式：　　　　　　class 子类名 extends 父类名 {} --------------------------------------- (3)继承的好处： A:提高了代码的复用性。 B:提高了代码的维护性。 C:让类与类之间产生了一个关系，是多态的前提。　　　　　　类与类产生了关系，其实也是继承的一个弊端：　　　　　　　　类的耦合性增强了。 --------------------------------------- (4)继承的弊端： A:让类的耦合性增强。这样某个类的改变，就会影响其他和该类相关的类。　　　　　　开发设计的原则：低耦合，高内聚。　　　　　　　　耦合：类与类之间的关系。　　　　　　　　内聚：自己完成某件事情的能力。 B:打破了封装性。　　　　　　因为我们曾经说过：一个类中的成员尽量不要让外界直接访问，子类继承父类后，那么父类的封装就被打破了。 --------------------------------------- (5)Java中继承的特点： A:Java中类只支持单继承，不支持多继承。　　　　　　即：一个类只能有一个父类，不可以有多个父类。　　　　　　class Father {} 　　　　　　class Mother {} 　　　　　　class Son exnteds Father {} 　　//正确的　　　　　　class Son extends Father,Mother {} 　　//错误的　　　　　　有些语言是支持多继承的额，比如c++。其格式是：extends 类1,类2,... B:Java中可以多层(重)继承(继承体系) 　　　　　　class A {} 　　　　　　class B extends A {} 　　　　　　class C extends B {} --------------------------------------- (6)继承的注意事项：　　　　A:子类不能继承父类的私有成员(成员变量和成员方法)。　　　　　　其实这也体现了继承的另一个弊端：打破了封装性。　　　　　　因为我们曾经说过：一个类中的成员尽量不要让外界直接

2018-10-11

3160

上拉电阻和下拉电阻的用处和区别

　　1、概念：将一个不确定的信号，通过一个电阻与电源VCC相连，固定在高电平；　　2、上拉是对器件注入电流，灌电流；　　3、当一个接有上拉电阻的IO端口设置为输入状态时，它的常态为高电平。

2018-10-11

2.5K0

linux基本命令学习02

linux windows unix ide 存储

============================================================================= a.txt c:\abc\a.txt 　　 windows写法（反斜杠） /abc/a.txt 　　 linux写法（斜杠） ----------------------------------------------------------------------------- 相对路径表达方法 cat a.txt 　　　　如果不加任何路径说明，默认是当前目录下的文件。 cat ./a.txt 　　　　明确的指明，a.txt在当前目录下，这是一种相对路径的写法。 cat ../a.txt 　　　　明确的指明，a.txt在上一级目录下，这也是一种相对路径的写法。 cat ./../a.txt 　　　明确的指明，a.txt在上一级目录下，这也是一种相对路径的写法(与上一种等同)。 cat ../2/a.txt a.txt　在上一级目录的2子目录下。 ----------------------------------------------------------------------------- 绝对路径，绝对路径总是从根目录开始的。 /home/zhujy/2/a.txt

2018-10-11

1.2K0

点击加载更多

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态