首页
学习
活动
专区
工具
TVP
发布

无题~

专栏作者
218
文章
266326
阅读量
22
订阅数
kafka项目经验之如何进行Kafka压力测试、如何计算Kafka分区数、如何确定Kaftka集群机器数量
用Kafka官方自带的脚本,对Kafka进行压测。Kafka压测时,可以查看到哪个地方出现了瓶颈==(CPU,内存,网络IO)。一般都是网络IO达到瓶颈。 == 使用下面两个kafka自带的脚本
孙晨c
2021-02-02
2K0
Linux的环境变量配置在/etc/profile或/etc/profile.d/*.sh文件中的区别是什么?
Linux的环境变量可在多个文件中配置,如/etc/profile,/etc/profile.d/*.sh,~/.bashrc等,下面说明上述几个文件之间的关系和区别。
孙晨c
2021-01-29
2.4K0
Hbase集群搭建以及启动(单点启动,群起)
HBase是什么 HBase是基于hadoop的数据库! HBase支持随机写 HBase的读写操作还是借助HDFS完成,要完成随机写,根本上还是需要复合HDFS的特性! HDFS只支持追加写! 随机的操作: Update+Delete 借助 追加写+时间戳(版本号) 只允许客户端查询时返回时间戳最新的数据! HBase支持海量数据的实时读写 ①分布式 ②索引,LSM树 ③kv ④吃内存 ⑤列式存储 ⑥布隆过滤器(查询) HBase的安装和配置(重点) 1.配置 ①保证已经配置了J
孙晨c
2020-11-26
8970
OSI数据链路层之基本概念
数据链路(data Link)除了物理线路外,还必须有通信协议来控制这些数据的传输。若把实现这些协议的硬件和软件加到链路上,就构成了数据链路。
孙晨c
2020-07-21
4750
Linux登陆的两种状态
是指登录时,需要提供用户名密码的shell,如:su – user1 , 图形登录, ctrl+alt+F2-6进入的登录界面。 这种Login shell 执行脚本的顺序: 1./etc/profile 【全局profile文件;它定义了LoginUser的 PATH, USER, LOGNAME(登录使用者帐号)】 2. /etc/profile.d/目录下的脚本 3. ~/.bash_profile 【搜索命令的路径 ——————- 登录级别 环境变量配置文件 】 4. ~/.bashrc 【存储用户设定的别名和函数 ———- shell级别 环境变量配置文件】 5. /etc/bashrc 【全局bashrc文件; 它主要定义一些 Function 和 Alias;更改/etc/bashrc会影响到所有用户,由root用户管理。】
孙晨c
2020-07-07
1.5K0
Hadoop运行模式及相关文件说明
hadoop框架在运行需要产生很多数据(日志),数据的保存目录,必须让当前启动hadoop进程的用户拥有写权限!
孙晨c
2020-07-06
3890
HDFS和MR的配置和使用
①在$HADOOP_HOME/etc/hadoop/core-site.xml文件
孙晨c
2020-07-06
4200
hadoop2.x全分布式集群搭建(一主二从)
然后生成了id_rsa与id_rsa.pub,分别是私有与公有秘钥,我们要把公有秘钥复制到一个authorized_keys文件内,这个文件的作用就是完成无密码访问。 然后执行:
孙晨c
2020-05-26
4550
Java的IO流
注:抽象流实质上就是抽象类,实际上使用到的是继承于它们的子类!FileInputStream、FileOutputStream、FileReader、FileWriter
孙晨c
2019-10-08
4870
提升文件的读写效率--缓冲流
缓冲流概述 缓冲流就是带有缓冲区的输入输出流 缓冲流可以显著减少我们对IO访问的次数,保护硬盘! 缓冲流本身就是处理流(包裹流),所以缓冲流必须依附于节点流(原始流) 处理流是包裹在原始节点上的流,相当于包裹在管道上的管道 创建字符流读文件对象: BufferedReader br = new BufferedReader(new FileReader("readme.txt")); 创建字符流写文件对象: BufferedWriter bw = new BufferedWriter(new FileW
孙晨c
2019-10-08
5540
centos7搭建hadoop3.*.*系列
 最近搭建这个hadoop踩过不少坑,先是配置JDK搞错路径(普通用户和root用户下的路径不同),再就是hadoop版本不同导致的启动错误,网上找到的是hadoop2.*.*的版本,但是我安装的hadoop3.*.*的版本,环境配置有部分不同。希望大家不要重蹈覆辙!
孙晨c
2019-09-10
7560
centos个性化命令行提示符
为了在满屏的命令中找到用户的命令行,所以很有必要设置一种字体颜色。我就设置最实用的一种,可以用蓝色字体显示当前所在路径
孙晨c
2019-09-10
6320
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档