大数据入门学习之linux基础

Linux图形界面及文件系统结构介绍

linux文件系统结构:

Bin可执行命令

Boot 中grub下的grub.conf 文件,编辑,把其中的timeout改为0,以后启动就不会有延时

Dev 机器硬件

Etc配置文件 network-scripts中的ifcfg-rth0

Home主目录

Lib 库 头文件。。。。开发软件都需要的基本库,共用库

Media 光驱,光盘

Usr unix共享资源

Sbin系统管理程序 :修改防火墙,增删用户等

Tmp临时目录

局域网工作机制和网络地址配置

子网掩码255.255.255.0:看自己处于哪个网段

域名解析服务器:

先找本机是否有此地址,没有才去DNS服务器找

域名服务的工作流程

设置或更改本机ip:

Linux中配置hosts:

设置后可以直接ping shizhan

Vmware虚拟网络的配置

NAT虚拟网络的配置

桥接模式网络配置

Host only网络配置

电脑上的vmnet1

桥接模式:虚拟网卡和物理网卡在同一网段,物理网卡网段更换,虚拟网卡网段也要更换

NAT模式:虚拟网卡和物理网卡不在同一网段,ip固定

Host-only:无法访问外网,虚拟网卡和物理网卡在同一网段

Linux网络配置及CRT远程连接

网络配置方式一:

setup 更改ip

service network restart 网络重启

网络配置方式二:

vi /etc/sysconfig/network-scripts/ifcfg-eth0更改配置文件

修改Linux的基本配置总结

**IP地址配置,最简单的一种

在命令运行 setup,带提示,按照提示修改即可

1. 修改主机名

vi /etc/sysconfig/network

2. 修改ip地址

vi /etc/sysconfig/network-scripts/ifcfg-eth0

service network restart

3. 修改ip地址和主机名的映射关系

vi /etc/hosts

Linux常用命令

linux的命令操作

1、日常操作命令

**查看当前所在的工作目录

pwd

**查看当前系统的时间

date

**查看有谁在线(哪些人登陆到了服务器)

who 查看当前在线

last 查看最近的登陆历史记录

2、文件系统操作

**

ls / 查看根目录下的子节点(文件夹和文件)信息

ls -al -a是显示隐藏文件 -l是以更详细的列表形式显示

**切换目录

cd /home

**创建文件夹

mkdir aaa 这是相对路径的写法

mkdir -p aaa/bbb/ccc 父目录没有也会建立

mkdir /data 这是绝对路径的写法

**删除文件夹

rmdir 可以删除空目录

rm -r aaa 可以把aaa整个文件夹及其中的所有子节点全部删除,但是会挨个询问是否删除

rm -rf aaa 强制删除aaa,不会询问

**修改文件夹名称

mv aaa angelababy

**创建文件

touch somefile.1 创建一个空文件

echo "i miss you,my baby" > somefile.2 (somefile.2没有会自动创建)利用重定向“>”的功能,

将一条指令的输出结果写入到一个文件中,会覆盖原文件内容

echo "huangxiaoming ,gun dan" >> somefile.2 将一条指令的输出结果追加到一个文件中,不会覆盖原文件内容

(>> 追加)

echo "i miss you,my baby"将引号中的内容打印到屏幕上

ls > somefile.3 会将显示的文件写入somefile.3文件中(> 重定向)

用vi文本编辑器来编辑生成文件

******最基本用法

vi somefile.4

1、首先会进入“一般模式”,此模式只接受各种快捷键,不能编辑文件内容

2、按i键,就会从一般模式进入编辑模式,此模式下,敲入的都是文件内容

3、编辑完成之后,按Esc键退出编辑模式,回到一般模式;

4、再按:,进入“底行命令模式”,输入wq命令,回车即可

******一些常用快捷键

一些有用的快捷键(在一般模式下使用):

a 在光标后一位开始插入

o 在光标的下一行操作

A 在该行的最后插入

I 在该行的最前面插入

gg 直接跳到文件的首行

G 直接跳到文件的末行

dd 删除行,如果 5dd ,则一次性删除光标后的5行

yy 复制当前行, 复制多行,则 3yy,则复制当前行附近的3行

p 粘贴

v 进入字符选择模式,选择完成后,按y复制,按p粘贴

ctrl+v 进入块选择模式,选择完成后,按y复制,按p粘贴

shift+v 进入行选择模式,选择完成后,按y复制,按p粘贴

查找并替换(在底行命令模式中输入)

/you 效果:查找文件中出现的you,并定位到第一个找到的地方,按n可以定位到下一个匹配位置(按N定位到上一个)

3、文件权限的操作

****linux文件权限的描述格式解读

drwxr-xr-x (也可以用二进制表示 111 101 101 --> 755)

d:标识节点类型(d:文件夹 -:文件 l:链接)

r:可读 w:可写 x:可执行

第一组rwx: 表示这个文件的拥有者对它的权限:可读可写可执行

第二组r-x: 表示这个文件的所属组对它的权限:可读,不可写,可执行

第三组r-x: 表示这个文件的其他用户(相对于上面两类用户)对它的权限:可读,不可写,可执行

****修改文件权限

chmod g-rw haha.dat 表示将haha.dat对所属组的rw权限取消

chmod o-rw haha.dat 表示将haha.dat对其他人的rw权限取消

chmod u+x haha.dat 表示将haha.dat对所属用户的权限增加x

也可以用数字的方式来修改权限

chmod 664 haha.dat

就会修改成 rw-rw-r--

如果要将一个文件夹的所有内容权限统一修改,则可以-R参数

chmod -R 770 aaa/

chown angela:angela aaa/

目录没有执行权限的时候普通用户不能进入

文件只有读写权限的时候普通用户是可以删除的(删除文件不是修改它,是操作父级目录),只要父级目录有执行和修改的权限

4、基本的用户管理

*****添加用户

useradd angela

要修改密码才能登陆

passwd angela 按提示输入密码即可

**为用户配置sudo权限

用root编辑 vi /etc/sudoers

在文件的如下位置,为hadoop添加一行即可

root ALL=(ALL) ALL

hadoop ALL=(ALL) ALL

然后,hadoop用户就可以用sudo来执行系统级别的指令

[hadoop@shizhan ~]$ sudo useradd huangxiaoming

5、系统管理操作

*****查看主机名

hostname

****修改主机名(重启后无效)

hostname hadoop

*****修改主机名(重启后永久生效)

vi /ect/sysconfig/network

****修改IP(重启后无效)

ifconfig eth0 192.168.12.22

****修改IP(重启后永久生效)

vi /etc/sysconfig/network-scripts/ifcfg-eth0

mount **** 挂载外部存储设备到文件系统中

mkdir /mnt/cdrom 创建一个目录,用来挂载

mount -t iso9660 -o ro /dev/cdrom /mnt/cdrom/ 将设备/dev/cdrom挂载到 挂载点 : /mnt/cdrom中

// -t 设备类型/文件类型 光盘类型iso9660 -o ro 只读模式 设备名称 挂载位置

*****umount

umount /mnt/cdrom

*****统计文件或文件夹的大小

du -sh /mnt/cdrom/Packages

df -h 查看磁盘的空间

****关机

halt

****重启

reboot

******配置主机之间的免密ssh登陆

ssh协议 客户端 和 服务端

假如 A 要登陆 B

在A上操作:

%%首先生成密钥对

ssh-keygen (提示时,直接回车即可)

%%再将A自己的公钥拷贝并追加到B的授权列表文件authorized_keys中

ssh-copy-id B

ssh 192.168.33.111 会跳到192.168.33.111这台服务器

重定向功能:将一条指令的输出结果写入到一个文件中,会覆盖原文件内容

ssh免密登陆

假如 A 要登陆 B

在A上操作:

1.首先生成密钥对

id_rsa 私钥

id_rsa.pub 公钥

2.把公钥拷贝给B

然后看B上,.ssh的authorized_keys中已经有了公钥

此时不需要密码,便可直接登陆B

设置自己登陆自己不需要密码:

之后小编每天都会分享大数据的相关知识,若觉得受用,欢迎关注!

  • 发表于:
  • 原文链接https://kuaibao.qq.com/s/20180709A1R9ET00?refer=cp_1026
  • 腾讯「云+社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 yunjia_community@tencent.com 删除。

扫码关注云+社区

领取腾讯云代金券