大数据入门学习之linux基础

Linux图形界面及文件系统结构介绍

linux文件系统结构：

Bin可执行命令

Boot 中grub下的grub.conf 文件，编辑，把其中的timeout改为0，以后启动就不会有延时

Dev 机器硬件

Etc配置文件 network-scripts中的ifcfg-rth0

Home主目录

Lib 库 头文件。。。。开发软件都需要的基本库，共用库

Media 光驱，光盘

Usr unix共享资源

Sbin系统管理程序 ：修改防火墙，增删用户等

Tmp临时目录

局域网工作机制和网络地址配置

子网掩码255.255.255.0：看自己处于哪个网段

域名解析服务器：

先找本机是否有此地址，没有才去DNS服务器找

域名服务的工作流程

设置或更改本机ip：

Linux中配置hosts：

设置后可以直接ping shizhan

Vmware虚拟网络的配置

NAT虚拟网络的配置

桥接模式网络配置

Host only网络配置

电脑上的vmnet1

桥接模式：虚拟网卡和物理网卡在同一网段，物理网卡网段更换，虚拟网卡网段也要更换

NAT模式：虚拟网卡和物理网卡不在同一网段，ip固定

Host-only：无法访问外网，虚拟网卡和物理网卡在同一网段

Linux网络配置及CRT远程连接

网络配置方式一：

setup 更改ip

service network restart 网络重启

网络配置方式二：

vi /etc/sysconfig/network-scripts/ifcfg-eth0更改配置文件

修改Linux的基本配置总结

**IP地址配置，最简单的一种

在命令运行 setup，带提示，按照提示修改即可

1. 修改主机名

vi /etc/sysconfig/network

2. 修改ip地址

vi /etc/sysconfig/network-scripts/ifcfg-eth0

service network restart

3. 修改ip地址和主机名的映射关系

vi /etc/hosts

Linux常用命令

linux的命令操作

1、日常操作命令

**查看当前所在的工作目录

pwd

**查看当前系统的时间

date

**查看有谁在线（哪些人登陆到了服务器）

who 查看当前在线

last 查看最近的登陆历史记录

2、文件系统操作

**

ls / 查看根目录下的子节点（文件夹和文件）信息

ls -al -a是显示隐藏文件 -l是以更详细的列表形式显示

**切换目录

cd /home

**创建文件夹

mkdir aaa 这是相对路径的写法

mkdir -p aaa/bbb/ccc 父目录没有也会建立

mkdir /data 这是绝对路径的写法

**删除文件夹

rmdir 可以删除空目录

rm -r aaa 可以把aaa整个文件夹及其中的所有子节点全部删除，但是会挨个询问是否删除

rm -rf aaa 强制删除aaa，不会询问

**修改文件夹名称

mv aaa angelababy

**创建文件

touch somefile.1 创建一个空文件

echo "i miss you,my baby" > somefile.2 (somefile.2没有会自动创建)利用重定向“>”的功能，

将一条指令的输出结果写入到一个文件中，会覆盖原文件内容

echo "huangxiaoming ,gun dan" >> somefile.2 将一条指令的输出结果追加到一个文件中，不会覆盖原文件内容

(>> 追加)

echo "i miss you,my baby"将引号中的内容打印到屏幕上

ls > somefile.3 会将显示的文件写入somefile.3文件中(> 重定向)

用vi文本编辑器来编辑生成文件

******最基本用法

vi somefile.4

1、首先会进入“一般模式”，此模式只接受各种快捷键，不能编辑文件内容

2、按i键，就会从一般模式进入编辑模式，此模式下，敲入的都是文件内容

3、编辑完成之后，按Esc键退出编辑模式，回到一般模式；

4、再按：，进入“底行命令模式”，输入wq命令，回车即可

******一些常用快捷键

一些有用的快捷键（在一般模式下使用）：

a 在光标后一位开始插入

o 在光标的下一行操作

A 在该行的最后插入

I 在该行的最前面插入

gg 直接跳到文件的首行

G 直接跳到文件的末行

dd 删除行，如果 5dd ，则一次性删除光标后的5行

yy 复制当前行, 复制多行，则 3yy，则复制当前行附近的3行

p 粘贴

v 进入字符选择模式，选择完成后，按y复制，按p粘贴

ctrl+v 进入块选择模式，选择完成后，按y复制，按p粘贴

shift+v 进入行选择模式，选择完成后，按y复制，按p粘贴

查找并替换（在底行命令模式中输入）

/you 效果：查找文件中出现的you，并定位到第一个找到的地方，按n可以定位到下一个匹配位置（按N定位到上一个）

3、文件权限的操作

****linux文件权限的描述格式解读

drwxr-xr-x （也可以用二进制表示 111 101 101 --> 755）

d：标识节点类型（d：文件夹 -：文件 l:链接）

r：可读 w：可写 x：可执行

第一组rwx： 表示这个文件的拥有者对它的权限：可读可写可执行

第二组r-x： 表示这个文件的所属组对它的权限：可读，不可写，可执行

第三组r-x： 表示这个文件的其他用户（相对于上面两类用户）对它的权限：可读，不可写，可执行

****修改文件权限

chmod g-rw haha.dat 表示将haha.dat对所属组的rw权限取消

chmod o-rw haha.dat 表示将haha.dat对其他人的rw权限取消

chmod u+x haha.dat 表示将haha.dat对所属用户的权限增加x

也可以用数字的方式来修改权限

chmod 664 haha.dat

就会修改成 rw-rw-r--

如果要将一个文件夹的所有内容权限统一修改，则可以-R参数

chmod -R 770 aaa/

chown angela:angela aaa/

目录没有执行权限的时候普通用户不能进入

文件只有读写权限的时候普通用户是可以删除的(删除文件不是修改它,是操作父级目录),只要父级目录有执行和修改的权限

4、基本的用户管理

*****添加用户

useradd angela

要修改密码才能登陆

passwd angela 按提示输入密码即可

**为用户配置sudo权限

用root编辑 vi /etc/sudoers

在文件的如下位置，为hadoop添加一行即可

root ALL=(ALL) ALL

hadoop ALL=(ALL) ALL

然后，hadoop用户就可以用sudo来执行系统级别的指令

[hadoop@shizhan ~]$ sudo useradd huangxiaoming

5、系统管理操作

*****查看主机名

hostname

****修改主机名(重启后无效)

hostname hadoop

*****修改主机名(重启后永久生效)

vi /ect/sysconfig/network

****修改IP(重启后无效)

ifconfig eth0 192.168.12.22

****修改IP(重启后永久生效)

vi /etc/sysconfig/network-scripts/ifcfg-eth0

mount **** 挂载外部存储设备到文件系统中

mkdir /mnt/cdrom 创建一个目录，用来挂载

mount -t iso9660 -o ro /dev/cdrom /mnt/cdrom/ 将设备/dev/cdrom挂载到 挂载点 ： /mnt/cdrom中

// -t 设备类型/文件类型 光盘类型iso9660 -o ro 只读模式 设备名称 挂载位置

*****umount

umount /mnt/cdrom

*****统计文件或文件夹的大小

du -sh /mnt/cdrom/Packages

df -h 查看磁盘的空间

****关机

halt

****重启

reboot

******配置主机之间的免密ssh登陆

ssh协议 客户端 和 服务端

假如 A 要登陆 B

在A上操作：

%%首先生成密钥对

ssh-keygen (提示时，直接回车即可)

%%再将A自己的公钥拷贝并追加到B的授权列表文件authorized_keys中

ssh-copy-id B

ssh 192.168.33.111 会跳到192.168.33.111这台服务器

重定向功能：将一条指令的输出结果写入到一个文件中，会覆盖原文件内容

ssh免密登陆

假如 A 要登陆 B

在A上操作：

1.首先生成密钥对

id_rsa 私钥

id_rsa.pub 公钥

2.把公钥拷贝给B

然后看B上，.ssh的authorized_keys中已经有了公钥

此时不需要密码，便可直接登陆B

设置自己登陆自己不需要密码：

之后小编每天都会分享大数据的相关知识，若觉得受用，欢迎关注！