-多年互联网运维工作经验，曾负责过大规模集群架构自动化运维管理工作。 -擅长Web集群架构与自动化运维，曾负责国内某大型金融公司运维工作。 -devops项目经理兼DBA。 -开发过一套自动化运维平台（功能如下）： 1)整合了各个公有云API，自主创建云主机。 2)ELK自动化收集日志功能。 3)Saltstack自动化运维统一配置管理工具。 4)Git、Jenkins自动化代码上线及自动化测试平台。 5)堡垒机，连接Linux、Windows平台及日志审计。 6)SQL执行及审批流程。 7)慢查询日志分析web界面。
1、shell：命令解释器 1）可支持的shell保存在/etc/shells中 2）默认shell为/bin/bash 2、shell脚本编写： 1）使用vi编辑器 2）每行一条命令，依次执行 3）赋予可执行权限（x） 3、执行方式： 1）脚本文件路径：有两种，相对和绝对路径，必须有x权限 2）Sh脚本文件路径：无须x权限，相对和绝对路径都可以，在子shell上 3）Source（或 .）脚本文件路径：无须x权限，在当前sell执行 4、脚本组成： 1）脚本声明：指定脚本执行的shell，以#！开头
Shell脚本应用（shell脚本基础与shell变量）发布于2018-06-20 12:49:46阅读 2520 1、shell：命令解释器1）可支持的shell保存在/etc/shells中2）默认shell为/bin/bash2、shell脚本编写：1）使用vi编辑器2）每行一条命令，依次执行3）赋予可执行权限（x）3、执行方式：1）脚本文件路径：有两种，相对和绝对路径，必须有x权限2）Sh脚本文件路径：无须x权限，相对和绝对路径都可以，在子shell上3）Source（或 .）脚本文件路径：无须x权
最近在帮一位大师傅测试招新赛的时候，发现自己对反弹shell是不太了解的，因此在用反弹shell解题过后，来对反弹shell进行相关学习，希望对各位师傅有所帮助。
变量 #!/bin/bash # 变量 echo "01_变量.sh" # 变量定义与赋值，等号两边不能用空格分开 name=hahahaha echo $name echo 也使用 {} 输出为 ${name} # 一些特殊变量 test_func() { echo "function name is $FUNCNAME" } test_func echo $HOSTNAME echo $HOSTTYPE echo $MATCHTYPE echo $LANG echo $PWD # echo $
拢共有 11 篇 Linux 知识点梳理的文章，这次是第 7 篇，梳理完以后 Linux 每日一练就结束更新了，但是还没有完结，后续如果有什么比较重要的 Linux 知识会单独抽出来再讲。
本文大部分内容翻译自我开始学习AWK时看到的一篇英文文章 AWK Tutorial ，觉得对AWK入门非常有帮助，所以对其进行了粗略的翻译，并对其中部分内容进行了删减或者补充，希望能为对AWK感兴趣的小伙伴提供一份快速入门的教程，帮助小伙伴们快速掌握AWK的基本使用方式，当然，我也是刚开始学习AWK，本文在翻译或者补充的过程中肯定会有很多疏漏或者错误，希望大家能够帮忙指正。 本文将会持续修正和更新，最新内容请参考我的 GITHUB 上的 程序猿成长计划 项目，欢迎 Star。 概述 AWK是一门解释
本文大部分内容翻译自我开始学习AWK时看到的一篇英文文章 AWK Tutorial ，觉得对AWK入门非常有帮助，所以对其进行了粗略的翻译，并对其中部分内容进行了删减或者补充，希望能为对AWK感兴趣的小伙伴提供一份快速入门的教程，帮助小伙伴们快速掌握AWK的基本使用方式，当然，我也是刚开始学习AWK，本文在翻译或者补充的过程中肯定会有很多疏漏或者错误，希望大家能够帮忙指正。
比如，有时候，我们把程序放在后台了，希望其输出也进行保存，而不是混乱而无序的输出到前台，我们就可以使用重定向。
计算机的硬件设备有很多种，常见的输入设备有键盘、鼠标、手写板等，输出设备有显示器、投影仪、打印机等。不过，在 Linux 中，标准输入设备指的是键盘，标准输出设备指的是显示器（屏幕）。
特殊符号| #管道符，或者（正则）> #输出重定向>> #输出追加重定向< #输入重定向<< #追加输入重定向~ #当前用户家目录`` $() #引用命令被执行后的结果$ #以。。。结尾（正则）^ #以。。。开头（正则）* #匹配全部字符，通配符？ #任意一个字符，通配符# #注释& #让程序或脚本切换到后台执行&& #并且 同时成立[] #表示一个范围（正则，通配符）{} #产生
23. 产生一个随机数 代码如下: echo $RANDOM 24. 按照模式split 文件 代码如下: csplit server.log /PATTERN/ -n 2 -s {*} -f server_result -b "%02d.log" -z /PATTERN/ 用来匹配某一行，分割过程由此开始 {*} 根据匹配，重复执行分割 -s 静默模式 -n 分割后文件名后缀中，数字的个数 -f 分割后的文件名前缀 -b 指定后缀格式 25. 获取文件名或者扩展名 代码如下: var=ha
在平时的测试过程中，经常会遇到各种文本处理的问题，于是把遇到的常用的文本处理命令和方法进行了总结和整理。
exec 是一个在Bash Shell脚本中使用的命令，它允许您替换当前进程的内容，包括进程ID和文件描述符。使用exec命令可以实现一些有用的功能，例如替换脚本当前的Shell进程、切换到不同的命令解释器、重定向标准输入输出等。本文将详细介绍如何在Bash Shell脚本中使用exec命令，并提供一些常见的用例和示例。
在介绍上述符号表示什么之前，我们需要先知道在linux中有三种标准的文件描述符(也支持自定义)，分别为：
综述 流程： 怎么连接Linux服务器 连接之后的语料的常用文本处理命令 运行代码时的常用信息查看命令 详细讲解！ 怎么连接Linux服
这条命令的意思就是说： 运行test.py脚本，且将运行过程中本来要输出到屏幕/控制台的内容(如脚本里面的print语句、报错信息等)输出到test.log日志文件中去。
在 Linux 下后台执行 Python 脚本，重定向到日志文件，日志文件迟迟没有内容。
无论是否将 nohup 命令的输出重定向到终端，输出都将附加到当前目录的 nohup.out 文件中。
请参考：菜鸟教程参数传递 在执行脚本的时候可以向脚本传递参数，脚本获取参数的格式为：$n
Awk是Unix和类似Unix系统下功能强大的文本分析工具，但是因为它具有可用于执行常见解析任务的编程函数，因此也被视为一种编程语言。 您可能不会使用awk开发下一个GUI应用程序，也不会改变您的默认脚本语言，但是在特定任务下它可以成为十分强大且实用的程序。这些任务可能是多种多样的。想要知道哪些问题可以使用awk的最好方法就是学习awk。之后您会惊讶地发现使用awk后将会令工作事半功倍。
在这一篇中，我们介绍了一点关于输入输出重定向和管道的基础知识，本篇将继续重定向的话题。 在开始前，先说一说shell中的引用。
还有这一种方式，使用cp指令flag.php中的文件写入2.txt，直接打开就能得到flag。
'!'Linux 中的符号或运算符可用作逻辑否定运算符，也可通过调整从历史记录中获取命令，或通过修改运行先前运行的命令。以下所有命令均已在 bash Shell 中明确检查。虽然我没有检查过，但其中大部分不会在其他 shell 中运行。 按命令编号运行历史记录中的命令。 您可能不知道您可以从历史命令（已经 / 较早执行的命令）运行命令这一事实。要开始，首先通过运行 “history” 命令找到命令编号。 $ history 现在，在history的输出中，仅按照它出现的编号运行来自history的命令。假
这条命令的作用是将标准输出1重定向到/dev/null中。 /dev/null代表linux的空设备文件，所有往这个文件里面写入的内容都会丢失，俗称“黑洞”。那么执行了>/dev/null之后，标准输出就会不再存在，没有任何地方能够找到输出的内容。
循环中的重定向 或许你应该在其他脚本中见过下面的这种写法： while read line do … done < file 刚开始看到这种结构时，很难理解< file是如何与循环配合在一起工作的。因为循环内有很多条命令，而我们之前接触的重定向都是为一条命令工作的。这里有一个原则，这个原则掌握好了，这个问题就很简单了： 对循环重定向的输入可适用于循环中的所有需要从标准输入读取数据的命令； 对循环重定向的输出可适用于循环中的所有需要向标准输出写入数据的命令； 当在循环内部显式地使用输入或输出重定向，内部重定向覆盖外部重定向。 上面的while结构中，read命令是需要从标准输入中读取数据的。我们来详细了解一下read命令的用法吧，这个命令是shell脚本中使用频率最高的命令之一。 read 先来看一下read的命令语法： read arg1 arg2 arg3 arg4 … read是一个用来赋值的命令，它需要从标准输入获得值，然后把这些值按位置依次赋值给变量arg1、arg2、arg3、arg4…，输入的时候以空格作为字段分隔符。 read的一个最大特性是可以在脚本中产生交互，因为它从标准输入读取数据。read之所以很常用，一是因为我们经常需要赋值，二是因为它可以交互，三是read能够一次给多个变量赋值。 readhostipnamelinux10.0.0.1licongreadhostipnamelinux10.0.0.1licong read host ip name linux 10.0.0.1 licong echo hosthosthost ip namelinux10.0.0.1licongnamelinux10.0.0.1licongname linux 10.0.0.1 licong 可以看到，linux、10.0.0.1、licong分别被赋值给了变量host、ip和name。再看： readhostiplinux10.0.0.1licongreadhostiplinux10.0.0.1licong read host ip linux 10.0.0.1 licong echo hostlinuxhostlinuxhost linux echo ip10.0.0.1licongip10.0.0.1licongip 10.0.0.1 licong 当我们输入的字段比变量数目多时，最后一个变量的值将不只一个字段，而是所有剩余的内容；当输入字段比变量数少时，多余的变量将是空值，你可以自己试试。现在我们再来看 while read line do … done < file read通过输入重定向，把file的第一行所有的内容赋值给变量line，循环体内的命令一般包含对变量line的处理；然后循环处理file的第二行、第三行。。。一直到file的最后一行。还记得while根据其后的命令退出状态来判断是否执行循环体吗？是的，read命令也有退出状态，当它从文件file中读到内容时，退出状态为0，循环继续惊醒；当read从文件中读完最后一行后，下次便没有内容可读了，此时read的退出状态为非0，所以循环才会退出。 另一种也很常见的用法： command | while read line do … done 如果你还记得管道的用法，这个结构应该不难理解吧。command命令的输出作为read循环的输入，这种结构长用于处理超过一行的输出，当然awk也很擅长做这种事
之前在网上看到很多师傅们总结的linux反弹shell的一些方法，为了更熟练的去运用这些技术，于是自己花精力查了很多资料去理解这些命令的含义，将研究的成果记录在这里，所谓的反弹shell，指的是我们在自己的机器上开启监听，然后在被攻击者的机器上发送连接请求去连接我们的机器，将被攻击者的shell反弹到我们的机器上，下面来介绍分析几种常用的方法。
awk是一种模式扫描和处理工具，相对于grep的查找，sed的编辑，它在对数据进行分析生成报表时显得尤为强大。awk通过逐行遍历一个或多个 文件的方式，查找模式匹配到的行，而后以指定的分隔符（缺省为空格）进行切片，然后针对切片数据进行处理和分析。事实上，gawk有自己的语言，其本身就 相当于一个解释器，允许用户创建简短的程序读取输入文件，对输入数据执行排序、计算以及生成报表操作，甚至可以类似bash shell实现诸如循环、数组、条件判断、函数、变量等功能，进而完成更为复杂的数据分析处理任务。
第一题 我想在/data/da 目录下面创建 一个 da.txt 文件 [root@ll ~]# cd /data/oldboyedu -bash: cd: /data/oldboyedu: No such file or directory 1.为何出现这样的错误 因为没有这个目录 2.如何解决这个错误呢？ 创建这两个目录：mkdir -p /data/da 第二题 接上题,向 da.txt 加入内容 "I love studying Linux." (不少于 2 种方法) 方法一 命令格式：echo
补充说明 nohup命令 可以将程序以忽略挂起信号的方式运行起来，被运行的程序的输出信息将不会显示到终端。 无论是否将 nohup 命令的输出重定向到终端，输出都将附加到当前目录的 nohup.out 文件中。 如果当前目录的 nohup.out 文件不可写，输出重定向到$HOME/nohup.out文件中。 如果没有文件能创建或打开以用于追加，那么 command 参数指定的命令不可调用。 如果标准错误是一个终端，那么把指定的命令写给标准错误的所有输出作为标准输出重定向到相同的文件描述符。
此脚本尝试通过查看 URL 中的 Google Analytics ID 来获取相关域/子域。首先在网页中搜索Google Analytics的ID，然后使用ID请求builtwith和hackertarget
一，题记 不懂shell的程序员不是好程序员，学习shell是为了自动化，使用自动化可以非常有效的提高工作效率。没有一个大公司不要求linux的基本技能的，只是不同岗位要求掌握的程度不同。在第一篇 shell极简教程 已经对shell进行了简单的介绍，本篇进行更进一步的介绍！ 二，shell注释 以“#”开头的行就是注释，会被解释器忽略。 sh里没有多行注释，只能每一行加一个#号。只能像这样： #-------------------------------------------- # 这是一个自动打
主要包括：文件处理、权限管理、文件搜索、帮助命令、用户管理、压缩解压、网络配置、关机重启。
说明： 其中，>为输出重定向符号，>/dev/null 2>&1。这条命令其实分为两命令，一个是>/dev/null，另一个是2>&1。 1. >/dev/null 这条命令的作用是将标准输出1重定向到/dev/null中。/dev/null代表linux的空设备文件，所有往这个文件里面写入的内容都会丢失，俗称“黑洞”。那么执行了>/dev/null之后，标准输出就会不再存在，没有任何地方能够找到输出的内容。 2. 2>&1 这条命令用到了重定向绑定，采用&可以将两个输出绑定在一起。这条命令的作用是错误输出将和标准输出同用一个文件描述符，说人话就是错误输出将会和标准输出输出到同一个地方。 linux在执行shell命令之前，就会确定好所有的输入输出位置，并且从左到右依次执行重定向的命令，所以>/dev/null 2>&1的作用就是让标准输出重定向到/dev/null中（丢弃标准输出），然后错误输出由于重用了标准输出的描述符，所以错误输出也被定向到了/dev/null中，错误输出同样也被丢弃了。执行了这条命令之后，该条shell命令将不会输出任何信息到控制台，也不会有任何信息输出到文件中。
在Linux系统中，可以使用nohup命令将一个进程放到后台运行，并将该进程的输出重定向到一个文件中。以下是在后台运行Python脚本的步骤：
大多数 UNIX 系统命令从你的终端接受输入并将所产生的输出发送回到您的终端。一个命令通常从一个叫标准输入的地方读取输入，默认情况下，这恰好是你的终端。同样，一个命令通常将其输出写入到标准输出，默认情况下，这也是你的终端。
touch命令用于创建空白文件或修改文件时间。在Linux系统中一个文件有三种时间：
来源 | https://dablelv.blog.csdn.net/article/details/79985071
从字面意义上我们可以这样理解：输出本来是当我进行命令后，输出到屏幕上，现在我不让他输出到屏幕，改变他的输出方向，把他输出到文件当中，就叫输出重定向。
nohup的作用可以将程序以忽略挂起信号（SIGHUP）的方式运行。常见的用法是和&命令一同使用，将命令放置到后台运行，即使终端挂掉，进程会忽略挂起信号，继续运行。
1. 标准输入与输出 我们知道，执行一个shell命令行时通常会自动打开三个标准文件，即标准输入文件（stdin），通常对应终端的键盘；标准输出文件（stdout）和标准错误输出文件（stderr），这两个文件都对应终端的屏幕。进程将从标准输入文件中得到输入数据，将正常输出数据输出到标准输出文件，而将错误信息送到标准错误文件中。 我们以cat命令为例，cat命令的功能是从命令行给出的文件中读取数据，并将这些数据直接送到标准输出。若使用如下命令： $ cat config 将会把文件config的内容依次显示到屏幕上。但是，如果cat的命令行中没有参数，它就会从标准输入中读取数据，并将其送到标准输出。例如： $ cat Hello world Hello world Bye Bye $ 用户输入的每一行都立刻被cat命令输出到屏幕上。 另一个例子，命令sort按行读入文件正文（当命令行中没有给出文件名时，表示从标准输入读入），将其排序，并将结果送到标准输出。下面的例子是从标准输入读入一个采购单，并将其排序。 $ sort bananas carrots apples apples bananas carrots $ 这时我们在屏幕上得到了已排序的采购单。 直接使用标准输入/输出文件存在以下问题： 输入数据从终端输入时，用户费了半天劲输入的数据只能用一次。下次再想用这些数据时就得重新输入。而且在终端上输入时，若输入有误修改起来不是很方便。 输出到终端屏幕上的信息只能看不能动。我们无法对此输出作更多处理，如将输出作为另一命令的输入进行进一步的处理等。 为了解决上述问题，Linux系统为输入、输出的传送引入了另外两种机制，即输入/输出重定向和管道。 输入重定向 输入重定向是指把命令（或可执行程序）的标准输入重定向到指定的文件中。也就是说，输入可以不来自键盘，而来自一个指定的文件。所以说，输入重定向主要用于改变一个命令的输入源，特别是改变那些需要大量输入的输入源。 例如，命令wc统计指定文件包含的行数、单词数和字符数。如果仅在命令行上键入： $ wc wc将等待用户告诉它统计什么，这时shell就好象死了一样，从键盘键入的所有文本都出现在屏幕上，但并没有什么结果，直至按下＜ctrl+d＞，
大多数 UNIX 系统命令从你的终端接受输入并将所产生的输出发送回到您的终端。
nohup 是一个在 Linux/Unix 系统中常用的命令，它的作用是在后台运行一个命令或脚本，并且不会因为终端的关闭而终止。换句话说，使用 nohup 运行的命令或脚本会忽略挂起（HUP）信号，即忽略终端关闭的信号。
在这篇文章里，我们将要一睹能快速分析文本数据（如日志，报告等）的最方便工具。很多时候，我们需要的数据并不存储在我们的本机上。所以首先，我们要知道如何链接到远程服务器上并使用它。为此，使用SSH最为合适。（SSH，即Secure Shell,是一个加密网络协议，它能让你在一个不安全的网络上安全地远程登陆和使用其他网络服务） 在Ubuntu的终端你可以用以下几个命令之一来登陆远程服务器。 $ ssh user@host $ ssh -p port host 通过密钥链接： $ ssh -i key.pem us
nohup 的作用可以将程序以忽略挂起信号（SIGHUP）的方式运行。常见的用法是和& 命令一同使用，将命令放置到后台运行，即使终端挂掉，进程会忽略挂起信号，继续运行。鸟哥Linux私房菜完整版
这个专题主要是一些日常用到的Python程序，不定期更新~~ 环境要求: Python版本:Python 3.6 系统要求:Windows 10(7应该可以，未测试) 权限要求:需要以管理员权限运行
说明： 在shell中要获取java版本号最基本的思路就是从java -version 的输出内容中解析出版本号，但是java -version 的输出并不是输出到默认的stdout，而是stderr,所以要想从java -version 的输出解析出java版本号，就要将java -version 的输出重定向，上面脚本中2>&1就是将原本输出到stderr中的内容重定向输出到stdout,这样就可以将java -version的输出通过管道|输入到sed,awk这些工具去处理了.
原理非常简单，当在以上两种场景时，无法直接连接到webshell时，可以换一种策略。让webshell主动连接自己，而不是自己连接webshell。此时，又会产生两个问题。 一webshell如何自动自我唤醒自动发送连接； 二如何监听webshell发送的连接；
在日常使用Linux命令时候，经常使用重定向或者管道的方式处理命令的结果。以前对这两个命令的使用场景存在一些困惑，所以本文对这两个命令进行详细的总结。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
