https://towardsdatascience.com/4-awesome-tips-for-enhancing-jupyter-notebooks-4d8905f926c5
链接 | https://towardsdatascience.com/4-awesome-tips-for-enhancing-jupyter-notebooks-4d8905f926c5
在Linux系统中，awk是一个功能强大的编辑工具，逐行读取输入文本，并根据指定的匹配模式进行查找，对符合条件的内容进行格式化输出或过滤处理，可以在无交互的情况下实现相当复杂的文本操作，被我们运维人员广泛应用于shell脚本，完成各中自动化配置任务。
上一篇文章更新还是在51前，最近发生了很多事情了，全国各地的疫情又有蔓延的趋势，北京朝阳区都已经开始实施居家办公。各位小伙伴请注意安全，安全平安的度过这个疫情。
接上一篇《Tcpdump流量自动化测试上篇》讲到通过自动化的方式获取到Pcap文件，今天来讲讲怎么用Wireshark来自动分析统计Pcap包中指定的流量。
在Linux/UNIX系统中，awk是一个功能强大的编辑工具，逐行读取输入文本，并根据指定的匹配模式进行查找，对符合条件的内容进行格式化输出或者过滤处理，可以在无交互的情况下实现相当复杂的文本操作，被广泛应用于Shell脚本，完成各种自动化配置任务。
11.1使用多个命令 $date;who // 命令列表，加入分号就可以，这样会依次执行。参见5.2.1节 注意区分$(date;who)，这个是进程列表，会生成一个子shell来执行 Shell脚本的关键在于输入多个命令并处理每个命令的结果，甚至需要将一个命令的结果传给另外一个命令。 Shell可以让你将多个命令串起来，一次性完成。 上面的date;who可以写入一个文件，这样就不用在命令行敲命令了，运行这个文本文件就好了。 11.2 创建shell脚本文件 第一行必须这样：指定要使用的shell
linux操作系统包含内核kernel，人机交互程序与应用，其中shell就属于人机交互程序。
检查不是由你运行的程序 难度：高级 应用程序：bash（译注：UNIX或者LINUX的shell） 想象下这个场景-你已经准备好了要和同事在办公室里对战一局快速的Crack Attack（译注：一款免费的OpenGL游戏，类似俄罗斯方块），不料却发现，当你正准备要击败你这个傲慢的下属时，方块却停止了-是什么让你的机器 变得这么慢？这肯定是因为其他的用户运用他们娴熟的经验来盗取你宝贵的CPU时间、服务器或者其他的诡异方式，真烦人！ 好，让我们列举出系统中所有不是由你运行的程序！ ps aux | grep
Be kind; everyone you meet is fighting a hard battle.
adb shell ls 后面可以跟一些可选参数进行过滤查看不同的列表，可用参数及含义如下：
Shell简介 Shell 是一个 C 语言编写的脚本语言，它是用户与 Linux 的桥梁，用户输入命令交给 Shell 解释处理Shell 将相应的操作传递给内核（Kernel），内核把处理的结果输出显示到屏幕给用户. Shell分为两类 图形界面 Shell（GUI Shell） GUI为 Unix 或者类 Unix 操作系统构造一个功能完善、操作简单以及界面友好的桌面环境。主流桌面环境有 KDE，Gnome 等。 命令行界面 Shell（CLI Shell） CLI是在用户提示符下键入可
system和exec函数可能被配置文件禁用，可以通过修改php配置文件删除被禁用的函数。
前面讲解了ipython里面的一些核心知识点，包括它的优势所在、快捷键操作、内省、什么是魔术命令等等，本文将在前文的基础之上，进一步拓展，讲解ipython的进阶知识点。
因为最近下班前都要拿机子搞压测，所以这段时间对shell脚本比较感兴趣，用chatGPT写shell脚本很方便。
这两个工具能够极大简化需要进行的数据处理任务。 19.1 文本处理 能轻松实现自动格式化、插入、修改或删除文本元素的简单命令行编辑。 sed和gawk就具备上述功能 19.1.1 sed编辑器 被称为流编辑器。 流编辑器会在编辑器处理数据之前预先提供的一组规则来编辑数据流。 sed根据命令来处理数据流中的数据。命令可以从命令行输入，也可以存储在一个命令文本文件中。 sed编辑器会执行下列操作： 1）一次从输入中读取一行数据 2）根据所提供的编辑命令匹配数据 3）按照命令修改流中的数据 4）将新的数据输出到S
通过编写Shell命令发送给linux内核去执行, 操作就是计算机硬件. 所以Shell命令是用户操作计算机硬件的桥梁,
小编编程资质一般，刚出道的时候使用的是windows来做程序开发，平时linux命令的知识仅限于在学校里玩ubuntu的时候学到的那丁点。在一次偶然看见项目的主程敲着复杂的shell单行命令来处理日志的时候感到惊讶不已。后来自己自学了一点shell编程，刚看完一本书没过多久就忘记了，因为工作中用到的实在太少，而且命令如此之多，学了一个忘了另一个，始终摸不着门道在哪。
你是否注意到，电影中超级讨厌的黑客仅仅只需键入几行指令，盯着黑底绿字的屏幕就能轻易渗透最安全的银行系统，将银行账户洗劫一空。这个人是如何只需敲击几下键盘便能畅通无阻访问所有密码并控制所有的隐藏摄像的呢？电影制作方如何达成这一效果并不好说，这有悖原理！但也许这就是他们的目的：通过镜头告诉观众 “commandline”是多么强大的工具！
---------------------------------接Part 2------------------------------
在Makefile中可以使用函数来处理文本，从而让我们的命令或是规则更为灵活和智能。make所支持的函数也不算很多，不过已经足够我们的操作了。函数调用后，函数的返回值可以当做变量来使用。
为了更加方便快捷的使用Jupyter Notebook，本文将会介绍一些相关的使用技巧。
1 – 3章 1.1 man手册： 分1 - 9个区域，可以认为是一个一个小节 把man手册理解为一本书 第一节：可执行程序或shell命令 第二节：系统调用 第三节：库调用 第四节：特殊文件 第五节
Android 调试桥(adb)是多种用途的工具，该工具可以帮助你你管理设备或模拟器 的状态。
Android Debug Bridge，Android调试桥接器，简称adb，是用于管理模拟器或真机状态的万能工具， 采用了客户端-服务器模型，包括三个部分：
Shell是一种用于与操作系统内核进行交互的命令行解释器（command-line interpreter）。它是一种命令语言，提供了一种通过键入文本命令来执行操作的方式。Shell还可以解释和执行脚本文件，这些脚本文件包含了一系列按顺序执行的命令。
输入和输出通过In/Out标签标示，实际上In和Out分别是两个变量，保存了最近的输入输出信息。可以直接通过下标获取之前的输入或者输出。
相信大家看过《简明Vim教程》也玩了《Vim大冒险》的游戏了，相信大家对Vim都有一个好的入门了。我在这里把我日常用Vim编程的一些技巧列出来给大家看看，希望对大家有用，另外，也是一个抛砖引玉的过程，也希望大家把你们的技巧跟贴一下，我会更新到这篇文章中。另外，这篇文章里的这些技巧全都是vim原生态的，不需要你安装什么插件。我的Vim的版本是7.2。
正则介绍 正则就是一串有规律的字符串 掌握好正则对编写shell脚本帮助交大 各种编程语言中都有正则，原理是一样的 grep/egrep、sed、awk grep命令 grep命令，它是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹配的行打印出来。 格式：grep [-cinvABC] 'word' filename -c 行数 -i 不区分大小写 -n 显示行号 -v 取反 -r 遍历所有子目录 -A 后面跟数字，过滤出符合要求的行以及 下面 n行 -B
我希望在ubuntu服务器上部署的nginx + uwsgi应用，运行出现错误时我能尽快知道并解决。应用运行中，运行日志保存在/tmp/ypk.log文件中，若出新错误，日志中会写入如DataError: invalid input syntax for type date: "3年"……类似记录。我的思路是定时扫描这个日志文件，如果出现新的Error关键字，就将相关的信息发至我的邮箱。这样的任务，非Shell脚本语言不能实现。
Linux 最重要的三个命令在业界被称为三剑客，它们是：awk、sed、grep。sed 已经在上篇中讲过，本文要讲的是 grep 命令。
调试Android程序时，我们经常需要使用adb shell命令。adb是Android Debug Bridge的缩写，它充当调试桥梁的作用，就像一条连接开发机和设备之间的桥梁。
为何给靶机发送这条执行命令就会自动连接到本地计算机,并且出发实时通讯机制(ps:有点类似oicq,前生就是用的这种模式开发的即时通讯)
来源：https://blog.ansheng.me/article/examples-of-linux-regular-expressions
正则表达式是一种字符模式，用于在查找过程中匹配制定的字符。 元字符通常在Linux中分为两类： Shell元字符，由Linux Shell进行解析； 正则表达式元字符，由vi/grep/sed/awk等文本处理工具进行解析； 正则表达式一般以文本行进行处理，在进行下面实例之前，先为grep命令设置--color参数： 这样每次过滤出来的字符串都会带色彩了。 在开始之前还需要做一件事情，就是创建一个测试用的re-file文件，内容如下： 文件内容摘录自<<UNIX/SHELL范例精解第四版>> 正则表达式元
前言 只有光头才能变强 这个学期开了Linux的课程了，授课的老师也是比较负责任的一位。总的来说也算是比较系统地学习了一下Linux了~~~ 本文章主要是总结Linux的基础操作以及一些简单的概念~如果不熟悉的同学可下个Linux来玩玩(或者去买一个服务器玩玩【学生版的不是很贵】)，对于开发者来说，能使用Linux做一些基本的操作是必要的！ 那么接下来就开始吧，当然了我的Linux仅仅是入门水平，如果有错的地方还需请大家多多包涵，并不吝在评论区指出错误~ 一、为什么我们要学习Linux 相信大部分人的
前言 只有光头才能变强 这个学期开了Linux的课程了，授课的老师也是比较负责任的一位。总的来说也算是比较系统地学习了一下Linux了~~~ 本文章主要是总结Linux的基础操作以及一些简单的概念~如果不熟悉的同学可下个Linux来玩玩(或者去买一个服务器玩玩【学生版的不是很贵】)，对于开发者来说，能使用Linux做一些基本的操作是必要的！ 那么接下来就开始吧，当然了我的Linux仅仅是入门水平，如果有错的地方还需请大家多多包涵，并不吝在评论区指出错误~ 一、为什么我们要学习Linux 相信大部分人的PC端
前言 平常工作需要频繁使用终端工具，有一个好的命令行终端工具是非常重要的。 尤其是使用mac的小伙伴，估计不少人都觉得iterm2才是最好的终端工具。 其实起初我也是这么觉得的，但是最近直到我使用了这款开源的终端工具，我可以负责任的说，iterm2可以放在角落吃灰去了。 我重度使用了2天，无论从颜值，性能，效率和创新上，都碾压同类的终端工具。我完全找不到任何理由来放弃这么优秀的一款工具。整个使用的体验非常舒服，甚至于觉得，这，就是我心中现代化终端工具该有的样子！ 介绍 这款终端工具叫：Warp 或许有的小伙伴在其他平台曾经看到过。那没关系，我这里再给安利下。 这款工具是完全开源的，开源托管仓库在github上: Github：https://github.com/warpdotdev/Warp 官网：https://www.warp.dev/ 官网长这样：
正则表达式一般以文本行进行处理，在进行下面实例之前，先为grep命令设置--color参数：
主要是想起来自己vim还不太会用，所以说记得这个课程的vim教学不错，干脆就花时间看看整套课程，重点看一下vim的使用，我看的版本是社区的中文翻译版的文档，这些工具大多我都已经能够熟练使用了，所以就没去看英文的视频感觉有点浪费时间。
adb devices 查询电脑已连接的设备 adb shell pm list packages 列出目标设备中已安装的应用程序包 adb shell pm list packages -f 列出目标设备中已安装的应用程序包的具体位置 adb uninstall xxx 卸载或删除的应用包xxx adb pull /data/app/com.tencent.tbs-1/base.apk 将手机已安装程序的apk下载到你所在的文件夹
本节在上一节调查表的基础上，做一个知识的扩展。我们主要学会如何使用shell命令，同时开启循环的感觉。
0x00 PowerShell的内网渗透之旅 内网渗透一直以来都是一个热门话题，试想在一个大型的内网环境下，当我们拿到了内网windows机器后，该如何通过他们去获取更多的所需资源，这就需要进行内网渗透了。然而在内网渗透中，除了kali、metasploit等高能的存在以外，还有一款神器也常常容易遭到忽略----PowerShell，因此本次学习将从PowerShell基础语法切入以及利用PowerShell脚本实现的PowerSploit框架演示内网渗透实例。 0x01 PowerShell简介及特性
1分钟懂awk-技不在深，够用就行 1.AWK （1）Aho、Weinberger、Kernighan三位发明者名字首字母； （2）一个行文本处理工具； 2.基本原理 2.1原理：逐行处理文件中的数据 2.2语法： awk 'pattern + {action}' 说明： （1）单引号”是为了和shell命令区分开； （2）大括号{}表示一个命令分组； （3）pattern是一个过滤器，表示命中pattern的行才进行action处理； （4）action是处理动作； （5）使用#作为注释； 例子：显示he
1.AWK （1）Aho、Weinberger、Kernighan三位发明者名字首字母； （2）一个行文本处理工具；
1分钟懂awk-技不在深，够用就行 1.什么是AWK （1）Aho、Weinberger、Kernighan三位发明者名字首字母； （2）一个行文本处理工具； 2.AWK基本原理 2.1原理：逐行处理文件中的数据 2.2语法： awk 'pattern + {action}' 说明： （1）单引号''是为了和shell命令区分开； （2）大括号{}表示一个命令分组； （3）pattern是一个过滤器，表示命中pattern的行才进行action处理； （4）action是处理动作； （5）使用#作为注释；
1).从历史命令中过滤出所有的”find”命令出来，截图(history|grep)
1、请求服务器端要对用户输入的数据进行校验。 2、在处理输入之前，验证所有客户端请求的数据，包括请求参数、URL和HTTP头的内容。 3、验证输入数据的类型、长度和数据格式是否正确。 4、使用白名单验证允许的输入字符而不是直接使用黑名单。 5、在敏感字符输入后要进行转义或编码。 6、明确所有输入正确的字符集。 7、避免动态拼接的SQL语句，如果使用要对特殊字符进行语法转义。 8、给用户设置满足正常使用最小权限
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
