第二章也结束了，不知道各位老哥学的怎么样，有问题可以留言，看到就回。最近啥都学，学的脑子乱，准备理清下思路分享一下信息收集，至少目前是我的方法，信息收集再好，也奈何不了各种难题，正所谓信息收集两小时，渗透测试五分钟，GG...
thr0cyte，Gr33k，花花，MrTools，R1ght0us，7089bAt
公司组织的一个机器学习的小比赛， 数据下载地址 。大意是根据用户所安装的 APP (加密)预测用户的性别，训练数据标记 label (性别)，典型的监督学习方案。
数据是机器学习研究和开发的基础，划分数据能够帮助构建机器学习模型，以及评估和基准化模型。
在这天地间，流传这两大神器的故事：据说Emacs是神的编辑器，而Vim是编辑器之神。正所谓，工欲善其事,必先利其器。今天就和大家分享一下关于编辑器之神Vim的传说。 一、Vim的历史 1.下图是关于几
首先正则表达式分为三类（man grep可以看到，分别是basic RegExs，extended RegExs，perl RegExs）
推荐阅读：Jeffrey Friedl 《精通正则表达式（第3版）》，本文是该书的读书笔记。
本文介绍的是 ACL 2020 论文《Double-Hard Debias: Tailoring Word Embeddings for Gender Bias Mitigation》，论文作者来自弗吉尼亚大学、salesforce。
随着人工智能系统和应用程序在我们日常生活中的广泛应用，人工智能已经成为了辅助人们决策的重要工具，例如，使用推荐系统算法做出电影推荐、购买产品推荐等，使用预测和分析系统用于贷款申请、约会和雇佣等高风险决策。美国法院使用了一款人工智能软件—「选择性制裁罪犯管理档案」(Correctional Offender Management Profiling for Alternative Sanctions，COMPAS），用于预测一个人再次犯罪的风险，辅助法官决定是释放罪犯，还是把罪犯关进监狱。对该软件的一项调查发现了对非洲裔美国人的一种偏见：相较于白人罪犯，COMPAS 更有可能给非洲裔美国人罪犯打出较高的潜在风险分数，从而不予以释放 [1]。
这种任务常见于文本处理、数据分析和文本挖掘领域。通过统计单词出现的次数，可以分析文本的关键词、词频分布等信息，有助于对文本数据进行更深入的分析。
核心观点，AI是程序员跨环境执法好帮手。之前我了解一门语言。到用它做些什么需要一周，现在立刻马上。
我们知道在 Linux 中，“一切皆文件”，作为系统管理员或者程序员我们每天都需要和大量的文本文件打交道。Linux 系统为我们提供了三个文本处理工具：grep, sed, 和 awk，它们也被称为 Linux 文本处理的三剑客被大家广泛使用。今天先和大家介绍一下 grep 的以及正则表达式的用法，因为 grep 只有和正则表达式结合在一起才会发挥出它强大的威力。
这里以kevin.txt文件内容（单词由一个或多个空格字符分隔）为例进行简单说明 [root@centos6-test06 ~]# cat /root/kevin.txt the world kevin is the is world grace the kevin art the kevin the is kevin 统计kevin.txt文件中出现的单词次数 第一种方法：结合grep和awk编写shell脚本 脚本内容如下： [root@centos6-test06 ~]# cat count.sh
文 | 豌豆 来源 | 菜鸟教程 豌豆贴心提醒，本文阅读时间5分钟，文末有秘密！ Linux col命令 Linux col命令用于过滤控制字符。 在许多UNIX说明文件里，都有RLF控制字符
在许多UNIX说明文件里，都有RLF控制字符。当我们运用shell特殊字符">"和">>"，把说明文件的内容输出成纯文本文件时，控制字符会变成乱码，col指令则能有效滤除这些控制字符。
在文中，我们将研习如何用Python读取文件，然后，向文件写入内容并再次保存它。使用Python读写某种特别类型的文件，例如：JSON、CSV、Excel等，一般会有专门的模块。但是，在这里，我们将用Python打开文本文件(.txt)。
grep 是一个常用的文本搜索工具，通常用于在文本文件中查找特定模式或字符串。它的名字是 "global regular expression print" 的缩写。可以帮助你在文本文件中查找特定的内容，无论是简单的字符串还是复杂的正则表达式模式。
Linux中的三个命令awk、sed、grep在业界被称为“三剑客”，grep擅长查找，sed擅长取行和替换，awk擅长运算。
VB程序题：设计一个如图2.8.4所示的应用程序，要求如下： （1.）单击“打开文件”按钮弹出一个通用对话框，选择文件后显示在文本框中 （2）.单击“保存文件”按钮后弹出通用对话框，确定文件名后保存。 （3） 单击“查找下一个”按钮后在文本文件中查找单词“VB”，找到后以高亮度显示。
自然语言处理(NLP)的正式定义：是一个使用计算机科学、人工智能(AI)和形式语言学概念来分析自然语言的研究领域。不太正式的定义表明：它是一组工具，用于从自然语言源(如web页面和文本文档)获取有意义和有用的信息。 NLP工具的实现一般是基于机器学习与深度学习、其它算法(Lucene Core)；基于前两者的实现是比较流行且持续在探索演进。
Enter an adjective: silly Enter a noun: chandelier Enter a verb: screamed Enter a noun: pickup truck
引言： 在Linux系统中，grep（Global Regular Expression Print）是一个强大的命令行工具，它用于在文本文件中搜索指定的模式。grep命令不仅仅是一个简单的搜索工具，它还支持正则表达式，可以通过灵活的选项和参数组合来实现更复杂的搜索和匹配操作。本文将详细介绍grep命令的用法，帮助读者充分了解并灵活应用这个实用工具。
离线数据分析平台实战——050MapReduce结构以及编程模型介绍(做过MR程序略过) MapReduce结构介绍 MapReduce(YARN)是Hadoop提供的一种处理海量数据的并行编程模型和计算框架，用于对大规模的数据进行并行计算。 主要由resourcemanager和nodemanager两类节点构成。 其中resourcemanager主要负责集群资源管理， nodemanager负责节点的资源管理。 除此之外，当运行mapreduce任务的时候，会产生ApplicationMast
Linux的命令行是一个非常强大的工具。如果你知道如何利用Linux命令，你可以轻松地在Linux系统中执行各种任务。在这篇文章中，我们将介绍从A到Z的Linux命令。
在 Linux 系统中，Grep 是一个强大的文本搜索工具，它允许您通过正则表达式来匹配和搜索文本模式。正则表达式是一种强大的模式匹配语言，它可以帮助您在文本文件中快速定位和提取特定模式的内容。本文将详细介绍如何在 Linux 中使用 Grep 和正则表达式进行文本搜索。
VI改进的文本编辑器或VIM文本编辑器是一个可用于CLI和GUI界面的开源解决方案。在本篇文章中，您将找到在CLI界面中使用文本文件时所需的大部分Vim命令。
1. 题目 有个内含单词的超大文本文件，给定任意两个单词，找出在这个文件中这两个单词的最短距离(相隔单词数)。 如果寻找过程在这个文件中会重复多次，而每次寻找的单词不同，你能对此优化吗? 示例： 输
每当需要分析或修改存储在文件中的信息时，读取文件都很有用，对数据分析应用程序来说也非常重要。
前言：最近写了一个bat用于快速编译swf至目标目录，想利用FINDSTR命令通过匹配目标目录名称，匹配数量大概600多个，发现匹配耗时比较久，大概花费10余秒，因此还是放弃字符匹配，乖乖拼出全称来定位目录。感觉bat的运行效率是比较低的。
chattr 命令用于改变文件属性 这项指令可改变存放在ext2文件系统上的文件或目录属性，这些属性共有以下8种模式：
文章目录 常用 Linux 命令的基本使用 原因 基本使用 Linux 终端命令格式 终端命令格式 查阅命令帮助信息 `--help` man 文件和目录常用命令 终端实用技巧 计算机中文件大小的表示方式（科普） ls 通配符（常用于匹配） 查看目录内容 `ls` `cd` 创建和删除 `touch` `mkdir` `rm` 拷贝和移动文件 `tree` `cp` `mv` 查看文件内容 `cat` `more` `grep` 其他 `echo 文字内容` 重定向 `>` 和 `>>` 管道 `|` 常用
在面试时，当面试官询问你是否会熟练使用Linux中的vim时，你是否会自信地回答：当然了，小菜一碟！不就是打开vim编辑器，进入编辑模式（i），退出编辑模式（esc），最后保存文件并退出（wq）嘛！这谁不会？，然后你得意洋洋地等待面试官的下一轮提问，然而，面试官却在沉默片刻后突然问道：那你知道如何在vim中进行查找、替换、复制、粘贴吗？此时，你是不是愣住了，心想：咋还有这玩意呢，没听说过啊？于是你在内心默默流泪，却只能支支吾吾地回答：嗯……这个……然后面试官就笑了笑……
http://bathome.l3.wuyou.com/thread-11159-1-6.html
cut 译为“剪切, 切割” ，它是一个强大文本处理工具，它可以将文本按列进行划分处理。cut 命令逐行读入文本，然后按列划分字段并进行提取、输出等操作。
一棵树最上面的点称为根节点，如果一个节点下面连接多个节点，那么该节点称为父节点，下面的节点称为子节点，二叉树的每一个节点最多有2个子节点，一个节点子节点的个数称为度，二叉树每个节点的度只能是0,1,2中的一个，度为0的节点称为叶节点。
---------------------------------接Part 3------------------------------
我们先不解释什么是”正则表达式”，因为在本来就不明白的情况下，再去看一些专业的解释，会更加不明白。
项目出现异常，要定位问题，查看日志是最常用的方法，在Linux系统查看一些日志文件，我们一般会使用tail、cat等命令，下面总结归纳一下这些常用的命令。
本章主要介绍屏幕编辑器vi的概述与常用命令。需要学生亲自动手实践，在Linux系统上使用vi的常用命令。
vim有三种操作模式，分别是命令模式（Command mode）、输入模式（Insert mode）和底线命令模式（Last line mode）。
算法的重要性，我就不多说了吧，想去大厂，就必须要经过基础知识和业务逻辑面试+算法面试。所以，为了提高大家的算法能力，这个公众号后续每天带大家做一道算法题，题目就从LeetCode上面选 ！
视频在这里 p12-p17 p15 文件或目录属性 查看文本文件 $ cat wc_test hello this is the first end wc $ wc wc_test 11 6 34 wc_test 11为行数 6为单词数（以空格计） 34为字节数 二进制文件夹 od 可执行文件运行需要指定一个目录 查看当前目录文件大小 du -h 磁盘的使用情况 df -h p15 which命令 查找外部命令 在哪个路径查找到的这个命令 $ which ls /bin/ls
Dirbuster是一种履带式和粗暴式的混合物; 它遵循它找到的页面中的所有链接，但也为可能的文件尝试不同的名称。这些名称可能位于与我们使用的文件类似的文件中，也可能由Dirbuster使用Pure Brute Force选项自动生成，并设置字符集以及生成的单词的最小和最大长度。
以上程序在Turbo C环境下可直接编译运行。 在程序运行过程中，需要拥护输入一篇文章，文章结束请按ctrl+z，此时屏幕上出现 ^z,回车即可！ 同时，如将此程序编译成EXE文件后，可在DOS环境下，运用管道来控制数据的输入及输出。 如要测试文本文件 README.TXT 中行数，假定上述程序生成的EXE文件为LINECNT，则采用： LINECNT < README.TXT 即可显示README.TXT中的行数。
众所周知，在 Linux 系统中，awk、grep、sed 这三个命令，因其功能强大，日常使用频繁，在 Linux 系统下处理文本是个非常不错的神器，grep 用于查找，sed 用于取行和替换，awk 用于运算。因此，这三个命令一直都有着文本三剑客的称号！
对于一个文本格式的配置文件，可以利用不同的查看方式来获知文件内容，如直接显示整个文件内容，分页查看文件内容，或者只查看文件开头或末尾的部分内容，在Linux操作系统中，分别由不同的命令来实现这些操作。
有时在遇到一个文本需要统计文本内词汇的次数 的时候 ，可以用一个简单的python程序来实现。
显示命令路径以及命令相关的帮助手册文件路径，可以根据参数限定只查询命令、源文件和man文件。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
