在Linux中curl是一个利用URL规则在命令行下工作的文件传输工具，可以说是一款很强大的http命令行工具。它支持文件的上传和下载，是综合传输工具，但按传统，习惯称url为下载工具。
哇，那个VSCode的终端好丑，一定要整理一下才可以。 转到这个目录 cd /usr/share/fonts/truetype/ 下载我们的字体 sudo git clone https://github.com/abertsch/Menlo-for-Powerline.git 刷新字体 sudo fc-cache -f -v 回到 Vs Code的用户设置.json 中加入以下代码 "terminal.integrated.fontFamily": "Menlo for Powerline", 或者
之前在某乎上看见一篇关于《为什么很多程序员都建议使用 Linux》的文章，结合我自身关于Linux的使用经验。心血来潮得写了一段关于我在Linux系统部署爬虫程序的心得，希望结识更多的爬虫技术大佬，一起游弋在代码世界中。
累了好几天，重装了十几遍终于把ubuntu7.10搞定到了我自认为完美的状态了。现在总结一下安装过程（按操作顺序记录）： 1.在xp下不管用pqmajac还是其他硬盘分区工具分出10G的空余分区来（实验阶段10G尝试下），不知道是不是必须得把空余分区放到硬盘的最后，似乎用中间分区会出现安装错误。 2.开始安装，简单步骤省略...这里注意的是分区时，一个swap：2G,logical，结束。一个/,ext3,8G,开始。还有就是安装过程中保持网络通畅，因为过程中要下载语言包支持。 3.安装结束。 －－－－－－－－－－－ 为了避免在以后的配置过程中出现错误，这里推荐用clonezilla live（ghost 4 linux）做备份，clonezilla下载地址：[url]http://clonezilla.sourceforge.net/download/sourceforge/[/url] 下载*.iso刻张碟子出来，从碟子启动进入clonezilla live进行备份，使用还是相当简单的。 －－－－－－－－－－－ 4.用clonezilla live做一次备份，起名original 5.装好ubuntu7.10后，第一件事情就是安装源了： sudo cp /etc/apt/sources.list /etc/apt/sources.list_backup sudo gedit /etc/apt/sources.list 将内容全部替换成： deb [url]http://ubuntu.cn99.com/ubuntu[/url] gutsy main restricted universe multiverse deb-src [url]http://ubuntu.cn99.com/ubuntu[/url] gutsy main restricted universe multiverse deb [url]http://ubuntu.cn99.com/ubuntu[/url] gutsy-backports main restricted universe multiverse deb-src [url]http://ubuntu.cn99.com/ubuntu[/url] gutsy-backports main restricted universe multiverse deb [url]http://ubuntu.cn99.com/ubuntu[/url] gutsy-proposed main restricted universe multiverse deb-src [url]http://ubuntu.cn99.com/ubuntu[/url] gutsy-proposed main restricted universe multiverse deb [url]http://ubuntu.cn99.com/ubuntu[/url] gutsy-security main restricted universe multiverse deb-src [url]http://ubuntu.cn99.com/ubuntu[/url] gutsy-security main restricted universe multiverse deb [url]http://ubuntu.cn99.com/ubuntu[/url] gutsy-updates main restricted universe multiverse deb-src [url]http://ubuntu.cn99.com/ubuntu[/url] gutsy-updates main restricted universe multiverse －－－－更新软件包： sudo apt-get update sudo apt-get dist-upgrade --------------------------------这里更新软件包需要漫长的时间（取决于网速了） 可以在这个时候作一些比较简单的配置： －－－－－－－－－－－－ 把桌面，把计算机、主文件夹、回收站放到桌面上，把挂载的卷去掉： gconf-editor 到/apps/nautilus/desktop/分支下，去掉volumes_visible前面的复选框，勾上trash_icon_visible，home_icon_visible，computer_icon_visible前面的复选框。 －－－－－－－－－－－－ 调整上下任务栏里面的内容 －－－－－－－－－－－－ 开通root登录: 1.修改root密码： sudo passwd root 2.系统->系统管理->登录窗口,在安全选项卡里“允许本地系统管理员登录”打勾 以后就可以通过切换用户从登录窗口用root权限登录
PetaLinux基于Yocto，编译Linux内核、文件系统等，非常庞大，需要的软件很多。如果从网络下载，可能消耗比较长的时间。 本文基于Xilinx PetaLinux 2020.2.
实际运营时一般设置为很接近CPU的线程数，比如说CPU是8线程，一般设置为6、7。
上两张文章，我们说了 hexo 部署、主题的切换、博文的创建、MarkDown 简单使用和 hexo 部署到 GitHub Pages。
可以看到，scrapy单机模式，通过一个scrapy引擎通过一个调度器，将Requests队列中的request请求发给下载器，进行页面的爬取。
WPScan 是一个扫描 WordPress 漏洞的黑盒子扫描器，它可以为所有 Web 开发人员扫描 WordPress 漏洞并在他们开发前找到并解决问题。我们还使用了 Nikto ，它是一款非常棒的 Web 服务器评估工具，我们认为这个工具应该成为所有针对 WordPress网站进行的渗透测试的一部分。 Wordpress 作为三大建站模板之一，在全世界范围内有大量的用户，这也导致白帽子都会去跟踪 WordPress 的安全漏洞，Wordpress 自诞生起也出现了很多漏洞。 Wordpress 还可以使用插件、主题。于是 Wordpress 本身很难挖掘什么安全问题的时候，安全研究者开始研究其插件、主题的漏洞。通过插件、主题的漏洞去渗透Wordpress 站点，于是 WPScan应运而生，收集 Wordpress 的各种漏洞，形成一个 Wordpress 专用扫描器。该扫描器可以实现获取站点用户名，获取安装的所有插件、主题，以及存在漏洞的插件、主题，并提供漏洞信息。同时还可以实现对未加防护的 Wordpress 站点暴力破解用户名密码。
生产环境：Rocky Linux release 8.3, gitlab-ce-13.9.4-ce, Python 3.6.8
文章声明：此文基于木子实操撰写 生产环境：Rocky Linux release 8.3, gitlab-ce-13.9.4-ce, Python 3.6.8 问题关键字：Python,Gitlab API,Python对接Gitlab API,Python批量设置Gitlab镜像仓库
安装 [url]http://sourceforge.net/projects/awstats/[/url] 下载安装包后： GNU/Linux：tar zxf awstats-version.tgz awstats的脚本和静态文件缺省都在wwwroot目录下：将cgi-bin目录下的文件都部署到 cgi-bin/目录下：/home/apache/cgi-bin/awstats/ mv awstats-version/wwwroot/cgi-bin /path/to/apache/cgi-bin/awstats 把图标等文件目录复制到WEB的HTML文件发布目录下，例如：/home/apache/htdocs/ 下发布 更多的批量更新脚本等在tools 目录下，可以一并放到cgi-bin/awstats/ 目录下 升级国内主要 搜索引擎和蜘蛛定义，安装GeoIP的应用库：C [url]http://www.maxmind.com/download/geoip/api/c/[/url] 解包，编译安装 perl -MCPAN -e ‘install “Geo::IP”‘ 或者使用纯Perl包 perl -MCPAN -e ‘install “Geo::IP::PurePerl”‘ 下载GeoIP/GeoIPCityLite包：解包并部署到awstats目录下:
一般来说，在进行实际应用的开发过程中，应用会拥有不同的运行环境，通常会有以下环境：
在视频监控行业领域，海康当之无愧是老大，稳坐第一的宝座很多年了，近期需要将视频监控系统改成采用海康sdk的内核，于是特意去查阅了sdk的使用手册，sdk相关的文档和文件可以直接官网下载到，而且是经常更新的，目前提供了windows和linux上的，win上的sdk还是更新比较快而且完整的，但是在linux上的就不得不吐槽下了，很旧很旧的版本，不要看打包文件很新，其实里面的内容是很老的，不知道为啥官方不也同步更新linux上的sdk，也许现在linux上的需求还不是很多吧，但是随着国产化的大力推进，估计不久的将来linux上的也会慢慢的完善起来的，说不定官方早就有了此计划，还有一种个人的猜测是linux上的开发包估计官方自己内部用的新的，可能打算自己做linux上的各种客户端吧。
什么是持续集成呢？Continuous integration（CI）。持续集成是一种软件开发实践，即团队开发成员经常集成他们的工作，通常每个成员至少集成一次，也就意味着每天可能会发生多次集成。每次集成都通过自动化的构建（包括编译，发布，自动化测试）来验证，从而尽快地发现集成错误。许多团队发现这个过程可以大大减少集成的问题，让团队能够更快的开发内聚的软件。
2、pom.xml中配置 distributionManagement块，执行deploy就可以了
本文介绍了如何利用Python的requests库和BeautifulSoup库，对给定的网页进行抓取，获取到网页中的一些信息，并对这些信息进行解析和处理。具体实现包括利用requests库发起HTTP请求，获取到网页的HTML内容；利用BeautifulSoup库对HTML内容进行解析，提取出所需的信息；以及对提取的信息进行格式化处理。最后，介绍了如何使用代理IP池和自定义User-Agent池来对爬虫程序进行伪装，避免被网站发现。
采用ffmpeg解码，是所有视频监控开发人员必备的技能，绕不过去的一个玩意，甚至可以说是所有音视频开发人员的必备技能。FFmpeg是一套可以用来记录、转换数字音频、视频，并能将其转化为流的开源计算机程序。它包括了目前领先的音/视频编码库libavcodec。 FFmpeg是在 Linux 下开发出来的，但它可以在包括 Windows 在内的大多数操作系统中编译。这个项目是由 Fabrice Bellard 发起的，现在由 Michael Niedermayer 主持。可以轻易地实现多种视频格式之间的相互转换，例如可以将摄录下的视频avi等转成现在视频网站所采用的flv格式。
为了提高爬虫程序的效率，我们通常使用代理IP来同时访问多个网站，避免被封禁。但是，使用代理IP也会带来一些问题。在Linux系统下，我们经常会遇到TIME_WAIT和CLOSE_WAIT状态的问题。
XRay是长亭科技洞鉴核心引擎中提取出的社区版漏洞扫描神器，属于一款功能十分强大的国产被动扫描工具，其应用范围涵括，Web通用漏洞扫描、被动代理扫描、社区POC集成……
本文将深入介绍Linux文件系统的结构，从根目录到用户主目录的层级关系。我们将了解文件系统在Linux系统中的核心地位以及其广泛应用。通过本文，读者将能够更好地理解Linux文件系统的基本概念、重要目录，以及文件和目录权限的管理。同时，我们还将讨论文件系统的挂载、虚拟文件系统、磁盘配额管理以及文件系统的扩展和管理方法。
本文适合新手老手，有不对的地方欢迎指正！ 如果有什么问题或者建议，请务必留言， :-)
其中有一个资源是最新的（2023年10月）NC文章《Genome-wide association analysis of plasma lipidome identifies 495 genetic associations》里面的数据在GWAS catalog ，里面的索引号是 GCST90277238-GCST90277416，但是这个公众号的小伙伴却不知道该如何批量下载， 或者说发现规律去写代码，而且手动整理好全部的链接后下载然后把它当做是宝贝来宣传。。。。
背景环境：开发人员不能上外网，但又有一些比较特殊的站点需要用到，所有用squid进行透明代理上网，之前想到haproxy，后来查阅资料貌似haproxy只能转发不能代理上网。
1、今天遇到了需要手动输入http地址打开指定网页的需求，试着做一个用程序打开指定网页的功能，搜了一下，还真有一个现成的例子，稍加改造，实现自己的需求；
Electron作为一款跨平台的桌面应用端解决方案已经风靡全球。作为开发者，我们几乎不用关心与操作系统的交互，直接通过Web前端技术与Electron提供的API就可以完成桌面应用端的开发。
因为最近线上的Hadoop集群从mrv1升级到mrv2了，监控模板也跟着变动了。。
Linux 是使用最广泛的操作系统之一，在 Linux 上工作时，知道正确的命令可以节省大量时间，下面介绍几个经常使用的网络相关的命令。
原作者及原文链接：https://blog.csdn.net/c406495762/article/details/60137956
本文章首发于语雀! 通过各种高科技功能同步到Hajeekn 的博客 转眼望去,离上一篇已经有 7 天左右了,今天入手了一位大神写的flowerss bot 挺好用的,今天给大家安利一下搭建方法( 白 嫖 ) 首先呢，各位要注意下，flowerss bot 需要依赖一个 VPS，我知道你没钱买其实我也是辣，所以这篇教程用 Euserv 示范 白嫖 Euserv 鸡子的教程挺多的，各位可以自行 Bing 一下这边就不讲了。
更多奇怪的尝试就不说了，当时已经知道通过加参数运行可以指定编码，但是感觉那样还得按照系统改命令不够人性化，就一直在尝试。 最后还是放弃了，没找到方法，等以后真正系统学了Java再说吧。
curl是一个非常实用的、用来与服务器之间传输数据的工具；支持的协议包括 (DICT, FILE, FTP, FTPS, GOPHER, HTTP, HTTPS, IMAP, IMAPS, LDAP, LDAPS, POP3, POP3S, RTMP, RTSP, SCP, SFTP, SMTP, SMTPS, TELNET and TFTP)，curl设计为无用户交互下完成工作；curl提供了一大堆非常有用的功能，包括代理访问、用户认证、ftp上传下载、HTTP POST、SSL连接、cookie支持、断点续传…。
我们的PHP程序有时候需要定时执行，我们可以使用 ignore_user_abort 函数或是 在页面放置js让用户帮我们实现。但这两种方法都不太可靠，不稳定。我们可以借助Linux的Crontab工具来稳定可靠地触发执行PHP任务。
Grafana+Prometheus打造全方位立体监控系统 架构 还是接着我的K8s架构来： 安装 Exporter 下载并解压： 注意：Exporter 是部署在Node上面的，也就是我的192.1
Streama是一个在Java上运行的免费自托管流媒体服务器，您可以在Linux发行版上安装。 它的功能类似于Kodi和Plex，它只是个人选择的问题，你想使用哪一个。
保存http的response里面的cookie信息。内置option:-c（小写）
ProxyHandler()格式化IP，第一个参数，请求目标可能是http或者https,对应设置
此前的文章知行之桥2022版本升级之页面变化以及监控邮件答疑给大家分享了一些升级到知行之桥最新版本关于Web页面显示和监控邮件的一些问题，本篇将分享一些windows和Linux不同操作系统升级部署知行之桥最新版本的一些Q&A。
Intellij IDEA 有一个自己的官方的插件仓库，但是当我们的开发的 Intellij IDEA 的插件不能够对外公开时，我们就需要搭建自己的 Intellij IDEA 的插件仓库。前不久我们也尝试着使用Intellij IDEA自己开发一个插件点击打开链接。
关于光盘的挂载，之前我们已经讲过了，这里再深入介绍一点。之前我们挂载光驱使用的命令是: mount /dev/cdrom /media，我们使用ll /dev/cdrom 可以查看到，其实/dev/cdrom是一个软链接，它指向了同目录下的sr0，即/dev/s0，所以，真正的光驱设备文件是/dev/sr0。因此，我们也可以使用 mount /dev/sr0 /media实现光盘挂载。
基于python && selenium 不同ip（代理ip需自行查找或购买）， 随机user-agent（ua.txt 可自行添加修改）, 随机浏览器窗口大小（windsize.txt 可自行添加修改）， 循环访问urls.txt中网址，达到刷量效果 关于python-selenium 安装/使用，可看另一篇文章，不多介绍了 新建这4个文件，运行main.py即可 main.py #coding=utf-8 from selenium import webdriver import time impor
shell.openExternal 是 shell 模块的一个方法，允许使用操作系统桌面原生程序打开一个 URI
渗透测试(又称“pentesting”)是一种发现网络及其连接系统漏洞的好方法。渗透测试也被称为道德黑客入侵，这有助于解释它的确切含义——使用与恶意入侵者相似的工具，试图发现任何可能允许黑客访问你网络的问题和漏洞。
用ffmpeg来处理USB摄像头，是前段时间研究视频监控ffmpeg内核的时候搞定的，既然ffmpeg这么牛逼的库可以解析各种音视频，我想处理个本地USB摄像头应该也不是什么难事，果真搜索也是一大堆，当然主要也是因为有个项目的应用需要用到ffmpeg来处理本地USB摄像头，需要拿到每张图片做智能分析，用Qt自带的camera类不大好处理，刚好将ffmpeg的处理流程都搞清楚了，索性直接用ffmpeg来直接处理好了，用上这么强大的解码库，理论上支持各种USB摄像头。本地USB摄像机不需要硬解码，视频流编码类型为 AV_CODEC_ID_RAWVIDEO 像素格式为 AV_PIX_FMT_YUYV422 不经过解码操作直接就可显示。
在本教程中，我们将为您提供在Windows、Mac和Linux系统上安装和配置GPU版本的PyTorch（CUDA 12.1）的详细步骤。我们将使用清华大学开源软件镜像站作为软件源以加快下载速度。通过按照以下教程，您将轻松完成GPU版本PyTorch的安装，为深度学习任务做好准备。
Cariddi是一款功能强大的信息收集与扫描工具，我们只需给它提供一个域名列表，Cariddi就能够帮助我们爬取URL地址，扫描终端节点，并搜索敏感数据、API密钥、文件后缀和令牌等信息。
使用 cat /etc/os-release 命令查看Linux 发行版名称和版本号
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
