当你发现 Linux 服务器上的系统性能问题，在最开始的 1 分钟时间里，你会查看哪些系统指标呢? Netflix 在 AWS 上有着大规模的 EC2 集群，以及各种各样的性能分析和监控工具。 比如我
服务器的监控通过安装一些常用的监控软件之外，有时也需要运行一些shell或Python脚本；shell下可以使用系统自带的ps/free/top/df等shell命令，Python可以调用subprocess等模块来运行shell命令，不过这么做就比较麻烦。这里有一个比较好用的第三方模块：psutil。 psutil是一个跨平台的库，用于在Python中检索有关运行进程和系统利用率（CPU，内存，磁盘，网络，传感器）的信息。它主要用于系统监视，分析，限制进程资源和运行进程的管理。它实现了UNIX命令行工具提供的许多功能，例如：ps，top，lsof，netstat，ifconfig，who，df，kill，free，nice，ionice，iostat，iotop，uptime，pidof，tty，taskset，pmap。 psutil目前支持以下平台：
服务器的监控通过安装一些常用的监控软件之外，有时也需要运行一些shell或Python脚本；shell下可以使用系统自带的ps/free/top/df等shell命令，Python可以调用subprocess等模块来运行shell命令，不过这么做就比较麻烦。这里有一个比较好用的第三方模块：psutil。
在准备《在已安装Windows的情况下安装原生Debian组双系统》这篇文章（之所以显示这篇文章是23号的，是因为我折腾到了第二天也就是23号的凌晨才完成并发布）的时候发现Debian出11了，而且还release了[1]，于是我心痒痒，就进行了升级，上网找到一篇教程[2]，按照教程说的先更新软件源缓存和软件，即执行下面这两条命令
系统和网络社区的传统观点是拥塞主要发生在网络结构内。然而，高带宽访问链路的采用和主机内资源相对停滞的技术趋势导致了主机拥塞的出现，即支持 NIC 和 CPU/内存之间数据交换的主机网络内的拥塞。这种主机拥塞改变了数十年来拥塞控制研究和实践中根深蒂固的许多假设。
858 gdb ./vmlinux 859 target remote localhost:1234 860 gdbserver 1234 861 yum install gdbserver 862 gdb vmlinux 863 gdb vmlinux 864 gdb vmlinux 865 vi .config 866 vi .config 867 make menuconfig 868 vi .config 869 make 87
OSWatch是Oracle提供的一个轻量级的操作系统监控工具，之所以说轻量级，一方面是因为无需安装，开箱即用，另一方面，他调用的都是一些系统级的命令，例如top、iostat、netstat，控制好调用频率，消耗就可控。
P4语言联盟（P4.org）是P4编程语言的创建者，上周五宣布将成为开放网络基金会（ONF）旗下的一个项目，并且成为Linux基金会投资组合的一部分，P4联盟自2013年以来一直致力于可编程语言P4的非盈利组织，几年来P4的采用量呈指数级增长，迅速成为描述如何通过网络设备转发数据包的标准。 开放网络基金会执行总裁Guru Parulkar表示：“SDN已经改变了网络行业，P4通过将可编程性引入到转发平面，将SDN提升到一个新的水平。我们很高兴P4.org加入ONF，并期待看到我们的协同效应为P4和更大的SD
传统网卡仅实现了 L1-L2 层的逻辑，而由 Host CPU 负责处理网络协议栈中更高层的逻辑。即：CPU 按照 L3-L7 的逻辑，负责数据包的封装与解封装；网卡则负责更底层的 L2 层数据帧的封装和解封装，以及 L1 层电气信号的相应处理。
参考：http://loveyan.blog.51cto.com/829079/745164
Tungsten Fabric项目是一个开源项目协议，它基于标准协议开发，并且提供网络虚拟化和网络安全所必需的所有组件。项目的组件包括：SDN控制器，虚拟路由器，分析引擎，北向API的发布，硬件集成功能，云编排软件和广泛的REST API。
发布者：全栈程序员栈长，转载请注明出处：https://javaforall.cn/168438.html原文链接：https://javaforall.cn
Physical Interface（物理链路连接器）负责将双绞线网口（电口）或光模块（光口）或连接到网卡上。一个 Physical Interface 通常具有多个 Ethernet Ports。
· Ubuntu 14.04.4（3.13.0-100 Errata 47 patched kernel）
linux运维及配置工作中，常常会用到双网卡绑定，少数几台服务器的配置还好，如果是需要配置几十甚至上百台，难免会枯燥乏味，易于出错，我编写了这个双网卡绑定的辅助脚本，可傻瓜式地完成linux双网卡绑定工作，当然，该脚本主要还是用于小批量的系统配置，如需配置大量的服务器，可提取脚本中的bonding函数，稍作修改即可，你值得一试！
Kafka是大数据领域无处不在的消息中间件，目前广泛使用在企业内部的实时数据管道，并帮助企业构建自己的流计算应用程序。Kafka虽然是基于磁盘做的数据存储，但却具有高性能、高吞吐、低延时的特点，其吞吐量动辄几万、几十上百万，这其中的原由值得我们一探究竟。本文属于Kafka知识扫盲系列，让我们一起掌握Kafka各种精巧的设计。
psutil (python system and process utilities) 是一个跨平台的第三方库，能够轻松实现获取系统运行的进程和系统利用率（包扩CPU、内存、磁盘、网络等）信息。它主要用于系统监控、分析、限制系统资源和进程的管理。它实现了同等命令行工具提供的功能，如ps、top、lsof、netstat、ifconfig、who、df、kill、free、nice、ionice、iostat、iotop、uptime、pidof、tty、taskset、pmap等。目前支持的操作系统包括：Linux,Windows,macOS,,AIX等等。同时支持python2与python3版本,当前最新版本为5.4.8。
将智能网卡（NIC）置于白盒中 白盒是最受欢迎的商用现成（COTS）硬件，可以加入插件实现软件定义网络（SDN）和网络功能虚拟化（NFV）的各种计算和网络功能。但是随着SDN和NFV的发展，人们逐渐意
TNSR 是一个基于开源的数据包处理平台，可提供卓越的安全网络解决方案性能、可管理性和服务灵活性。TNSR 可以在商用 (COTS) 硬件平台上将数据包处理速度从 1 Gbps 扩展到 10 Gbps，甚至 1 Tbps 甚至更高，从而以极低的成本交付路由、防火墙、VPN 和其他安全网络应用程序。TNSR 具有 RESTCONF API（支持对多个实例进行编排管理）以及用于单实例管理的 CLI。
10.并发从数台机器中获取 hostname，并记录返回信息花 费的时长，重定向到一个文件 hostname.txt 中，在全部 完成后输出花费时长最短的那台机器的 CPU 信息。
OpenStack的Pike版本中引入了对switchdev的支持，实现了Open vSwitch硬件卸载offloading功能。本文简介一下网络硬件卸载。
Tungsten Fabric大量使用了overlay，它的整个体系结构基于利用overlay来提供L2/L3虚拟化，并使底层IP fabric对虚拟工作负载透明。
接下来讨论一下关于 python-hwinfo， 它是一个展示硬件信息概况的工具之一，并且其配置简洁
#!/usr/bin/python # encoding: utf-8 # -*- coding: utf8 -*- """ Create Date: 2016/12/26 Create Time: 17:53 show Windows or Linux network Nic status, such as MAC address, Gateway, IP address, etc # python getNetworkStatus.py Routing Gateway:
为了降低CPU利用率, 将更多的CPU释放给业务使用, 大多数现代操作系统都支持某种形式的网络卸载，其中一些网络处理发生在网卡 NIC 而不是 CPU 上, 它可以释放系统其余部分的资源, 这样操作系统就能处理更多连接, 提高整体性能.
===============Talk is cheap, show me the code,bye-bye================
来源：马哥教育链接：https://mp.weixin.qq.com/s/wwBt5H68tHmf_lHXrd_eSQ本文是 Linus 写于 1991年10月10日LINUX是什么？LINUX是一个免费类unix内核，适用于386-AT计算机，附带完整源代码。主要让黑客、计算机科学学生使用，学习和享受。它大部分用C编写，但是一小部分是用gnu格式汇编，而且引导序列用的是因特尔086汇编语言。C代码是相对ANSI的，使用一些GNU增强特性（大多为 __asm__ 和 inline）。然而有很多可用于386电脑的unices，他们大部分要花很多钱，而且不附带源码。因此他们是使用计算机的理想选择，但是如果你想了解他们如何工作，那是不可能的。也有一些 Unix 是附带源码的。Minix，Andrew S. Tanenbaum编写的学习工具，已经在大学中作为教学工具使用了很多年了。BSD-386系统是附带源码的，但是有版权限制，而且要花很多钱（我记得起始价格为$995）。GNU内核（Hurd）将会是免费的，但是现在还没有准备好，而且对于了解和学习它们来说有点庞大。LINUX与Minix是最相似的，由于它很小而且不是非常复杂，因此易于理解（嗯…）。LINUX是基于Minix编写的，因此有相当多的相同点，任何Minix黑客在使用LINUX的时候都感觉非常熟悉。不过，没有在项目中使用Minix代码，因此Minix版权没有限制到这个新系统。它也是完全免费的，而且它的版权非常宽松。因此不像使用Minix，它不需要几兆字节大小的区别。LINUX版权虽然是免费的发布版，我还是从以下几个方面限制了LINUX的使用：你可以自由复制和重新发布源码和二进制，只要是：1. 完全开源。因此不能单独发布二进制，即使你只修改了一点。2. 你不能从发布版获取利益。事实上甚至“装卸费用”都是不被接受的。3. 你要保持完整的适当版权。· 根据需要你可能会修改源码，但是如果你发布了新系统的一部分（或者只有二进制），必须将新的代码包含进去。· 除了不包含版权的代码之外，你可能会做一些小的修改。这由你来定，但是如果能将相关内容或者代码告诉我，将不胜感激。对任何使用或者扩展系统的人来说，这应该足够宽松而不会引起任何担忧。如果你有朋友真的不想要源码，只想要一个能运行的二进制，你当然可以给他而不用担心我会起诉你。不过最好只在朋友之间这么做。LINUX运行所需的硬件/软件LINUX是在一个运行Minix的386-AT上开发的。由于LINUX是一个真正的操作系统，而且需要直接与硬件交互来做一些事情，你必须有一个非常相似的系统来让他顺利运行：· 386-AT（PS/2之类是不同的，不能正常运行）· VGA或者EGA屏幕硬件。· 标准AT硬盘接口，IDE盘可以运行（实际上我用的就是这个）。· 正常实模式BIOS。一些机器看起来是用虚-86模式运行启动程序，而且在这样的机器LINUX不会启动和正常运行。LINUX会发展成为一个自给自足的系统，现在需要Minix-386才能正常运行。你需要Minix让初始化启动文件系统，和编译OS二进制。在那之后LINUX是一个自给自足的系统，但是为了做文件系统检查（fsck）和修改之后重编译系统，推荐使用Minix。获取LINUXLINUX现在可以使用匿名ftp从‘nic.funet.fi’的‘/pub/OS/Linux’目录获取。这个目录包含操作系统的所有源码，还有一些二进制文件，因此你可以真正使用系统了。注意！二进制大多是GNU软件，而且版权比LINUX的严格（GNU非盈利性版权）。因此你不能在不发布他们源码的情况下重新发布他们，可以在/pub/GNU中找到。关于GNU非盈利性版权，从任何GNU软件包了解更多。此目录中各类文件如下：· linux-0.03.tar.Z–系统的完全源码，16位tar压缩文件格式。· Linux.tex–这个文件的LATEX源码。· bash.Z–在LINUX下运行的bash二进制文件。这个二进制文件应该放到预留给LINUX文件系统中的/bin/sh下（参见installation）。· update.Z–更新二进制文件，要放到/bin/update。· gccbin.tar.Z–GNU cc二进制文件需要由一个可运行的编译器。这个tar压缩包含有编译器，加载器，汇编程序和支持程序（nm，strip等）。它还包含一个小型的库，可用于大部分程序。· include.tar.Z–让gcc运行的必要include文件。· unistd.tar.Z–unistd库程序的源码（即系统调用接口）。通过这个你可以使用系统独立库源码编译一个大一些的库。· utilbin.tar.Z–各种GNU工具的二进制文件，包括GNU的fileutils，make和tar。也包含克隆emacs的uemacs。· README, RELNOTES-
本文将从上层介绍Linux上的TCP/IP栈是如何工作的，特别是socket系统调用和内核数据结构的交互、内核和实际网络的交互。写这篇文章的部分原因是解释监听队列溢出(listen queue overflow)是如何工作的，因为它与我工作中一直在研究的一个问题相关。
DPDK与SR-IOV两者目前主要用于提高IDC（数据中心）中的网络数据包的加速。但是在NFV（网络功能虚拟化）场景下DPDK与SR-IOV各自的使用场景是怎样的？以及各自的优缺点？
1 DMA 将 NIC 接收的数据包逐个写入 sk_buff ，一个数据包可能占用多个 sk_buff , sk_buff 读写顺序遵循FIFO（先入先出）原则。
干货福利，第一时间送达！ 在嵌入式项目预研前期阶段，我们常常需要对某个平台进行资源和性能方面的评估，以下是最常见的一些评估指标：
本文翻译自Analysis of the Effect of Core Affinity on High-Throughput Flows
LINUX是一个免费类unix内核，适用于386-AT计算机，附带完整源代码。主要让黑客、计算机科学学生使用，学习和享受。它大部分用C编写，但是一小部分是用gnu格式汇编，而且引导序列用的是因特尔086汇编语言。C代码是相对ANSI的，使用一些GNU增强特性（大多为 __asm__ 和 inline）。
简单的说，就是在自己的电脑上安装苹果系统（MAC OS）。但由于苹果公司的软硬件限制，导致装系统这么一个在WIN系统中平常的事情，变成很多极客爱好者的专业。比如，我们的毛老师～
RDMA (Remote Direct Memory Access) 全称为 远程直接内存访问
PF_RING™ 是一个 Linux 内核模块和用户空间框架，允许您高速处理数据包，同时为数据包处理应用程序提供一致的 API, 基本上每个人每秒都必须处理许多数据包。 术语“许多many”根据您用于流量分析的硬件而变化。 它的范围可以从 1.2GHz ARM 上的 80k pkt/sec 到低端 2.5GHz Xeon 上每核心超过 20M pkt/sec。 PF_RING™ 不仅使您能够更快地捕获数据包，还可以更有效地捕获数据包，从而节省 CPU 周期, PF_RING 是一个高速数据包捕获库，可将商用 PC 转变为高效且廉价的网络测量盒，适用于数据包和主动流量分析和操作。 此外，PF_RING 开辟了全新的市场，因为它可以通过几行代码创建高效的应用程序，例如流量平衡器或数据包过滤器.
Linux下的top命令我相信大家都用过，自从我接触Linux以来就一直用top查看进程的CPU和MEM排行榜。但是top命令的其他输出结果我都没有了解，这些指标都代表什么呢，什么情况下需要关注呢？以及top命令输出结果的来源数据是什么呢，又是怎么一个计算原理呢？
大家都认为 Linux 默认是安全的，我大体是认可的 (这是个有争议的话题)。Linux默认确实有内置的安全模型。你需要打开它并且对其进行定制，这样才能得到更安全的系统。Linux更难管理，不过相应也更灵活，有更多的配置选项。 对于系统管理员，让产品的系统更安全，免于骇客和黑客的攻击，一直是一项挑战。这是我们关于“如何让Linux系统更安全” 或者 “加固Linux系统“之类话题的第一篇文章。本文将介绍 25个有用的技巧和窍门 ，帮助你让Linux系统更加安全。希望下面的这些技巧和窍门可以帮助你加强你的系统
来源：内容由「网络交换FPGA」编译自「FCCM2020」，谢谢。FCCM2020在5月4日开始线上举行，对外免费。我们有幸聆听了其中一个有关100G开源NIC的介绍，我们对该文章进行了翻译，并对其中的开源代码进行了分析并恢复出基于VCU118的工程，通过实际测试感受到了第一款真正意义上的100G开源NIC的强大（很多100G的开源都是基于HLS等非HDL语言，尽管可以转化成HDL，但电路架构参考意义已经不大）。开源Verilog代码中每个.v文件都是所有的组合和时序分别用一个always模块描述，代码中高位宽分段处理方式，多级流水的架构等很多地方都是非常值得借鉴和学习的地方。我们认为，github是一个宝库。我觉得现在的研究生培养质量的评价其实就可以看开源项目的参与程度，这完全能反应出一个学生的自学能力和独立研究的能力。而一个科研工作者，尤其是搞工程或应用基础研究的，如果没有做出来一两个星数100以上的开源项目，就不算成功。欢迎感兴趣的同学一起交流讨论。以下先附上本次会议的视频
这篇文章描述了通过 PCI Express 结构在 CPU 和 NIC 之间发生的一系列协调事件，以通过 InfiniBand 互连传输消息并发出其完成信号。
这是《创建 Vitis 加速平台》系列的第 3 篇博文。在前文中，我们讲解了如何创建硬件和软件工程。在本文中，我们将讲解如何在 Vitis™ 中将所有这些工程封装在一起。
对于系统管理员，让产品的系统更安全，免于骇客和黑客的攻击，一直是一项挑战。这是我们关于“如何让Linux系统更安全” 或者 “加固Linux系统“之类话题的第一篇文章。本文将介绍 25个有用的技巧和窍门 ，帮助你让Linux系统更加安全。希望下面的这些技巧和窍门可以帮助你加强你的系统的安全。 1. 物理系统的安全性 配置BIOS，禁用从CD/DVD、外部设备、软驱启动。下一步，启用BIOS密码，同时启用GRUB的密码保护，这样可以限制对系统的物理访问。 通过设置GRUB密码来保护Linux服务器 2. 磁盘
之前记录过处理因为 LVS 网卡流量负载过高导致软中断发生丢包的问题，RPS 和 RFS 网卡多队列性能调优实践[1]，对一般人来说压力不大的情况下其实碰见的概率并不高。这次想分享的话题是比较常见服务器网卡丢包现象排查思路，如果你是想了解点对点的丢包解决思路涉及面可能就比较广，不妨先参考之前的文章如何使用 MTR 诊断网络问题[2]，对于 Linux 常用的网卡丢包分析工具自然是 ethtool。
在“启动并运行”的部分，描述了1个控制器和1个vRouter的设置，没有涵盖HA的情况（也没有overlay流量的情况）。下面来描述更现实的情况，每个编排器包含3个控制器和2个计算节点（可能还包含多NIC）。
概述 数据平面开发套件(DPDK)可提供高性能的数据包处理库和用户空间驱动程序。自Open vSwitch(OVS)2.4版 (http://openvswitch.org/releases/NEWS-2.4.0)起，我们将可在OVS中使用DPDK优化的vHost路径。OVS自2.2版起开始提供DPDK支持。 将DPDK与OVS结合使用可为我们带来诸多性能优势。与其他基于DPDK的应用相同，我们可以在OVS中看到网络包吞吐量显著提升，延迟显著降低。 此外，DPDK包处理库还对OVS内的多个性能热点区域进行了
简单讲，一个qidsc就是一个调度器。每个出接口都需要某种类型的调度器，默认的调度器为FIFO。Linux下的其他qdisc会根据调度器的规则来重新安排进入调度器队列的报文。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
