云网络发展早期，很多厂商的虚拟化网路方案基于内核模块来实现，这时的带宽通常从千兆到万兆，一般情况下还能够满足要求（SDWAN厂商华夏创新的网络加速就是在内核的PREROUTING上做的，性能还可以）。再后来，进入到25G时代了，基于内核的一些实现已经不能满足业务对网络吞吐的性能要求了，大约在2013~2018左右，很多厂商转向用DPDK实现，着实火了一段时间。到现在逐渐进入100G时代，会发现，无论大厂小厂，都逐渐开始转向智能网卡，网络特性offload到硬件，基本是当前和今后一段时间的主流。
OpenStack的Pike版本中引入了对switchdev的支持，实现了Open vSwitch硬件卸载offloading功能。本文简介一下网络硬件卸载。
网络设备（如交换机）一般由思科、华为、华三等网络设备商基于Broadcom、Intel、Marvell等网络芯片商的芯片方案进行研发测试并交付最终客户。过去相当长一段时间，芯片厂商为了保护自己的知识产权，通过SDK的形式开放操作芯片的API接口供网络设备商进行设备开发，且获得SDK需要和芯片厂商签署SLA、NDA等保密协议，某种程度上对网络设备商进行了“锁定”。网络设备商基于芯片厂家特有的SDK开发出的网络设备，传统linux的ip、ethtool、brctl等命令统统失效，留给用户的是专用的命令行或网络管理工具，这在某种程度上对网络设备的用户进行了“锁定”。
网络offload主要是指将原本在内核网络协议栈中进行的IP分片、TCP分段、重组、checksum校验等操作，转移到网卡硬件中进行，CPU的发包路径更短，消耗更低，提高处理性能。
近十年来，白盒交换机的市场越来越大，这几年甚至已经侵蚀了霸主思科的市场主导地位。 据IDC最新的全球以太网交换机市场报告显示，“其他”类别占全球以太网交换机收入份额超过五分之一。OEM 市场份额正在缓慢而稳定地增长，白盒交换机销量有时候甚至占到市场的四分之一以上。 随着白盒交换机市场份额的不断增长，人们对开源的网络操作系统需求也越来越强烈。SDN的高速发展促使白盒产业催生了一批开源开放的NOS。 提到开源NOS，很多人可能会第一个想到SONiC，目前SONiC已经打造了一个强大的生态系统，其主要成员包括
原文链接：https://blog.csdn.net/dog250/article/details/103301816
5、内核源码（网络）阅读：tcp_input.c tcp_out.c tcp_ipv4.c tcp.c
本文全是个人感想和猜测，写一写软件人眼中的硬件，越底层越难，个人理解不一定对，请用批判的眼光看，特此声明，免得被人贻笑大方。
近些年来，云计算蓬勃发展，上云成为现在软件开发落地的首选。但随着企业业务的不断增长和扩大，传统云计算的劣势也暴露出来：单体硬件性能不够，只能堆集群；租户隔离不够彻底，时有新闻爆出问题。因此，物理机服务器又再一次的被提上了台面。
UCloud外网网关是为了承载外网IP、负载均衡等产品的外网出入向流量，当前基于Linux内核的OVS/GRE tunnel/netns/iptables等实现，很好地支撑了现有业务。同时，我们也在不断跟踪开源社区的新技术发展，并将之用于下一代外网网关的设计。这些新特性可将系统性能和管理能力再提上一档，满足未来几年的需求。在方案设计研发过程中发现，新特性存在不少缺陷和Bug，为此我们向开源社区回馈了10多个patch，并融入到kernel 5.0版本中，帮助完善kernel功能并提升稳定性。
首席问答官是科技云报道推出的全新音频栏目，我们将邀请行业内炙手可热的专家，回答大家普遍关心的问题。
大家好，我是杨玉玺，2011年至今一直从事底层网络研发，先后就职于阿里云、金山云从事 VPC 虚拟化网络研发，对高性能网络优化，复杂网络问题排查有非常丰富的经验。目前就职腾讯云 TKE 团队，专注 K8S 底层网络。
摘要： 硬盘和硬盘分区在Linux都表示为设备，按我们通俗的说法来说，就是怎么来表示或描述硬盘和或硬盘分区，但这种描述应该是科学和具体的；比如IDE硬盘，在Linux 可以表示为 /dev/hda、/dev/hdb ... ；SCSI 接口的硬盘、SATA接口的硬盘表示为/dev/sda、/dev/sdb ... ... ；而IDE接口的硬盘/dev/hda，也可以表示为hd0 ，而 SCSI 接口的如果是 /dev/sda ，另一种表示方法是sd0； 理解两种表示方法有何用？至少GRUB引导管理器用到这些知识；另外我们mount (挂载)文件系统（分区），也会用到这些知识；
858 gdb ./vmlinux 859 target remote localhost:1234 860 gdbserver 1234 861 yum install gdbserver 862 gdb vmlinux 863 gdb vmlinux 864 gdb vmlinux 865 vi .config 866 vi .config 867 make menuconfig 868 vi .config 869 make 87
GRUB的命令行才是王道，如果知道怎么用命令行来启动操作系统，那理解menu.lst的写法也不难；也就是说在开机的时候，不用GRUB的菜单，通过GRUB的命令也是一样能把操作系统引导起来。
grub-install 命令有何用呢？其实就是把我们前面已经安装的软件包中的一些文件复制到 /boot/grub中；对于新安装GRUB软件包后，也是一个必经的过程；我们前面所说的GRUB软件包的安装；而现在我们说的是GRUB配置的过程中的安装；虽然在洋文中都是install ，但表达的意思是不一样的；
hadoop集群搭建好之后，通过HDFS命令操作HDFS分布式文件系统，HDFS命令与linux命令类似
本地远程登录 Linux 服务器，需要使用端口号为22的SSH协议。通常情况下正常安装 Linux 系统之后，SSH 协议是默认放开的，但是也有一些情况需要我们自己安装。
Starting sshd:/var/empty/sshd must be owned by root and not group or world-writable.
本文主要讲述了借助 ebpf 工具 skbtracer 分析了容器网桥模式下出现 dup 包问题的根本原因， skbtracer 工具的使用使得原本比较复杂的分析过程变得非常高效且流程化。目前，skbtracer 工具正在不断打磨发展，后续会越来越傻瓜化智能化，希望能够借本次分享推广此分析方法及思路，让更多的人了解、使用 skbtracer 工具。
按照ldd的说法，linux的设备驱动包括了char，block，net三种设备。char设备是比较简单的，只要分配了major、minor号，就可以进行读写处理了。相对而言，block和net要稍微复杂些。net设备姑且按下不谈，我们在以后的博文中会有涉及。今天，我们可以看看一个简单的block是怎么设计的。
对于GRUB来说，如果没有配置menu.lst，无论是Linux版本的GRUB，还是WINGRUB，都会有命令行可用，通过命令行是一样能把操作系统引导起来的；有些弟兄总以为menu.lst 配置错了， 或者在机器启动后出现grub>命令行模式就要重新安装系统，其实根本没有这个必要；只要学会GRUB的命令行的用法，根本没有必要重装系统；
openssh套件在不安全的网络中为两台为信任的主机之间建立加密的数据通信，是rlogin、rsh等明文传输数据的通信工具的替代品。sshd指令是openssh套件中的核心程序，其他的指令（如，sftp-server、slogin、scp）等都是基于sshd命令的。
fdisk - Partition table manipulator for Linux ，译成中文的意思是磁盘分区表操作工具;本人译的不太好，也没有看中文文档;其实就是分区工具
you can probably install the debian libraries into quantal with no issues, precise is less likely to work, but it might possibly you will have to build it from source to get everything right. Code:
该文章介绍了如何利用C++编写一个简单的CNN，用于图像分类。主要包括了网络架构、数据集准备、模型训练和测试等方面。同时，文章也提到了在遇到某些问题时，如何通过调整代码解决。最后，作者通过一个完整的静态编译脚本，使得CNN可以运行在Linux系统上。
制作VHD镜像并上传Azure存储 制作Azure镜像注意事项： Azure 不支持 VHDX 格式，仅支持固定大小的 VHD。 可使用 Hyper-V 管理器或 convert-vhd cmdlet 将磁盘转换为 VHD 格式。 如果使用 VirtualBox，则意味着选择的是”固定大小”，而不是在创建磁盘时动态分配默认大小。 Azure 仅支持第 1 代虚拟机。 可以将第 1 代虚拟机从 VHDX 转换为 VHD 文件格式，从动态扩展磁盘转换为固定大小磁盘。 但无法更改虚拟机的代次。 有关详细信息，
我的电脑装有 Windows 10 和 Manjaro 双系统，最近我把 Windows 10 升级了，没想到原来漂亮的 Manjaro grub 菜单界面就再也出不来了，只见终端弹出一下信息：
其中“hdx~”表明分区所在设备的类型、hd 表示ide、x表示哪块盘、~表示分区号
01 — HDFS中常用的命令 HDFS文件操作常有两种方式; 命令行方式，即Hadoop提供了一套与Linux文件命令类似的命令行工具； JavaAPI，即利用Hadoop的Java库，采用编程的方式操作HDFS的文件。 Hadoop最常用的文件操作命令，包括添加文件和目录、获取文件、删除文件等。 看下Linux下的shell命令工具 HDFS命令基本格式：hadoop fs -cmd < args > cmd是具体的文件操作命令，<args>是一组数目可变的参数。 02 — 添加文件和目录 HDFS有
Linux high IOwait is a common Linux performance issue. Today we will look at what iowait means and what contributes to this problem. Hope this can give you more ideas about high IOwait issue.
版权声明：本文为木偶人shaon原创文章，转载请注明原文地址，非常感谢。 https://blog.csdn.net/wh211212/article/details/53171625
初次接触分布式文件系统，有很多迷惑。通过参考网络文章，这里进行对比一下Hadoop 分布式文件系统（HDFS）与 传统文件系统之间的关系：
一、起因 前些日子，张戈在日志备份服务器加入了日志压缩的计划任务（详见服务器日志备份超节省空间的思路），结果发现监控总是发来 tar 的报警，提示存在 tar 进程。仔细检查 history 后发现是
做一个windows系统，vmdk/vhd上传cos，导入自定义镜像时强制导入+选linux类别，创建实例（系统盘50G以内） 这个实例做个自定义镜像能导出，因为镜像外壳是linux，规避了控制台windows镜像的导出限制。
在Windows上要使用usrp需要使用Windows版本的GNU Radio，但是用起来的体验一言难尽，打开慢而且闪退几率较大，因而考虑使用Linux版本的GNU Radio，正好Windows系统安装了Linux子系统（WSL，版本为Ubuntu18.04），因而考虑在WSL中安装GNU Radio和UHD驱动，从而实现操作USRP。
https://documentation.suse.com/sles/11-SP4/html/SLES-all/cha-kvm-requires.htm
https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/FileSystemShell.html
vdbench是一个I/O工作负载生成器，通常用于验证数据完整性和度量直接附加（或网络连接）存储性能。它可以运行在windows、linux环境，可用于测试文件系统或块设备基准性能。
版权声明：本文为博主原创文章，转载请注明源地址。 https://blog.csdn.net/10km/article/details/53142309
说到开源大家都会想到黑客和极客，开源的概念最早也是在极客们推出和推崇的。开源的提倡旨在开放源代码使之更方便自由的使用和再创作。随着这一思想的发展，衍生出诸多的开源协议，比如有GPL,BSD,MIT等。关于开源的一些故事推荐杜玉杰的 chat 文章《开源纵横谈：谷歌与开源那些事儿》。豪不夸张的说开源的传播已经在颠覆传统软件的开发模式，推动整个 IT 的进步，围绕着开源的社区文化也在这个新的时代发光发热。
系统管理员负责 Linux 设备上的服务管理。以下是他们需要了解的有关配置、启动选项、安全等方面的信息。
本节主要学习: 详细分析UBOOT中"bootcmd=nand read.jffs2 0x30007FC0 kernel;bootm 0x30007FC0" 中怎么实现bootm命令启动内核.
本文介绍了从裸机程序、操作系统和硬件抽象层三个方面分析Linux内核，并详细介绍了Linux内核的初始化过程、进程管理、内存管理、设备驱动、中断处理、性能优化等方面的知识。
以 ssh 为例，每当有 ssh 的连接请求时，tcpd（Tcp Wrapper的守护进程）即会截获请求， 当请求满足配置文件中的规则，则放行，否则中断连接，配置文件中可设置匹配规则后执行命令
PyMol是一个类似于VMD的分子可视化工具，也是在PyQt的基础上开发的。但是由于其商业化运营，软件分为了教育版、开源版和商业版三个版本。其中教育版会有水印，商业版要收费，但是官方不提供开源版本的安装方法。按照参考链接1的内容，可以在Windows系统上面安装一个开源版本的PyMol，但是该发行版只有Windows平台的编译包。所以如果需要在Linux上安装PyMol，就只能在Github上面下载源码进行编译构建。
在我和实际使用中，字符集用utf8效果很好，没有出现乱码的问题，在终端挂载的代码如下： mount -t vfat /dev/hda2 /mnt/d -o codepage=936,iocharset=utf8 我的fstab # /etc/fstab: static file system information. # # <file system> <mount point> <type> <options> <dump> <pass> proc /proc proc defaults 0 0 /dev/hdc8 / ext3 defaults,errors=remount-ro 0 1 /dev/hdc9 none swap sw 0 0 /dev/hdb /media/cdrom0 udf,iso9660 user,noauto 0 0 /dev/hdc1 /mnt/winc vfat defaults,codepage=936,iocharset=utf8 0 0 /dev/hdc5 /mnt/wind ntfs defaults,iocharset=utf8,umask=0222 0 0 /dev/hdc6 /mnt/wine ntfs defaults,iocharset=utf8,umask=0222 0 0 /dev/hdc7 /mnt/winf vfat defaults,codepage=936,iocharset=utf8 0 0 (以下转自网络) 1、挂载点必须是一个目录。 2、一个分区挂载在一个已存在的目录上，这个目录可以不为空，但挂载后这个目录下以前的内 容将不可用。 对于其他操作系统建立的文件系统的挂载也是这样。但是需要理解的是：光盘、软盘、其他操作 系统使用的文件系统的格式与linux使用的文件系统格式是不一样的。光盘是ISO9660；软盘是 fat16或ext2；windows NT是fat16、NTFS；windows98是fat16、fat32；windows2000和 windowsXP是fat16、fat32、NTFS。挂载前要了解linux是否支持所要挂载的文件系统格式。 挂载时使用mount命令： 格式：mount [-参数] [设备名称] [挂载点] 其中常用的参数有 -t<文件系统类型> 指定设备的文件系统类型，常见的有： minix linux最早使用的文件系统 ext2 linux目前常用的文件系统 msdos MS-DOS的fat，就是fat16 vfat windows98常用的fat32 nfs 网络文件系统 iso9660 CD-ROM光盘标准文件系统 ntfs windows NT 2000的文件系统 hpfs OS/2文件系统 auto 自动检测文件系统 -o<选项> 指定挂载文件系统时的选项。有些也可用在/etc/fstab中。常用的有 codepage=XXX 代码页 iocharset=XXX 字符集 ro 以只读方式挂载 rw 以读写方式挂载 nouser 使一般用户无法挂载 user 可以让一般用户挂载设备 提醒一下，mount命令没有建立挂载点的功能，因此你应该确保执行mount命令时，挂载点已经存 在。（不懂？说白了点就是你要把文件系统挂载到哪，首先要先建上个目录。这样OK？） 例子：windows98装在hda1分区，同时计算机上还有软盘和光盘需要挂载。 # mk /mnt/winc # mk /mnt/floppy # mk /mnt/cdrom # mount -t vfat /dev/hda1 /mnt/winc # mount -t msdos /dev/fd0 /mnt/floppy # mount -t iso9660 /dev/cdrom /mnt/cdrom 现在就可以进入/mnt/winc等目录读写这些文件系统了。 要保证最后两行的命令不出错，要确保软驱和光驱里有盘。（要是硬盘的磁盘片也可以经常随时 更换的话，我想就不会犯这样的错误了 :-> ） 如果你的windows98目录里有中文文件名，使用上面的命令挂载后，显示的是一堆乱码。这就要 用到 -o 参数里的codepage iocharset选项。codepage指定文件系统的代码页，简体中文中文代 码是936；io
又一个古老的Linux内核漏洞被曝光！这次的漏洞可以追溯到2009年，影响的linux发行版包括Red Hat、Debian、Fedora、OpenSUSE和Ubuntu。 这个Linux漏洞编号为CVE-2017-2636，根据CVSS v3标准漏洞评分为7.8分。漏洞在Linux内核已经存在7年了，它能够让本地无权限的用户获取root权限，或者发动DoS让系统崩溃。 Positive Technologies的研究员Alexander Popov发现了存在于N_HLDC linux内核驱动的竞争条件
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
