本文首先介绍网络性能測量的一些基本概念和方法。然后结合 netperf 工具的使用。详细的讨论怎样測试不同情况下的网络性能。
之前文章《Linux服务器性能评估与优化(一)》太长，阅读不方便，因此拆分成系列博文：
Netperf是一种网络性能的测量工具，主要针对基于TCP或UDP的传输。Netperf根据应用的不同，可以进行不同模式的网络性能测试，即批量 数据传输（bulk data transfer）模式和请求/应答（request/reponse）模式。Netperf测试结果所反映的是一个系统能够以多快的速度向另外一个系统 发送数据，以及另外一个系统能够以多块的速度接收数据。Netperf工具以client/server方式工作。server端是 netserver，用来侦听来自client端的连接，client端是netperf，用来向server发起网络测试。在client与 server之间，首先建立一个控制连接，传递有关测试配置的信息，以及测试的结果；在控制连接建立并传递了测试配置信息以后，client与 server之间会再建立一个测试连接，用来来回传递着特殊的流量模式，以测试网络的性能。
近期，掘金发出技术专题的邀约，我也是紧跟潮流，写了一篇关于网络协议的性能优化与性能评估的文章，本篇文章主要讲了三个大方向包括：网络协议的性能指标、性能优化策略、性能评估方法；并针对这三个方面进行深入的分析，希望与大家一起交流分享。
netperf是惠普公司开源的一款针对网络性能的测试工具，主要基于TCP或UDP的传输。根据应用的不同，可以进行批量数据传输（bulk data transfer）模式和请求/应答（request/reponse）模式的性能测试。
I/O是计算机的输入输出，通俗一点讲是计算机数据的流动，包括CPU、内存、磁盘、网络、外设的数据流程，是针对不同主体而言的数据的输入和输出。
原文链接：https://cilium.io/blog/2021/05/11/cni-benchmark
最近，我们在进行虚拟网卡测试的时候，发现使用netperf测出来的带宽存在压力不足的问题，具体现象就是带宽峰值达到600MB的时候，客户端发出的包没有丢失并且这个带宽值也无法再增加。从这个问题触发，我们计划将关于虚拟网卡的测试工具进行易用性的验证。
会导致缓冲区需越来越多内存暂存数据。当缓冲区占用内存＞设定上限阈值，就会出现缓冲区溢出。发生溢出，就会丢数据。不给缓冲区设上限，不就没这问题了？No！随累积数据增多，缓冲区所占内存空间越大，耗尽Redis机器可用内存时，Redis实例就会崩溃！
参数释义： sock：网络文件描述符 level：选项所在协议层。 如果想要在套接字层面上进行配置，则将此项设置为SOL_SOCKET。 optname：需要访问的选项名 （后面会有）（取决于level） optval：对于getsockopt()，指向返回选项值的缓冲。对于setsockopt()，指向包含新选项值的缓冲。 optlen：对于getsockopt()，作为入口参数时，选项值的最大长度。作为出口参数时，选项值的实际长度。对于setsockopt()，现选项的长度。
readv() failed (104: Connection reset by peer) while reading upstream
本文是 MySQL 简单查询语句执行过程分析 6 篇中的第 6 篇，第 1 ~ 5 篇请看这里： 1. 词法分析 & 语法分析 2. 查询准备阶段 3. 从 InnoDB 读数据 4. WHERE 条件 5. 发送数据给客户端
如图，当我们查看内存信息时，通常会使用vmstat或free命令。在使用vmstat -S M时，会看到下面的结果。
在redis恢复数据时我们可以依赖于aof日志或rdb日志，但是redis在运行中该如何保证服务的可靠性，就需要依赖redis主从和哨兵集群。
视频压缩技术的进步和互联网基础设施的普及，使得流媒体在互联网上广泛传输。但是网络丢包一直是一个困扰人们的问题。市面上已经有许多私有的解决方案用于解决流媒体传输的丢包问题，但是由于是私有协议，各个厂商的设备之间无法实现互操作性。为解决在公共网络上的丢包问题，同时解决各厂商设备之间缺乏互操作性的问题，Video Services Forum (VSF) 于2017年初成立了可靠的互联网流传输协议（Reliable Internet Stream Transport，RIST）小组，为协议创建通用规范[1][2]。
16年壮观的直播百团大战相信大家历历在目，至19年初所剩无几的直播寡头，来去如风的直播战场，离不开背后强大的直播技术支撑，本文通过直播基础技术介绍、剖析企鹅电竞直播构架、关键技术、常见问题排查、带领大家了解直播技术细节。 直播基础技术扫盲 分辨率 分辨率是度量位图图像内数据量多少的一个参数。通常表示成每英寸像素（Pixel per inch, ppi）和每英寸点（Dot per inch, dpi），包含的数据越多，图形文件的长度就越大，也能表现更丰富的细节。但更大的文件需要耗用更多的计算机资源，更多的内
达梦（DM8）数据库由实例和数据库共同组成。 实例由一组正在运行的后台进程及其所fork出的一系列线程和分配内存组成。数据库是由一系列存放在操作系统上的文件组成。 体系结构图大致为：
本文会讲述作者在线上环境使用redis遇到过的一些坑，主要是一些参数配置和选型，目的只有一个：如何让redis不挂，提高可用性；不涉及到集群方案的选型等内容。
TCP协议全称: 传输控制协议, 顾名思义, 就是要对数据的传输进行一定的控制. 先来看看它的报头
我们在操作大型数据表或者日志文件的时候经常会需要写入数据到数据库，那么最合适的方案就是数据库的批量插入。只是我们在执行批量操作的时候，一次插入多少数据才合适呢？
我们在操作大型数据表或者日志文件的时候经常会需要写入数据到数据库，那么最合适的方案就是数据库的批量插入。只是我们在执行批量操作的时候，一次插入多少数据才合适呢？假如需要插入的数据有百万条，那么一次批量插入多少条的时候，效率会高一些呢？这里博主和大家一起探讨下这个问题，应用环境为批量插入数据到临时表。
导语 | 并发编程，可以说一直都是开发者们关注最多的主题之一。而Golang作为一个出道就自带“高并发”光环的编程语言，其并发编程的实现原理肯定是值得我们深入探究的。本文主要介绍Goroutine和channel的实现。 Go并发编程模型在底层是由操作系统所提供的线程库支撑的，这里先简要介绍一下线程实现模型的相关概念。 一、线程的实现模型 线程的实现模型主要有3个，分别是：用户级线程模型、内核级线程模型和两级线程模型。它们之间最大的差异在于用户线程与内核调度实体（KSE）之间的对应关系上。内核调度实体就是可
在TCP/IP协议中, 用 “源IP”, “源端口号”, “目的IP”, “目的端口号”, “协议号” 这样一个五元组来标识一个通信(可以通过netstat -n查看);
文来自Haivision的白皮书，比较了RTMP和SRT两种流媒体协议的优缺点，并通过实验测试了两种协议在延迟和最大带宽两方面的表现。
1) 应用程序可通过调用send(write, sendmsg等)利用tcp socket向网络发送应用数据，而tcp/ip协议栈再通过网络设备接口把已经组织成struct sk_buff的应用数据(tcp数据报)真正发送到网络上，由于应用程序调用send的速度跟网络介质发送数据的速度存在差异，所以，一部分应用数据被组织成tcp数据报之后，会缓存在tcp socket的发送缓存队列中，等待网络空闲时再发送出去。同时，tcp协议要求对端在收到tcp数据报后，要对其序号进行ACK，只有当收到一个tcp 数据报的ACK之后，才可以把这个tcp数据报(以一个struct sk_buff的形式存在)从socket的发送缓冲队列中清除。 tcp socket的发送缓冲区实际上是一个结构体struct sk_buff的队列，我们可以把它称为发送缓冲队列，由结构体struct sock的成员sk_write_queue表示。sk_write_queue是一个结构体struct sk_buff_head类型，这是一个struct sk_buff的双向链表，其定义如下：
int setsockopt( SOCKET s, int level, int optname, const char* optval, int optlen );
线上的Redis服务被用来当做缓存用，缓存有一个缺点，就是一旦断电，缓存中的数据将全部丢失。通常情况下，缓存中的数据是允许丢失的，但是有些业务场景下，无法容忍数据丢失，这个时候，就需要我们将缓存中的内容保存起来，或者说不保存，但是你能够把它“恢复出来”。
在现场制作过程中，人们常常需要对多个几乎同时到达的音视频数据流进行实时编辑处理。如果这些数据流之间存在比较明显的延迟，就有可能影响到制作过程的效率。因此，设计这样的低延迟现场制作系统需要充分考虑各种延迟因素，以便将多个数据流之间的延迟保持在可接受的范围内。随着广播公司开始向基于IP网络接口的现场制作系统迁移，还需要在系统设计过程中将一些新的潜在延迟因素考虑在内。
struct sockaddr ：很多网络编程函数的出现早于IPV4协议，为了向前兼容，现在sockaddr都退化成（void *）结构了。 传递一个地址给函数，然后由函数内部再强制类型转换为所需的地址类型。
很多小伙伴私信要word下载，我就整理出来了一份pdf，是和线上的完全一样，建议大家看线上的，因为pdf下载需要收费，但是下载有好处就是可以打印出来复习，各位伙伴自行选择吧。现在这里给出pdf完整下载： 操作系统（第四版）期末复习总结.pdf_操作系统复习-OS文档类资源-CSDN下载
特征：一个master可以拥有多个slave，一个slave只对应一个master
前文详细介绍了滑动窗口，TCP 通过滑动窗口来完成流量控制，当接收方发现自己跟不上发送的速度了，就缩小接收窗口大小，抑制发送方的发送速度，防止发送方发送太快。
IO体系结构是计算机系统和外部的接口，同时也是操作系统中设计最难的部分，因为存在许多不同的设备和它们的应用，难有统一一致的解决方案。 IO体系结构的设计目标是提供一种系统化方法来控制与外部的交互，并且给操作系统提供有效管理IO所需的信息。
「Zero-copy」 describes computer operations in which the CPU does not perform the task of copying data from one memory area to another. This is frequently used to save CPU cycles and memory bandwidth when transmitting a file over a network.
最开始在Kafka 概述中提到了mirc-batch（微批处理），mirc-batch是Kafka 高性能的一个非常重要的原因，这一下子就使Kafka 成为了一个拥有近乎流式处理框架的的高吞吐级别，但是mirc相对于流式处理还是存在很大差异的，但是一些所谓的流式处理框架使用的也有mirc-batch（比如说spark Streaming），当然啦一些正统的流式处理框架，比如说storm、Flink使用的都是典型的流式处理。 本文按照 批处理、微批处理、流式处理来说一下为什么Kafka选择了micr-batch。 在介绍之前先说一下几个经典概念：
主从复制，是指将一台Redis服务器的数据，复制到其他的Redis服务器。前者称为主节点(master/leader)，后者称为从节点(slave/follower) ; 数据的复制是单向的，只能由主节点到从节点。Master以写为主，Slave以读为主。
5、发送缓冲区数据 检查可发送该线程的相关联的所有会话上的发送缓冲区的数据,检查完后，发送会话上的发送缓冲区的数据。 VOID ExecSockDataMgr::CheckSendSessionBuffers(PEXECDATASENDTHREAD pSendThread) { int nErr, nRemainSize; char *pBuffer; PRUNGATEUSERSESSION *pSessionList = m_SessionList; PRUNGAT
iperf命令是一个网络性能测试工具，可以测试TCP和UDP带宽质量。同时也可以通过UDP测试报告网丢包率或者发包性能，是一个非常实用的工具
有两个分区的名为“my_topic”的主题的日志包含两个目录（即my_topic_0和my_topic_1），其中填充了包含该主题的消息的数据文件。日志文件的格式是一系列“日志条目”；每个日志条目是一个4字节整型变量N，存储消息长度，后跟N个消息字节。每条消息由64位整数偏移量给出消息在这个分去中所有发送到这个主题的消息的流中开始的字节位置。每个日志文件都以其包含的第一条消息的便宜量命名，因此创建的第一个文件都将是00000000000.kafka，并且每个附加文件将具有一个整数名称，大约是从前一个文件中的S个字节，其中S是配置中给出的最大日志文件的大小。
3）4位TCP报头长度：表示该TCP头部有多少个32位bit（有多少个4字节），所以TCP头部最大长度是15*4=60。
PolarDB-SCC 利用单边的RDMA 进行日志传输，减少网络开销节省CPU周期，如下图所示每个只读RO节点有一个日志的缓冲区，RW节点的日志缓冲区的日志数据将始终远程写入到RO节点日志的缓冲区中的相同的偏移量位置，RW节点为每个RO节点分配一个日志写入程序，负责通过RDMA 将日志写入到RO节点缓冲，RO节点会自动在RW节点中注册，然后相关的日志会写入到从节点中。
原文:https://blog.csdn.net/qq_50156012/article/details/123391854
TCP全称为 "传输控制协议(Transmission Control Protocol")。人如其名, 要对数据的传输进行一个详细的控制。
https://googleprojectzero.blogspot.com/2020/08/exploiting-android-messengers-part-2.html
大家好，我是来自安徽广播电视台的张博力，接下来我将为大家详细介绍泛广电领域的卫星传输和公网传输。
注：端口号大部分都是16位的，其根本原因就是因为传输层协议当中的端口号就是16位的
在分布式系统中，为了解决单点问题，通常会把数据复制多个副本部署到其他节点，以便满足故障恢复和负载均衡等需求。redis也是如此，它为我们提供了复制功能，实现了相同数据的多个副本。复制功能是redis高可用的基础，不管是哪种集群方案，都是基于底层的主从复制原理进行的。 配置redis主从复制 在redis的主从复制中，和其他服务一样，都有master和slave两个角色，默认每个redis节点都是主节点，每个从节点也只能有一个主节点，而主节点可以配置多个从节点。
goroutine 是轻量级线程，goroutine 的调度是由 Golang 运行时进行管理的。
Go 语言支持并发，我们只需要通过 go 关键字来开启 goroutine 即可。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
