nginx简介 Nginx (“engine x”) 是一个高性能的HTTP和 反向代理 服务器，也是一个 IMAP/POP3/SMTP 服务器。 Nginx 是由 Igor Sysoev 为俄罗斯访问量第二的 Rambler.ru 站点开发的，第一个公开版本0.1.0发布于2004年10月4日。其将源代码以类BSD许可证的形式发布，因它的稳定性、丰富的功能集、示例配置文件和低系统资源的消耗而闻名。2011年6月1日，nginx 1.0.4发布。 Nginx是一款轻量级的Web 服务器/反向代理服务器及
Nginx与Apache的I/O性能差距源于他们采用不同的I/O模型 Apache - select模型 Nginx - epoll模型 特点对比 select模型 （1）最大并发连接数限制，一个进程所打开的 FD （文件描述符）是有限制的，由 FD_SETSIZE 设置，默认值是 1024/2048 ，因此 Select 模型的最大并发数就被限制了 （2）效率问题，select 每次调用都会线性扫描全部的 FD 集合，这样效率就会呈现线性下降，所以，如果把 FD_SETSIZE 改大，效率会直
本文列举四个比较经典的 Linux 收包引擎，如果还有其他你觉得ok的可以留言。这四个分别是：
移动设备的操作系统阵营之一的Android，底层基于Linux内核，中间为Native&Runtime层和Framework层。我们知道Linux本身有着很成熟的IPC（进程间通信）机制，比如管道、消息队列、共享内存、socket、信号和信号量等。然而，Android却使用Binder来作为它的IPC的方案，这是为何呢？接下来，就把我之前学习Binder的心得写下来。
传统的WEB服务器在收到请求后，从磁盘读取数据，然后将数据写到网卡，通过网卡发送给客户端，这一读一写的过程中就涉及数据的拷贝：
它从源字符串src复制字符到目标字符串dest，包括NULL字符（即字符串结束标志）。
在介绍零拷贝的IO模式之前，我们先简单了解下传统的IO模式是怎么样的？
mmap 另一个非常重要的特性是：减少内存的拷贝次数。在 linux 系统中，文件的读写操作通常通过 read 和 write 这两个系统调用来实现，这个过程会产生频繁的内存拷贝。比如 read 函数就涉及了 2 次内存拷贝：
Netty 是一款基于 NIO（Nonblocking I/O，非阻塞IO）开发的网络通信框架，对比于 BIO（Blocking I/O，阻塞IO），他的并发性能得到了很大提高。难能可贵的是，在保证快速和易用性的同时，并没有丧失可维护性和性能等优势。
最近因工作原因开始了解Service Mesh与Envoy，为系统性梳理所学内容，因此沉淀了此文档，但由于所知有限，如文档中有描述不当之处，希望不吝赐教。
list详解 vector详解 1、概念： 1. Vector 连续存储的容器，动态数组，在堆上分配空间 底层实现：数组 1.5/2倍容量增长(随着编译器的不同，容量增长倍数也不同)：vector 增加（插入）新元素时，如果未超过当时的容量，则还有剩余空间，那么直接添加到最后（插入指定位置），然后调整迭代器。 如果没有剩余空间了，则会重新配置原有元素个数的两倍空间，然后将原空间元素通过复制的方式初始化新空间，再向新空间增加元素，最后析构并释放原空间，之前的迭代器会失效。 性能： 访问时间复杂度：O(1)
Netty是一个高性能、异步事件驱动的NIO框架，它提供了对TCP、UDP和文件传输的支持，作为一个异步NIO框架，Netty的所有IO操作都是异步非阻塞的，通过Future-Listener机制，用户可以方便的主动获取或者通过通知机制获得IO操作结果。
相比于select，epoll最大的好处在于它不会随着监听fd数目的增长而降低效率。因为在内核中的select实现中，它是采用轮询来处理的，轮询的fd数目越多，自然耗时越多。 并且，在linux/posix_types.h头文件有这样的声明： #define __FD_SETSIZE 1024 表示select最多同时监听1024个fd，当然，可以通过修改头文件再重编译内核来扩大这个数目，但这似乎并不治本。
Socket编程进行的是端到端的通信，基于网络层和传输层的实现。在网络层，Socket 函数需要指定到底是 IPv4 还是IPv6。传输层需要指定是tcp还是udp。 基于TCP协议的socket调用过程：
零拷贝（Zero-copy）是指计算机执行操作时，CPU不需要先将数据从某处内存复制到另一个特定区域。这种技术通常用于通过网络传输文件时节省CPU周期和内存带宽。
Netty 实现高性能的另一个高阶特性——零拷贝。零拷贝是一个耳熟能详的词语，在 Linux、Kafka、RocketMQ 等知名的产品中都有使用，通常用于提升 I/O 性能。而且零拷贝也是面试过程中的高频问题，那么你知道零拷贝体现在哪些地方吗？Netty 的零拷贝技术又是如何实现的呢？接下来我们就针对 Netty 零拷贝特性进行详细地分析。
零拷贝作用 : 在网络编程中 , 如果要进行性能优化 , 肯定要涉及到零拷贝 , 使用零拷贝能极大的提升数据传输性能 ;
老大总结的代码级提高代码执行效率需要注意的点，很值得和大家分享一下，在这儿也由衷地感谢下老大的总结和工作中的指导。大多数的点都在项目中验证过，比如对配置文件的遍历操作可以通过偏移量查找的方式优化，也有一些是常识，但可能并未引起大家注意，比如函数返回值不能是对象，必须是引用等。
I/O多路复用就是通过一种机制，可以同时监视多个描述符，一旦某个描述符就绪（一般是读就绪或者写就绪），能够通知程序进行相应的读写操作。
最近有读者问我，面试被问到高性能，但因为自己都是靠死记硬背，没有消化理解，所以答的不是很好。
D1 && D1s(f133)采用的是平头哥C906的core，上面已经支持了RVV 0.7.1版本，虽然目前RVV1.0已经frozen,这就意味着上游编译器或者一些相关的生态软件将支持RVV1.0，但是作为性能评估RVV0.7.1与RVV1.0影响并不大。下面的文章主要描述如何在D1 && D1s芯片上运行rt-thread，并且描述如何开启RVV，同时对RVV性能进行一个简单的评估，最后讨论RVV如何与RTOS使用的问题。
redis 是一个单线程却性能非常好的内存数据库， 主要用来作为缓存系统。 redis 采用网络IO多路复用技术来保证在多连接的时候， 系统的高吞吐量。 为什么 Redis 中要使用 I/O 多路复用这种技术呢？ 首先，Redis 是跑在单线程中的，所有的操作都是按照顺序线性执行的，但是由于读写操作等待用户输入或输出都是阻塞的，所以 I/O 操作在一般情况下往往不能直接返回，这会导致某一文件的 I/O 阻塞导致整个进程无法对其它客户提供服务，而 I/O 多路复用就是为了解决这个问题而出现的。 redis的io模型主要是基于epoll实现的，不过它也提供了 select和kqueue的实现，默认采用epoll。 那么epoll到底是个什么东西呢？ 其实只是众多i/o多路复用技术当中的一种而已，但是相比其他io多路复用技术(select, poll等等)。
IPC全名为inter-Process Communication，含义为进程间通信，是指两个进程之间进行数据交换的过程。在Android和Linux中都有各自的IPC机制，这里分别来介绍下。
Epoll但是当前在Linux下开发大规模并发网络程序的热门人选，Epoll 在Linux2.6内核中正式引入，和select类似，事实上都I/O多路复用技术而已，并没有什么神奇的。
◆DPDK是什么 Intel® DPDK全称Intel Data Plane Development Kit，是intel提供的数据平面开发工具集，为Intel architecture（IA）处理器架构下用户空间高效的数据包处理提供库函数和驱动的支持，它不同于Linux系统以通用性设计为目的，而是专注于网络应用中数据包的高性能处理。具体体现在DPDK应用程序是运行在用户空间上利用自身提供的数据平面库来收发数据包，绕过了Linux内核协议栈对数据包处理过程。 ◆DPDK技术介绍 一、主要特点 1、UIO（L
在 JDK 的 NIO 中，我们学习到了其原生的数据承载组件ByteBuffer。ByteBuffer的体验着实不太好，读写状态的区别，还有flip这种乍看下不直观的操作。
1. 锁的使用 锁是影响服务器程序性能的第一大杀手。服务器程序一般都是多线程或是多线程的，锁肯定避免不了。对于锁的使用，第一点就是减小锁的粒度。比如mysql有行锁，表锁，各种粒度不同的锁。在需要加锁的地方，选择粒度最小的锁。第二点，使用一些高性能的锁，比如读写锁，自旋锁。这个要根据具体的应用场景来选择。另外还有一些应用级别的锁，比如电商系统里面，用来减库存的乐观锁，与其对应的则是悲观锁。另外，还可以通过优化代码，来达到无锁化操作。 2. 内存使用 在一个内存操作密集型的服务器程序上，对内存的使用优化肯定也
作为一个学Java的，如果没有研究过Netty，那么你对Java语言的使用和理解仅仅停留在表面水平，会点SSH，写几个MVC，访问数据库和缓存，这些只是初等Java程序员干的事。如果你要进阶，想了解Java服务器的深层高阶知识，Netty绝对是一个必须要过的门槛。
时点性是必须保证的，否则快照就没有了意义，那就只能尝试将阻塞客户端的时间变短一点了。
上次的陈老师在对PolarDB 的分享中，提到一个新名词，bypass，通过bypass 来提高整体的云原生数据库的性能。这在传统的数据库的技术中我未曾听过，当然上次的东西，最近比较懒，没有整理，后续我会把相关的录音转换成文字，把PolarDB到底打败了谁，之快问快答的东西整理出来。
在《一文看懂零拷贝技术》中我们介绍了 零拷贝技术 的原理，而且我们知道 mmap 也是零拷贝技术的一种实现。在本文中，我们主要介绍 mmap 的原理。
利用 java.io 类库，直接为源文件构建一个 FileInputStream 读取，然后再为目标文件构建一个FileOutputStream，完成写入工作。
============================================================================= struct A { char array[100]; //array不知道在哪里呢？只是告诉c语言编译器有这么一种类型结构。是一种语法形式，不要误解。 int a; };
这种技术是出现在 IO 操作上的， IO 操作会大量消耗 CPU 的性能，为什么说 IO 操作很容易成为性能瓶颈呢，每一个的 IO 操作都会涉及到操作系统的内核空间和用户空间的转换，真正执行的 IO 操作实际上是在操作系统的内核空间进行。无论是 文件IO ，还是 网络IO ，最后都可以统一为用户空间和内核空间数据的交换。计算机中内存和 CPU 都是非常稀有的资源，应该尽可能提高这些资源的使用效率。 IO 操作经常需要与磁盘就行交互，所以 IO 操作相比于 CPU 的速度要慢好几个数量级。利用这两者之间的速度差异，就可以实现不同种类的 IO 方式，也就是俗称的 IO模型。
程序员：假如我们执行A,B两个IO操作的时候，如果必须等待A完成后才能执行B那么这个就是
DPDK与SR-IOV两者目前主要用于提高IDC（数据中心）中的网络数据包的加速。但是在NFV（网络功能虚拟化）场景下DPDK与SR-IOV各自的使用场景是怎样的？以及各自的优缺点？
linux操作系统包含了五种IO模型，各种上层编程语言或者网络编程框架的上层实现都是基于操作系统的这些IO实现来实现的。
前言 pin_memory 和 non_blocking的作用分别是什么?网上看了很多解释，只是稀里糊涂的有个感觉，就是用了这玩意速度能变快，但是不知所以然，这篇文章希望能帮助你解惑，也给自己做个笔记
作者简介：梁少华，QQ动漫后台开发，腾讯高级工程师。从事后台开发4年多，参与过QQ秀、手Q红点系统、手Q游戏公会、QQ动漫等项目，有丰富的后台架构经验，擅长海量服务设计 1. 什么是写时拷贝 写时拷贝（copy-on-write， COW）就是等到修改数据时才真正分配内存空间，这是对程序性能的优化，可以延迟甚至是避免内存拷贝，当然目的就是避免不必要的内存拷贝。 写时拷贝其实我们并不陌生的，Linux fork和stl string是比较典型的写时拷贝应用，本文只讨论stl string的写时拷贝。 st
Netty 是一个 高性能，异步的 NIO框架，支持 TCP，UDP，文件传输；所有IO操作都是异步非阻塞的
DMA 的全称叫直接存储器访问（Direct Memory Access），是一种允许外围设备（硬件子系统）直接访问系统主内存的机制。
函数原型 void *memcpy(char *dest,const char *src,size_t n)
上一篇文章中，我们结合此前已经介绍过的一系列知识，成功的将内核载入内存并进入到了保护模式中。 实战操作系统 loader 编写（上） — 进入保护模式
memcpy存在与预期不符合的问题，它存在一个从后往前和从前往后拷贝的顺序，vs2019中memcpy的顺序是从后往前 如果拷贝的内存覆盖，从前往后拷贝的顺序就会与预期不符
Netty3出现了太多的内存垃圾，创建了过多对象，在大的服务端压力下会表现比较糟糕，做了太多的内存拷贝，在堆上创建对象，堆缓冲区，当往socket写内容时就需要做内存拷贝，拷贝到直接内存，然后交给socket所以做了太多内存拷贝。
这些问题虽然在线上经常看到，但我们似乎很少去深究。如果真的能透彻地把这些问题理解到位，我们对性能的掌控能力将会变得更强。
原文链接：https://blog.csdn.net/dog250/article/details/46666029
答案 ： (1) IO线程模型 ：同步非阻塞，用最少的资源做更多的事情。 (2) 内存零拷贝 ：尽量减少不必要的内存拷贝，实现了更高效率的传输。 (3) 内存池设计 ：申请的内存可以重用，主要指直接内存。内部实现是用一颗二叉查找树管理内存分配情况。 (4) 串行化处理读写 ：避免使用锁带来的性能开销。即消息的处理尽可能再同一个线程内完成，期间不进行线程切换，这样就避免了多线程竞争和同步锁。表面上看，串行化设计似乎CPU利用率不高，并发程度不够。但是，通过调整NIO线程池的线程参数，可以同时启动多个串行化的线程并行运行，这种局部无锁化的串行线程设计相比一个队里-多个工作线程模型性能更优。 (5) 高性能序列化协议 ：支持protobuf等高性能序列化协议。 (6) 高效并发编程的体现 ：volatile的大量、正确使用；CAS和原子类的广泛使用；线程安全容器的使用；通过读写锁提升并发性能。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
