前言： qemu发生了crash。这种类型的问题比较少见，这里说一下这个问题的分析过程。 分析： 1，coredump 生成的coredump，一种是配置了/proc/sys/kernel/cor
L011Linux和androidNDK之socket出错情况的处理：Interrupted system call，Try again
最近安装好了MySQL之后，在启动MySQL服务时无法正常启动MySQL。提示没有更新/var/lib/mfailedZDB.pid并退出。该MySQL与Oracle位于同一主机。有些内核参数进行过调整应该也是使用与MySQL。下面是该问题的具体描述。
创建一个能用的SOCKET是非常简单的，因为GLIBC已经为你做了很多简化工作，但是从另一个角度来说，一个通用的SOCKET不代表一个高效性能的网络应用。我们前面说到sockfd其实同真正的FD是一样的。都是LINUX下的一个打开的设备描述符。内核通过这个描述符进行I/O操作。进行I/O操作就有一个性能问题，这个性能问题在于两个条件，一个条件是对同一个FD，有多个客户进行操作时如何更好的排队。另一个就是一个客户如果有多个FD，那应该怎么排队选择问题。因为我们知道不管是READ还是READFREOM它其实都是阻塞操作。一旦占用就始终等到有新数据来到。那么如何解决这个问题呢？首先我们看第一个排队问题，就是多个客户使用同一个SOCKET，如果当前来的数据不是占据的客户，那显然会导致阻塞。所以我们想出另一个方法，就是当一个或多个I/O条件满足，如输入数据已准备好被读或者描述字可以承接更多输出时的时候，作为消费者的客户端可以被通知到，这样的能力称之为I/O复用。这个在GLIBC中设计了两个新的函数就是SELECT/POLL。以下是几种I/O模型的比较图：
https://blog.csdn.net/dongfuye/article/details/50880251
在Linux网络编程中，errno是一个非常重要的变量。它记录了最近发生的系统调用错误代码。在编写网络应用程序时，合理处理errno可以帮助我们更好地了解程序出现的问题并进行调试。
本文来自 Marek’s 博客中 I/O multiplexing part 系列之三和四，原文一共有四篇，主要讲 Linux 上 IO 多路复用的一些问题，本文加入了我的一些个人理解，如有不对之处敬请指出。原文链接如下：
今天遇到下面问题 如果socket客户端进程挂点 或者正常close 服务端检测 select检测返回的是0 还是-1 还是大于1呀 这个基本问题 竟然我分不清楚了？ 先从read函数 返回实际读取到的字节数 ，属于io基本操作说起 关于 ②返回值等于0讨论 非阻塞 返回值等零表示没有数据可读 （这个理解是错误的 如果没有数据返回应该是EAGAIN） 阻塞情况下：select/epoll检测可读的情况下，read返回0表示远端close 异常断开 总结： 阻塞接收的recv有时候会返回0，这仅在s
前言： 在《[linux][pthread]qemu的一次pthread create失败的分析》中分析了pthread失败的原因以及解决方法。修改了pidmax之后，一直没有看到现象发生，但是不能证明问题被解决了，因为当时的环境只有coredump文件，没有找到固定的复现规律。继续观察中。 坏消息是问题又复现了。 好消息是问题能复现了。 分析： 1，clone fail 作者写了脚本，批量启动大量的qemu进程。在启动很大量的qemu之后，会有部分qemu进程crash。结合之前的分析过程，作者判断，
在使用FFmpeg进行音视频编解码时，我们经常会遇到各种错误和异常情况。其中，一个常见的错误是avcodec_receive_packet返回AVERROR(EAGAIN)。本篇博客将围绕这个错误展开讨论，并提供解决方案。
永远阻塞的系统调用，被信号中断，导致其不继续等待，转而去执行signal_handler
笔者一直觉得如果能知道从应用到框架再到操作系统的每一处代码，是一件Exciting的事情。 今天笔者就从Linux源码的角度看下Server端的Socket在进行Accept的时候到底做了哪些事情(基于Linux 3.10内核)。
Go语言的出现，让我见到了一门语言把网络编程这件事情给做“正确”了，当然，除了Go语言以外，还有很多语言也把这件事情做”正确”了。我一直坚持着这样的理念——要做”正确”的事情，而不是”高性能”的事情；很多时候，我们在做系统设计、技术选型的时候，都被“高性能”这三个字给绑架了，当然不是说性能不重要，你懂的。 目前很多高性能的基础网络服务器都是采用的C语言开发的，比如：Nginx、Redis、memcached等，它们都是基于”事件驱动 + 事件回调函数”的方式实现，也就是采用epoll等作为网络收发数据包的核
虽然都是linux，芯片也是基于同样的架构，同样的指令集，但是考虑到芯片的实现毕竟是不同的，于是所有涉及到硬件交互的软件部分，也会有所差异，最终会导致了有些应用层面的接口，不能按照普通linux的通常用法去使用。
accept() 系统调用应用于可连接套接口类型 ( SOCK_STREAM, SOCK_SEQPACKET)。它取出在监听套接口 sockfd请求队列里的第一个连接，新建一个已连接的套接口，并且返回一个引用该套接口新的文件描述符。新建的套接口不处于监听状态。原始的套接口 sockfd 没有受到影响。
该文总结了如何通过修改配置文件实现一个自定义的HTTPS后端服务器，包括配置HTTPS证书、指定监听端口、指定代理路径和实现基于HTTP的负载均衡。
idr在linux内核中指的就是整数ID管理机制，从本质上来说，这就是一种将整数ID号和特定指针关联在一起的机制。这个机制最早是在2003年2月加入内核的，当时是作为POSIX定时器的一个补丁。现在，在内核的很多地方都可以找到idr的身影。
与其他语言的网络IO强调异步非阻塞不同，GOLANG里的网络IO模型是：创建多个goroutine，每个goroutine的网络IO都是阻塞的，这样的代码非常直观
我们之前介绍过简单的read，write操作，那么会有一个问题：当驱动无法立即响应请求该怎么办？比如一个进程调用read读取数据，当没有数据可读时该怎么办，是立即返回还是等到有数据的时候；另一种情况是进程调用write向设备写数据，如果缓冲区满了或者设备正忙的时候怎么办，是立即返回还是继续等待直到设备可写？这种情况下，一般的缺省做法是使进程睡眠直到请求可以满足为止。本篇就介绍遇到这类问题驱动的处理方法。 睡眠 什么是睡眠？一个进程睡眠意味着它暂时放弃了CPU的运行权，直到某个条件发生后才可再次被系统调度。
很多人说BIO不好，会“block”，但到底什么是IO的Block呢？考虑下面两种情况：
本文从操作系统的角度来解释BIO，NIO，AIO的概念，含义和背后的那些事。本文主要分为3篇。 第一篇讲解BIO和NIO以及IO多路复用 第二篇讲解AIO和文件IO 第三篇讲解在这些机制上的一些应用的实现方式，比如nginx，nodejs，Java NIO等 到底什么是“IO Block” 很多人说BIO不好，会“block”，但到底什么是IO的Block呢？考虑下面两种情况： 用系统调用read从socket里读取一段数据 用系统调用read从一个磁盘文件读取一段数据到内存 如果你的直觉告诉你，这两种都算
Coroutine Native SRT Written by John[1], Winlin[2] 协程是现代服务器的核心技术，能极大简化逻辑和提升维护性；SRT是逐渐在取代RTMP推流的新协议，但它有自己的IO框架；只有实现了SRT的协程化，才能成为SRS的核心的成熟的协议，这是SRS 5.0迈出的第一步，也是至关重要的一步。 SRS 5.0从2022年初启动以来，经过摸索和探讨，确定了以媒体网关作为核心方向，详细请看SRS 5.0核心问题定义和解法。 SRT作为主播/广播推流领域广泛采用的协议，浏览器
初级 Linux 问题： 谈谈你喜欢的开发/管理环境。（操作系统、编辑器、浏览器、工具等） 告诉我你完成的最后一个主要 Linux 项目。 管理员用户的名称和 UID 是什么？ 如何列出目录中的所有文件，包括隐藏文件？ 删除目录及其内容的 Linux 命令是什么？ 中级 Linux 问题： 以下命令有什么作用，您将如何使用它们？ tee awk 什么是隧道以及如何绕过 HTTP 代理？ IDS 和 IPS 有什么区别？ 您经常使用哪些快捷键？ 高级Linux 问题： 正在运行的进程获得 EAGAIN：读取套
该文介绍了muduo库的EventLoop、Buffer、EventLoopThread等基本概念，以及其网络编程模型。通过示例阐述了muduo中EventLoop的两种触发模式、线程安全和非阻塞性，以及其与muduo::Loop的关系。还讲解了Buffer的读写操作，以及其在muduo网络编程模型中的作用。
容我详细道来这个是什么形式的“惊群”效应并如何解决。
accept(2): accept connection on socket - Linux man page (die.net)
文件描述符 进程每打开一个文件的时候，会获得该文件的文件描述符，而后续的读写操作都把文件描述符作为参数。在用户空间或者内核空间，都是通过文件描述符来唯一地索引一个打开的文件。文件描述符使用int类型表示，文件描述符的范围从0开始，到上限值-1，默认情况下，上限值为1024，也就是说，进程默认情况下最多可以打开1024个文件。负数是不合法的文件描述符，当函数调用出错时，返回的文件描述符为-1。 每个进程都至少包含三个文件描述符： 文件描述符 表示 宏 0 标准输入（stdin） STDIN_FILENO 1
Linux平台上传统的I/O复用模型有select和poll模型，但二者在解决大量并发请示时却表现不佳。与select/poll相比，epoll的优点体现在以下三个方面：
在linux 没有实现epoll事件驱动机制之前，我们一般选择用select或者poll等IO多路复用的方法来实现并发服务程序。在linux新的内核中，有了一种替换它的机制，就是epoll。
非阻塞 I/O（Input/Output）是一种在进行文件和套接字操作时不阻塞进程的机制。在 Linux 中，非阻塞 I/O 可以通过设置文件描述符（File Descriptor）为非阻塞模式来实现。
相信很多在linux平台工作的童鞋, 都很熟悉管道符 '|', 通过它, 我们能够很灵活的将几种不同的命令协同起来完成一件任务。就好像下面的命令:
豌豆贴心提醒，本文阅读时间5分钟 相信很多在linux平台工作的童鞋, 都很熟悉管道符 '|', 通过它, 我们能够很灵活的将几种不同的命令协同起来完成一件任务。就好像下面的命令: 不过这次咱们不来说
GO原生支持协程，并且服务器上可以支持上万的协程goroutine。所以在网络编程方面，一般都采用一个连接开启一个协程的模式。
以上两个关键点最终都与操作系统的 I/O 模型以及线程(进程)模型相关，我们先详细看一下I/O模型 。
上篇文章 提到阻塞(block)一下如何read数据 这里针对是非阻塞如何read数据 并且纠正前面出现几个错误 (1) 非阻塞 遇到errno=EAGAIN必须continue处理 ,epoll_wait 下次还能触发吗？ (2) 服务器read一次数据 ，只解析一个包的数据 会不会出现每次客户端发送新数据 但是服务器读取仍然是历史发送记录， 缓存里留着未处理数据情况 在一个异步非阻塞的socket上调用read/write函数读为2个步骤 步骤1 调用read从系统 层读取到应用层 步骤2 解析数
I/O模型主要包括：阻塞IO、非阻塞IO、I/O 多路复用、异步I/O和信号I/O;
RECV(2) Linux Programmer’s Manual RECV(2)
调用 mmap 系统调用 , 先检查 " 偏移 " 是否是 " 内存页大小 " 的 " 整数倍 " , 如果偏移是内存页大小的整数倍 , 则调用 sys_mmap_pgoff 函数 , 继续向下执行 ;
匿名管道是进程间通信中比较简单的一种，他只用于有继承关系的进程，因为匿名，非继承关系的进程无法找到这个管道，也就无法完成通信，而有继承关系的进程，是通过fork出来的，父子进程可以获得得到管道。进一步来说，子进程可以使用继承于父进程的资源，但是他无法使用叔伯进程的资源。管道通信的原理如下:
在前面的文章中曾经粗略讲过poll，那时是用阻塞IO实现，在发送和接收数据量都较小情况下和网络状况良好的情况下是基本没有问题的，read 不会只接收部分数据，write 也不会一直阻塞。但实际上poll IO复用经常是跟非阻塞IO一起使用的，想想如果现在内核接收缓冲区一点数据没有，read 阻塞了，或者内核发送缓冲区不够空间存放数据，write 阻塞了，那整个事件循环就会延迟响应，比如现在又有一个新连接connect上来了，也不能很快回到循环去accept 它。
笔者一直觉得如果能知道从应用到框架再到操作系统的每一处代码，是一件Exciting的事情。 大部分高性能网络框架采用的是非阻塞模式。笔者这次就从linux源码的角度来阐述socket阻塞(block)和非阻塞(non_block)的区别。 本文源码均来自采用Linux-2.6.24内核版本。
之前我在文章中实现了用requests库爬取腾讯疫情数据的功能。但是我再Linux服务器上运行那个程序却出现了意想不到的情况。运行结果
前言：IPIP隧道是一种三层隧道，通过把原来的IP包封装在新的IP包里面，来创建隧道传输。本篇简单分析Linux（2.6.32版本）中的IPIP隧道的实现过程，期望有所借鉴，造出轮子:-)
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
云直播
对象存储
