一. linux内核简介 1. linux简介 1.1 unix的特点 unix很简洁，仅提供几百个系统调用，并有非常明确的设计目的 unix所有东西都当作文件对待，这种抽象使对数据和设备都通过一套相同的系统调用接口进行...内核用C语言编写，移植能力很强 进程创建迅速，独特的fork调用 提供了简洁但是稳定的进程间通讯原语 1.2 unix和linux linux克隆unix，但不是unix linux借鉴了unix很多的设计...，并且实现了 unix的api linux没有直接使用unix的源代码，但完整表达了unix的设计目标并保证编程接口一致 2....线程在linux中的实现 4.1 liunx线程概述 一组线程共享进程内的内存地址空间，打开的文件和其他资源 线程机制支持并发程序设计技术，多处理器上保证真正的并行处理 linux实现线程的机制非常独特...调度算法 3.1 概述 linux调度程序定义与kernel/sched.c 2.5版本内核重写调度算法，和以前版本区别很大，实现以下目标 充分实现O（1）调度，不管多少进程或什么输入，每个算法能在恒定时间内完成
《Linux内核设计与实现》第3版，英文版已经出版，中文版即将出版。...本书基于linux 2．6介绍了linux内核的设计与实现，涵盖了从核心内核系统的应用到内核设计与实现等各方面内容，主要内容包括：进程管理、调度、时间管理和定时器、系统调用接口、内存寻址、内存管理、页缓存...本书详细描述了linux内核的主要子系统和特点，包括其设计、实现和接口，既介绍理论也讨论具体应用，填补了linux内核理论和实践细节之间的鸿沟。...能够带领读者快速走进linux内核世界，真正开发内核代码。 如果你是一名linux内核爱好者，本书的内容可以帮助你大显身手。如果你是一名普通程序员，本书的内容将会拓宽你的编程思路。...就我们的经验，内核初学者（不是编程初学者）可以从这本书着手，对内核各个核心子系统有个整体把握，包括它们提供什么样的服务，为什么要提供这样的服务，又是怎样实现的。
对Linux内核的设计原理进行了细致的说明，也有具体实现部分的介绍，结合源码能很好的理解Linux内核； 在简单翻了一遍之后，带着如下几个疑问，整理了下相关知识点： 1、内核是什么时候加载运行的； 2、...根据《Linux内核设计与实现》说明，CPU在某个任何特定的时间点上的活动必然概括为下列三种之一： 运行于用户空间，执行用户进程； 运行于内核空间，处于进程上下文，代表某个特定的进程执行； 运行于内核空间...Linux设备驱动作为一个linux内核模块存在，模块都有2个接口函数，模块初始化函数和模块退出函数。 上面提到的驱动程序的注册。一般是由模块初始化函数来实现的。...系统调用：与内核通信的关键，系统调用包括系统调用号，系统调用的实现，系统调用上下文等； 图来源：https://blog.csdn.net/h1791820113/article/details/90545241...MMU/Cache line CPU L1/L2高速缓存 页高速缓存：Linux内核实现的磁盘缓存，主要用来减少对磁盘的I/O操作。
在上一部分，分层架构的目的是为了将业务规则剥离出来在单独的领域层中进行实现。再回顾一下领域驱动设计的分层中应用层代码的实现。...领域驱动设计，即领域模型驱动程序设计，它的核心是保证系统的实现与实际的业务规则一致，完整实现了领域模型。它包含了两个部分：领域模型、领域模型的编程实现。...在软件设计和实现过程中要充分利用领域模型，设计过程中，领域模型作为与业务专家的沟通语言；实现过程中，领域模型作为与开发人员沟通的语言。领域模型在软件生命周期过程作为通用语言。...例如，汽车类与引擎类、轮胎类，以及其它的零件类之间的关系便整体和个体的关系。与关联关系一样，聚合关系也是通过实例变量实现的。...===================== 在这里我们可以梳理出来的名词有：客户、设计师订单、设计师、订单交付进度与交付节点、退款订单。
在上篇文章 《深入理解 Linux 物理内存分配全链路实现》 中，笔者为大家详细介绍了 Linux 内存分配在内核中的整个链路实现： image.png 但是当内核执行到 get_page_from_freelist...那么本文笔者就为大家完整地介绍一下伙伴系统这部分的内容，我们将基于内核 5.4 版本的源码来详细的讨论一下伙伴系统在内核中的设计与实现。 文章概要.png 1....伙伴系统的内存分配原理 在 《深入理解 Linux 物理内存分配全链路实现》 一文中的第二小节 " 2....而在 Linux 内存管理的架构中都是统一通过 struct page 来管理内存，复合页却是通过两个或者多个物理上连续的内存页 page 组装成的一个逻辑页，那么复合页的管理与普通页的管理如何统一呢？...内存释放源码实现 在 《深入理解 Linux 物理内存分配全链路实现》 中的 “1.
C++ 读写锁设计 本文档为自实现的读写锁，可直接使用 本方案没有用到一切外部库，仅使用到C++11 文章目录 **简析:** 1.本方案是允许读数据同时进行...,但与写数据是互斥的存在，只有读数据操作所有完成后释放锁才允许写。...**代码块** **RWLock.h** **RWLock.cpp** **使用例子:** **执行结果:** 简析: 1.本方案是允许读数据同时进行,但与写数据是互斥的存在，只有读数据操作所有完成后释放锁才允许写...- 读比较多的情况下节省资源与时间 *功能2： *功能3： * */ #pragma once class CRWLock { friend class CRLock; //friend class...printf("Thread4Write End\n"); } void main() { /* * * RunThread是自定义的方法 这里就不实现了
不少人只会用框架，却看不懂源码，不了解其底层机制与实现原理，成了一名只会搬运源码库的开发。...作为一名开发者非常有必要掌握其实现原理，更好地解决我们开发中遇到的问题；同时，Mybatis 的架构和源码非常优雅，使用了大量的设计模式实现解耦以及高扩展性对其设计思想也需要深入理解。...可能你不一定回答好这些问题，最近邀请了我的朋友讲了一节 Mybatis 架构设计与 Spring 底层源码分析课程。深入底层、剖析源码，限时 0.02 元，扫码即刻抢占 ?...Mybatis 如何获取数据库源 Mybatis 如何执行 SQL 语句，xml 和注解的方式差异点 Mybatis 结果集处理与结果映射关系源码分析 Mybatis 中缓存的作用与不足 一级和二级缓存实现原理...说说 @Autowired、@Resource、@Value、@Inject 这几个注解的区别与底层实现 能否说下 ApplicationContext 的启动流程中做了哪些事情 ?
Feed，在社交和信息推荐的App与网站中，基本都会用到的。例如常用的新浪微博，用户登录进入后，展现给我们的就是feed信息流。新浪微博的信息，来自于你关注人所发布的内容。...本文会先介绍几种不同的Feed设计，让大家对Feed实现有初步的了解。其次会对我们采用的Feed方案作出详细的解答。 推方式 推方式，是发生在用户触发行为（发布新的动态，关注某个人，点赞）的时候。...[这里写图片描述] 拉的模式相对是比较简单易实现的，另外对用户关系变更（新增，删除用户）是敏感的。其次也不存在数据存储压力。但在查询的时候，对帖子表本身压力是很大的。
image.png image.png 13、与调度相关的系统调用 image.png 14、系统调用在用户空间进程和硬件设备之间添加了一个中间层 image.png 15、中断 image.png...18、加锁 image.png 19、定时器与时间管理 20、slab?? 21、虚拟文件系统：VFS 22、IO调度 23、页高速缓存和页回写
1. pdfunite Linux 下可以使用 pdfunite 命令来合并多个 PDF 文件。...如果你的 Linux 发行版上没有该命令，需要安装 poppler-utils（Debian 系）或 poppler（Arch 系）软件。...如果需要其他的排序规则，可以结合 Linux 下的 sort 命令来自定义顺序。sort 详细介绍参见 sort --help。 2....如果你的 Linux 发行版上没有 pdftk 命令，需要手动安装 PDFtk 软件。...pdftk 合并 PDF 的示例如下： pdftk 1.pdf 2.pdf 3.pdf cat output 123.pdf # 拼接多个 PDF 文件 pdftk A=1.pdf B=2.pdf
1. pdfseparate Linux 下可以使用 pdfseparate 命令来分割 PDF 文件。...如果你的 Linux 发行版上没有该命令，需要安装 poppler-utils（Debian 系）或 poppler（Arch 系）软件。...pdfunite 命令的语法格式如下： pdfunite -f -l # 从单个 PDF 文件中提取指定范围页面...如果你的 Linux 发行版上没有 pdftk 命令，需要手动安装 PDFtk 软件。...pdftk 分割 PDF 的示例如下： pdftk 123.pdf cat 1-45 output out1_45.pdf # 从单个 PDF 文件中提取指定范围页面 其中，cat
(inplace = True): print process(line) #执行命令 c:\Python27>python test.py 1.txt 2.txt 例子03: 利用fileinput实现文件内容替换...文件转为LF import fileinput import sys for line in fileinput.input(inplace=True): #将Windows/DOS格式下的文本文件转为Linux...============================ Filename:phone.txt | Line Number:5 | 021-88888888 >>> 例子09: 利用fileinput实现类似于...测试脚本:test.py import re import fileinput regex = re.compile(r’^([^&]*)(&)([^&]*)(&)([^&]*)’) #整行以&分割，要实现...$First]与[*%-Second]互换 for line in fileinput.input(‘test.txt’,inplace=1,backup=’.bak’): print regex.sub
登陆验证 在一般项目账号体系中，一般会要求支持手机、邮箱、账号、QQ、微信、微博实现登陆。后面三种方式都是基于第三方授权后，完成的身份验证。手机、邮箱、账号则是相对传统的登录方式。...用户身份与登录的授权方式是独立开的，即用户uid和登录方式是一对多的关系。举例来说，用户A在使用微博授权登陆后，服务端鉴别身份信息为uid=123。...登陆授权表设计如下。...Access Token 与传统的Session相比，Access Token比较适合做RESTful Api开发。...另外也可以采用JWT实现。 希望转载的朋友能够尊重作者的劳动成果，加上转载地址。谢谢！ http://gglinux.com/2017/04/15/IM_design/
Plugin 对于编译语言是非常重要的，而动态语言显得不那么重要，因为动态语言出现是为了互补编译语言本身存在缺陷而设计的。...Plugin & Hook 设计与实现 插件系统分为： 插件管理平台 插件探测 插件注册 插件调用 插件注销 14.6.1. 插件管理平台 14.6.1. 插件管理平台 <?
关于gunicorn的设计 Server Model Gunicorn is based on the pre-fork worker model....下面回到 run方法的实现上， WSGIApplication没有实现 run方法，重点还是看基类 BaseApplication的 run实现。...可以在fork子进程之前预处理一些操作，具体可以在 gunicorn.config的 Prefork类实现。...Worker 进程 这边我们重点来看看 Worker中 init_process的实现： class Worker(object): ......执行 run run方法由各个子类实现，我们来看看 SyncWorker的 run方法 class SyncWorker(base.Worker): ...
设计目标 Titan 作为 TiKV 的一个子项目，首要的设计目标便是兼容 RocksDB。...架构与实现 Titan 的基本架构如下图所示： [1-Architecture.jpg] 图 1：Titan 在 Flush 和 Compaction 的时候将 value 分离出 LSM-tree，这样做的好处是写入流程可以和...BlobFile 有几点值得关注的地方： BlobFile 中的 key-value 是有序存放的，目的是在实现 Iterator 的时候可以通过 prefetch 的方式提高顺序读取的性能。...TitanTableBuilder TitanTableBuilder 是实现分离 key-value 的关键。...[10-Random Key Lookup.jpg] 图 10 Random Key Lookup： Titan 拥有比 RocksDB 更卓越的点读性能，这主要得益与将 value 分离出 LSM-tree
Redis设计与实现，以及关于Redis使用的总结 1.数据结构与对象 1.简单动态字符串 Redis自己构建了简单动态字符串(Simple Dynamic String,SDS)来作为默认的字符串表示...哈希表的扩展与收缩：以下条件满足时： 服务器没有执行BGSAVE或BGREWRITEAOF命令，哈希表负载因子>1 服务器在执行BGSAVE或BGREWRITEAOF命令，哈希表负载因子>5...Redis中跳跃表的实现： ?...写入与同步：服务器每次结束一个时间循环之前，都会调用flushAppendOnlyFile函数，考虑是否将aof_buf缓冲区中的内容写入和保存到AOF文件中。...底层模型：它们之间底层实现方式以及与客户端之间通信的应用协议不一样。Redis直接自己构建了VM 机制，因为一般的系统调用系统函数的话，会浪费一定的时间去移动和请求。
标签条件的节点，比如 nodeName, label, cpu, 磁盘，cpu 内存等: 这类插件包括: TaintToleration: 污点和容忍 NodeName：检查 Pod 指定的节点名称与当前节点是否匹配...: 选择资源分配较少的节点 NodeResourcesMostAllocated: 选择已分配资源多的节点 InterPodAffinity: 实现 Pod 间亲和性与反亲和性 ServiceAffinity...: 检查属于某个 Service 的 Pod 与配置的标签所定义的节点集是否适配。...几篇论文中的设计如 borg，mesos 也都是单 master + 多 slave 设计。borg 的经验告诉我们，中心化并不一定是一个性能瓶颈（数万节点，上万任务的调度频率）。...统一的 调度上层，类似 mesos/omega 或者 yunikorn 的方式，协调子调度器的关系，统一的调度层需要被精巧的设计，这种设计必须同时考虑灵活性、简洁性、功能性。
group=list 老版本 在 Redis 的老版本中 list 的实现和 Sorted Set 策略类似，对于不同数据量的情况下实现是不一样的。...而新版本中 Redis 使用了 quicklist 来实现，所以我们主要讨论的是 quicklist 是如何实现的。...那想要避免这个问题，就需要对 list 的编码方式重新设计。...设计的关键点主要就是编码方式，它通过 11110001 这样的形式来告诉你后面的数据是什么类型的数据，保存数据的位数是多少。...相对应的，从后向前查找时与 ziplist 是一致的通过 element-tot-len 能找到前一个元素的位置，不会影响。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
