本篇文章主要和各位介绍存储系统的主要发展历程，存储系统自从出现开始一共经历过5个大的阶段。 ?...本篇文章主要和各位介绍存储系统的主要发展历程，存储系统自从出现开始一共经历过5个大的阶段。 第一阶段：上世纪40-70年代的存储基本上就是硬盘，主要部署于服务器内部。...别的服务器无法用，为了别的服务器也可以公用该存储，于是有了SAN（存储区域网络）。...几台服务器通过存储网络把服务器和存储设备（RAID）连接起来，此时就可以在存储设备上划分很多区域，不同的区域给不同的服务器来用，这样可以实现多台服务器共用一台存储设备，这就是SAN网络，SAN也分FC...企业用的最多的是SAN，NAS更适合存储文件如word PPT，SAN更适合存储类似于数据库等结构化的数据。
存储结构与管理硬盘一、添加硬盘设备一、添加硬盘设备添加硬盘设备的操作思路：首先需要在虚拟机中模拟添加入一块新的硬盘存储设备，然后再进行分区、格式化、挂载等操作，最后通过检查系统的挂载状态并真实地使用硬盘来验证硬盘设备是否成功添加...fdisk命令用于新建、修改及删除磁盘的分区表信息分区 [root@rhel ~]# fdisk /dev/sdb 依次输入 p n p 1 +1024G 回车 p w Linux
从今天开始陆续分享Linux的知识 因为服务器基本是Linux的 所以Linux不学明白 Shell命令不熟 会让你的办事效率大打折扣。 一。...Linux文件系统 Linux文件系统是从Unix结构严进过来的。总结一下Linux顶层虚拟目录及其文件内容。 ?
什么是存储过程呢？ 存储过程就是作为可执行对象存放在数据库中的一个或多个SQL命令。 通俗来讲：存储过程其实就是能完成一定操作的一组SQL语句。...http://hovertree.com/h/bjaf/b05uxijr.htm 那为什么要用存储过程呢？...1.存储过程只在创造时进行编译，以后每次执行存储过程都不需再重新编译，而一般SQL语句每执行一次就编译一次,所以使用存储过程可提高数据库执行速度。...2.当对数据库进行复杂操作时，可将此复杂操作用存储过程封装起来与数据库提供的事务处理结合一起使用。 3.存储过程可以重复使用,可减少数据库开发人员的工作量。...4.安全性高,可设定只有某些用户才具有对指定存储过程的使用权 那存储过程怎么用呢？ 以下通过表Student 来了解存储过程，因为是要了解存储过程的简单用法，所以所有例子均很简单。
存储加速方向 存储软件自身软件栈 存储软件自身一般通过是通过减少软件栈开销来达到优化自身的目的，比如软件栈的一些校验或者保护算法可以通过CPU的特殊指令集对存储校验或者保护算法进行优化 网络IO Linux...存储IO 操作系统到实际存储设备落盘过程中，可以采用用户态的驱动和IO栈的旁路操作系统内部大部分IO栈进行加速，比如SPDK CPU处理器的加速 超线程技术 超线程技术是操作系统将每个物理核心识别为2个可以并行的功能工作逻辑核...AES-NI是为了加速AES算法，提高加密的数据吞吐量而设计的扩展指令 CRC32扩展指令集，循环冗余校验(CRC)算法用于网络和存储领域进行的数据一致性检查。...数据计算加速 可以通过FPGA加速纠删码(EC)、数据压缩算法(gzip/LZO/LZ4)、加解密算法、哈希算法 可以通过软件自定义 网络负责复制和备份工作，这一网络可以通过采用FPGA的硬件改造来加速存储协议转换
《个人平时笔记，看到的同学欢迎指正错误》 1、存储相关详解知识 安卓起初早年是有内置SD卡和可扩展插拔TF卡区分的，但是近年手机内置SD卡的高内存导致越来越少的手机支持TF卡（外置SD卡）扩展了。...（2）、内部存储(ROM) 就是就相当于是PC中的硬盘的私有存储角色。...用于存储Andoid设备的操作系统和应用程序的存储介质，Android设备中的Android系统和应用程序（APK文件）都是存在内部存储区的。例如手机的/system/目录、/data/目录等。...内部存储和外部存储并不是按是否存储于SD卡来区分的，内部存储是在data文件下，外部存储是在storage或者mnt文件夹下，这就是区别。...内部存储，我们称为InternalStorage，外部存储我们称为ExternalStorage。
一.存储基础知识 从工作原理区分： 机械 HDD 固态 SSD SSD的优势： SSD是摒弃传统磁介质，采用电子存储介质进行数据存储和读取的一种技术，突破了传统机械硬盘的性能瓶颈，拥有极高的存储性能...，被认为是存储 技术发展的未来新星。...： 本地存储：例如DellR730本地磁盘 外部存储：scsi线、stat线、sas线、FC线 网络存储：以太网络、FC网络 从kernel对不同接口硬盘命名方式： OS IDE（并口） ...因此，在对存储设备进行分区后还需要进行格式化操作。在Linux系统中用于格式化操作的命令是mkfs。...，接下来就是要来挂载并使用存储设备了。
前言： 随着Linux的版本升高，存储栈的复杂度也随着增加。作者在这里简单介绍目前Linux存储栈。...理解LVM的逻辑的核心在于上文的图中：理解清楚存储栈的层次关系，虚拟块设备到物理块设备之间的映射。...11，uninterruptable sleep 使用Linux的人，或多或少可能都遇到过进程的D状态，也就是uninterruptable sleep。...12，其他问题 scsi已经是 很成熟的框架了，但是在Linux4.14上，作者还是看到了scsi引起的kernel die。...尝试把存储栈迁移到虚拟机中，也许是一个不错的选择。哪怕虚拟机真的出现了kernel die，也不会真正影响到宿主机的运行，以及宿主机上的业务至少还是没有崩溃的。
在本系列中，我们还介绍了如何选择发行版，Linux 内核如何与硬件交互 以及如何Linux 管理系统服务 和权限。 最常见的 Linux 系统管理员任务 之一是管理存储空间。...您可以使用这些命令而无需任何额外的设置，但您可能会发现查看 了解 Linux 命令行 文章很有用。您需要将存储磁盘添加到您的实验室计算机或虚拟机以练习添加存储。...识别存储设备 假设用户已消耗了其 Linux 系统存储驱动器上的所有空间，或者服务器的存储磁盘已满。虽然教用户有效地管理空间很有帮助，但通常情况下，消耗驱动器的数据是合法且必要的。...使用 mount 命令将存储空间挂载到目录。 使用 df 和 du 命令检查存储空间。 设置标准的 Linux 权限（或访问控制列表）来控制对存储空间的访问。...管理员还将存储容量挂载到目录，使其可供最终用户使用。标准的 Linux 权限控制对该存储空间的访问。 除了配置之外，Linux 用户还必须分析存储空间的使用方式。
要想真正的理解docker的存储驱动，需要先了解docker镜像是如何构建和存储，以及容器如何使用镜像....每个容器有自己的存储空间，存储于宿主机本地文件系统 /var/lib/docker/... 另外有一个共享的数据卷在 /data.挂载到两个容器内实现共享. ?...如何选择存储驱动 docker目前支持的存储驱动有:OverlayFS,AUFS,Btrfs,Device Mapper,VFS,ZFS。...docker的存储驱动目前并没有一个通用的，完美的，适用于所有环境的存储驱动.所以需要根据自己的环境来有所选择....存储驱动在不断的改进与发展 如果从稳定性上的考量，在安装docker的时候会默认根据你的系统环境配置选择一个存储驱动.通常来说使用这个默认的驱动将减少你遇到bug的机会.
——》个人平时笔记，看到的同学欢迎指正错误，文中多处摘录于各大博主精华、书籍 1、存储相关详解知识 安卓起初早年是有内置SD卡和可扩展插拔TF卡区分的，但是近年手机内置SD卡的高内存导致越来越少的手机支持...（2）、存储(ROM) 内部存储(ROM)： 就是相当于是PC中的硬盘的私有存储角色。...用于存储Andoid设备的操作系统和应用程序的存储介质，Android设备中的Android系统和应用程序（APK文件）都是存在内部存储区的。例如手机的/system/目录、/data/目录等。...内部存储和外部存储并不是按是否存储于SD卡来区分的，内部存储是在data文件下且不可被访问操作，外部存储是在storage或者mnt文件夹下是可以被访问操作的，****这些就是区别。...内部存储，我们称为InternalStorage，外部存储我们称为ExternalStorage。
（两个点）表示上级目录(父目录) / 表示目录分隔符或根目录（/home/zed/Desktop） ~ （波浪线）表示用户根目录（/home/用户名） -（减号）表示上次执行的目录 3、Linux根目录...selinux sys usr boot etc lib lost+found mnt proc sbin srv tmp var [zed@localhost /]$ 4,Linux...常用命令 权限管理 Linux系统中的权限管理 1、chmod chmod 修改文件权限 用法 Usage: chmod [OPTION]......200M的文件 3、grep grep 关键字 搜索的文件 从要搜索的文件中查找关键词，返回关键词所在的行 [zed@localhost Desktop]$ cat file hi hello linux...@localhost Desktop]$ grep hao file guonianhao hao [zed@localhost Desktop]$ grep hello file hi hello linux
Linux虚拟存储管理分析 摘 要：本文通过解剖Linux操作系统的虚拟存储管理机制，说明了Linux虚拟存储的特点、虚拟存储器的实现方法，并基于Linux Kernel Source 1.0，详细分析有关虚拟存诸管理的主要数据结构之间的关系...本文介绍了Linux虚拟存储技术的特点，并结合操作系统原理和Linux内核源码，通过分析虚拟存储管理所需的主要数据结构及其相互关系，来更深入地了解Linux虚拟存储管理机制。...段页式存储管理 Linux中的内存管理技术采用的是段页式虚存技术。...图 3 虚拟存储管理的数据结构关系 数据结构介绍 vm_area_struct Linux采用了虚拟存储区域的方式来管理虚拟存储空间，一个虚拟存储区域是某个进程的一段虚拟存储空间...限于篇幅，本文仅简单介绍Linux在虚拟存储管理上的技术特点与实现的数据结构之间的关系，作为深入探讨Linux虚拟存储管理源码细节的入门性文章，希望能起到抛砖引玉的作用。
From Linux Storage Stack Diagram
上篇文章《电影知识图谱问答（二）|生成298万条RDF三元组数据》中讲到如何将爬取得到的豆瓣电影和书籍数据转换成知识图谱所需的RDF类型数据，本篇文章将介绍如何将得到的298万条RDF类型数据存储到知识图谱数据库之中...实践之前，请自主学习Apache Jena, Apache Fuseki, SPARQL相关知识。 ---- 1. 知识图谱数据库 既然是要存储三元组数据，那选择什么样的数据库呢？...因为知识图谱问答需定义很多推理规则，对可视化没有太多要求，所以我们选择Apache Jena来存储RDF数据。...Apache Jena知识存储 选择好存储方法(Apache Jena)之后，便需要了解如何进行知识存储和知识检索，具体流程包括将RDF类型数据转换成TDB类型数据、配置及启动Apache Fuseki...4.总结 本篇文章介绍了常用两种图数据库的特点，并选用Apache Jena数据库作为知识存储。
xmin 存储的是产生这个元组的事务ID，可能是insert或者update语句 xmax 存储的是删除或者锁定这个元组的XID 简单示例如下： select id, xmin, xmax from course...PostgreSQL数据存储 关于数据存储，我们都知道数据是存在数据库中的某个数据表中，每条数据记录对应数据表中的某一行，所以我们从上至下来查看各层次结构的数据存储。...table数据存储 上文我们定位到数据库的存储位置，接着我们来定位数据表的位置。...上文我们提到 table 存储时，每个数据文件（堆文件、索引文件）可存储 1G 的容量，每个文件内部又是有若干个固定的页组成。...其中： page header: 24 字节，存储 page 的基本信息，包括 pd_lsn、pd_checksum、pd_special... pd_lsn: 存储最近改变该页面的xlog。
两种：MyISAM: MyISAM是默认的存储引擎。 每个MyISAM在磁盘上存储成三个文件，每一个文件的名字均以表的名字开始，扩展名指出文件类型。 ....frm文件存储表定义; ·MYD (MYData)文件存储表的数据; .MYI (MYIndex)文件存储表的索引。 ...InnoDB存储引擎完全与MySQL服务器整合，InnoDB存储引擎为在主内存中缓存数据和 索 引而维持它自己的缓冲池。...InnoDB存储它的表&索引在一个表空间中，表空间可以包含数个文件(或原始磁盘分区)。这与MyISAM表不同，比如在MyISAM表中每个表被存在分离的文件中。...查看表使用的存储引擎类型的方法： 1.show table status from 库名 where name = ‘表名’ 2.use 数据库； show
存储映射I/O使一个磁盘文件与存储空间中的一个缓冲区相映射，对缓冲区的读、写操作就是对文件的读、写操作，从而能够不再使用read、write系统调用。...prot：对映射存储区的保护要求，不能超过open文件时的权限。...PROT_READ：映射区可读 PROT_WRITE：映射区可写 PROT_EXEC：映射区可运行 PROT_NONE：映射区不可訪问 flag：影响映射存储区的属性。...MAP_SHARED：表示存储操作相当于对该文件的write。 MAP_PRIVATE：对映射区的存储操作导致创建该映射文件的一个私有副本。...表示存储区中有地址无法映射到文件里。 mmap实际上是将包括文件内容的内核缓冲区映射到应用程序地址空间，然后用memcpy直接进行数据的拷贝。
目前Linux对system V的共享内存方式支持的比较好。在高版本的Linux内核上，我们有更多的方式来完成共享存储。...嵌入式开发板搭载的低版本内核的Linux操作系统基本上都是不支持POSIX标准的内存共享的，只能使用system V的内存共享方式。system V是通过映射特殊文件系统shm中的文件实现内存共享的。...它存储被映射文件的地址。 跑题了，本文将介绍mmap存储映射的方式完成的进程间通信。一种方式是使用dev目录下的特殊文件zero。 ? 该文件是一个字符设备文件，该设备是0字节的无限资源。...当对zero进行存储映射的时候，它具备一下性质。 创建一个未命名的存储区，大小事mmap的第二个参数。 存储区被初始化为0。...Linux除了使用zero以外，它还提供了一种称为匿名映射的方式。这种方式需要在使用mmap的时候指定MAP——ANON标志，并将文件描述符设置为-1。更改上面的程序如下。
Linux从诞生到现在已经有三十年了，经过很多人的不懈努力，终于发展成为现在的样子。很多人工作中经常会使用到linux，包括我在内。...但对于详细的历史并不太清楚，今天就来大家分享一下我所了解的关于linux的知识。...从linux的创始人LinusToravlds自学计算机制知识，想要编制一个属于自己的操作系统开始，一步一步的在自己的努力和全世界计算机爱好者的帮助下，不断完善linux的版本，从91年的0.01版本到最近已经更新到...使用linux作为核心的GNU操作系统被广泛使用，尽管都叫Linux，但严格说应该叫GNU/Linux系统。...图片源自赵炯老师著作《linux内核完全注释》，仅供学习 好了，到这对于linux的诞生发展就有一个基本的了解了，感兴趣就多去了解下，祝学习顺利！ END 作者｜希里安
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
