虚拟化笔记-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

虚拟化笔记

虚拟化技术的搬运工

专栏成员

77

文章

162595

阅读量

50

订阅数

用SPDK实现存储加速

https 分布式网络安全编程算法虚拟化

个人理解nvme能提高存储性能，就像4G比3G快一样，电磁波还是光速，但协议变了，所以快了。rdma应用跑在用户态能减小存储时延，spdk在用户态实现nvme驱动，天然能和rdma结合，而且两者的队列能一一映射，能达到锦上添花的效果。坏处就是kernel upstream实现的nvme代码无法复用，网卡硬件得支持rdma，rdma的库很多，出了问题估计会有找不得北的感觉。

2022-04-28

2.7K0

由mellanox DPU bluefield-2想到的问题

arm 硬件开发缓存虚拟化

本文全是个人感想和猜测，写一写软件人眼中的硬件，越底层越难，个人理解不一定对，请用批判的眼光看，特此声明，免得被人贻笑大方。

2022-04-28

1.5K0

用mellanox DPU实现裸金属服务器

存储 arm python 分布式

DPU就是在cx6的基础上加上了arm cpu，arm可以运行原来计算节点上那些组件。好处就是可以给裸金属动态添加/删除网卡和硬盘，网卡能接入vxlan vpc，硬盘能对接后端ceph，而且能统一虚拟机和裸金属，DPU就是一台计算节点，DPU就是hypervisor，能最大程度复用虚拟机流程，并且比ironic简单很多。

2022-04-28

4.6K0

虚拟化硬件加速-vdpa

虚拟化开源存储 kernel linux

以前提到过vdpa，只有mellanox connectx-5网卡，不支持vdpa，公司最近来了mellanox DPU，也就是bluefield-2，自带connectx-6网卡，硬件支持vdpa，再分析一下看怎么个搞法。

2022-04-28

2K0

kvm timer虚拟化

kvm linux 虚拟化 https github

在这篇中遗留了几个问题，先尝试回答一下，不一定准确，代码太多，看不过来，全靠猜测，代码的历史很长，都是智慧的结晶，一时半会消化不了很正常。

2022-04-28

1.7K0

如何优雅地编译kernel

centos 打包 kernel linux yum

linux内核有社区版本，升级和发布很快。redhat会选择一个内核版本构建自己的发行版，发行版除了内核还包括众多内核之上的软件如bash/gcc/glibc/systemd/开发库等等，redhat的策略是长期维护，只backport和bugfix升级小版本，并且保证任何backport和bugfix不影响原来的使用场景，比如升级内核小版本原来自己开发的内核模块代码不用修改，但在主线linux内核升级估计就得修改代码，再比如原来生产环境有一些脚本和配置文件，小版本升级后这些脚本和配置不用做任何修改，但不用redhat维护的版本，自己升级开源的版本恐怕升级后这些脚本和配置文件都未必能正常工作，维护周期结束后redhat会对大版本做一次升级，至少这个维护周期生产环境可以正常升级。所以生产环境都用redhat的企业版本linux，centos就是去掉商标后的redhat免费企业版，不想付费就用centos。

2022-04-28

1.3K0

kvm timer导致exit过多的解决办法

kvm 虚拟化 https 网络安全 kernel

timer简单理解就是cpu给硬件定时器写一个超时时间，超时时间到了后，硬件定时器超时后发送中断打断cpu。在虚拟化环境中，硬件定时器不存在，是kvm模拟出来的，guest给硬件定时器写超时时间就会导致guest exit出来，kvm进行模拟，kvm模拟时可以利用软件定时器也可以利用真正的硬件定时器，假如利用了真正的硬件定时器，kvm写完硬件定时器后重新enter guest，硬件定时器超时后发送中断打断cpu，cpu收到中断后从guest中exit出来，处理中断，然后把中断注入guest，模拟虚拟定时器的中断。这样guest就至少有两次exit。

2022-04-28

8220

linux time和kvm time虚拟化综述

kvm 虚拟化 linux

第一就是获取当前时间，就像人想知道时间时看墙上挂的时钟一样，简称clock，如time()/ftime()/gettimeofday()/data()等这些系统调用，都是软件主动获取时间。

2022-04-28

2.8K0

IOMMU(八)-vIOMMU

缓存虚拟化 http 开源硬件开发

以前基于DPDK做NFV，转发程序跑在虚拟机中，先把硬件网卡passthrough给虚拟机，然后在虚拟机中把网卡绑定内核模块igb_uio，问题是igb_uio的代码没有upstream，依赖于内核版本，提前编译好的内核模块换个版本就不能运行，就想着用vfio-pci，这家伙早早upsteam，一般linux发行版本内核都自带，且不省事，理想是丰满的，现实是骨感的。

2022-04-28

1.1K0

IOMMU(七)-vfio and mdev

kvm 虚拟化 api

vfio是用户态和内核态之间的一种接口，类似于vhost和vhost-user，具体用法就是vfio.ko通过/dev/vfio在内核给用户态提供api，qemu或者dpdk用api和内核模块交互。

2022-04-28

2.6K0

IOMMU(六)-post interrupt

http kvm 虚拟化单片机

post interrupt是intel提供的一种硬件机制，不用物理cpu从root模式exit到non-root模式就能把虚拟中断注入到non-root模式里，大概实现就是把虚拟中断写到post interrupt descriptor，预定义了一个中断号，然后给non-root模式下的cpu发送这个中断，non-root模式下cpu收到这个中断触发对virtual-apic page的硬件模拟，从post interrupt descriptor取出虚拟中断更新到virtual-apic page中，虚拟机中读virtual-access page，就能取到虚拟中断，处理中断，然后写EOI，触发硬件EOI virtulization，就能把virtual-apic page和post interrupt descriptor中数据清除。

2022-04-28

1.9K1

IOMMU(五)-interrupt remmaping

网站单片机 api kvm 虚拟化

通过DMA写物理地址0x0FEE_XXXX来产生中断，PCI config space中有MSI Address和Data寄存器，驱动配置这两个寄存器，Address寄存器中有Destination ID，表示Local APIC ID，Address寄存器所有字段组合起来就是x0FEE_XXXX，Data寄存器有vector号，表示中断号。

2022-04-28

1.1K0

IOMMU(四)-dma remapping

identifier root space table translation

DMA remapping就是在DMA的过程中IOMMU进行了一次转换，MMU把CPU的虚拟地址(va)转换成物理地址(pa)，IOMMU的作用就是把DMA的虚拟地址(iova)转换成物理地址(pa)，MMU转换时用到了pagetable，IOMMU转换也要用到io pagetable，两者都是软件负责创建pagetable，硬件负责转换。IOMMU的作用就是限制DMA可操作的物理内存范围，当一个PCI设备passthrough给虚拟机后，PCI设备DMA的目的地址是虚拟机指定的，必须要有IOMMU限制这个PCI设备只能操作虚拟机用到的物理内存。

2022-04-28

2.5K0

IOMMU(三)-初始化

BIOS收集IOMMU相关的信息，通过ACPI中的特定表组织数据，放置在内存中，等操作系统接管硬件后，它会加载驱动，驱动再详细解析ACPI表中的信息。

2022-04-28

1.2K0

IOMMU(二)-从配置说起

kvm 网络安全网站开源虚拟化

做过DPDK/SPDK开发或者用kvm做过pci passthrough的一定知道以下的配置:

2022-04-28

2.1K0

virtio详细介绍和1.1新功能

linux kvm 编程算法虚拟化

virtio是一种实践出来的技术，并且最终标准化，virtio是一种通用的虚拟化设备模拟标准，得到了大部分guest操作系统和hypervisor的支持，方便guest操作系统和hypervisor之间任意互相匹配。virtio出现之前hypervisor各有各的IO设备模拟方案，并在guest操作系统中大量合入驱动代码，导致一片混乱，后来xen中出来了部分virtio思想，在kvm中实现并且发扬光大，发表了论文《virtio: Towards a De-Facto Standard For Virtual I/O Devices》，论文促使virtio形成了正式标准。virtio标准最早是0.9.5版本(Virtio PCI Card Specification Version 0.9.5)，于2012年形成了draft，并没有正式发布，继续发展，2016年发布了1.0版本(Virtual I/O Device (VIRTIO) Version 1.0)，2019年发布了1.1版本(Virtual I/O Device (VIRTIO) Version 1.1)。

2022-04-28

2K0

虚拟机支持本地nvme ssd

虚拟化 https 网络安全存储 kernel

提起存储都是血泪史，不知道丢了多少数据，脑子首先想到的就是《你说啥》洗脑神曲，我就像那个大妈一样，千万个问号？？？？？？？？？？？？？.........

2022-04-28

1.4K0

IOMMU(八)-vIOMMU

缓存虚拟化 http 开源硬件开发

以前基于DPDK做NFV，转发程序跑在虚拟机中，先把硬件网卡passthrough给虚拟机，然后在虚拟机中把网卡绑定内核模块igb_uio，问题是igb_uio的代码没有upstream，依赖于内核版本，提前编译好的内核模块换个版本就不能运行，就想着用vfio-pci，这家伙早早upsteam，一般linux发行版本内核都自带，且不省事，理想是丰满的，现实是骨感的。

2021-08-26

2.3K0

用SPDK实现存储加速

https 网络安全分布式编程算法虚拟化

个人理解nvme能提高存储性能，就像4G比3G快一样，电磁波还是光速，但协议变了，所以快了。rdma应用跑在用户态能减小存储时延，spdk在用户态实现nvme驱动，天然能和rdma结合，而且两者的队列能一一映射，能达到锦上添花的效果。坏处就是kernel upstream实现的nvme代码无法复用，网卡硬件得支持rdma，rdma的库很多，出了问题估计会有找不得北的感觉。

2021-08-26

2.4K0

由mellanox DPU bluefield-2想到的问题

本文全是个人感想和猜测，写一写软件人眼中的硬件，越底层越难，个人理解不一定对，请用批判的眼光看，特此声明，免得被人贻笑大方。

2021-08-19

1.8K0

点击加载更多

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态