资源管理分析之--资源隔离技术

清明小长假,在家宅了几天,晃晃悠悠,今天才缓过来,同学都去哪里happy了,有没有碰到什么新鲜的事情可以分享下?

我最近在研究资源管理,今天聊聊资源管理管控方法:

系统的资源分为cpu,mem,io,net几大类,为了管理和分配好资源有很多方法。

首先说说重量级的虚拟化技术,虚拟化技术是当前非常热门的一门技术。比如主要面向桌面应用如云桌面,云主机,常见的分类是:

A、操作系统虚拟化——Vmware的vSphere、workstation;微软的Windows Server with Hyper-v、Virtual PC;IBM的Power VM、zVM;Citrix的Xen

B、应用程序虚拟化——微软的APP-V;Citrix的Xen APP等

C、桌面虚拟化——微软的MED-V、VDI;Citrix的Xen Desktop;Vmware的 Vmware view;IBM的Virtual Infrastructure Access等

上面这些技术是在计算机上模拟多个操作系统平台,也是常说的狭义理解的虚拟化技术。这些技术的特点都是讲一个大的资源分成小粒度的多个资源给应用使用,也是裂变的方式。

这些技术在大数据计算这种重载应用中,并不见得适合。在大数据计算中里面常见的资源管理系统典型的有Mesos,YARN以及google的Google Omega等。在这些系统中用到一项重要的技术:Linux Container(LXC)。Linux Container容器是一种内核虚拟化技术,可以提供轻量级的虚拟化,以便隔离进程和资源,而且不需要提供指令解释机制以及全虚拟化的其他复杂性。

Cgroups是control groups的缩写,是Linux内核提供的一种可以限制、记录、隔离进程组(process groups)所使用的物理资源(如:cpu,memory,IO等等)的机制。最初由google的工程师提出,后来被整合进Linux内核。Cgroups也是LXC为实现虚拟化所使用的资源管理手段,可以说没有cgroups就没有LXC。

CPU,mem相对好管理,在实际使用中,io和net管理比较麻烦,io和net本身衡量指标多,一个应用需要多少资源衡量起来比较困难,所以当前资源管理系统主要管理能力集中在cpu和mem。

好,今天就先介绍到这里,下一次分享资源调度分配算法。

谢谢大家。

原文发布于微信公众号 - 大数据和云计算技术(jiezhu2007)

原文发表时间:2014-04-09

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏Rainbond开源「容器云平台」

硅谷飘来五个字,SMACK

1253
来自专栏大魏分享(微信公众号:david-share)

我在U2VL精英训练营上的分享---vSphere与应用的监控

本次,笔者很荣幸被U2VL团队邀请,作为讲师和助教的参加U2VL精英训练营杭州站。期间我分享vROps对虚拟平台和应用的监控,相关内容如下。 ? ? ?...

3119
来自专栏安智客

安全:下一代网络的基本组成

作者:Jim Wallace, Arm; Joseph Byrne, NXP,安智客译 很难想象,哪一天能够不依靠电脑或智能手机工作,购物或银行业务,与朋友聊天...

29910
来自专栏喔家ArchiSelf

2.4G上的无线共存问题

2.4 GHz无线共存已经存在至少20年了。真正的问题在于,不同的2.4 GHz无线技术满足了同一设备的不同需求,因此必须要在同时运行而不会出现明显的性能退化。...

673
来自专栏SDNLAB

为什么软件定义网络在网络功能虚拟化中很重要?

编者按:在数据中心领域,网络只是一项资源。但在通信服务提供商 (CSP) 这里,网络就是正题。这一思维上的差异意味着软件定义网络 (SDN)已经可以有效解决数据...

3298
来自专栏大魏分享(微信公众号:david-share)

云时代企业如何建设绿色数据中心(第一篇)

建设绿色数据中心的必要性 中国目前是是全球最大的温室气体排放国,节能减排是“十二五”的重要工作内容。发改委在2013年就明确了首批10个行业的企业温室气...

3376
来自专栏数据和云

静默错误:为什么看了那么多灾难,还是过不好备份这一关?

可是毕竟广告好不好,还要看疗效,9个9的可靠性,你也永远无法论证你不是那 0.00000001%。

1401
来自专栏我是极客人

【译】AWS Fargate很好吗,我为什么要用它?

当亚马逊在2017年底的AWS re:Invent大会上和EKS一起宣布 Fargate的时候,它还备受冷落,当时我所关注的博客和大佬只是轻描淡写地说:

1532
来自专栏企鹅号快讯

大话云存储

1、云存储的官方定义 云存储是一个以数据存储和管理为核心的云计算系统 即是指通过集群应用、网格技术或分布式文机房集中监控系统件系统等功能,将网络中大量各种不同类...

2266
来自专栏SDNLAB

传统通信测试厂商借助云计算发力

一、介绍 如今随着云计算的持续热度,传统的通信测试厂商也推出云计算的测试解决方案。这个解决方案是我在Spirent实习时做的。 测试云(TaaS)架构如下图...

34910

扫码关注云+社区