分布式资源管理

DRM(分布式资源管理)

大型的分布式系统中存在很多的配置文件,分布式资源管理解决了配置文件同步更新的问题,不仅仅是配置文件,此技术还可以支持缓存数据的同步一致,下面将简单介绍一下基于消息机制的分布式资源管理系统。

01

传统的配置同步问题

配置文件作为静态的config.xml文件存储在各个节点上,不可动态改变,修改配置需要重新部署应用,在大型实时系统中很不友好不易扩展。

02

缓存+单机DB

将配置信息存储在缓存中,当修改了缓存后可以将信息同步到数据库中,每一次更新都要查询数据库不太现实。

03

定时轮询技术

一台机器修改了数据库的配置信息后,其他机器定时轮询进行更新,轮询的时间设置是个关键,时间设置长了会导致数据长时间不同步,时间设置的短了会导致频繁访问数据库造成资源的浪费,所以该方法也不适合对于读多写少的分布式系统。

04

Drm Version1

基于配置中心的发布-订阅模型(publish-subscribe)Drm服务器是发布者,应用服务器是订阅者,Drm为应用的每一个配置项生成一个唯一标识的字符串,注册到配置中心,配置中实时将值推送给订阅者。但是这些配置值如果全部存在配置中心内存中会占用很大的空间因此也具有一定的缺点。

05

DRM Version2

配置发生更变后通知DrmServer,相应的配置值直接写入到DrmData缓存中,然后将指令发布到配置中心中,配置中心不存储数据而是将指令push到应用服务器端,应用服务器在接到推送指令后向缓存中pull相应的指令。

06

总结

DRM主要用于有读多写少任务的分布式系统中,其保证了最终一致性,且必须由后台去调用,如果报漏给前端,会造成大量调用,给配置中心带来压力。其原理是基于发布订阅模型和消息的数据同步,应用的场景不仅在配置文件中,例如:集群中各个节点初始化后需要将将数据库的内容缓存到本机,但是如果对数据库内容进行了改变,则需要有机制来通知各节点进行缓存的更新,drm在这种场景下可以很好的发挥作用。

原文发布于微信公众号 - 人工智能LeadAI(atleadai)

原文发表时间:2017-10-17

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏抠抠空间

浅谈pipreqs组件(自动生成需要导入的模块信息)

2253
来自专栏Laoqi's Linux运维专列

集群/分布式环境下5种session处理策略

1754
来自专栏黑白安全

Git 曝任意代码执行漏洞,所有使用者都受影响

Git 由于在处理子模块代码库的设置档案存在漏洞,导致开发者可能遭受任代码执行攻击,多数代码托管服务皆已设置拒绝有问题的代码储存库,但建议使用者尽快更新,避免不...

691
来自专栏程序猿DD

使用Consul做服务发现的若干姿势

来源:http://blog.bossma.cn/consul/consul-service-register-and-discovery-style/?hms...

3393
来自专栏Java技术分享

如何用redis/memcache做Mysql缓存层?

目前公司的一个项目,数据库用的是Mysql,正在考虑用redis/memcached做数据库的缓存层,目前的想法就是在读DB前,先读缓存层,如果有直接返回,如果...

30110
来自专栏北京马哥教育

10个方法助你轻松完成Linux系统恢复

在Linux中有一些应用程序可以帮助你保存系统快照。大多数应用程序都是针对于新手的,并不需要高级的Linux操作技巧。我们在这里挑选了10个,你可以从中选择适合...

4545
来自专栏小狼的世界

Mac下体验Hexo与Github Pages搭建

很久之前就知道Github可以发布自己的博客,因为仅支持静态文件,一直懒于动手自己进行编辑。再了解到还存在 JekyII 和 Hexo 这样的内容生成框架后,终...

1042
来自专栏IT笔记

Consul+Prometheus系统监控之注册发现

缘起 前面几篇文章分别对系统服务、MySql以及Redis相关软件做了监控预警,但是大家有没有发现,在prometheus.yml里配置需要监听的服务时,我们需...

2.2K6
来自专栏微信公众号:Java团长

JavaWeb学习总结(一)——JavaWeb开发入门

  WEB,在英语中web即表示网页的意思,它用于表示Internet主机上供外界访问的资源。   Internet上供外界访问的Web资源分为:

991
来自专栏耕耘实录

记住以下10条,Linux磁盘与文件系统管理无忧矣

1、查看当前Linux系统所支持的文件系统:ls -l /lib/modules/$(uname -r)/kernel/fs;目前已加载到内存中支持的文件系统...

845

扫码关注云+社区