首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

监控精度提升至 90%,海量计算平台资源自动监控系统设计

海量计算平台资源自动监控系统设计[J]. 电子设计工程, 2019, 27(23):144-147. 作者单位:国网江苏省电力有限公司信息通信分公司,国网信息通信产业集团有限公司。...为全面扩充资源监控精度水平,提升平台自身的监控时效能力,设计海量计算平台下的资源自动监控系统。...结合软、硬件组织结构,完成海量计算平台资源自动监控系统 设计。 相同环境下的对比实验结果表明,与普通监控系统相比,资源监控精度可提升至 90%左右, 平台监控时效水平提升明显。...监控平台资源拓扑模块设计 监控平台海量资源拓扑模块可以按照客户端的实际处理需求,扩大或缩减接入系统核心计算机的待监控资源总量,并以监控管理员的身份对各级 连接节点进行拓扑结构分析。...监控资源的数据层访问 监控数据层是生成系统监控指令的直接组织结构,在确保相关执行设备具备良好监控连接能力的前提下,该层次结构可对计算平台中的海量资源进行连接处理。

88141
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    监控入门

    但是,监控对基本的服务器监控工具有一些独特的要求。 监控如何运行 “”这个术语是指一组网络托管的应用程序,通过网络对数据进行存储和访问,而不是通过计算机的硬盘。...对于消费者来说,使用互联网查看网页、通过诸如Gmail等服务访问电子邮件帐户以及将文件存储在Dropbox中都是计算为消费者提供服务的例子。 企业以相同的方式使用。...他们需要解决方案能够在单一平台上汇报不同来源的数据,从而可以计算出统一的度量标准并获得综合性能的结果。 监控服务的使用和费用 - 扩展的能力是服务的一个关键特性,但是增加的使用会导致成本增加。...持续的监控策略 对于任何使用计算的机构来说,监控都是必须的,无论是为了安全性还是性能,但是选择合适的应用程序性能监控(APM)解决方案是很有挑战性的。...最后,想获取对于DevOps流动、服务器监控计算的一些专家见解,这次对Sean Hull的采访是必读的。

    8.5K110

    监控入门

    监控是一个对基于的服务、应用程序与基础架构进行评估、监控与管理的工作。公司利用各种应用程序监控工具来监视基于的应用程序。下面我们来看看它是如何工作的,以及使用它走向成功的必经之路。...监控的类型 有多种类型的服务要监控监控不仅要监控像在AWS或Azure上托管的服务器。对于企业来说,他们最关心的还是监控他们正在使用的服务(如微软的Office 365等)。...然而,监控的出现又对这些基础的监控工具提出了新的独特要求。 监控的工作方式 “”是指一组网络托管的应用程序。与传统的程序不同,这些程序并不通过硬盘,而是通过Internet存储和访问数据。...对于普通消费者来说,使用互联网查看网页、访问诸如Gmail等邮件服务以及使用Dropbox存储文件即是典型的计算。...因此,他们需要一个能够在单一平台上报告不同数据来源的解决方案,同时这个方案应能够根据多方面参数统一计算出一个综合性能。

    8K70

    计算——计算关键技术

    作者简介:一名计算网络运维人员、每天分享网络与运维的技术与干货。   ...一.计算关键技术 1.虚拟化技术 虚拟化是一种能够更有效地利用物理计算机硬件的过程,是计算的基础。 虚拟化,将各种IT实体资源抽象,转换成另一种形式的技术都是虚拟化。...计算常用分布式数据存储的技术,将数据存储于不同物理设备中,不仅摆脱物理设备的限制,扩展性更好,满足快速响应用户需求的变化。 ---- (1)计算的分布式存储与传统的存储是不同的。...---- (1)计算数据中心的优势 计算数据中心相比传统数据中心的优势在于,计算数据中心更加强调与IT系统协同优化,在满足需求的前提下,实现整个数据中心的最高效率和最低成本。...----  5.体系结构 计算平台体系结构由用户界面、服务目录、管理系统、部署工具、监控和服务器集群组成: (1)用户界面:主要用于用户传递信息,是双方互动的界面。

    68830

    计算简介 | 什么是计算

    前言 我们致力于为广大读者提供全面、深入的计算知识普及,为了更好地满足大家的需求,将每周定期更新一系列关于计算的实用文章。...这些内容将涵盖计算的技术原理、应用场景、发展趋势、存储/网络/数据库服务等多个方面,旨在帮助读者们更好地理解和应用计算技术。 在当今数字化飞速发展的时代,计算已成为企业和个人不可或缺的一部分。...然而,对于很多人来说,计算的概念仍然模糊,不清楚其真正的含义和价值。 那么,什么是计算?本文将为大家简要介绍计算的定义、基本概念及其优势。...一、计算的定义 计算,不是一种全新的技术,而是一种全新的概念。...通过多租户技术,计算提供商可以在保证安全性和隔离性的前提下,实现资源的最大化利用,降低成本。 三、计算的优势 01 降低成本 计算可以帮助企业降低硬件设备的投入成本,减少维护和升级的费用。

    41210

    监控监控升级与优化

    监控业务主要部署在腾讯TKE上,共部署了40多个地域,80多个TKE集群,1700多个Node节点,1万多个Pod。...由于TKE集群需要业务维护Node节点,出于成本的考虑,监控逐渐把TKE集群迁移至EKS集群,中间经历了自监控的升级与优化,对于自监控建设有一定的参考意义,通过文章记录下来。...(备注:本文所描述的自监控指metric类监控,不涉及log与tracing) 1、迁移引发的问题 - 自监控不可用了 监控的自监控主要是业务程序使用Prometheus SDK通过export的方式进行上报...因为监控中台存储支持类influxQL的查询语法,因此可以用Grafana配置InfluxDB数据源进行面板展示。...DaemonSet采集方式 然而EKS集群是TKE Serverless集群,没有任何的计算节点,不支持DaemonSet,因此原有的自监控将无法使用。

    3.4K20

    计算

    1:什么是计算计算是一种按量付费的模式!计算的底层是通过虚拟化技术来实现的!...2:计算的服务类型 2.1 IAAS 基础设施即服务(infrastructure as an service) 虚拟机 ecs openstack 2.2 PAAS 平台即服务(platform...service ) php,java docker容器 2.3 SAAS 软件即服务(software as an service ) 企业邮箱服务 cdn服务 rds数据库 开发+运维 3:为什么要用计算...小公司:10台 20w+ idc 5w + 100M 10W, 10台主机,前期投入小,扩展灵活,风险小 大公司:闲置服务器计算资源,虚拟机,出租(超卖) 64G 服务器 64台1G 320台...虚拟化,通过模拟计算机的硬件,来实现在同一台计算机上同时运行多个不同的操作系统的技术。

    28.6K32

    计算

    ”是指以计算、网络及虚拟化为核心技术,通过一系列的硬件和软件,实现“按需服务”的一种计算机技术。...2.计算的概念  计算是一种通过Internet以服务的方式提供动态可伸缩的虚拟化资源的计算模式。  ...计算是分布式计算、并行计算、效用计算、网络存储、虚拟化、负载均衡等传统计算机技术和网络技术发展结合的产物。...4.资源监控  资源监控可以为“”对资源的动态部署提供依据,并有效地监控资源的使用情况和负载情况,是实现“”资源管理的一个重要环节。...它可提供对系统资源的实时监控并为其他子系统提供系统性能信息,以便更好地完成系统资源的分配 5.自动部署  自动部署是指通过自动安装和部署将计算资源从原始状态变为可用状态。

    30070

    如何修复监控

    监控异常的常见原因有:监控组件对应的2个服务BaradAgentSvc、StargateSvc 未安装完整,比如漏了其中1个。或者是更改了默认dns导致内网域名解析有问题进而影响了数据上报。...修复监控的基本顺序是:查看dns是否能正常解析内网域名,如果不能请调整dns使能,然后卸载监控组件,参考官网文档重装组件。...1、如何卸载监控组件有两种办法 ①管理员身份打开powershell执行如下命令 sc.exe stop BaradAgentSvc 2>$null 1>$null sc.exe config BaradAgentSvc...、镜异常等 https://cloud.tencent.com/developer/article/1878648 这里要特别注意,如果C:\Program Files\QCloud\Stargate...3、重新安装监控组件的话参考官网文档 https://cloud.tencent.com/document/product/248/6211

    4.6K20

    nfv与计算_计算必学知识

    一 .计算 1.Saas软件即服务 SaaS的实例: MicrosoftOfficeOnline(WordOnline,ExcelOnline等)服务,无需在本机安装,打开浏览器,注册账号,可以随时随地通过网络进行软件编辑...基础设施层面 iaas的实例 : VMware 提供成熟的虚拟机及虚拟机管理软件,是业界最大的虚拟化软件提供商 OpenStack提供一个开源的软件解决方案,能够管理KVM VMware等虚拟机 3.计算应用...Google也允许第三方在Google的计算中通过Google App Engine,基于所提供的接口运行大型并行应用程序。 二 ....计算的定义 NIST: 计算是一种能够通过网络随时随地以便利的、按需付费的方式获取计算资源(包括网络、服务器、存储、应用和服务等)并提高其可用性的模式,这些资源来自一个共享的、可配置的资源池,并能够以最省力和无人干预的方式获取和释放...IT业分布式计算技术并未考虑电信业务处理数据包小、高并发特性的特点,用现有的分布式计算,直接用于电信领域不能满足业务要求高性能、高可靠性的要求 分布式计算技术需针对电信领域的场景、业务特征专门优化之后,

    20.3K30

    计算离超级计算还有多远?

    单就一个行业而言,一直以来我们对于计算所带来好处的认识可能显得过于狭窄了。如果计算是一次真正的革命性变革,那么它就必须能够支持生产和用户体验的模式,而这些都是目前的计算还不能为客户提供的支持项。...也就是说,未来真正的计算必须是我们口中的“超级计算”,它应该是一个具备更好的计算和网络服务的平台,而不仅仅只是更便宜而已。...对于服务供应商来说,超级计算带来的好处可能是双倍的,即为IT公司增加IT资源和附加值。 但是,这里存在着一个大问题:计算供应商们是否能够建设好超级计算?...目前,企业都在他们自己的数据中心中运行应用程序,而计算则主张这些应用程序不仅应当能够以较低的成本在计算中运行,而且也应为计算供应商们创造利润。...计算项目的投资回报率(ROI)在某种意义上已经超越了纯粹的成本节省,任何计算迁移的可预测风险都会迫使买家进一步追求更高的ROI,所有这些都使得计算服务的实施变得更为困难。

    13.3K60

    计算专题:(一)带你走近计算

    要点提示 ① 计算发展背景 ② 什么是计算计算的优势 ④ 计算与大数据 ● 数字经济蓬勃发展下的计算 数字经济为中国产业转型带来了巨大的机遇,我国数字经济规模已达27.2万亿,占当年...计算的最终目标是将计算、服务和应用作为一种公共设施提供给公众,使人们能够像使用水、电、煤气和电话那样使用计算机资源。 02、什么是,什么是主机?...主机:主机整合计算、存储与网络资源的IT基础设施能力租用服务,能提供基于计算模式的按需使用和按需付费能力的服务器租用服务。 03、什么是公有、私有、混合?...02、也就是计算,是指以互联网为平台,将硬件、软件、网络等系列资源统一起来,实现数据的计算、储存、处理和共享的模式;实现“按需取用”模式——上办公。...计算给政企带给的价值 计算的扩展场景 ● 计算+大数据的服务趋势 什么是大数据? 我们迎来了大数据发展时代,对客观世界的认识更进了一步,所做的决策也不再仅仅依赖主观判断。

    15.6K10

    边缘计算和视频监控

    由于视频本身的非结构化数据特性和爆炸式增长的边缘视频数据,基于计算模型的视频监控技术仍存在以下问题亟待解决: ① 海量视频传输到计算中心对网络带宽要求较高,实时性得不到保证; ② 视频数据处理任务集中在平台执行...现有计算相关技术不能高效处理海量边缘视频数据。因此,催生了边缘大数据处理模式,即边缘计算。...02 边缘计算+视频监控计算和万物互联技术为基础,融合边缘计算模型和视频监控技术,构建基于边缘计算的新型视频监控应用的软硬件服务平台,以提高视频监控系统前端摄像头的智能处理能力,进而实现重大刑事案件和恐怖袭击活动预警系统和处置机制...计算中心具有较强的计算处理能力,将网络边缘设备产生的数据上传到云中心进行存储与处理已经得到了普遍应用。...当前存量的计算、物联网技术通过与边缘计算结合,将显著提升对于以上高要求场景需求的支撑能力,例如通过视频边缘计算网关,将人脸识别、越界报警等行为分析功能由系统主站计算处理前移至现场,可有效降低视频监控系统的网络带宽需求及通信成本

    4K30

    监控 Barad 的原生实践

    赵轩,高级运维工程师, 腾讯监控业务运维负责人。 腾讯监控的 Barad 产品,为产品提供高效、低成本的海量指标监控服务。...Barad 业务上面临的难点和挑战 在降本增效的大背景下,腾讯 监控团队继续提升原生成熟度,提升系统承载能力和降低单位成本,包括对 Barad 业务在容器化占比提升,跨 az 容灾能力建设,资源利用率优化这些方面...海量上报数据实时计算,准确性和实时性的保障 业务迁移场景时告警时效性和可触达性的保障 大数据处理相关模块迁移上的性能稳定性保障 接入业务多,适配场景众多,控制台使用稳定性保障 监控数据存储量级大,存储迁移的查询稳定性保障...flink 容灾调度 flink 集群目前已在监控管控平台中集成 flink 集群批量异地拉起能力,可保障地域异常时流计算作业快速在其他地域拉起,保障业务数据完整性。...Barad原生实践总结 监控 Barad 业务经历了为期半年的原生渗透率提升,跨 az 容灾能力建设,资源利用率优化这些优化动作之后,原生成熟度增长明显,且业务稳定性有了大幅提升。

    4.5K41

    计算与粒计算

    计算固然好,但也有不少的缺陷和使用限制,这样才出现了雾计算、霾计算等技术,这些技术都是针对计算做的很好的补充,满足多样化的市场应用需求。...本文也介绍一个新技术,就是粒计算,粒计算同样是和计算有着千丝万缕的联系。 ? 其实,粒计算计算的概念出现得还早。...由于计算本身的通用性特点,在“”的支撑下可以构造出千变万化的应用,同一个“”可以同时支撑不同的应用运行,这都需要对海量的不确定数据进行计算处理,这时就需要粒计算。...,粒计算可以在计算中大展手脚。...粒计算计算的最佳拍档,随着计算要处理的数据量越来越庞大,大量无用甚至错误的数据影响到了计算的处理效率和结果,引入粒计算后,可以有效提升计算计算效率,充分地发挥出计算的优势。

    17K100

    计算简介:探索计算的部署模式

    今天,我们将继续深入探讨计算的世界。在上一篇文章中,我们讨论了计算的三大服务类型。...首先,让我们简要回顾一下计算的概念:计算是一种通过网络将远程服务器上的存储、管理和处理数据的能力提供给用户的技术,让我们无需使用本地服务器或个人电脑就能享受到强大的计算资源。...现在,让我们一起来探讨计算的四种部署模式吧! 01、公有 /Public Clouds 公有计算的一种部署模式,其中云服务提供商通过互联网向公众或大型企业提供计算资源。...腾讯在金融、医疗、教育等行业提供了专业的社区解决方案,帮助各行业用户实现计算的高效应用。 总结 计算的四种部署模式——公有、私有、混合云和社区,为企业和个人提供了多样化的选择。...通过这篇文章,我们希望您能对计算的部署模式有更深入的了解,并能根据自身需求选择最佳的计算解决方案。同时,腾讯将继续致力于为用户提供更优质的服务,助力企业和个人在计算领域取得更大的成功。

    14630

    计算2018:企业的计算应用趋势

    在接受调查的550家组织中,73%的组织至少有一个应用程序,或者他们的基础计算设施的一部分已经在云中,所以现在的问题将不再是组织是否会采用,而是将如何采用。...考虑到计算需要消耗大量的技术支出,CIO或IT高管成为了在计算购买过程中最有影响力的角色就不足为奇了。总体而言,71%的人认为CIO在这方面有着重大影响力,其次是CTO,占54%。...交付模式:走向“即服务”的世界 当前IT组织计算环境的构成,包括非、SaaS、PaaS和IaaS在内的计算环境,其百分比在非云和之间的分布相当均匀。但这种情况有望在将来有所改变。...) •商业智能/数据仓库/数据分析(45%) •存储/存档/备份/文件服务器(44%) •系统管理/ devops(42%) 实施计算面临的挑战 实施计算战略面临的最大挑战或障碍依旧存在: •供应商的锁定...随着计算的成熟,人们在下面两个安全或治理方面的担忧似乎正在逐渐减少: •合规性——计算解决方案满足企业或行业标准的能力。2015年这一比例高达35%,但2018年降至26%。

    16.6K50

    走近计算(四):计算背后的技术

    这系列将从零出发认识计算。这一系列不是高屋建瓴的科普,而是我的学习笔记,因为,我也是个菜鸟。如有谬误,敬请评论区或私信交流。 这里是第四篇,谈谈计算背后的技术。...前面依次学习了计算的基本概念,并且通过两个类比来帮助理解计算的特性: 按需服务 弹性扩展 资源池化(多租户) 泛网络访问 服务可度量 之后了解了计算的主要部署模型: 公有 私有 混合 行业...接下来的几篇,我将去了解计算背后的技术要素。 这一篇的目标,是对计算背后主要技术元素的理解。...有了网络的供应,计算要将传统的数据中心搬到上,也就是将这些物理世界的网络设施,汇入一个资源池,以供各个节点的租户来接入,这部分该如何实现?这里用到的技术,就是计算的核心技术,虚拟化技术。...所以说,服务的安全十分重要,这里既包括一些运维的错误监控上报、故障迁移,也包括面对网络攻击的防御能力等。

    18.5K51

    计算的简述 使用计算的优势

    而提到大数据,大家可能第一时间还会想到一个名词——计算。对大数据的处理就是依靠这种计算方法来实现的。然而很多人并不了解究竟什么是“计算?“”是指什么?这种计算方法的优势在哪里?...image.png 一、计算的简述 从字面上来说似乎并不好理解。实际上,这是一种分布式计算。...正如字面来说,“”就是如同真正的,负责将数据进行收集,之后再分发的作用。大家目前所说的服务中,已经不是只有计算了,而是包括多种计算机技术复合而成的一种多功能综合技术。...二、计算的巨大优势 计算有着十分巨大的优势。其优势首先体现在储存的安全性方面,用户将计算机数据存放在自己的电脑上,很有可能会由于一些特殊的原因造成数据丢失。...以上就是关于服务的简单介绍,相信大家已经了解了什么是“”,也认识到了使用计算的巨大优势。实质上这就是社会科技发展带给人类的巨大便利,大家应该去好好利用这项技术。

    17.3K30
    领券