作者｜吴建阳 翁建清 策划｜褚杏娟 AWS Elastic MapReduce(以下简称 EMR) 是集齐数据接入、存储、计算、交互式查询、机器学习等一系列开源社区组件封装的云上托管大数据平台，用户可以基于 EMR 迅速拉起一套大数据集群，用于大规模数据处理、分析，使用时可根据实际业务所需灵活调配计算资源，一定程度上降低底层基础设施运维成本。AWS 是最早将大数据管理平台上云的云厂商，查询其官网发行版本记录，能检索到的最古老版本 EMR-4.2.0 发布日期为 2015 年 11 月 18 日，当是时
在亚马逊云服务中部署被盛赞为是一个很好的方式来实现高扩展性并且你只需要支付你所使用的云计算机性能即可。那么，如何从这项技术中获得最佳的扩展性呢？
很多公司选择AWS作为其IT解决方案，AWS有很多云服务，以下介绍AWS中几类比较重要的服务。
Salesforce 的 Einstein Vision 和语言服务部署在 AWS Elastic Kubernetes Service(EKS) 集群上。其中有一个最主要的安全和合规性需求，就是给集群节点的操作系统打补丁。部署服务的集群节点需要通过打补丁的方式进行系统的定期更新。这些补丁减少了可能让虚拟机暴露于攻击之下的漏洞。
首先，AWS会分配一个VPC，在这个VPC下默认会有3个子网，我们建立的EC2实例都在这3个子网里。
译者自序： 熟悉我的朋友都知道，我很不喜欢翻译东西，因为在两种语言的思维方式之间做频繁切换对我来说是件很痛苦的事情。但是这次不一样，公司和同事的大力支持降低了我的痛苦指数，让我能够坚持把Chris Richardson的微服务模式系列文章翻译完，今天发布第五篇——《服务端服务发现》。 背景 不同服务之间通常需要相互调用。在单体应用程序当中，服务间通过语言层级的方法或者过程实现相互调用。在传统的分布式系统部署下，服务在固定并且已知的位置（主机与端口）运行，从而确保各服务可利用HTTP/REST或者某种RPC
业界比较认可的几个分类：SAAS、PAAS、IAAS 1、SAAS（软件即服务） 就是提供一种软件池，池中包括这样那样的内容，就像水电一样可以自由取送，然后按量收费，这是saas的一个宗旨。 saas具有的几个特点： 1）按需使用，客户根据自身的需求来决定使用多少服务以及服务的时间长短。 现在很多公司都提出了这种模式，以租用的方式来销售软件，云邮件，云呼叫等，客户不必关心最终的服务是由什么开发，无论是java，.net，php，只需知道交纳费用就可以享受相应的服务，这就是saas的一个最大的特点。 2）能够
教学流程： 1、 AWS概述 a) Amazon Web Services b) 云计算：采用按使用量付费的模式 2、 AWS基础设施 a) AZ可用区
公有 PaaS 平台并没有达成共识，没有统一应用的 PaaS 服务 API，因此不便于应用在各平台之间移植。谷歌、亚马逊与微软三大巨头在 PaaS 领域分庭对立，在强大的技术实力与基础资源的支撑下，构建了与自身文化相对应的公有云 PaaS 平台。相对于三大巨头，于2007 年起家的 Heroku，正是由于看到了大平台厂商对应用代码的“侵入性”，以及对开发人员的“绑架”，因而独辟蹊径地开发了一套可移植的 PaaS 平台。
作者：Kumar Chinnakali 译者：java达人 来源：http://dataottam.com/2016/01/10/self-learn-yourself-apache-spark-in-21-blogs-3/（点击文末阅读原文前往） 一、 Spark项目最初由加州大学伯克利分校AMP实验室的Matei在2009年发起，并在2010年根据BSD协议开源。2013年，该项目捐献给Apache软件基金会，转为Apache2.0 协议。2014年二月，Spark成为Apache重点项目。201
在席卷全行业的云原生趋势中，企业虽然通过云原生转型收获了很多成果和价值，但也遇到了不少障碍和挑战。其中，由于云原生项目工具数量庞大且缺乏整体规划和标准，企业在 DevOps 场景中就因此遇到了种种效率难题。 为了帮助企业基于容器化核心平台——Kubernetes 来更好地应对云原生 DevOps 场景，亚马逊云科技特别举行了主题为《云原生 DevOps 的 Kubernetes 技巧》的 Tech Talk。本场 Tech Talk 特别邀请汇量科技 Mobvista 技术副总裁 & 首席架构师蔡超，以 D
上一篇文章，我们详细介绍了开发基于 PaaSTA 的新部署模型的架构和动机。现在想分享我们将现有 Kafka 集群从 EC2 无缝迁移到基于 Kubernetes 的内部计算平台的策略。为了帮助促进迁移，我们构建了与集群架构的各种组件接口的工具，以确保该过程是自动化的，并且不会影响用户读取或写入 Kafka 记录的能力。
本文将对云端环境中的横向移动技术和相关场景进行深入分析和研究，并给大家展示研究人员在云环境中观察到的一些威胁行为。云端环境中的横向移动可以通过利用云API和对计算实例的访问来实现，而云端级别的访问可能会扩展到后者。
自动缩放服务可以帮助管理员识别未充分利用的资源，并降低公共云成本，以及了解如何通过负载平衡和标记最大限度地发挥这些优势。 可扩展性是公共云的基石。但是，由于在需要时扩展资源很重要，因此必须缩减不必要或未充分利用的工作负载以满足降低资源的需求。这降低了公共云成本，加快了系统完美补丁和更新升级，并提高了安全性。 然而，手动实例管理在动态云计算环境中实际上是不可能的。相反，IT团队应该使用云自动扩展。以下是一些入门提示。 确定不必要的工作负载和资源 在生产环境中，云计算工作负载或应用程序可能需要在某个水平保持运行
竞价实例是云中的闲置计算能力，它是云供应商出售其计算能力的一种方式之一—另外两种是按需实例和预留实例（包年包月实例）。就服务器本身而言，这三者之间没有区别，不同之处在于商业模式。按需实例是根据使用时长来收费的，用户只需要在使用的时候才付费。预留实例允许用户以“月”或者“年”为单位来购买。竞价实例允许用户通过使用使用云中当前闲置的服务器资源来节省高达90％的云计算成本，云供应商希望通过以极低的价格出售这些位于云中闲置的服务器，将这些空闲资源利用起来以带来收益。
在本文中，我们将设置一个示例情况，展示如何使用开源Squid代理从Amazon虚拟私有云(VPC)中控制对Amazon简单存储服务(S3)的访问。首先，您将配置Squid以允许访问Linux Yum存储库。接下来，您将配置Squid，以限制对已批准的Amazon S3 bucket列表的访问。然后，您将配置Squid以根据URL直接流量，将一些请求发送到Internet网关(IGW)，并将其他流量发送到虚拟专用网关(VGW)。最后，您将探索使Squid高度可用的选项。
在席卷全行业的云原生趋势中，企业虽然通过云原生转型收获了很多成果和价值，但也遇到了不少障碍和挑战。其中，由于云原生项目工具数量庞大且缺乏整体规划和标准，企业在 DevOps 场景中就因此遇到了种种效率难题。
动机 部署单体应用程序意味着运行多个通常是单个大型应用程序的相同副本。您通常会提供N个服务器（物理或虚拟）并在每个服务器上运行M个应用程序的实例。部署单体应用程序并不简单，但它比部署微服务应用程序要简单得多。 微服务应用程序由数十甚至上百个服务组成。服务由各种语言和框架编写。每个应用程序都是具有自己特定部署、资源、扩展和监视要求的小型应用程序。例如，您需要根据该服务的需求运行一定数量的每个服务的实例。此外，每个服务实例必须提供相应的CPU、内存和I / O资源。除了复杂性外，更具挑战性的是部署服务必须快速，
自动缩放服务能够帮助管理人员识别未充分使用的资源，从而减少公共云成本。了解负载平衡和标记功能是如何最大限度发挥这些优势的。 可扩展性是公共云的基石。但是，正如在有需要时扩展资源一样，在不需要或者资源未被充分使用时也需要收缩资源，这两者是同等重要的。这就有助于降低公共云成本、加速系统打补丁和更新升级，以及提高安全性。 但是，在动态云环境中实现手动实例管理实际上是不可能的。相反，IT团队应当使用云自动扩展服务。以下是一些入门提示。 识别不需要的工作负载与资源 在一个生产环境中，将很可能需要确保云工作负载或应用程
Amazon EKS（Amazon Elastic Kubernetes Service）是一项托管服务，允许您在 AWS 云上运行 Kubernetes，而无需设置、管理或维护自己的控制平面和节点。
在先前的文章中，我谈到了如何使用 Linux 容器技术（如 Docker）简化开发和测试体验。由于容器可跨不同类型的基础架构移植，它们可以像在裸机服务器上一样容易地在AWS中运行，容器使代码的部署非常方便。对于开发和测试工作负载，这可以消除在开发和测试环境之间的细微差异导致部署失败时倾向于发生的大量猜测和指责。
上篇文章《AWS CDK | IaC 何必只用 Yaml》笔者介绍了 AWS CDK 的概念和基本使用方法，本篇文章就来使用 CDK 在 AWS 从零开始构建一个全新的 KES 集群，实际感受一下使用 AWS CDK 创建和管理云资源的简单和便捷。
译者自序： 熟悉我的朋友都知道，我很不喜欢翻译东西，因为在两种语言的思维方式之间做频繁切换对我来说是件很痛苦的事情。但是这次不一样，公司和同事的大力支持降低了我的痛苦指数，让我能够坚持把Chris Richardson的微服务模式系列文章翻译完，今天发布第六篇——《服务注册表》。 背景 一项服务的客户端需要使用客户端发现或者服务器端发现机制，从而获取给其发送请求的服务实例的位置。 问题 服务的客户端（在客户端发现机制中）或者服务路由（在服务端发现机制中）如何获取可用服务实例的信息？ 需求 每个服务实例都会在
云计算平台在2008年出现在公众面前的时候，我和大多数人一样，并没有意识到这是一场影响深远的技术变革。并不是缺乏洞见，而是因为云计算的概念非常混乱。
服务之间需要互相调用，在单体架构中，服务之间的互相调用直接通过编程语言层面的方法调用就搞定了。在传统的分布式应用的部署中，服务地址和端口是固定并且提前预知的，所以只需要简单的 HTTP/REST 调用或者其他的 RPC 机制直接调用即可。但是在当下的云原生微服务体系中，微服务大多在某个虚拟机或者某个容器下运行，服务实例数量以及提供服务的地址以及端口都是不固定的，可以理解为，这些服务实例都是临时的。所以，需要实现使服务客户端能够对一组动态变化的临时服务实例发请求的机制。
至顶网报道 来源：siliconANGLE Amazon Web Services公司继续在公有云市场上保持主导地位。在上周于拉斯维加斯召开的第六届re: Invent大会上，AWS讨论了其如何通过深
原文链接：https://dzone.com/articles/deploying-springboot-in-ecs-part-1
本文介绍了云原生架构中的 5 个核心概念，包括服务、容器、微服务、API 和 Kubernetes。作者还解释了这些概念如何与云原生技术和 DevOps 实践相结合，以构建可伸缩、易于维护和高可用的应用程序。
Grab 更新了其 Kubernetes 上的 Kafka 设置以提高容错性，并完全避免在 Kafka Broker 意外终止时需要进行人工干预。为解决最初设计的不足，Grab 的团队集成了 AWS 节点终止处理程序（Node Termination Handler，NTH），使用负载均衡器控制器进行目标组映射，并切换到 ELB 卷进行存储。
上一章介绍了创建Python分布式应用的Celery和其它工具。我们学习了不同的分布式计算架构：分布任务队列和分布对象。然而，还有一个课题没有涉及。这就时在多台机器上部署完成的应用。本章就来学习。 这里，我们来学习Amazon Web Services (AWS)，它是市场领先的云服务产品，以在上面部署分布式应用。云平台不是部署应用的唯一方式，下一章，我们会学习另一种部署方式，HPC集群。部署到AWS或它的竞品是一个相对廉价的方式。 云计算和AWS AWS是云计算的领先提供商，它的产品是基于互联网的按需计算
本文介绍了云原生架构中的10个重要概念和原则，包括服务拆分、服务自治、服务编排、容器化、微服务、DevOps、持续交付、基础设施即代码、可观察性、声明式配置和分布式追踪。这些概念和原则是云原生架构的核心，对于构建可扩展、高性能、弹性的应用程序至关重要。
当Instagram在2012年加入Facebook，我们快速建立了大量的Facebook基础设施整合点，以加速产品开发，使社区更加安全。一开始我们通过使用ad-hoc端点在Facebook web服务之间有效传递来构建这些整合。不过我们发现这种方式可能稍显笨拙，还限制了我们使用内部的Facebook服务的能力。
如今如果没有提及容器，就很难谈论云计算。无论技术新手还是经验丰富的专家，都需要了解与云中容器相关的这些关键术语。 随着云计算中容器的普及，更多的组织选择不考虑采用外部的容器。 容器已经存在了一段时间，但Docker最近帮助他们成为企业使用的焦点。随着云计算的发展，越来越多的企业看到采用混合和多云模型的好处，但确保软件在从一个环境转移到另一个环境时可靠运行是所面临的一个挑战。容器已经通过将应用程序及其所有组件包装到一个更便携的软件包来解决问题。 而且，随着云计算中容器的日益普及，包括亚马逊网络服务(AWS)
本文探讨了在调整云计算资源大小时常见的错误和陷阱，并讨论了如何避免，从而真正受益于云计算的弹性。通过使用容器编排平台、无服务器和完全托管的解决方案，以及随着时间的推移持续监视使用模式，可以优化云计算架构的性能和成本。
本文介绍了云服务中的弹性伸缩功能，通过该功能可以自动调整计算资源，以适应不同的负载需求。文章还探讨了弹性伸缩的实际应用案例，如Netflix和Facebook使用弹性伸缩来降低成本并提高服务质量。
本文介绍了云术语及其定义，包括基础设施即服务（IaaS）、平台即服务（PaaS）、软件即服务（SaaS）、私有云、公有云、混合云、虚拟化、容器、微服务、服务网格、事件驱动架构、无服务器计算、云安全、云成本管理、云原生应用、云原生的概念、云原生应用的设计原则、云原生应用的开发和部署方式以及云原生应用的生命周期。此外，还介绍了云术语中的缩略语和简写，如AWS、Azure、GCP、ITIL、DevOps、CI/CD、SAFe、Docker、Kubernetes、Mesosphere和Microservices等。
在如今，在讨论云时是很难不提及容器技术的。无论你是刚刚入门的技术新人或者经验丰富的专业人士，一定都应当知道这些与云中容器技术相关的重要术语。 随着云计算中容器技术的普及，越来越多的企业都不选择考虑其他选项了。 虽然容器技术已经面世一段较长时间了，但最近是Docker帮助它们进入了企业应用的焦点。随着云的发展，更多的企业了解了采用混合云和多云模式的好处，但是确保软件在不同环境之间迁移时能够稳定运行则成为了一大挑战。容器技术是通过将应用程序机器所有组件打包成为单个可便携的包来解决这一难题的。 此外，随着云计
主要的AWS EC2区域出现性能下降后，Signal随之瘫痪，Xero和Nest则变得有点不稳定。 AWS周日晚上过得并不轻松，其主要的US-EAST-1区域的EC2实例出现了异常。 在太平洋夏令时20点11分，AWS状态页面宣布该平台的主要可用区出现了性能下降的问题。 30分钟后发布的通知声称：“由于进出附加EBS卷的IO被卡住，受影响的可用区内使用EBS卷的现有EC2实例也出现了性能下降。” “由于卷性能下降，受影响的可用区内刚启动的EC2实例可能无法启动。” 在太平洋夏令时21点47分，AWS表
AWS Spot实例，即竞价实例，是AWS把用户未购买的空闲计算资源以低于按需价格的方式出售给用户，以期带来收益。通常，AWS Spot实例的价格是按需实例价格的30%，对于AWS使用者来说，如果合理使用，可以大大节省云上费用的支出，是节省成本的一大利器。
为什么使用服务发现？ 我们假设您正在编写一些调用具有REST API或Thrift API的服务的代码。为了发送请求，您的代码需要知道服务实例的网络位置（IP地址和端口）。在运行在物理硬件上的传统应
传言要换“掌门人”的确实是亚马逊，但是此“掌门”并非 “掌”的是亚马逊的门，而是其门下最主要的分部之一——AWS。
本文介绍了PaaS云服务在实际业务中的应用，并分析了PaaS云服务的优点和缺点。作者认为PaaS云服务具有高度灵活性、可扩展性、成本效益和高效性等优点，但同时也存在一些缺点，如技术难度高、实施复杂、依赖第三方服务、需要投入较多资源等。在实际应用中，PaaS云服务需要根据业务需求和场景，选择合适的架构和技术方案，并注意维护、监控和优化云服务。
部署在亚马逊的云服务器中被认为是实现高可扩展性的好方法，同时只需要为您所使用的计算能力支付费用。不过您要如何从技术中获得最佳的可扩展性呢？
对于在云端运行重要工作负载的任何企业而言，确保云支出随需求增减而自动增减是核心优先事项之一，但对于太多的企业来说，这又常常是令人痛苦、代价高昂的教训。不过从来不缺一线用户给出的有意义的详细指导，爱彼迎（Airbnb）正是愿意分享宝贵经验的用户之一。 爱彼迎的两位软件工程师Evan Sheng和David Morrison在一篇详细的新文章中介绍了他们如何使用Kubernetes Cluster Autoscaler动态扩展云集群；近年来，这家公司做出了许多早期云采用者正在做出的转变：将几乎所有在线服务从手
Netflix 看起来再也简单不过了。你在Netflix App或网站中看到喜欢的视频后，点击播放按钮，立刻视频就魔术般地出现在眼前。真的很简单，不是吗？其实不然。
我们将深入讨论如何编写软件（软件开发）以及如何运行软件（运维）来实现软件可扩展性。对于初学者来说，成本和可扩展性通常是成比例的。
网络上关于AWS Nitro技术细节的内容不多，本文是AWS VP兼杰出工程师James Hamilton的Nitro介绍性文章，差不多是Nitro介绍最详细的文章了。并且末尾，有读者提问，Hamilton仔细进行了回答，帮助大家揭开了很多“谜团”。
云计算技术在近些年成为了很多人口中的口头禅，然而我们可以注意到，在谈论云计算这种技术的过程当中，往往除了“云计算”这个词之外，我们还会提及“云服务”，对于这样两个词语来说，其在商业模式的运作以及平台管
1 新型RedAlert勒索病毒针对VMWare ESXi服务器 RedAlert勒索病毒又称为N13V勒索病毒，是一款2022年新型的勒索病毒，最早于2022年7月被首次曝光，主要针对Windows和Linux VMWare ESXi服务器进行加密攻击 https://mp.weixin.qq.com/s/aeC90Oj-hD2S9xmCNidlLw 2 AWS EC2 Auto Scaling 弹性伸缩服务提权漏洞分析 AWS 上的 IAM 权限错误配置和权限升级已被彻底讨论过，因此我创建了一个 AWS
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
