首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

大型网站图片服务器架构演进

在针对图片服务器架构扩展中,也会历经很多曲折甚至是血泪教训(尤其是早期规划不足,造成后期架构上很难兼容和扩展)。 ?...上面提到的几种架构,在上传/下载操作时,都经过了Web服务器(虽然共享存储的这种架构,也可以配置独立域名和站点来提供图片访问,但上传写入仍然得经过Web服务器上的应用程序来处理),这对Web服务器来讲无疑是造成巨大的压力...我们可以使用Lighttpd或者Nginx等轻量级的web服务器架构独立图片服务器。...六,当前的图片服务器架构 当前图片服务器架构采用分布式文件系统+CDN 在构建当前的图片服务器架构之前,可以先彻底撇开web服务器,直接配置单独的图片服务器/域名。...这样实现旧图片服务器的分离和缓存,兼容了旧图片的访问规则并提升旧图片访问效率,也避免了实时同步所带来的问题。 整体架构如图: ?

3.4K40

服务器架构演进

服务器架构演进史 概述 在进行后端的学习过程中,有时由于个人的学习广度的局限导致无法从全局理解一些概念,服务端的架构演进历史,同时列举出每个演进阶段会遇到的相关技术,让对架构演进有一个整体的认知。...三、应用服务集群架构 我们的系统受到了用户的欢迎,并且出现了爆款,单台应用服务器已经无法满足需求了。...Ps:水平和垂直扩展不但是架构演进中的重要思想,也是设计原则中的重要思想,一般来说我们都是首先想到的为水平扩展/拆分,将一个整体拆分为可低依赖、高内聚的子模块,若是拆分子模块过多,我们将再垂直扩展,使用一个高层的模块统一管理这些子模块...四、读写分离/主从分离架构 ​ 上一节提到,我们把用户的请求通过负载均衡分发到不同的应用服务器之后,可以并行处理了,并且可以随着业务的增长,可以动态扩张服务器的数量来缓解压力。...但是现在的架构里,无论扩展多少台服务器,这些请求最终都会从数据库读写数据,到一定程度之后,数据的压力称为系统承载能力的瓶颈点。 ​ 我们可以像扩展应用服务器一样扩展数据库服务器么?

27110
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    30-服务器架构演进

    ,反向代理web服务器 占用内存小 并发能力强 ?...down掉了,会自动剔除该服务器,此策略适合服务器配置相当,无状态且短平快的服务使用 weight权重 权重越高分配到需要处理的请求越多,此策略可以与least_conn和ip_hash结合使用,此策略比较适合服务器的硬件配置差别比较大的情况...ip_hash依据ip分配 ip_hash不能与backup同时使用,此策略适合有状态服务,比如session,服务器需要剔除,必须手动down掉 least_conn最小连接 此负载均衡策略适合请求处理时间长短不一造成服务器过载的情况...fair响应时间 负载均衡策略的实现需要安装第三方插件,按照服务器端的响应时间来分配请求,响应时间短的优先分配 url_hash依据url分配 按访问url结果来分配请求,使每个url定向到同一个后端服务器...然后再对集群进行一次性能测试,此时3个服务构成的集群的性能指标tps增加了多少,并发用户增加了多少,那么理论上,可以计算出增加服务后tps等指标的增加情况 数据库 数据:描述事物的符号记录,符号可以是数字,文字,图片

    62950

    图片服务架构演进及云存储的优势

    必须要具有前瞻性的规划好图片服务器图片的上传和下载速度至关重要,当然这并不是说一上来就搞很NB的架构,至少具备一定扩展性和稳定性。虽然各种架构设计都有,在这里我只是谈谈我的一些个人想法。...从传统互联网的web1.0,历经web2.0时代以及发展到现在的web3.0,随着图片存储规模的增加,图片服务器架构也在逐渐发生变化,以下主要论述三个阶段的图片服务器架构演进。...发展阶段 当网站达到一定的规模后,对图片服务器的性能和稳定性有一定的要求后,上述NFS图片服务架构面临着挑战,严重的依赖NFS,而且系统存在单点机器容易出现故障,需要对整体架构进行升级。...于是出现了上图图片服务器架构,出现了分布式的图片存储。...以上图片服务架构设计消除了早期的NFS依赖以及单点问题,时能够均衡图片服务器的空间,提高了图片服务器的安全性等问题,但是又带来一个问题是图片服务器的横向扩展冗余问题。

    4.5K50

    架构演进

    一、架构演进 1.开发环境、测试环境/沙箱环境、生产环境(Linux操作系统) 2.单体架构 All in One 2.1web2.0用户激增,基于单体架构集群 2.2问题: 1.用户到底要访问那台服务器...2.多台tomcat数据共享问题 3.涉及到了搜索操作时,数据库受不了 2.3使用中间件解决: 1.使用Nginx反向代理服务器,来解决用户请求问题 2.使用Redis来代替之前使用的...效率更高,用户体验更好 3.垂直架构:江哥哥模块分开开发,并运行在自己的web容器中,相互独立 4.分布式架构:将各个模块分开开发,并运行在自己的web容器中,通过http/rpc的方式使模块之间相互通讯...,像一些分布式框架,将三层拆开 4.1分布式架构面临的问题: 1.服务与服务之间如何实现异步通讯 2.通过Eureka获取服务地址信息,Ribbon实现负载均衡 3.Hysreix

    30821

    架构演进

    风言风语 1 架构演进 在最早进行写程序的时候,都是单体应用程序,所谓的单体,就是一堆人写一个代码库,服务器也就是一个应用,一个数据库。 ?...在解决以上的两个问题的时候,就进化出了高可用架构,也就是使用负载均衡和集群的服务,应用变成多份,数据库也变成了高可用的架构。 ?...,从而出现了微服务架构。...,测试,运维,运营,最后业务变得更加复杂,部署也带来很大的复杂度,各种版本之间的维护与交互,运维就更复杂了,故障处理,服务治理,如果没有链路跟踪,原来的一台服务器查看所有日志,现在呢,可能一百台,而且这个还涉及到成本...,如果单体只要一台服务器,那么微服务的服务器数量是翻倍的。

    62620

    凤凰架构 - 架构演进

    《凤凰架构:构建可靠的大型分布式系统》- 周志明 今天分享的凤凰架构是由周志明大佬开源撰写的架构书籍。...今天从架构演进开始。 架构并不是被发明出来的,而是持续演进的结果。 原始分布式时代 最初的微型计算机只有不足 5MHz 时钟频率的处理器与 128KB 左右的内存地址空间。...,具体业务以插件模块形式存在(但是各个插件不会直接交互) 事件驱动架构:在子系统之间建立一套事件队列管道,用来存储信息与分享信息 SOA架构(面向服务架构):当系统演化至事件驱动架构时,原始分布式时代发展到此时...也列举了九个核心业务与技术特征: 围绕业务能力构建 分散治理 通过服务来实现独立自治的组件 产品化思维 数据去中心化 强终端弱管道 容错性设计 演进式设计 基础设施自动化 没有了统一的规范和约束,以前遇到的那些分布式问题在微服务中不再会有统一的解决方案...但它们两者并没有继承替代关系 无服务不是一定就会微服务更加先进,两者之间也并非相对,以后,无论是通过物理机、虚拟机、容器,抑或是无服务云函数,都会是微服务实现方案的候选项之一 如果你对这几个阶段的项目演进感兴趣

    75431

    游戏服务器架构演进(完整版)

    ‍‍‍‍‍ 本文阅读预计需要10分钟,主要技术点来如下,感兴趣请继‍‍续: ‍ 游戏服务器特征 短连接游戏服务器架构 长链接游戏服务器架构 分区分服服务器架构 MMOARPG服务器架构 房间服务器架构...网络带宽直接限制了服务器的处理能力,所以游戏服务器架构也必定要考虑这个因素。...2 游戏服务器架构要素 对于游戏服务端架构,最重要的三个部分就是,如何使用CPU、内存、网卡的设计: 内存架构:主要决定服务器如何使用内存,以最大化利用服务器端内存来提高承载量,降低服务延迟。...3 服务器演化进程 1 卡牌等休闲游戏弱交互游戏 服务器基于游戏类型不同,所采用的架构也有所不同,我们先讲一下简单的模型,采用http通信模式架构服务器: 这种服务器架构和我们常用的web服务器架构差不多...MUD1 是一款纯文字的世界,没有任何图片,但是不同计算机前的玩家可以在游戏里共同冒险、交流。

    5.2K31

    图片服务器的url hash架构

    什么是urlhash架构 url hash架构对url进行一次hash算法,然后通过hash结果找到对应的服务器。...因为针对单一个url的hash结果是一样的,所以理论上这个url会被永久分配到固定的一台服务器上。另外因为经过了hash算法,所以分配url就很均匀,同时访问量也可以达到均衡。...为什么要用urlhash架构 图片服务器的特点一是访问量很大,二是容量也很大,通过简单的负载均衡,可以解决访问量大的问题,但是容量的问题并没有改善。所以会造成容灾问题。...基于dns的hash架构说明 这个架构适合面向用户的图片系统,比如论坛、相册、博客中的图片上传。这样它才能够保证文件名有一致的规范。...这个架构图分了36个域名,图片文件名是用md5值起的,在md5值中取一位字母就可以表明它是在哪个域名里,域名就对应了机器,上传分发的时候也是根据此字母来分发。

    1.3K20

    软件架构演进

    软件架构演进 软件架构的发展经历了从单体架构、垂直架构(分布式架构)、SOA架构到微服务架构的过程。...2、所有的功能打在一个war包部署到服务器。 3、通过部署应用集群和数据库集群来提高系统的性能。 优点: 1、项目架构简单,前期开发成本低,周期短,小型项目的首选。...分布式架构 针对单体架构的不足,为了适应大型项目的开发需求,许多公司将一个单体系统按业务垂直拆分为若干系统,系统 之间通过网络交互来完成用户的业务处理,每个系统可分布式部署,这种架构称为分布式架构。...SOA架构 SOA是一种面向服务的架构,基于分布式架构,它将不同业务功能按服务进行拆分,并通过这些服务之间定义良好 的接口和协议联系起来。 ?...等,服务的粒度很小,所以称为微服务架构

    1.5K30

    React Native 架构演进

    写在前面 上一篇(React Native 架构一览)从设计、线程模型等方面介绍了 React Native 的现有架构,本篇将分析这种架构的局限性,以及 React Native 正在进行的架构升级计划...一.现有架构的局限性 最初的设计也带来了一些限制: 异步:无法将 JavaScript 逻辑直接与许多需要同步答案的 Native API 集成 批处理:很难让 React Native 应用调用 Native...二.架构升级计划 因此,2018 年 6 月提出大规模重构的计划,目的是更好地支持混合应用: We’re working on a large-scale rearchitecture of React...、Data Fetching 等等 Bridge:精简优化,允许 Native 与 JavaScript 之间的直接调用 支持同步调用让之前很难实现的一些东西成为了可能,例如跨语言的调用栈追踪 对应到架构图中...不同于之前直接将 JavaScript 代码输入给 JSC,新的架构中引入了一层 JSI(JavaScript Interface),作为 JSC 之上的抽象,用来屏蔽 JavaScript 引擎的差异

    1.6K21

    工程架构持续演进

    正文 整体视角 首先介绍工程当前整体设计,整体工程视角的架构图如下: 业务实现层和业务接口层,是常迭代的业务部分; 业务接口层,存放业务组件对外的能力,这些能力大部分用接口来表述。...架构演进 架构演进的思路,主要考虑当下要素: 1、多App迭代述求,以融合开发方式为多App提效,同时保留业务细节差异化能力,以及整体业务模块剥离的包体积优化空间; 2、SaaS同构迭代,未来相关业务既要接入...SaaS,又要迭代SaaS; 3、质量和效率提升,更加清晰的工程架构来承载复杂业务,层级之间更加清晰并有防劣化,复杂业务组件有良好设计来降低理解成本 基于上述分析和考虑,对原来架构进行进一步调整:...不依赖其他业务组件和服务层; 5、业务基础库和通用基础库分隔,业务基础库只服务于当前工程,通用基础库服务于类SaaS的多宿主; 6、配合多包SOP调整差异化组件,将大部分固定差异用配置化的方式进行处理; 总结 架构演进是一件需要持之以恒的事情...架构不是越复杂越好。越多的层级固然能更好做逻辑拆分、依赖隔离,但是也有更多的开发能力和理解能力要求。 如无必要,勿增实体。

    18120

    演进式数据架构

    本文借助于《演进架构》这本书中关于演进架构体系的描述,探索我们如何在数据这个领域,设计出演进式数据架构演进架构支持跨多个维度的引导性增量变更。...——《演进架构》 这是《演进架构》这本书第一章第一节对“演进架构”的作用做出的简洁定义,也就是说演进架构便是持续架构,因为在架构这件事上没有最终状态,它会随着软件开发体系的不断变化而演进,我们只能将时间和变化作为维度来定义...本文便是借助于《演进架构》这本书中关于演进架构体系的描述,探索我们如何在数据这个领域,设计出演进式数据架构。...大数据的5V特点(图片来源网络) 这里我们不具体展开5V特征以及其代表的方向,但是可以看出在数据领域从业务需求的产生到基础设施的建设都与一般的软件架构设计有着较大的差异。...数据类型:除了常见的关系型的数据结构外,还能支持更多的类型,例如文本,图片

    36010

    Python后端架构演进

    来腾讯之前在前公司做了3年的后端开发,经历一款SaaS产品从0到10(还没有到100, 哈哈哈)的过程,3年间后端的架构逐步演变,在微服务的实践过程中遇到的问题也越来越多,在这里总结下。...架构演进经历了4个大的阶段:1. MVC 2. 服务拆分 3. 微服务架构 4. 领域驱动设计 1....性能的考量倒不是最重要的,为了支撑更多的并发,还使用了云平台提供的LB服务分发流量到2台Kong服务器组成的集群。集群之间自动同步配置。...在我离职时领域驱动设计还在学习设计阶段,还没有落地,但是我相信前公司的后端架构一定会往这个方向继续演进。 总结 架构的设计,技术的选型,不能完全按照流行的技术走,最终还是服务于产品,服务于客户的需求。...Service Mesh这种新一代的微服务架构正在成为主流,虽然现在的工作与微服务无关了,但是也还会继续关注学习。

    6.7K30

    JavaWeb:JavaWeb技术架构演进

    Java 在客户端的应用有 Java Applet,不过使用得很少,Java 在服务器端的应用非常的丰富,比如 Servlet,JSP、第三方框架等等。...~ 本篇内容包括:JavaWeb 简介、JavaWeb 技术架构演进的各个阶段,即 JavaWeb-Servlet 阶段,JavaWeb-MVC 阶段(SSM/SSH)以及 JavaWeb-SpringBoot...Java 在客户端的应用有 Java Applet,不过使用得很少,Java 在服务器端的应用非常的丰富,比如 Servlet,JSP、第三方框架等等。...直到后来,随着互联网技术的发展,需要开始可以提供一些扩展机制能够让 HTTP 服务器调用服务端程序,以此来使用户通过一些交互操作,来获取动态结果。...绝对没有代码生成以及不要求配置 XML Ps:SpringBoot 虽然目的是为了简化 Spring,似乎看起来无需去学习 Spring 的繁琐配置,但是如果没有忍受过Spring的繁琐配置,没有经历过架构模式的演进以及

    1.5K20

    Serverless架构演进与实践

    以平台即服务(PaaS)为基础,无服务器运算提供一个微型的架构,终端客户不需要部署、配置或管理服务器服务,代码运行所需要的服务器服务皆由云端平台来提供。...2.架构演进图片早期的软件部署模式是通过采购物理机的形式,有多大规模采购多少台机器,采购多了或者配置差了都会存在比较大的资源浪费。...接下来云的浪潮铺开,传统的服务器厂商开始转型拥抱云,将自己的服务器搬到云上通过虚拟化技术进行线上售卖提供基础IaaS服务,到这个阶段仅仅是转变了商业模式,上面的问题依然还是存在。...这个时候云厂商开始考虑是否可以把运维这个事情从开发手中收走,让运维自动化,变得对开发更加透明,开发人员只需关注核心业务逻辑的开发,进而精益整个产品开发流程,快速适应市场变化,这个时候Serverless的概念开始产生,所以从这个角度来看,在整个it架构演进中...:图片这是一个比较典型的依托于Serverless平台的SaaS应用交付,即我们提供了一套通用的代码模板,提交给了Serverless平台进行运行,服务开发商也就是我们无需关注承载服务的系统架构和资源运维

    1.4K72

    DevOps平台架构演进

    ,而演进的主要方式则是服务化、集群化 架构演进的五条原则 既然要对架构进行升级重构,那么有没有一些基本的准则,指导我们避免一些坑呢?...基于此,我们尝试总结了架构演进的五条原则: 确定当前的架构现状:每次架构演进,一定是针对当前架构的,所以必须非常清楚当前的架构现状和问题。清楚现状,明白目标,才能逐步改进,向目标前进。...在重构前,我们需要回答架构演进原则提出的问题: 确定当前的架构现状:所有服务集中在一起运行。...,治理,提供服务和资源的运维、监控能力,而都需要架构 向微服务架构演进 在进行微服务架构重构之前,我们同样需要回答架构演进原则提出的问题: 确定重构的目的和必要性 - 随着产品的持续迭代,业务复杂度越来越大...各个应用层在微服务架构下的职责: 运行环境层:提供基础设施服务,包括服务器,IT安全配置以及容器云平台。

    1.7K53

    读《演进架构》有感

    最近读了一本很有意思的书《演进架构》,从一个不太一样的角度来描述架构这件事。也让我痛定思痛的反省了一下过去犯的错误,以及由于知识欠缺,所留下的遗憾。...翻译过来大致是演进架构是一种支持将增量式、指导式的变更作为跨多个维度中的第一原则的架构。...如果系统架构不支持,你无法建立一个高效的组织。...当然有些架构是用来抛弃/牺牲的。比如可牺牲的架构中提到的: 支持1996年eBay的合适架构,对于2006年eBay来说,就不是合适的了。...1996年的架构无法处理2006年的负载,但是2006年的版本太过复杂而难以建立、维护,它是根据1996年的需求演化而来的。的确,这个原则可以引出工作的一种组织方式。

    52330
    领券