首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

谁顶住11的世界级流量洪峰?神龙架构负责人等9位大牛现场拆解阿里秘籍

11中,阿里使用了全自研的一整套平台,平台包括超过10万台规模服务器集群,10+数据中心、10EB级别存储、每天千万级别的大数据和AI计算作业。...这样分布广泛的数据中心被看作是易筋经一样的肋骨,是驱动阿里一切商业行为和商业流量的基础,不仅能够支持双十一的峰值而且能够提供弹性的服务。另外,液冷技术近期将会开源。...总结来看,支持云上双十一的硬核基础设施,共有5项绝技纵横江湖,绿色数据中心、开放式的网络架构、RDMA高性能网络、弹性跨域访问和自研数据平台。...为此,电商开始尝试混合云的架构,在大促时短时间内租用云的机器进行扩容,进而形成了云单元,另一方面又利用离线大数据集群和在线集群的错峰互补,形成了混布技术。...在这个阶段我容器化技术飞速发展,Pouch容器和Sigma调度系统成为了整个资源管理调度的基石,支撑了数百万的容器的管理和运行。通过这一系列手段,应对双十一峰值的计算资源的成本得到了有效的控制。

10.7K10

数据分析:挖掘影响电商双十一销量的因素,并且预估销量

在很早之前就采集过关于淘宝11的数据,之前也只是做了比较简单的数据分析,那么就在假日的最后,作一番比较深入的分析吧。我们的目标是:分析双十一销量的影响要素,以及要素在影响销量的比重。...具体的数据说明如下图,我们把双十一的销量作为分析的因变量,要探究的最终目标是包括各种优惠活动信息、评分信息等维度对销量的影响,以及分别的影响因素是什么。...9、商品优惠活动与销量之间的关系分析 通过下图可以看到,双十一红包和满减券在促进销量提升中还是很有帮助的,但是并不是优惠越多越好,数据表明,优惠个数在1-2个之间的效果是最好的。 ?...从下图中可以发现,售价越高的商品是不容易产生销量的,从品类来看,女鞋类的产品是更容易提升销量的,从优惠活动来看,双十一的直接降价是对商品销售有直接的促进作用;关键词中含有冬装、学院等关键词的商品销量提高的可能性很高...接下来对销量大于0的商品做对数线下模型分析,在控制其他因素不变的情况下,当价格每增加10元,销量下降4%;在品类中,女鞋的销量是最高的,比男性饰品平均高1.16倍,有2个优惠活动的商品更吸引消费者,用户评价中

11.6K100
您找到你想要的搜索结果了吗?
是的
没有找到

云监控 Barad 的云原生实践

TKE+TKE Serverless 弹性调度能力提升 flink 集群容器化建设 ctsdb 写并开启压缩能力 这里将 Barad 的业务调优动作对大家做以介绍,以便于大家针对自身业务特点进行相应的云原生渗透力提升以及容灾能力建设...TKE 容器化部署,以解决集群弹性调度能力和多可用区容灾建设。...资源可视化监控: 集群节点利用率可视化监控: TKE +TKE Serverless 弹性调度能力提升 TKE 容器化后除了上述的优点,也带来一些问题: 每个集群自备 CVM,无法共享资源,集群装箱率较低...100% 容器化建设,提高了流计算集群弹性能力, 量级在中小量级 150cu(此数值为经验值,一般没有大型作业)以下的集群的隔离性能提升,无复用资源问题,小地域 ec 区可以降低整体配额 60%,消除管控机型预留问题...在容灾集群预创建 index,避免因开启写后批量创建 index 而影响了原集群的写入速度 开启写,原集群与容灾集群同时写入,提供双重保险 升级操作,在写运行 1 天后,对集群进行升级操作 完成升级后

4.4K41

ApacheCN DevOps 译文集 20211227 更新

ECS 容器实例 七、创建 ECS 集群 八、使用 ECS 系统部署应用 九、管理机密 十、隔离网络访问 十一、管理 ECS 基础设施生命周期 十二、自动缩放 十三、持续交付 ECS 应用 十四、Fargate...和 ECS 服务发现 十五、弹性 Beanstalk 十六、AWS 中的 Docker Swarm 十七、弹性 Kubernetes 服务 十八、答案 深入理解 Docker 零、关于本书 一、来自...七、扩展您的平台 八、探索 Swarm 的其他特性 九、保护集群和 Docker 软件供应链 十、Swarm 和云 十一、下一步是什么?...AKS 集群和工作负载 八、AKS 中基于角色的访问控制 九、AKS 中由 Azure 活动目录 pod 管理的身份 十、在 AKS 中存储机密 十一、AKS 中的网络安全 第四部分:与 Azure...六、保护集群组件 七、认证、授权和准入控制 八、保护 Kubernetes PODS 九、DevOps 管道中的映像扫描 十、Kubernetes 集群的实时监控和资源管理 十一、深度防御 第三部分

4.5K30

【云原生正发声】共11期视频+PPT技术实践干货集来了(内含腾讯彩蛋)

” 助力大规模容器集群混部 第七期:K8s 高性能调度器设计与实现 第八期:容器产品运维难点问题解析 第九期:规模化 etcd 集群运维实践 第十期:K8s cgroups v2 及 KEP Memory...QoS 介绍 第十一期:腾讯广告 AMS 容器化之路 · 扫码直达往期精彩视频 · 看完标题不了解具体讲的是什么?...第六期 《TencentOS “如意” 助力大规模容器集群混部》 本期我们邀请到的嘉宾是腾讯高级工程师李弘博,通过这期直播学习,大家可以有以下几点收获: 1.了解云原生场景下为什么要做服务器层面的资源...第九期 《规模化 etcd 集群运维实践》 本期我们邀请到的嘉宾是腾讯云容器运维高级工程师严枭,通过这期直播学习,大家可以有以下几点收获: 1.了解 TKE 后端 ETCD 使用姿势。...第十一期 《腾讯广告 AMS 容器化之路》 本期我们邀请到的嘉宾是腾讯广告资深运维工程师张煜,通过这期直播学习,大家可以有以下几点收获: 1.了解广告的现有架构。

1.2K41

11在即,分享一些稳定性保障技术干货

混合云架构在容灾方面效果更好; 核心链路梳理,可以将历史大促或者峰值的访问URL存储起来,经过处理后作为核心链路参考; 验证线上的性能容量搭建单独的仿真环境,为了避免和线上不一致,可通过一套标准的脚本来进行检查配置; 弹性伸缩容...10%库存放数据库应对超卖; 3、数据库稳定性保障的SOP 数据库的可用性底线:99.99%; 故障需要有严格的定义规则; 数据库稳定性三板斧: 1)扩容:DB是有状态服务,计算层便于扩容,将DB节点放到容器中...,有需要扩容; 2)灾备:对于大流量读场景可通过流量切换方式,将部分流量迁移到备份集群分流; 3)巡检:慢SQL是常见的问题,可通过自动监控和历史数据分析,提供辅助式决策; 线上监控告警及容灾预案 1、...线程池监控; 预估指标-容量规划; 3、分布式集群架构,单节点对整体的影响是什么?...+写操作不刷盘方式; 非交易业务的查询放在备库,降低主库压力; 梳理落地SOP机制,遇到问题时首先快速线上止血,解决故障; 存在主备延迟情况,可以开启参数调整方式来处理(临时开启,快启快关) ; 同城活架构下

2.8K20

直播报名中|小红书 Service Mesh 落地与 Aeraki 组件优化扩展(内有PPT)

19:30—20:30 · 讲师介绍 · 王城程  小红书基础架构云原生开发工程师 目前负责小红书 Service Mesh 控制面相关开发工作,数年 PaaS 平台、云原生开发经验,主要工作领域有弹性伸缩...,容器网络,容器存储,大规模业务、集群运维。...· 往期直播视频回顾 · (建议保存收藏哦) 第一期:多种模式下的深度学习弹性训练 第二期:如何在 Istio 服务网格中管理所有七层流量? ...第三期:云原生时代的应用开发方式变革  第四期:云时代软件技术演进之路 第五期:腾讯基于 K8s 的全场景在线离线混部解决方案 第六期:TencentOS “如意” 助力大规模容器集群混部 第七期:K8s...高性能调度器设计与实现 第八期:容器产品运维难点问题解析 第九期:规模化 etcd 集群运维实践 第十期:K8s cgroups v2 及 KEP Memory QoS 介绍 第十一期:腾讯广告AMS

1.2K40

直播报名中|小红书Service Mesh落地与Aeraki组件优化扩展

11月23日 19:30—20:30 讲师介绍 王城程  小红书基础架构云原生开发工程师 目前负责小红书Service Mesh控制面相关开发工作,数年PaaS平台、云原生开发经验,主要工作领域有弹性伸缩...、容器网络、容器存储、大规模业务、集群运维。...Service Mesh从方案到落地线上业务的历程 了解小红书Mesh落地的前世今生 了解基于社区Istio落地生产的一般改造方案 往期直播视频回顾 (建议保存收藏) 第一期:多种模式下的深度学习弹性训练...第三期:云原生时代的应用开发方式变革  第四期:云时代软件技术演进之路 第五期:腾讯基于K8s的全场景在线离线混部解决方案 第六期:TencentOS“如意”助力大规模容器集群混部 第七期:K8s高性能调度器设计与实现...第八期:容器产品运维难点问题解析 第九期:规模化etcd集群运维实践 第十期:K8s cgroups v2及KEP Memory QoS介绍 第十一期:腾讯广告AMS容器化之路 第十二期:腾讯云容器服务

41410

今晚7点半直播|小红书 Service Mesh 落地与 Aeraki 组件优化扩展

19:30—20:30 · 讲师介绍 · 王城程  小红书基础架构云原生开发工程师 目前负责小红书 Service Mesh 控制面相关开发工作,数年 PaaS 平台、云原生开发经验,主要工作领域有弹性伸缩...,容器网络,容器存储,大规模业务、集群运维。...· 往期直播视频回顾 · (建议保存收藏哦) 第一期:多种模式下的深度学习弹性训练 第二期:如何在 Istio 服务网格中管理所有七层流量? ...第三期:云原生时代的应用开发方式变革  第四期:云时代软件技术演进之路 第五期:腾讯基于 K8s 的全场景在线离线混部解决方案 第六期:TencentOS “如意” 助力大规模容器集群混部 第七期:K8s...高性能调度器设计与实现 第八期:容器产品运维难点问题解析 第九期:规模化 etcd 集群运维实践 第十期:K8s cgroups v2 及 KEP Memory QoS 介绍 第十一期:腾讯广告AMS

86530

揭秘:2018阿里11秒杀背后的技术

在今天 11 这个万众狂欢的节日,对于阿里员工来说,每个环节都将面临前所未有的考验,特别是技术环节,今天我们就一起来探讨下11天量交易额背后的技术。 一、阿里11秒杀场景 ?...二、阿里11背后的技术 ? 1. 云计算 利用云计算弹性能力,支撑交易峰值每秒32.5万笔、支付峰值每秒25.6万笔的混合云弹性架构。 2. 分布式消息引擎 在11当天实现万亿级消息流转。 3....Docker技术 交易核心应用容器化撑起11交易下单峰值,解放资源的超大规模Docker化技术。 4....在线交易的数据实时和离线计算能力 支撑全球最大规模在线交易的数据实时和离线计算能力,包括承载阿里巴巴集团核心大数据的离线计算平台,以及双十一保证每秒处理亿条日志的计算。 5....除此以外还会涉及到分布式小文件存储以及搜索引擎,以及服务器集群监控等技术。

4.7K30

今晚19:30 | 微信云托管企业实践 —— 助力康师傅春节表情雨活动降本增效

· 往期直播视频回顾 · (建议保存收藏哦) 第一期:多种模式下的深度学习弹性训练 第二期:如何在 Istio 服务网格中管理所有七层流量? ...第三期:云原生时代的应用开发方式变革  第四期:云时代软件技术演进之路 第五期:腾讯基于 K8s 的全场景在线离线混部解决方案 第六期:TencentOS “如意” 助力大规模容器集群混部 第七期:K8s...高性能调度器设计与实现 第八期:容器产品运维难点问题解析 第九期:规模化 etcd 集群运维实践 第十期:K8s cgroups v2 及 KEP Memory QoS 介绍 第十一期:腾讯广告AMS...容器化之路 第十二期:腾讯云容器服务K8s日志一站式解决方案部署实践 第十三期:小红书 Service Mesh 落地与 Aeraki 组件优化扩展 第十四期:腾讯云 API 网关直通 TKE 容器功能介绍...(下) 如何使用 OpenTracing 在 TCM 中实现异步消息调用跟踪 云原生的弹性 AI 训练系列之一:基于 AllReduce 的弹性分布式训练实践 Effective HPA:预测未来的弹性伸缩产品

1.9K40

《原动力 x 云原生正发声 降本增效大讲堂》第二讲——Kubernetes 云上资源的分析与优化

直播以“降本增效”为主题,腾讯云容器技术专家”胡启明”将为大家分享「Kubernetes 云上资源管理、Kubernetes 弹性伸缩」等精彩内容!...· 往期直播视频回顾 · (建议保存收藏哦) 第一期:多种模式下的深度学习弹性训练 第二期:如何在 Istio 服务网格中管理所有七层流量? ...第三期:云原生时代的应用开发方式变革  第四期:云时代软件技术演进之路 第五期:腾讯基于 K8s 的全场景在线离线混部解决方案 第六期:TencentOS “如意” 助力大规模容器集群混部 第七期:K8s...高性能调度器设计与实现 第八期:容器产品运维难点问题解析 第九期:规模化 etcd 集群运维实践 第十期:K8s cgroups v2 及 KEP Memory QoS 介绍 第十一期:腾讯广告AMS...容器化之路 第十二期:腾讯云容器服务K8s日志一站式解决方案部署实践 第十三期:小红书 Service Mesh 落地与 Aeraki 组件优化扩展 第十四期:腾讯云 API 网关直通 TKE 容器功能介绍

1.4K10

腾讯云微服务引擎 TSE 9月产品动态

【新功能】Kong 网关支持集群分组管理:Kong 专业版上线集群分组管理,您可以根据业务特性划分多套TSE Kong集群,并使用同一个 Konga 进行管理。...【迁移能力】Nacos注册发现工具支持Nacos Client 1.3.1版本。 ★ 服务治理中心 【新功能】服务限流支持协议标签以及多种值匹配模式。...★ 弹性微服务 【新功能】弹性微服务程序包部署能力优化,新应用通过程序包部署时生成的镜像将被免费保存至弹性微服务提供的内置镜像仓库。...云原生网关 Kong 即将支持使用 Kong Ingress Controller,对接容器集群更顺滑。 云原生网关 Kong 即将支持公网流量按量计费模式,降低您的使用成本。...为了降低您的迁移成本,Nacos注册发现工具支持Nacos Client 2.1.0版本,支持Nacos配置同步能力。

1.5K20

今晚直播|腾讯广告 AMS 容器化之路

自动化等场景下的容器化实践。...【云原生正发声】第十一期,我们邀请到了该篇文的作者——腾讯广告资深运维工程师张煜,来和大家分享腾讯广告在云原生改造中遇到的困难和解决方案。...· 往期直播视频回顾 · (建议保存收藏哦) 第一期:多种模式下的深度学习弹性训练 第二期:如何在 Istio 服务网格中管理所有七层流量? ...第三期:云原生时代的应用开发方式变革  第四期:云时代软件技术演进之路 第五期:腾讯基于 K8s 的全场景在线离线混部解决方案 第六期:TencentOS “如意” 助力大规模容器集群混部 第七期:K8s...高性能调度器设计与实现 第八期:容器产品运维难点问题解析 第九期:规模化 etcd 集群运维实践 第十期:K8s cgroups v2 及 KEP Memory QoS 介绍 第十一期:8月3日,正在报名中

1.1K41

今晚7点半| K8s 日志一站式解决方案部署实践(内有PPT)

本期将由腾讯云高级开发工程师 “易洋” ,为大家介绍 Kubernetes 集群日志收集的方案原理与实现,以及日志解决方案部署的实践指南。...· 往期直播视频回顾 · (建议保存收藏哦) 第一期:多种模式下的深度学习弹性训练 第二期:如何在 Istio 服务网格中管理所有七层流量? ...第三期:云原生时代的应用开发方式变革  第四期:云时代软件技术演进之路 第五期:腾讯基于 K8s 的全场景在线离线混部解决方案 第六期:TencentOS “如意” 助力大规模容器集群混部 第七期:K8s...高性能调度器设计与实现 第八期:容器产品运维难点问题解析 第九期:规模化 etcd 集群运维实践 第十期:K8s cgroups v2 及 KEP Memory QoS 介绍 第十一期:腾讯广告AMS...容器化之路 第十二期:10月26日,正在报名中 1111111.png

1.1K30

直播报名中|腾讯广告 AMS 容器化之路

自动化等场景下的容器化实践。...【云原生正发声】第十一期,我们邀请到了该篇文的作者——腾讯广告资深运维工程师张煜,来和大家分享腾讯广告在云原生改造中遇到的困难和解决方案。...· 往期直播视频回顾 · (建议保存收藏哦) 第一期:多种模式下的深度学习弹性训练 第二期:如何在 Istio 服务网格中管理所有七层流量? ...第三期:云原生时代的应用开发方式变革  第四期:云时代软件技术演进之路 第五期:腾讯基于 K8s 的全场景在线离线混部解决方案 第六期:TencentOS “如意” 助力大规模容器集群混部 第七期:K8s...高性能调度器设计与实现 第八期:容器产品运维难点问题解析 第九期:规模化 etcd 集群运维实践 第十期:K8s cgroups v2 及 KEP Memory QoS 介绍 第十一期:8月3日,正在报名中

76141

ApacheCN DevOps 译文集(二)20211230 更新

三、使用容器映像 第二部分:理解 Kubernetes 的基本原理 四、Kubernetes 概念和 Windows 支持 五、不可思议的网络 六、与 Kubernetes 集群交互 第三部分:创建...容器 九、部署您的第一个应用 十、部署微软 SQL Server 2019 和 ASP.NET MVC 应用 十一、配置应用来使用 Kubernetes 功能 十二、使用 Kubernetes 开发工作流...运行有状态应用 八、部署和更新应用 九、打包应用 十、探索高级网络 十一、在多个云和集群组合上运行 Kubernetes 十二、Kubernetes 上的无服务器计算 十三、监控 Kubernetes...八、抱歉,我的应用吃掉了集群 九、存储状态 十、管理容器映像 Kubernetes 无服务器应用手册 零、前言 一、无服务器的概览 二、Kubernetes 简介 三、在本地安装 Kubernetes...一、Ansible 行动手册和角色介绍 二、Ansible Tower、Jenkins 和其他自动化工具 三、使用加密自动备份设置加固 WordPress 四、日志监控和无服务器自动防御(AWS 中的弹性

4.2K20

【直播预约】微信云托管企业实践 —— 助力康师傅春节表情雨活动降本增效

· 往期直播视频回顾 · (建议保存收藏哦) 第一期:多种模式下的深度学习弹性训练 第二期:如何在 Istio 服务网格中管理所有七层流量? ...第三期:云原生时代的应用开发方式变革  第四期:云时代软件技术演进之路 第五期:腾讯基于 K8s 的全场景在线离线混部解决方案 第六期:TencentOS “如意” 助力大规模容器集群混部 第七期:K8s...高性能调度器设计与实现 第八期:容器产品运维难点问题解析 第九期:规模化 etcd 集群运维实践 第十期:K8s cgroups v2 及 KEP Memory QoS 介绍 第十一期:腾讯广告AMS...容器化之路 第十二期:腾讯云容器服务K8s日志一站式解决方案部署实践 第十三期:小红书 Service Mesh 落地与 Aeraki 组件优化扩展 第十四期:腾讯云 API 网关直通 TKE 容器功能介绍...(下) 如何使用 OpenTracing 在 TCM 中实现异步消息调用跟踪 云原生的弹性 AI 训练系列之一:基于 AllReduce 的弹性分布式训练实践 腾讯云原生支撑起14亿人项目背后的技术揭秘

1.9K20

云原生技术实践 | 16位专家视频讲解合集(抢新年限定红包封面)

” 助力大规模容器集群混部 第七期:K8s 高性能调度器设计与实现 第八期:容器产品运维难点问题解析 第九期:规模化 etcd 集群运维实践 第十期:K8s cgroups v2 及 KEP Memory...QoS 介绍 第十一期:腾讯广告 AMS 容器化之路 第十二期:腾讯云容器服务K8s日志一站式解决方案部署实践 第十三期:小红书 service mesh 落地与 Aeraki 组件优化扩展 第十四期...第六期 《TencentOS “如意” 助力大规模容器集群混部》 本期我们邀请到的嘉宾是腾讯高级工程师李弘博,通过这期直播学习,大家可以有以下几点收获: 1.了解云原生场景下为什么要做服务器层面的资源...第九期 《规模化 etcd 集群运维实践》 本期我们邀请到的嘉宾是腾讯云容器运维高级工程师严枭,通过这期直播学习,大家可以有以下几点收获: 1.了解 TKE 后端 ETCD 使用姿势。...第十一期 《腾讯广告 AMS 容器化之路》 本期我们邀请到的嘉宾是腾讯广告资深运维工程师张煜,通过这期直播学习,大家可以有以下几点收获: 1.了解广告的现有架构。

1.1K30
领券