首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

淘宝应对11技术架构分析

11”最热门的话题是TB ,最近正好和阿里的一个朋友聊淘宝的技术架构,发现很多有意思的地方,分享一下他们的解析资料:   淘宝海量数据产品技术架构   数据产品的一个最大特点是数据的非实时写入,正因为如此...图1 淘宝海量数据产品技术架构   按照数据的流向来划分,我们把淘宝数据产品的技术架构分为五层(如图1所示),分别是数据源、计算层、存储层、查询层和产品层。...以上是淘宝海量数据产品在技术架构方面的一个概括性的介绍,接下来我将重点从四个方面阐述数据魔方设计上的特点。   ...图8 glider的技术架构   有经验的读者一定可以想到,从本质上来讲,这就是广义上的异构“表”之间的JOIN操作。那么,谁来负责这个事情呢?...我相信,过不了几年,淘宝数据产品的技术架构一定会是另外的样子。 其他文章摘要 【1】海量数据领域涵盖分布式数据库、分布式存储、数据实时计算、分布式计算等多个技术方向。

2.5K20
您找到你想要的搜索结果了吗?
是的
没有找到

首次揭秘1112背后的云数据库技术!| Q推荐

从 2009 年到 2021 年,从千万交易额到千亿交易额, 11 已经开展了 12 年。如今,每年的 11 以及一个月后的 12,已经成为真正意义上的全民购物狂欢节。...在此基础上,淘宝及天猫还在不断吸收来自消费者的反馈,优化功能,比如在 2021 年开始支持购物车实时显示券后到手价、搜索已经购买过的订单……应用上大量的操作请求流转到技术后台,给数据库带来了不小的压力。...《数据 Cool 谈》第三期,阿里巴巴大淘宝技术 12 队长朱成、阿里巴巴业务平台 11 队长徐培德、阿里巴巴数据库 11 队长陈锦赋与 InfoQ 主编王一鹏,一同揭秘了 11 12 背后的数据库技术...在 2021 年 11 12 中,有一种无所不在的技术力保证了整体系统的稳定,如 PolarDB 具备的极致弹性、海量存储和高并发 HTAP 访问的产品特性。...写在最后 11 12 背后的数据库技术支持远不止于此。一个订单达成交易的背后,数据库层面有近 50 次请求的实现,远不是一款单一的数据库产品提供的支持。

31.6K50

揭秘:2018阿里11秒杀背后的技术

在今天 11 这个万众狂欢的节日,对于阿里员工来说,每个环节都将面临前所未有的考验,特别是技术环节,今天我们就一起来探讨下11天量交易额背后的技术。 一、阿里11秒杀场景 ?...二、阿里11背后的技术 ? 1. 云计算 利用云计算弹性能力,支撑交易峰值每秒32.5万笔、支付峰值每秒25.6万笔的混合云弹性架构。 2. 分布式消息引擎 在11当天实现万亿级消息流转。 3....Docker技术 交易核心应用容器化撑起11交易下单峰值,解放资源的超大规模Docker化技术。 4....总之,11将涉及:基础设施、存储、中间件、云计算、业务架构、大数据、认知计算与人工智能、交互技术技术领域。...由于篇幅有限无法完全详细展开,我就以其中一个大家最关心的11秒杀场景为例,贯穿这些部分技术的应用和设计思路。

4.6K30

阿里11技术总指挥汤兴:淘宝确实变了

鱼羊 发自 凹非寺 量子位 报道 | 公众号 QbitAI 总交易额达4982亿元。 订单创建峰值58.3万笔/秒。 这是今年阿里11创下的新纪录。...对于背后支撑的淘系技术体系来说,也是新的技术峰值。 在应对并发流量和系统稳定性上,目前行业内就只剩下淘系自己和自己赛跑。 无需多少个突发头条,每年11,就是新的大考。...对于了解流量并发和技术压力的工程师来说,难度是不言自明的。 究竟是怎样的技术挑战? 这样一道内外变化带来的难题,即使对于经历过1111的阿里而言,同样挑战不小。...还有线上试鞋、试口红、试美甲、染发等等全新AR体验…… 汤兴表示,阿里有个传统,所有新技术都需要经历11的考验。...因为只有经过11这样一个爆发点的验证,才能证明技术对于消费者的价值,证明其大规模应用的可能。

2.4K20

直播继续搅局11

天猫:王牌主播打头阵 作为11赛场的擂主,天猫的11筹备自然是最值得期待的,截至目前公布出的成绩,也能够看出其火热程度。10月20日晚8点,天猫11正式开启预售。...这是天猫11连续第2年降低满减门槛,消费者凑单将更容易。在监管大力整治垄断行为的背景下,各大平台都将刀刃对向自己,试图更加获得消费者的认可。 另一方面天猫也将绿色环保理念融入此次11。...今年11发布会上,天猫宣布将致力于打造一届“低碳11”,同时将全面升级已诞生15年的公益宝贝项目。如今阿里已经成为互联网行业最大的绿色电力交易主体。...今年京东11除了不熬夜外,优惠政策也迎来全面升级。...除此之外,京东的售后服务保障也进行全面升级,11活动期间,京东超市价保政策升级为30天,购买带有“30天价保”标识的自营商品,30天内出现降价可享受补差价服务。

13.6K30

“天猫11”背后的流量治理技术与标准实践

作者 | 赵奕豪 (宿何):Sentinel & OpenSergo 开源项目负责人 一年一度的天猫 11 正在火热进行中,大家在疯狂买买买的过程中一定会有疑问:如何保障微服务在双十一的超级峰值下也能如丝般顺滑稳定...这背后的技术原理是怎样的,有没有一些最佳实践与标准?这篇文章就为大家介绍如何结合 Sentinel 与 OpenSergo 玩转双十一背后的流量治理技术与标准。 1 OpenSergo 是什么?...Sentinel 在内部承载非常多的服务可用性与容错的场景,保障了近十年天猫 11 流量峰值的稳定。...如果您有时间,有热情,有意愿,欢迎联系社区加入开源贡献小组,一起共同完善 OpenSergo 和 Sentinel,一起主导微服务治理技术与标准演进。Now let's start hacking!

75320

今年11,至关重要

2008年初,淘宝商城(现天猫)正式上线,为了培养用户在淘宝商城的购买习惯,时任淘宝商城总经理的张勇(现任阿里巴巴集团董事局主席、首席执行官)决定“造节”,于是11应运而生。...我想答案显而易见,在这个充满不确定的经济环境里,每个生意人都希望在年终给自己的生意一份确定性,增强对新一年的信心;而买家们则需要一次真正实在的优惠和购买体验的提升,便宜只是一方面,只有供给齐全、基础设施完善的平台...不仅如此,对于零售电商行业来说,一年一度的11是练兵秀肌肉的最佳时机,不仅因为年终业绩冲刺,还因为11的规模是一年之最,考验着电商平台的商家组织能力、营销创新、技术承压能力和履约服务的保障等每个方面...对于经常参与11的知名品牌,能够在11强化品牌认知;对于新参与的品牌(每年11都有新参与的品牌,今年有7万个品牌是首次参加)和新品牌,能通过11大促建立品牌心智。...目前看来,不仅是11,在日常的经营中,作为中国最成熟、生态体系建设最完整、技术投入最大的电商平台,由于ROI(投产比)和销售效率更高、增长更为稳定和确定,淘宝天猫仍是商家们重点投入的平台。

2.4K60

京东商品详情页应对“11”大流量的技术实践

【编者按】此文是根据京东资深Java工程师张开涛11月21日在msup主办的 into100沙龙第14期《京东商品详情页应对大流量的一些实践》演讲中的分享内容整理而成。...最早期的时候,我们商品详情页采用.NET技术,但是随着商品数量增加,而且随着商品数据库结构设计复杂性的变化,后来我们就生成了静态页,通过JAVA生成页面的片段,像商品介绍等等,都是通过一个一个片段输送出去的...另外我们会做一些自动降级处理,像一些不是特别重要,我们自动根据超时时间降级,如第三方的配送时效,对于这个信息几秒钟或者几分钟没有给用户展示,并不会影响他的购买,对于这种数据我们会做一个,比如超过500毫秒或者...工作之余喜欢写技术博客,有《跟我学 Spring》、《跟我学Spring MVC》、《跟我学Shiro》、《跟我学Nginx+Lua开发》等系列教程,目前博客访问量有460万+。 ?

1.6K100

11在即,分享一些稳定性保障技术干货

每年一次的双十一大促临近,因此上周末公司组织了一次技术交流闭门会,邀请了电商、物流、文娱内容、生活服务等知名一线互联网公司的技术大牛,一起探讨了一些大促稳定性保障相关的技术话题。...我作为会议主持人,也和这些技术大牛交流了很多案例经验,从他们身上汲取了很多新的思路和技术实践。我将其中一些比较干货的技术实践案例整理了出来,供大家学习参考下。...+写操作不刷盘方式; 非交易业务的查询放在备库,降低主库压力; 梳理落地SOP机制,遇到问题时首先快速线上止血,解决故障; 存在主备延迟情况,可以开启参数调整方式来处理(临时开启,快启快关) ; 同城活架构下...,可通过定时任务的方式自动检测MySQL的0模式,定时改写数据; 高并发下MySQL主库往往写压力比较大,事务日志和binlog IO比较频繁,导致备库拉取binlog比较卡,较好的方式是通过降级延时方式做数据同步

2.7K20

腾讯11活动全解析

众所周知,腾讯云一直被大家称为良心云,而隔壁的套路云也已在举行11的活动,但套路太多,反观腾讯云要良心很多,也更直接,跟着我一起来看看吧。...[微信截图_20181030143257.png] 马上进入官方活动主会场 新用户一键领取2775元代金券 福利1:爆品秒杀 每日5场秒杀,分别于 9:00 / 11:00 / 14:00 / 16:00...福利2:云产品新购3折起 新购3折起,购买时长越长越优惠!...云服务器:安全可靠弹性可伸缩,多带宽可选,50G高性能云硬盘,CPU负载无限制,最高100%(不是套路云的突发性服务器) 短信:国内短信验证秒级触达;99%到达率,支持大容量、高并发处理;自购买之日起两年内有效...总结 腾讯云的活动总的来说比阿li云的活动要良心很多,不是一定要新用户才能购买,老用户同时可以参与,真是良心,不多说了,我也要去续费了,升级服务器了。

37K50

量子密钥分发技术介绍

一、量子基本信息 1、量子概念 量子(Quantum)属于一个微观的物理概念。如果一个物理量存在最小的不可分割的基本单位,那么称这个物理量是可量子化的,并把物理量的基本单位称为量子。...量子不可克隆 量子不可克隆原理,即一个未知的量子态不能被完全地克隆。在量子力学中,不存在这样一个物理过程:实现对一个未知量子态的精确复制,使得每个复制态与初始量子态完全相同。...量子不可区分 量子不可区分原理,即不可能同时精确测量两个非正交量子态。事实上,由于非正交量子态具有不可区分性,无论采用任何测量方法,测量结果的都会有错误。...除此之外,还包括以下基本特性: 量子态叠加性(superposition) 量子状态可以叠加,因此量子信息也是可以叠加的。...六、量子密码术的安全性 1、如果成功生成了密钥,那么密文即使被截获了也不会被破译; 2、没有传递密钥的信使; 3、不会被计算技术的进步破解; 4、如果在密钥生成过程中有人窃听,那么会被通信方发现,仍然不会泄密

3.8K41

助力 11 个性化会场高效交付:Deco 智能代码技术揭秘

Tech 导读 在这次11的个性化会场我们大规模使用Deco进行研发,带来了48%左右的效率提升,本文将为大家揭秘Deco提效之秘。...Deco 经过 618 大促的初步验证,随后不断升级打磨,在正在火热进行的 11 个性化会场研发中已经广泛投入使用,覆盖 90% 左右的大促楼层模块,为业务研发带来 48% 左右的效率提升。...图3 11部分个性化会场及模块 03如何实现一个设计稿生成代码方案 1、生成静态代码 设计稿智能生成代码的第一步是生成静态化的代码,而这一步的核心是如何根据设计稿生成一份「结构化的数据描述」信息,这份数据称为...「结构化的数据描述」; 将「结构化的数据描述」表达成代码; 本质上,Deco 智能代码是通过设计工具插件从视觉稿原始信息中提取 D2C Schema,然后结合规则系统、计算机视觉、智能布局、深度学习等技术对...路漫漫其修远兮,需要技术人上下而求索。

3.1K20

历经8年11流量洗礼,淘宝开放平台如何攻克技术难关?

淘宝开放平台(open.taobao.com)是阿里系统与外部系统通讯的最重要平台,每天承载百亿级的API调用,百亿级的消息推送,十亿级的数据同步,经历了8年11成倍流量增长的洗礼。...在11场景下,元数据获取QPS高达上千万,如何优化元数据获取的性能是API网关的关键点。...在11场景中,也会有一些特殊的流量控制场景,比如单个API提供的能力有限,例如只能提供20万QPS的能力而实际的调用需求可能会有40万QPS。...资源动态调配与隔离 在11场景下如何保证数据同步的高可用,资源调配是重点。...如何降低数据写入开销 在11场景下,数据同步的瓶颈一般不在淘宝内部服务,而在外部用户的DB性能上。数据同步是以消息的方式保证实时性。

2.4K10

量子通讯加密技术技术原理

当你把视线关注到量子的运动轨迹,其状态就会随之发生。 3 什么是量子纠缠 以粒子为例,一个粒子A可以处于某个物理量的叠加态,用一个量子比特来表示,同时另一个粒子B也可以处于叠加态。...当两个粒子发生纠缠,就会形成一个粒子的叠加态,即纠缠态。...传统的信息技术扎根于经典物理学,一个比特在特定时刻只有特定的状态,要么0,要么1,所有的计算都按照经典的物理学规律进行。 量子信息扎根于量子物理学,一个量子比特(qubit)就是0和1的叠加态。...但是当我们需要传输量子比特时,就无法再使用量子密钥了,而需要使用“量子隐形传态”。 9 量子秘钥技术能保证数据的绝对安全吗? 我认为答案当然是否定的。...也就是说量子秘钥技术只能保证数据传输过程的安全性,对其他方面的安全性仍无法保证! 参考文献 独家揭秘:量子通信如何做到“绝对安全”?

1.4K20

历经8年11流量洗礼,淘宝开放平台如何攻克技术难关?

作者|风胜 来源|阿里技术 淘宝开放平台(open.taobao.com)是阿里系统与外部系统通讯的最重要平台,每天承载百亿级的API调用,百亿级的消息推送,十亿级的数据同步,经历了8年11成倍流量增长的洗礼...在11场景下,元数据获取QPS高达上千万,如何优化元数据获取的性能是API网关的关键点。...在11场景中,也会有一些特殊的流量控制场景,比如单个API提供的能力有限,例如只能提供20万QPS的能力而实际的调用需求可能会有40万QPS。...资源动态调配与隔离 在11场景下如何保证数据同步的高可用,资源调配是重点。...如何降低数据写入开销 在11场景下,数据同步的瓶颈一般不在淘宝内部服务,而在外部用户的DB性能上。数据同步是以消息的方式保证实时性。

3.1K20

11的解药在B端

11的解药在哪里,抑或是电商行业的解药在哪里,或许,早在新零售的概念被提出的那一刻开始就已经有了答案。 这个答案,就是B端。...当供求两端的角色开始发生改变,我们同样看到的是一场有关11的嬗变开始出现,它让我们看到了11新生的希望。从这个角度来看,11的解药,同样在B端。 第四,一个大的市场正在B端打开。...无论是从B端市场的尚未被开垦,还是B端市场为我们展示出来的纵向上的巨大的想象力,我们都可以将B端市场作为一个解决11痛点和难题的正确方式和方法。 表面狂热的背景下,透露出来的是11的无限的焦虑。...纵然是有庞大的销量作为支撑,依然没有延缓人们对于11的质疑与审视。 寻找破解11困局的解药,成为每一个人都在思考的重要课题。...在那里,在B端市场上,或许,才有根治11顽疾的灵丹妙药。

1.7K30

欧洲量子技术路线图

趁着周末有空拜读下,结合自己所涉及的量子光学领域,谈一谈对这些量子技术的认识。 量子技术主要分为四类:量子通信、量子计算、量子模拟、量子精密测量, 如下图所示。...文献中分别介绍了这几类量子技术的最新进展、存在问题和未来努力的方向。 ? (图片来自文献1) 一. 量子通信 量子通信是已经实用化的量子技术。...目前基于卫星的量子通信已经实现,只是相关的技术指标有待进一步提高。实现长距离量子通信的另外一种方案是基于量子中继器,其技术难点是量子存储。目前还处于原理验证阶段。...虽然理论上人们提出利用量子存储的方法,但是量子存储技术目前也没有很成熟。是否存在其他更有效的方法产生纠缠态? 三....以上是结合了欧洲量子路线图,谈了谈自己对这些量子技术的一些认识。

1.3K10

11家跨国顶尖银行正在探索利用量子计算技术,值得关注!

本文列出 全球11家开展量子技术研究和应用的主要银行,无论这些项目是处于早期阶段还是全面的计划。这些银行来自美国、加拿大、英国以及日本。 1....意识到量子计算 (QC) 对于银行业的用例很重要,银行建立了一个量子工程团队,由 Marco Pistoia 负责量子技术。...该银行非常热衷于开发可用于人工智能、优化和密码学的量子算法,于 2020 年开始与名为 Chicago Quantum Exchange的量子技术中心合作,这是一个量子技术中心,并表示其研究团队“正在积极研究后量子密码学领域...早在 2019 年,富国银行的技术主管 Saul Van Beurden 通过与 IBM 和麻省理工学院签署协议,在量子计算和人工智能技术方面进行合作,开始了该银行的量子计算风险投资。...11. 高盛 高盛集团 (Goldman Sachs Group, Inc.)是量子技术的备受瞩目的采用者之一,是一家总部位于纽约市的美国跨国投资银行和金融服务公司。

2.3K20
领券