首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

揭秘:2018阿里11秒杀背后的技术

在今天 11 这个万众狂欢的节日,对于阿里员工来说,每个环节都将面临前所未有的考验,特别是技术环节,今天我们就一起来探讨下11天量交易额背后的技术。 一、阿里11秒杀场景 ?...物流技术 菜鸟通过包裹预测、供应链入库、订单下沉、订单路由调度、电子面单及智能分单,以及末端小件员,涉及十亿级包裹的11之战。...总之,11将涉及:基础设施、存储、中间件、云计算、业务架构、大数据、认知计算与人工智能、交互技术等技术领域。...前端设计优化 页面静态化:将活动页面上的所有可以静态的元素全部静态化,并尽量减少动态元素,通过CDN来抗峰值。 禁止重复提交:用户提交之后按钮置灰,禁止重复提交,防止一秒钟内多次写入数据库。...利用缓存应对读请求:比如11秒杀抢购,是典型的读多写少业务,大部分请求是查询请求,所以可以利用缓存分担数据库压力。

4.6K30

解密:依图如何一年实现语音识别指标超巨头玩家

依图科学家吴双博士表示,该批测试完成于 2018 年 11 月底,数据覆盖了近 60 万字、50 小时的语料,近场/远场跨度在 20cm-10m,涵盖智能音箱、手机等多种设备,科技、医疗等超过 20 类话题领域...上述展示的测试结果都是基于同一款设备? 吴:上述测试涉及到了多种硬件设备,比如智能音箱、手机以及其他硬件设备。我们希望能够覆盖更多硬件设备。硬件方案的确会影响语音识别效果。...对于其原因,吴认为,强化学习、对抗学习等技巧层面的策略大家都会跟进,做算法优化并没有捷径。在方法论和做事态度层面有依图在视觉领域的经验作为基础。...左为依图科技首席创新官吕昊,右为华为智能计算渠道合作部部长康鑫 活动现场,依图方面还宣布了将联合微软推出语音开放平台,依图的语音识别方案将在微软云 Azure 上线。...活动现场,华为智能计算渠道合作部部长康鑫谈到,在华为的 160 个 ISV 中,依图已经成为华为最顶级的 ISV 合作伙伴。从目前合作模式来看,依图语音技术的落地方式主要面向 B 端客户。

4.3K30
您找到你想要的搜索结果了吗?
是的
没有找到

《阿里测试之道》第二章笔记

2.1 大促全链路的风险和挑战 2.1.1 全球最大洪峰下的高可用挑战 2019年11零点交易峰值是2009年的1360倍 2018年收货地址不可修改 2.1.2纷繁复杂的用户场景 2.1.3 无处不在的用户体验...地址敏感信息在线上不存在 商品ID、用户ID核心数据偏移到其他数据空间 真实 海量 准备成本低 3影子数据的使用 充足的“炸弹” 2.3.2 全链路大促销用例精简(RBC) 3000万->40万 1“11...3 本地缓存预热 4 本地缓存预热——GCIH预热 5 大促预热活动编排调度 6 其他应用 2.7 快速缩/扩容 2018年11用户无法修改收货地址是由于容量不够,扩容超过半小时 2.7.1 分析...2.7.2 方案 水平伸缩:增加/减少实例数 垂直伸缩:调整CPU、Memory等 2.7.3 优化 1 垂直伸缩优化:cgroup 2 水平伸缩优化:扩容步骤简化、新技术架构演进、串行到并行 3 扩容步骤简化...国内外比较出名的产品Tencent Serverless、AWS Lambda、Microsoft Azure Functions 等。

2.7K40

当我们谈论秒杀时我们要做什么?

技术保障 业务全链路压测 全链路压测是阿里2013年在11压力之下被逼出来的技能,由于线上线下环境多少都会有些不同,很多问题只有在实际生产环境才能暴露,对于秒杀类业务,线上压测也能够实际评估出系统的真实承载力...比如阿里张瑞说的: “在零点前有一个倒计时环节,连线杭州光明顶作战指挥室,逍遥子会为大家揭幕201511启动,然后直接切换到我们的媒体大屏,所以对GMV数字的要求基本上是零延迟,这个挑战多大不言而喻...实时热点的发现,需要业务层监控、数据库层监控一起配合改进优化,才能准确分析出热点。...我们可以做些什么 阿里11的目的在于:去库存、提升影响力和拉新,而对研发和基础架构来说则是保持技术领先的年度演习。...因此需要在一下基础技术上进行积累: MySQL数据库内核优化,适配秒杀业务 构建公司系统化的全链路压测解决方案 与秒杀类需求的业务共建,从中间件、缓存、数据库、业务逻辑等方面构建全套解决方案 提升容器弹性伸缩效率

6.7K30

谁顶住11的世界级流量洪峰?神龙架构负责人等9位大牛现场拆解阿里秘籍

旭卿、观涛、鸣嵩、日照、褚霸、孤星、龙现、行易、镭铭,11月18日,在阿里举办的“11 背后的技术力量”沙龙活动,这9位阿里技术大牛展示了路数,全面解读双十一背后的武功秘籍。...自研数据库POLARDB和OceanBase分别处理8700万、6100万笔/秒峰值请求、实时计算处理峰值每秒25.5亿笔、计算平台单日处理970PB数据、12亿笔物流智能化等……2019年11期间,...阿里云智能计算平台事业部研究员关涛(观涛)表示,双十一的挑战从商务角度看是商品和消费者最优化匹配的问题,往下则是大数据和AI能力的挑战, 从数据来看,今年11数据量达到970 PB,这大概是一个什么量级...阿里云智能数据库事业部资深技术专家曹伟(鸣嵩)介绍了阿里巴巴数据库发展的历史,经过三个阶段:第一个阶段是使用IOE,使用Oracle;到了2015、2016年开始自主研发POLARDB,再到今年100%...从当初集团决定11上云使用神龙,到最后上线只有两个月时间,供货、备货、测试都非常紧张,但是供应链的同事通过优化库存、优化流程,然后去帮助供应链厂商优化资源共享,极大的提高了供应链的交付情况,取得了较为满意的结果

10.6K10

精选腾讯技术干货200+篇,云加社区全年沙龙PPT免费下载!

腾讯游戏营销活动在腾讯云K8S上的实践; 腾讯自研业务上云:优化Kubernetes集群负载的技术方案探讨; 重磅!腾讯云首次披露自研业务上云历程; 迁移1500TB视频!...2024年视频在移动端流量占比将达74%或更高,将极大促进多媒体技术发展; 5G风起,CDN边缘计算将乘风破浪; 5G风起,未来数据库哪些关键词?...秒开率达90%:腾讯看点客户端 GIF 转视频优化方案; 前端工程化实践总结 | QQ音乐商业化Web团队; 前端解答>>你真的了解回流和重绘?...了解数据库分片(Database Sharding); 磊哥测评之数据库SaaS篇:腾讯云控制台、DMC和小程序; 你的数据库,真的安全?...腾讯云数据库获全球“实力竞争者”; 自研数据库CynosDB可计算智能存储揭秘! yarn 在快手的应用实践与技术演进之路; 腾讯数据库专家雷海林分享智能运维架构。

14.5K164

高频面试题:秒杀场景设计

秒杀这个话题到现在来说已经是一个老生常谈的话题了,不过因为又临近一年一度的11,而且发现前段时间无论是阿里还是腾讯一些大厂其实还是在频繁的问到这个场景题,所以还是准备拿出来说说。...大秒指的是比如11这种特定的节日,商品规模超大、价格超低、流量超大的这种类型活动,小秒一般指的是商家自己配置的一些时段类型的活动,由商家自己指定时间上架。从形式来说还可以分为单时段秒杀和多时段秒杀。...系统架构 假设今年的11预估峰值QPS将会有50万(我随便扯的),而根据我们平时的经验单机8C8G的机器可以达到1000左右的QPS,那么从理论上来说我们只要500台机器就可以抗住了,就有钱任性不行...比如11零点开始还做了答题限制,那么正常人怎么也需要1秒的时间来答题吧,就算单身30年手速我想也不能超过0.5秒了,那么针对刚好0点或者在0.5秒以内的请求就可以完全拦截掉。...限流,假设秒杀10000件商品,我们10台服务器,单机的QPS在1000,那么理论上1秒就可以抢完,针对微服务就可以做限流配置,避免后续无效的流量打到数据库造成不必要的压力。

1.3K10

阿里技术分享:深度揭秘阿里数据库技术方案的10年变迁史

存储计算分离后,数据库可以在11使用离线的计算资源,从而实现极致的弹性能力。通过使用云资源和混部技术,可以最大程度降低11交易峰值带来的成本。 11备战中另外一个重要的技术趋势就是:智能化。...2017年,我们第一次使用智能化的技术对SQL进行自动优化,2018年,我们计划全网推广SQL自动优化和空间自动优化,希望可以使用这些技术降低DBA的工作负担,提升开发人员效率,并有效提升稳定性。...我们下决心要在第二年的11解决这些问题。 5、2013年:库存热点优化和不起眼的影子表 2012年的11结束后,我们就开始着手解决库存数据库的性能提升。...我们相信数据库的未来是Self-drvingdatabase,它有四个特性:自诊断、自优化、自决策和自恢复。如前文所述,目前我们在智能化方向上已经取得了一些进展。...8、2016-2017:数据库和缓存那点儿事 在11的历史上,阿里巴巴自研缓存-Tair是非常重要的技术产品,数据库正是因为了Tair的帮助,才扛起了11如此巨大的数据访问量。

4.2K50

首次揭秘1112背后的云数据库技术!| Q推荐

是什么样的数据库撑起了 2021 年的 11 12 的稳定进行?...《数据 Cool 谈》第三期,阿里巴巴大淘宝技术部 12 队长朱成、阿里巴巴业务平台 11 队长徐培德、阿里巴巴数据库 11 队长陈锦赋与 InfoQ 主编王一鹏,一同揭秘了 11 12 背后的数据库技术...体现在业务层面,消费者如今参加秒杀活动,无论是否是节的大促高峰期,瞬时就可以得到抢购结果的反馈,不需要等待。在数据库层面实现抢购公平,意味着秒杀活动已经是真正意义上的“拼手速”的事情。...在 2021 年 11 12 中,一种无所不在的技术力保证了整体系统的稳定,如 PolarDB 具备的极致弹性、海量存储和高并发 HTAP 访问的产品特性。... 11 12 丰富的运营活动和千亿交易额背后,数据库层面是包括 RDS、PolarDB、Tair、ADB(ADB3.0) 以及 Lindorm 等数据库产品提供的组合技。

31.6K50

百度,美团,鼎信,涂鸦面经

7.mysql数据库优化方式,工作原理 8.二叉树之字形打印 9.给定一个整型数组和一个数sum,在数组中找到两个数之和等于sum的所有数据对 10.求一个整型数组的最大连续和 11.海量数据求中位数...12.hash,hash冲突,rehash的增长方式,一致性哈希 13.快排哪些优化(三数取中,重复放中,STL中的排序手段);数组TOPK,时间复杂度 14.epoll底层实现,项目中时间设置为多大...给定一个整型数组和一个数sum,在数组中找到两个数之和等于sum的所有数据对,如果给定的数组是排序的什么优化方法 3....手里哪些offer?别人怎么评价你的?平常喜欢一个人还是积极参加集体活动,因为拿到了某个公司的意向书,面试官作为过来人也给了一些自己的看法和建议,同时介绍了一下他们部门的大体情况。...由于本人水平有限,拿到百度已经很知足啦,美团之后就基本结束秋招了 最后总结一下学习路线: 背景交代:本人属于985守门学校,非CS,完全自学,大四找工作机试连VS工程都不会创建,研究生期间研究方向主要是嵌入式和

1.2K130

3个DBA和1个不可能完成的任务

智能托管平台,是基于OMG的业务不断发展,不断思考运维效率提升方式后的产物,该平台解决了业务问题定位成本高,微信沟通问题无法深入,告警无跟进的问题。...4)智能的性能优化 性能优化是DBbrain在自治闭环建设的关键一环,可划分为SQL优化和性能调参。 SQL优化能自动的给出SQL索引和改写建议,并分析出优化效果。...2、剑合璧,数据库安全防护加持 数据库的安全是一个永恒的话题。而数据安全如同一个木桶,整个防护体系是否坚固完全取决于短板。...江湖召集令 9月27日-11月6日,腾讯云数据库王者挑战赛(点击查看详情) 等你挑战!花几分钟参加比赛免费将☟☟抱回家!...MacBook/iPhone 11/AirPods 25台Kindle 8万元腾讯云创业基金 MySQL之父 Michael Widenius 面对面交流 转发下方海报参与活动可以获得腾讯公仔和腾讯云数据库无门槛代金券

2.5K30

书单 | 这几本书被输出到德国啦!

李飞飞博士、周烜教授领衔撰写 阿里云数据库领域数十年的研发实践经验结晶 本书详细剖析了作为核心基础软件系统的数据库在云计算时代的技术演进历程,从架构设计、实现机制和系统优化等多个角度阐述传统数据库技术是如何一步步发展到云原生形态的...本书强调理论和实践的充分结合,分析MySQL、PostgreSQL等工业界“活”的系统实现数据库的SQL优化与执行、事务处理、缓存与索引等原理,在面对实际应用需求时做了哪些权衡与折中,面对复杂的应用场景如何优化...第2~6章重点讲述环境感知以及规划控制方面的算法设计;第7~10章重点讲述深度学习模型的优化和深度学习芯片的设计;第11章和第12章重点讲述具有安全功能的自动驾驶软件架构设计;第13章介绍5G车联网。...活动方式:关注下方“博文视点Broadview”公众号,在后台回复“书单抽奖”参与活动,届时会在参与的小伙伴中抽取3名幸运鹅! 活动时间:截至12月26日开奖。...中台架构之数据平台建设方法详解 狼书三卷终大成,狼叔亲传Node神功

1.6K40

智能科技领衔双十一,智能金融时代的创新点在哪?

文|孟永辉 智能科技时代的来临,让我们的生活开始更多地与智能科技产生了联系。今年天猫11上亮相的各种智能科技更是让我们确信,未来智能科技将会与新零售更多地联系在一起。...根据报道显示,机器运营小二、机器导购员、店小蜜等一系列的智能科技设备将会出现在今年的11战场。 在11战场这个如此庞大的系统,加入了智能科技应用之后或许才会称得上真正意义上的大战。...他们的购物、消费、旅行等诸多方面的环节都能够通过参与金融活动的方式来实现,从而让金融的属性变得更加多样化。 智能科技优化原有的金融运作逻辑,并找到了破解痛点和问题的方法。...,而是变成了一个如同天猫11当中能够落地的东西。...11期间出现的智能科技在新零售上的应用仅仅只是一个开始,随着智能科技在这些行业应用的逐步成熟,金融行业同样将会与其发生作用,一个以智能科技为主导的金融行业发展新时代将会最终来临。

93270

11腾讯云大使推广赚钱攻略💰

2、在控制台复制的推广链接也能参与开团活动?不能,推广大使需在双十一开团活动点击【立即参与】获取专属链接(同时含cps_key和_hash_key),才可按照返佣和开团规则分别计算佣金和开团奖励。...1)老用户四款白名单返佣产品:老用户产品首购/复购/续费仅限GPU云服务器、CBS云硬盘、网站建设、对象存储COS,按10%返佣,其他产品均不参与。...点击查看返佣产品明细2)推广个人新老用户均可参与开团活动奖励:开团活动规则详见11主会场4、如何查看自己的活动邀请进度?...非新会员和1星会员的推广者不能抽奖?...开团活动规则详见11主会场图片参与方式:11主会场->开发者·开团有礼->点击立即参与->复制专属链接图片注意:这里复制的专属链接同时含cps_key和_hash_key,即可同时参与返佣和开团活动

50.7K340

搜索,大促场景下智能化演进之路

作者:仁基,元涵,仁重 本文选自:《尽在11:阿里巴巴技术演进与超越》 近十年,人工智能在越来越多的领域走进和改变着我们的生活,而在互联网领域,人工智能则得到了更普遍和广泛的应用。...作为淘宝平台的基石,搜索也一直在打造适合电商平台的人工智能体系,而每年11大促都是验证智能化进程的试金石。...伴随着一年又一年11的考验,搜索智能化体系逐渐打造成型,已经成为平台稳定健康发展的核动力。...2015年11,我们首次尝试了运用MAB和zero-order优化技术实现多个排序因子的最优融合策略,取代以前依靠离线Learning to rank学到的排序融合参数。...针对2015年遗留的两个问题,我们在2016年11中也进行了优化和改进。

6.5K40

鹅厂资深DBA是怎么做数据梳理的?

环境数据库梳理 2、QA环境数据库梳理 3、仿真环境数据库梳理 4、线上环境数据库梳理 通过这个数据库实例的梳理,你能够从宏观上了解线上数据库的部署情况,根据后面的梳理结果,可以评估数据使用是否合理以及哪些地方需要做改造和优化...举个简单的例子,比如业务有数据强一致性的需求,而线上同步方式是异步,以及innodb_flush_log_at_trx_commit和sync_binlog参数并不是1,那么这里就存在风险,需要做相应的改造...1、资源使用合理? 一般根据存储容量、QPS、TPS以及CPU的使用情况就可以很清楚的确认实例的运行状态,是过于空闲、负载适中还是高负载?然后根据具体的情况对数据库做实例缩容或者扩容。...2、数据库参数设置合理? 3、实例负载是否在正常范围? 4、实例的权限是否设置合理? 权限这部分比较好评估,是否存在业务权限过大的情况?root的权限是否有限定访问IP?...10、数据库的变更流程是否合理? 11、实例监控是否合理? 12、实例的备份策略是否合理? 上面列出了我自己常用的一些主要的维度,大家可以根据自身的情况酌情添加或者删除。

1.3K22
领券