首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

首次揭秘双11双12背后的云数据库技术!| Q推荐

从 2009 年到 2021 年,从千万交易额到千亿交易额,双 11 已经开展了 12 年。如今,每年的双 11 以及一个月后的双 12,已经成为真正意义上的全民购物狂欢节。...《数据 Cool 谈》第三期,阿里巴巴大淘宝技术部双 12 队长朱成、阿里巴巴业务平台双 11 队长徐培德、阿里巴巴数据库双 11 队长陈锦赋与 InfoQ 主编王一鹏,一同揭秘了双 11 双 12 背后的数据库技术...在双 11 双 12,这种方式的弊端会被进一步放大。数据显示,在双 11 秒杀系统中,秒杀峰值交易数据每秒超过 50 万笔,是一个非常典型的电商秒杀场景。...事实上为了保证稳定,往年双 11 为了保证大促高峰能够平稳地过去,在一些计算量比较大或者稳定性风险比较高的地方就会实行降级策略,确保能够平稳度过流量高峰。...2021 年是阿里巴巴首个云上 100% 上云的双 11 的一年,也是阿里云数据库全面云原生化的一年,但是峰值计算成本相比 2020 年下降了 50%,云数据库巨大的商业价值和潜力可见一斑。

31.8K50

如何用人工智能预测双 11 的交易额?

本文将用一个简单的人工智能算法,即线性回归算法,预测阿里巴巴 2019 年双 11 的交易额。 1....处理数据 其次,我把历年双 11 的交易额数据,保存到文件「1111.xlsx」中,在林骥的公众号后台回复「1111」,可以获取该文件的链接。...进行预测 接下来,我们调用 sklearn 库中的线性回归算法,对历年双 11 的交易额数据进行拟合,并对 2019 年进行预测,预测结果是 2471 亿元。...小结 本文用一个简单的人工智能算法,预测 2019 年双 11 的交易额为 2471 亿元,并用图形展示了预测的结果。 到此,预测工作算是基本完成了,但数据分析工作还要继续。...等双 11 活动结束之后,我们还应该进行复盘,拿实际数据与预测的结果进行对比分析,计算预测的准确率,分析差异的原因,提出改进的方案,想方设法提高下一次预测的准确率。

2.5K00
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    助力双 11 个性化会场高效交付:Deco 智能代码技术揭秘

    Tech 导读 在这次双11的个性化会场我们大规模使用Deco进行研发,带来了48%左右的效率提升,本文将为大家揭秘Deco提效之秘。...Deco 经过 618 大促的初步验证,随后不断升级打磨,在正在火热进行的双 11 个性化会场研发中已经广泛投入使用,覆盖 90% 左右的大促楼层模块,为业务研发带来 48% 左右的效率提升。...图3 双11部分个性化会场及模块 03如何实现一个设计稿生成代码方案 1、生成静态代码 设计稿智能生成代码的第一步是生成静态化的代码,而这一步的核心是如何根据设计稿生成一份「结构化的数据描述」信息,这份数据称为...D2C Schema,然后结合规则系统、计算机视觉、智能布局、深度学习等技术对 D2C Schema 进行处理,转换为布局合理且语义化的 D2C Schema JSON 数据,最后再借助 DSL 解析器转换为多端代码...图10 空间布局算法 图11 投影布局算法 处理好布局结构生成之后需要进行样式计算,是对经过布局推导层得到的结果进行一系列的计算,例如,基于层级关系,可以通过坐标计算得出 Flexbox 主轴、侧轴;

    3.1K20

    腾讯云2024双11大促:数据库智能管家 DBbrain最佳实践

    引言 腾讯云2024双11大促已正式开始,在这场活动中,腾讯云为用户带来了超值福利,其中云服务器CVM成为企业和个人用户部署应用、存储数据、处理信息的首选方案,其高效、灵活、可扩展的特性极大地促进了业务的快速发展...推荐蜂驰型CVM云服务器,经济高效,兼顾性能性价比,非常适合长期稳定运行的个人及企业应用。...本文将详细介绍在腾讯云2024双11活动中,基于腾讯云CVM云服务器部署MySQL数据库,并搭配使用数据库智能管家产品的最佳实践,构建高效稳定的数据库运维体系。...同时腾讯云2024双11大促还有首单特惠、买赠专区等活动。...提高管理效率:自助式智能服务,有效的缩短了运维响应的时间。统一化的多维度批量管理,轻松管理海量实例。 增强数据库安全:数据加密等保合规性防护确保数据库安全运行。

    8321

    落地百余场景、扛过双11,蚂蚁TuGraph流式图计算引擎正式开源!

    2 “小众”的流图计算,如今的价值已被产业看见 事实上,流图计算是流式计算和图数据模型的交叉领域。虽然很多人对这个名词感到陌生,但对流式计算和图计算应该有所耳闻。...开源地址:https://github.com/TuGraph-family/tugraph-analytics 3 扛过双 11 大考,落地百余场景,TuGraph-Analytics 筹划已久...因此,一个场景在完整的计算链路中,需要流计算和图计算两种计算范式的融合计算。 当时的流图计算团队仅仅只有两名成员,探索了一年多的时间才将该技术在内部初步落地。...2018 年的双 11,流图计算做到了在大促极端流量高峰情况下,动态识别超过六度关系链(隐蔽性强)的异常资金风险,这一风控能力在当时的业界非常领先。...“那时,我们从 6、7 月份就开始和业务同学一起闭关筹备双 11,内部做了几轮流量压测,包括极端情况下的解决方案全部讨论完毕才确定推到双 11。”

    40340

    双11产出1.7亿张素材的“智能设计师”,是如何做到的?

    10月25日,DT君邀请了智能产品架构师/全栈工程师/跨界设计师、MIXLAB无界社区创始人池志炜做客数据侠实验室,他将为我们一一解答以上问题,本文为其演讲实录。...在开始前,大家来猜一猜,以下哪张图片是人工智能所创作?我将在文末为大家揭晓答案。 ? 关于“设计师与艺术家会不会被AI取代”这个问题我在业界采访了很多人。...结合Adobe最近公布的人工智能工具Sensei的案例来看,这个工具有一个图像质量评估的能力,它给出了评估图片质量的十个纬度,这其实就是一些所谓的艺术规则。...比如研发一个叫人工智能摄影师的产品。“摄影师”会自动跟拍用户,基于已经构建的知识图谱,对大量跟拍的摄影照片进行排序,自动为用户挑选出一个最佳的摄影作品。...有了这两类数据后,我们可以设计这样一款应用:用户上传自己的照片后,应用会自动计算和识别出肤色,并根据肤色自动搭配一个服装。除了服饰之外,配饰、妆容(例如口红色号)也可以实现个性化推荐。

    2.2K20

    马斯克推荐的11本必读书籍:宇宙、人类和人工智能

    我们翻看了马斯克过去的一些采访资料和社交媒体发文,总结出了11本这位亿万富翁认为每个人都应读的书。 下面是这11本书的简介。...他还发明了双光眼镜——一种装有两片不同度数镜片的眼镜。 马斯克在接受Foundation的采访时说:从《本杰明•富兰克林传》中,你可以明白富兰克林是怎么成为企业家的。...2076年,一群叛乱者(包括一台名叫Mike的超级电脑和一个只有一只手臂的计算机技术员)带领月亮殖民地发起了一场反抗以地球为基地的统治者的革命。...:Max Tegmark 我们能从马斯克推荐的这11本书中总结出一个结论,他非常热衷于探讨人工智能的未来。...马斯克推荐的这本书探讨了AI造福人类的可能性,没有触及AI的邪恶面。 新智元发表过的两篇书评: 【马斯克荐书】生命3.0:生活在AI时代的我们该如何做人 杨静:智能进化的终极目标——从生命3.0谈起

    2.4K80

    搜索,大促场景下智能化演进之路

    作为淘宝平台的基石,搜索也一直在打造适合电商平台的人工智能体系,而每年双11大促都是验证智能化进程的试金石。...,并将计算结果实时更新同步给主搜、商城、店铺内引擎、天猫推荐平台、流量直播间等下游业务。...第一次在双11大促场景下实现了大规模的实时计算影响双11当天的流量分配。 2014年双11当天,Pora系统首次经受了双11巨大流量的洗礼,系统运行可以说是一波三折。...其结果是显著的,在双11当天我们观察到,通过实时策略寻优,一天中不同时间段的最优策略是不同的,这相比于离线学习一套固定的排序权重是一个很大的进步。 2015年双11双链路实时计算体系如图3-17所示。...图3 2015年双11的实时计算体系 3. 2016年双11,深度学习+强化学习独领风骚 2015年双11,在线学习被证明效果显著,然而回顾当天观察到的实时效果,也暴露出一些问题。

    6.5K40

    大会 | 智能感知与计算研究中心11篇论文被CVPR接收

    AI 科技评论按:本文作者郭瑞娥,首发于中科院自动化所「智能感知与计算研究中心」微信公众号,AI 科技评论获授权转载。...CVPR 是计算机视觉、模式识别和人工智能领域国际顶级会议,2018 年 6 月 18-22 日将在美国盐湖城召开,届时 AI 科技评论也会在现场带来一线报道。...智能感知与计算研究中心为中科院自动化所独立建制的科研部门,致力于研究泛在智能感知理论与技术以及与之相伴的海量感知数据的智能分析与处理。...智能感知与计算研究中心在今年的 CVPR 2018 上共有 11 篇论文被接收,再次创下历史新高。...在训练过程中,该智能体根据图像质量的评分计算奖励,并使用 A3C 算法进行训练,最终学到较好的候选区域调整策略。

    1.1K60

    CCF 大数据与计算智能大赛:挑战 11 题,成为顶尖数据科学家

    【新智元导读】2016 CCF大数据与计算智能大赛9月24日启幕,发布了 11 道高质量创新赛题,涉及智能电网、搜索广告、O2O营销、舆情分析、监控识别、计算广告、无人驾驶、市场预测、LBS营销、气候预测等多个热门方向...,将为图像处理、自然语言处理、用户画像、推荐系统等领域提供大量来自真实场景的问题与数据。...2016年第四届大赛以“大数据与计算智能”为主题,以“数据驱动,智见未来”为口号,成功吸引了数百位权威专家与行业大咖莅临现场,预计将有数千支专业队伍参与。...本次大赛的11道高质量大数据与人工智能创新赛题,涉及智能电网、搜索广告、O2O营销、舆情分析、监控识别、计算广告、无人驾驶、市场预测、LBS营销、气候预测等多个热门方向,将为图像处理、自然语言处理、用户画像...、推荐系统等领域提供大量来自真实场景的问题与数据,促进相关领域的技术创新。

    1.1K30

    聊聊淘宝天猫个性化推荐技术演进史

    Olive流程图 正是在All-in无线后的这一年,个性化推荐开始在阿里逐步成长起来。 个性化推荐初逢双11 2015年,个性化推荐第一次在双11中大放异彩。...个性化推荐算法在双11大放光芒,一个又一个令人瞠目的数字足以为证。个性化推荐的第一战场“双11主会场”更是自双11开展多年以来首次达到了个位数的跳失率,其引导人数和人均引导页面数都是前一年的2~3倍。...正是在2015年双11之后,个性化推荐的故事开始为人们津津乐道。 个性化推荐再战双11 2015年双11之后,个性化推荐团队乘风起航,继续发力。...个性化推荐团队的代表作“海神”以及“鲁班”(下图为鲁班批量生产的创意Banner)都是首次在双11中亮相。 ?...鲁班批量生产的创意Banner 在2016年双11中,面对更为复杂的个性化需求,乐田及工程师们将全面升级后的个性化推荐完美地展现在双11主会场中。

    3.4K10

    大赛丨2016 CCF 大数据与计算智能大赛完美落幕,11 支技术团队脱颖而出

    2016 年 12 月 25 日,由 CCF 中国计算机学会主办、DataFountain 大数据平台等单位承办的“2016 CCF 大数据与计算智能大赛”(BDCI)正式落幕。...“CCF大数据与计算智能大赛”已成功举办三届,本届大赛引入 11 道来自创新企业与科研机构的大数据与人工智能领域高质量算法挑战赛赛题。多位大数据与计算智能领域顶尖人才,用作品赢得了行业专家的认可。...、科研机构要员出席了“2016CCF大数据与计算智能大赛”的开幕式和颁奖典礼。...中科院院士梅宏 致辞 最终,11 支技术团队从进入决赛的 55 支队伍中脱颖而出,其中: 中科院信息工程研究所 S-LAB 团队的参赛作品“监控场景下的行人精细化识别”荣获 CCF 综合特等奖和企业单项奖一等奖...随着“CCF大数据与计算智能大赛”(BDCI)影响力的不断提升,或将成长为国际领域的行业盛会,并反哺加速全球大数据及计算智能的发展与创新。

    90860

    双11请来一堆科技巨头步道“智能制造”,天猫已在为十年后的电商布局

    这看上去是一个有些“学术范”的活动,与天猫双11似乎并无直接关系。实则不然,从这个活动能够看到,科技产品将一如既往地成为天猫双11的重点,更重要的是,智能化制造正在成为现实。 ?...阿里巴巴在智能制造中能做什么? 在马云提醒行业“新制造”趋势的时候,阿里巴巴两年前就已经在布局了,而今年双11则成为C2B模式的练兵场。...明年双11的某些品类,或许我们就完全可以实现“先定后产”,这样也将彻底改变商家在双11清库存的做法,因为未来的商家根本不会有库存,一切生产都会面向具体的订单。...而在这一点上,阿里巴巴的YunOS和阿里云就成为必要的支撑,阿里云负责计算和数据存储,YunOS则是智能制造设备的系统,甚至YunOS还可以直接进入产品本身,帮助产品在服务层面实现个性化。...阿里巴巴的行动实际上已经给出了答案:智能化制造、个性化定制、立体式体验和零库存物流,就是十年后的电商,阿里巴巴已为此布局多时,今年双11只是冰山一角。

    10.8K60

    双一流大学计算机分流,计科和人工智能在课程和就业上有哪些不同

    首先,对于在双一流大学就读的同学来说,选择人工智能方向或者是计科方向都可以,只要做好学习规划,都会有一个较好的学习体验。...人工智能方向的课程分为三大块,其一是基础学科部分,其二是计算机专业课,其三是人工智能课程。...除了基础学科和计算机知识之外,人工智能方向还涉及到人工智能基础、计算机视觉和模式识别、自然语言处理、机器学习、知识表示和自动推理、机器人学等几大部分,不同学校会结合自身的实际情况(课题等)而有所侧重。...计科是比较传统的专业,学科体系比较成熟,课程设置涉及到操作系统、编程语言、数据结构、计算机网络、计算机组成原理、数据库、编译原理等。...人工智能方向的同学在就业时会集中在人工智能领域,包括算法岗和开发岗,由于人工智能专业是比较新的专业,第一批本科生还没有大面积就业,所以具体数据还并不清楚。

    80530

    专访 | 阿里搜索事业部研究员徐盈辉:剖析阿里背后的强化学习技术

    在双 11 推荐场景中,阿里巴巴使用了深度强化学习与自适应在线学习,通过持续机器学习和模型优化建立决策引擎,对海量用户行为以及百亿级商品特征进行实时分析,帮助每一个用户迅速发现宝贝,提高人和商品的配对效率...搜索的智能化元素注入到新一代电商搜索引擎的各个环节,通过批量日志下的 offline 建模,到 nearline 下增量数据的 retraining 和 fine tuning 的无缝融合,解决了 NP...2014 年双 11 通过排序特征实时,引入商品实时转化率,实时售罄率模型进入搜索 match 和 rank,让售罄商品额无效曝光大幅减少,并实现了成交转化的大幅提升;2015 年双 11 推出双链路实时计算体系...,和基于强化学习的排序策略决策模型,从而使得淘宝搜索的智能化进化至新的高度,并在今年的双 11,分桶测试效果表明,成交金额取得了近 20% 的大幅提升。...这个端到端的大规模在线深度强化学习任务在 2016 年双 11 上,共处理日志量近 200 亿,处理消息量超三千亿,流式计算平台处理峰值超千万 QPS(笔者注:每秒查询率),实现 24 小时不间断无延迟运转

    2.5K110

    智能存储 :一站式AI内容识别加速内容生产

    商品抠图可结合数据万象批量海报生成使用,大幅缩减创作时间,快速产出各类型商品海报。 适用场景:电商平台 双11大促等活动时,电商平台往往需要在短时间内制作大量的活动海报进行引流。...海报展示(可前往COS控制台智能工具箱体验批量海报制作) 同时,透明背景图片可以更好地融入移动端深色模式,减少平台人工适配的成本。...适用场景1:停车收费平台 可智能识别出入场车辆的车牌,实现智能计算停车时间,并在缴费成功后自动放行车辆。...可应用于视频智能分析、视频审核、视频搜索、视频个性化推荐等场景,助力视频智能生产。 适用场景1:短视频分类 在短视频平台、电商、社交应用等场景下,我们都可以看到精准匹配用户需求的标签推送。...适用场景2:热点推荐 适用于视频平台、电商平台中识别热点明星、商品、情景出现时间,标记后进行推荐。 如果您想了解上述AI能力的接入指引等更多信息,请点击[阅读原文],查阅官网文档。

    5.5K30

    Intel为什么强调NVIDIA Tensor Core GPU非常适合推理

    Tensor Core 以高速率进行多精度计算,为各种人工智能模型提供最优精度,并在流行的人工智能框架中提供自动支持。...;NVIDIA驱动418.67;基于自动混合精度和XLA编译器的TensorFlow批量大小4和序列长度128用于所有测试平台。...Tensor Core gpu在推荐系统中的应用 人工智能的另一个关键用途是推荐系统,该系统用于在视频分享网站、社交网站上的新闻源和电子商务网站上提供相关内容推荐。...神经协同过滤(NCF)是一种推荐系统,它利用用户与项目之间先前的交互来提供推荐。...NVIDIA的数据中心GPU计算平台在人工智能培训方面的性能遥遥领先于业界,这一点可以通过标准的人工智能基准MLPerf得到证明。

    3K20

    学界 | 深度神经网络的分布式训练概述:常用方法和技巧全面总结

    论文地址:https://arxiv.org/abs/1810.11787 深度学习已经为人工智能领域带来了巨大的发展进步。但是,必须说明训练深度学习模型需要显著大量的计算。...实验发现,增加批量大小就相当于降低学习率 [11],而使用大批量进行训练还有一个额外的好处,即在训练中所要更新的总参数更少。...图 4:衰减学习率与增大批量大小 [11] 10 张量融合 对于 ResNet 等某些常见的模型,研究者已经观察到为梯度计算的张量的大小是相当小的。...我们推荐组合式地使用深度梯度压缩和混合精度训练。 应该使用非常大的批量大小来进行训练,以最大化并行能力和最小化运行时间。...我们推荐使用 LARS 算法,因为已有研究证明它能够以高达 64000 的批量大小足够稳健地训练网络。

    1.7K20

    Flink流批一体在阿里双11首次落地的背后

    随着 11 月 11 日 12 点钟声的敲响,2020 年双 11 的 GMV 数字定格在了 4982 亿,在 Flink 实时计算技术的驱动下全程保持了丝般顺滑滚动,基于 Flink 的阿里巴巴实时计算平台也圆满完成了今年双...今年双11,Flink 更进一步,利用流批一体计算能力,助力数据中台实现更加精准的实时离线交叉数据分析和业务决策。...鉴于 Flink 流批一体计算技术的不断成熟,以及前期在搜索推荐场景的成功落地,今年双 11 数据平台开发团队也展示出坚定的信心和信任,与 Flink 实时计算团队并肩作战,共同推动实时计算平台技术升级...经过团队一年的努力,基于 Flink 的搜索推荐实时计算平台成功的支持了2016 年的搜索双 11,保证了搜索推荐全链路实时化。...2020 年的双 11,Flink 流批一体技术在天猫营销决策核心系统中给出了精彩的表现,加上之前已经在搜索推荐中成功运行的流批一体索引构建以及机器学习流程,充分验证了5 年前我们大胆选择 Flink

    2.3K20
    领券