首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

历经8年11流量洗礼,淘宝开放平台如何攻克技术难关?

淘宝开放平台(open.taobao.com)是阿里系统与外部系统通讯的最重要平台,每天承载百亿级的API调用,百亿级的消息推送,十亿级的数据同步,经历了8年11成倍流量增长的洗礼。...本文将为您揭开淘宝开放平台的高性能API网关、高可靠消息服务、零漏单数据同步的技术内幕。...特别是在11场景中,API调用基数大、调用者众多以及各个API的服务能力不一致,为了保证各个API能够稳定提供服务,不会被暴涨的请求流量击垮,那么多维度流量控制是API网关的一个重要环节。...基于这样的场景,开放平台推出了消息服务技术,提供一个实时的、可靠的、异步双向数据交换通道,大大提高API调用效率。目前,整个系统日均处理百亿级消息,可支撑百万级瞬时流量,如丝般顺滑。...如何降低数据写入开销 在11场景下,数据同步的瓶颈一般不在淘宝内部服务,而在外部用户的DB性能上。数据同步是以消息的方式保证实时性。

2.4K10

历经8年11流量洗礼,淘宝开放平台如何攻克技术难关?

作者|风胜 来源|阿里技术 淘宝开放平台(open.taobao.com)是阿里系统与外部系统通讯的最重要平台,每天承载百亿级的API调用,百亿级的消息推送,十亿级的数据同步,经历了8年11成倍流量增长的洗礼...本文将为您揭开淘宝开放平台的高性能API网关、高可靠消息服务、零漏单数据同步的技术内幕。...特别是在11场景中,API调用基数大、调用者众多以及各个API的服务能力不一致,为了保证各个API能够稳定提供服务,不会被暴涨的请求流量击垮,那么多维度流量控制是API网关的一个重要环节。...基于这样的场景,开放平台推出了消息服务技术,提供一个实时的、可靠的、异步双向数据交换通道,大大提高API调用效率。目前,整个系统日均处理百亿级消息,可支撑百万级瞬时流量,如丝般顺滑。...如何降低数据写入开销 在11场景下,数据同步的瓶颈一般不在淘宝内部服务,而在外部用户的DB性能上。数据同步是以消息的方式保证实时性。

3.1K20
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    将天猫11的技术用到化工电商平台,马云的这步棋有何考量?

    互联网公司都采取互联网IT架构,但平台级互联网公司的IT架构更具竞争力,因为平台意味着业务的开放性、复杂性和多元性。...尤其值得一提的是,阿里巴巴的IT架构经受了11多年来的洗礼,“扛得住11”成为其金字招牌。...2016年,天猫11成交额已经达到1207亿,2017年还将继续增加,阿里云与天猫11已是彼此成就的正循环关系:阿里云支撑了天猫应对每年都在增值的11成交规模和复杂业务场景,同时又通过这种极端场景来对自身能力进行压力测试...最初阿里巴巴将IT计算能力开放出来成为了阿里云的初心,现在阿里巴巴将从淘宝天猫等核心业务进化而来的互联网架构开放给行业,成为众多政企客户快速互联网+、实现智能转型的重要工具。...未来我想阿里巴巴会把所有技术都进行开放,今年它在大力推进人工智能技术通过ET大脑在各行各业的落地,还启动NASA计划旨在为20年后服务20亿人的新经济提供核心技术支撑,这些做法都是一种技术开放的探索。

    6.6K70

    中国物流业:从26万到10亿

    11期间订单如潮水般涌来,让整个快递行业都享受到了11红利。邮政局公布的数据显示,2018年“11”全行业快递业务量13.4亿件,天猫平台就占了近78%。...智能物流骨干网不只是给电商物流提供了物理层面的基础设施,也将刺激零售、制造以及我国经济的发展,上海交通大学教授朱道立就表示: “国家智能物流骨干网是一个具有网络结构的智能物流服务多边平台,为各方创造价值...在末端配送环节,菜鸟推出的智能语音助手已在主要快递公司上线,可以帮助快递员自动完成“派前电联”,提高配送效率与消费体验。遍布全国大中城市的菜鸟驿站则部署了智能柜,一直对快递员和用户免费开放。...可以说,今天中国快递行业的服务能力是十年前已有云泥之别,快递运力、速度、效率和成本都做到了全球领先,什么都可以送、哪里都可以去,成为中国经济发展中与电商并列的一道奇迹,能够支持交易额不断攀升的11就不奇怪了...现在回头来看,2013年中国物流企业选择参与到智能物流骨干网是十分明智的决策。基于对中国消费市场潜力、智能技术应用和开放平台模式的自信,他们最终选择与阿里巴巴数字经济体携手,开创了中国物流业的奇迹。

    1.9K20

    订单量增长70倍!钉钉正在企业级市场复制苹果的“应用经济”

    这一次的周年庆促销活动却截然不同,“半价促销”的设计,跟11、618几乎如出一辙,很好地衡量了用户对于优质ISV服务的付费意愿和能力。...2017年,天猫11GMV达到创记录的1682亿元,商家们在11往往可以获得足够“吃”几个月的订单,然而很多人不知道的是,2009年,天猫11GMV只有5200万,这个数字,甚至不如天猫今天一个小时的交易额...钉钉先打造了企业生态服务开放平台,再通过版本升级、独立应用突破企业内部壁垒,各种第三方服务被整合到钉钉中,来满足超过500万企业和组织的个性化的办公信息化需求。...哪里有市场开发者在哪里,钉钉有500万+企业客户和1亿+企业用户,同时有很好的行业地位和品牌,让开发者有利可图,进而对10万开发者构成了很强的吸引力。...阿里云,更是只服务于企业客户的业务,而且跟钉钉一样都是技术驱动,阿里云也一直采取开放战略,拉上ISV来服务平台上的企业。

    7.9K10

    钉钉的开工利是,会成为企业级市场的11吗?

    礼包中即有企业和员工早已熟知的办公电话等功能,也有新服务。 比如首次公开的钉钉HRM即智能人事服务,就是将阿里多年来在人事管理上的积累开放出来的产品。...比交易额本身更重要的是,11直接推动了电商在中国的普及和配套的技术、物流、金融等等服务的成熟。...长期来看,钉钉开工利是这个活动,对于行业的价值有望像11一样:一是促进更多中小企业应用移动智能办公应用,人财物事上钉钉,提高效率;二是促进企业级服务市场的生态繁荣,就像11对物流、金融、技术的推进一样...钉钉也是唯一一家实现软硬件结合的企业服务平台,在去年的秋季新品发布会上连续推出了包括智能前台在内的多款智能企业硬件。...生态运营层面,钉钉整合了包括但不限于企业办公的各种服务能力,比如本次开工利是中的阿里商旅、天猫企业购,就是企业级服务与互联网服务的融合,而开放平台开放生态,已在互联网行业中十分流行。

    18.2K40

    “新零售”的另一种玩法?从“时尚之王”蘑菇街说起

    11结束后,各家电商平台都已交出成绩单。其中天猫和京东均创下新高,天猫11单日成交额达到了2135亿,同比增长26.93%;京东11月1日到11日累计下单金额超1598亿,同比增长25.7%。...今年11线上线下结合就是各大电商平台的重点。...在“全生态”的战略下,天猫11一线下生活服务全面加入,新零售智慧门店、盒马鲜生门店、超市百货、家居店,以及饿了么和口碑的本地生活服务商家全部深度参与到11中;京东联合旗下的京东之家、7Fresh等60...强调第三方平台的思路,体现出蘑菇街“主动找用户”的理念,用户在哪里,就将内容、商品和服务送到哪里,这也是对人货场的重构,可以增强用户体验,增加商品销量,降低流量成本。...新零售则是用户和流量在哪里,就将店开到哪里,将商品和服务送到哪里。电商巨头都在喊线上线下融合,有人说是去线下获取流量,我觉得更像是将商品和服务送到距离用户更近的地方去。

    2K20

    谁顶住11的世界级流量洪峰?神龙架构负责人等9位大牛现场拆解阿里秘籍

    自研数据库POLARDB和OceanBase分别处理8700万、6100万笔/秒峰值请求、实时计算处理峰值每秒25.5亿笔、计算平台单日处理970PB数据、12亿笔物流智能化等……2019年11期间,...其次是客服AI,阿里小蜜承接了淘宝天猫平台97%的在线服务需求,换算过来相当于8.5万名人工客服小二工作量,其次阿里小蜜今年推出了多项新功能,包括直播小蜜、基于图片的智能问答、多样性文本生成。...阿里云智能计算平台事业部研究员关涛(观涛)表示,双十一的挑战从商务角度看是商品和消费者最优化匹配的问题,往下则是大数据和AI能力的挑战, 从数据来看,今年11数据量达到970 PB,这大概是一个什么量级...在11中,阿里使用了全自研的一整套平台平台包括超过10万台规模服务器集群,10+数据中心、10EB级别存储、每天千万级别的大数据和AI计算作业。...总结来看,支持云上双十一的硬核基础设施,共有5项绝技纵横江湖,绿色数据中心、开放式的网络架构、RDMA高性能网络、弹性跨域访问和自研数据平台

    10.7K10

    揭秘:亚马逊鲜为人知的10大物流技术

    订单与客户服务中的大数据应用 亚马逊是第一个将大数据推广到电商物流平台运作的企业。电商完整端到端的服务可分为五大类,即浏览、购物、仓配、送货和客户服务等。...在入库方面:采用独特的采购入库监控策略,亚马逊基于自己过去的经验和所有历史数据的收集,了解什么样的品类容易坏,坏在哪里,然后给他进行预包装。这都是在收货环节提供的增值服务。...通过亚马逊独特的供应链智能大数据管理体系,亚马逊实现了智能分仓、就近备货和预测式调拨。这不仅仅是用在自营电商平台,在开放的“亚马逊物流+”平台中应用的更加有效果。...而这里又是超大库,在两个超大库之间进行库联动对效率有非常高的要求,对时间点的把控也很严格。 同时也正是借助于上述技术,亚马逊在今年的11中的数据尤为可观。...根据来自亚马逊中国的最新消息显示,亚马逊11当日全国订单100%按计划完成出库和发货,正点送达率超过98.4%,实现了与平时同样的时效和质量承诺。

    4.8K30

    微软加速器诗心启程,以科技创新构建同理心平台丨科技云·资讯

    11期选拔重点: 人工智能与产业落地应用结合 微软加速器·北京第11期招募于2017年12月初启动,围绕人工智能与机器学习、大数据、区块链、物联网、工业互联网、混合现实、云计算平台及技术应用创新,聚焦零售快消...微软加速器·北京驻企CEO檀林表示:“在5年多里,微软加速器一直是大企业办平台的标杆,如今我们需要放下过去,重新出发。因为同理心,人类命运共同体的理想才有可能实现。”...“我们会在原有的科技和商业创新思维方式之上,加上更多人文角度的思考,以更加开放、包容的心态,构建一个深具同理心的创新平台,为生态系统上的个人和企业赋能,以‘诗心启程’,共同奔向远方,抵达远方。”...智易科技 打造低门槛AI研发平台,让AI触手可及 行动贝果 打造机器学习引擎,提供自动化预测分析解决方案 智能一点 为企业提供对话式营销AI服务平台 维卓致远 为手术智能分析和全息呈现医学影像数据 数起科技...,推动心脏医疗服务变革 感融物联网 物联网技术支撑下的区块链+供应链"链驱动"落地 哈步数据 用数据让零售更智能 一千零一艺 建设行业BIM全产业链互联网平台 蜜枣网 为零售及幼教行业提供情绪智能创新应用

    2.4K10

    十万亿条消息背后的故事

    当时“ 11”每年的数据量都要翻番,如果当年“ 11”问题解决不了,那么可预见下一年的“ 11”还会遇到同样的问题。...“ 11”的考验 项目最终是要上生产环境验证的。特别是在“ 11”,流量是平时的上千、上万倍,一些平时微不足道的细节会在这个时候被放大一万倍,放大之后可能就是个大故障了。...而对能考虑到的情况,也需要在“ 11”来临之前做好各种预案。 第一年的“ 11”,RocketMQ 团队挑选了一些相对非核心业务上线验证。逐步地验证,并逐步修复。... 11 之后将这些问题进一步完善修复好,然后再进行更全面的验证。到第二年融合架构就百分百平稳上线了。” 光“ 11”还不够的,因为“ 11”只能证明性能和稳定性都很好。...更重要的是,“全世界都能看到这个产品到底好在哪里,不好在哪里”。 开源是一种生产力的体现,由数百人、数千人、数万人一起协作开发,同时又吸收全世界所有公司、所有行业、所有业务场景的需求。

    6.2K10

    腾讯发布:2017互联网科技创新白皮书

    作者:腾讯研究院 11月8日上午,以“开放·创想”为主题的2017腾讯全球合作伙伴大会在成都开幕在大会现场,腾讯研究院与腾讯开放平台共同发布了《2017互联网科技创新白皮书》(以下简称《白皮书》)。...腾讯也不例外,并提出“Make AI Everywhere”的愿景,打造AI开放布局。 《白皮书》从技术层、场景层、平台层三个维度,系统展示了腾讯AI布局全貌。...在平台层上,以腾讯开放平台为载体,AI开放生态已经初步建立,从扶持合作伙伴、AI人才引进、项目打造,全面降低AI创新创业门槛,使腾讯AI 与行业协同发展,与各行业共迎技术社会与AI时代的到来。...4月启动招募后,全球共有近千个AI项目报名参选“AI加速器”,历经3个月筛选,最终竹间智能、追一科技、汇医慧影、乂学教育、速腾聚创等25个项目入围,总估值达110亿。...借助开放平台,腾讯不断突破自身企业能力边界,输出涵盖技术、应用服务与创业服务能力,在搭建产业森林的同时,也带领伙伴共同进入技术社会,助力技术创新纵深发展。

    1.6K90

    【云顾问-混沌】腾讯云的云上容灾实践

    在2023年11月12日,刚经过11的购物节大压力的阿里,却从17:44起发生了服务宕机,旗下的淘宝、闲鱼、饿了么等服务出现服务中断,甚至让高校学生宿舍的洗衣机都“宕机”了。...:11 受影响产品 : 企业级分布式应用服务、消息队列 MQ、微服务引擎、链路追踪、应用高可用服务、应用实时监控服务、Prometheus监控服务、消息服务、消息队列Kafka版、机器学习、图像搜索、智能推荐...AIRec、智能开放搜索 OpenSearch、云行情、数据总线 DataHub、检索分析服务 Elasticsearch版、图计算服务 Graph Compute、实时计算 Flink版、智能数据建设与治理...Dataphin、开源大数据平台 E-MapReduce、云原生大数据计算服务 MaxCompute、实时数仓 Hologres、大数据开发治理平台 DataWorks、智能媒体服务、媒体处理、视频点播...、操作审计、服务器迁移中心、运维编排、智能计算灵骏、云呼叫中心、交通云控平台、客服工作台、视觉智能开放平台智能外呼机器人、智能语音交互、智能对话机器人、智能用户增长、运维事件中心、新零售智能助理、智能录质检

    52971

    BAT人工智能生态时局图:全面战争爆发前夜

    目前,他们除了天猫精灵智能音箱和搭载的AliGenie操作系统、AliGenie语音开放平台之外,还推出了AR开放平台和AR内容平台。 从2017年末开始,自动驾驶也成为了A.I....2017年11月,科技部公布首批国家人工智能开放创新平台名单,其中自动驾驶方面依托百度公司建设自动驾驶国家新一代人工智能开放创新平台。 入局最早的百度,和阿里腾讯早已不在同一个发展阶段。...到2018年初Apollo 2.0的发布,云端服务平台、软件平台、硬件平台、车辆平台在内的四大模块全部开放,释放了在简单城市道路上自动驾驶的能力。一切,都按照去年7月公布的路线图进行着。...在11月的百度世界大会上,百度金融技术负责人许东亮说,百度金融已经赋能近400家机构,为机构客户提供解决方案,为它们提供安全防护、智能获客、大数据风控等服务。 百度金融据说还在谋划更为独立的未来。...机器人客服“阿里小蜜”,11当天承担95%客服咨询;机器智能推荐系统,11当天产生567亿不同的货架;AI设计师“鲁班”,11期间,设计4.1亿张商品海报;华北数据中心运维机器人:接替运维人员30%

    2K80

    家装家居自救指南:线上线下大融合

    撰文 /   Alter 编辑 /    胖爷 ---- 2020年的11狂欢季结束后,有媒体向淘宝天猫总裁蒋凡提了这样一个问题:为什么今年11的变化这么大?...作为天猫11的技术总指挥,阿里巴巴副总裁、淘系产品技术负责人、躺平业务负责人汤兴(平畴)则将今年的11定义为:“技术和商业的完美共振”。...再来思考天猫家装和躺平设计家在11期间的联动,想要回答的正是这一问题。按照“人货场”的新零售理论,消费者在哪里,货就在哪里,场就在哪里。既然用户已经将消费中心搬到了线上,为何不在线上打造对应的场?...躺平设计家打通了设计师生态圈和商家数字化服务,二者可以在平台内进行资源共享和紧密的协作分工,通过内循环来激发产业链中的新动能。 按照躺平设计家的思路,家装家居还有新的空间等待挖掘。...比如大数据驱动的智能智造。上文中提到躺平设计家在11推出了针对不同用户进行个性化定制的AI智能样板间,背靠阿里的算力平台和大数据能力,帮助商家洞察用户喜好、培养用户心智。

    1.6K40

    推动大数据产业发展,腾讯云与清华大学共建国家工程实验室

    腾讯公司董事会主席马化腾曾多次提及:“未来将是传统行业利用互联网技术,在云端用人工智能的方式处理大数据。”为此,腾讯正通过腾讯云,不断将自身在互联网、人工智能、大数据的技术积累对外开放。...2016年7月,腾讯云正式宣布将腾讯大数据能力全面开放,推出一站式数据分析与挖掘服务平台——数智方略。数智方略首个版本,便包含覆盖基础平台、通用数据应用及行业解决方案在内的40余个产品及服务。...腾讯内部使用多年的大数据服务平台,自此向全社会开放。...在安全资质上,腾讯云更成为首家以CSA-STAR金牌等级评估结果拿到国内国际认可信息安全资质的云服务商。 另一方面,腾讯云也通过大数据为企业安全赋能。...大数据与人工智能开放的云生态相结合,成为腾讯云的“智慧安全”机制。在业务安全领域,腾讯云更能为大数据应用提供防止金融欺诈,识别恶意行为、恶意文本、恶意视频、恶意图片等强大的业务安全保障。

    84560

    这届双十一崭露头角,无人配送终于起风了?

    不只是阿里,11期间,京东、美团、物美等企业均在无人配送上布局,其中京东物流共投用近400辆智能快递车,分布在全国超25个城市,与去年同期相比送达单量大增超200%。...11是零售行业风向标。...今年11无人配送大量派上用场,反映出无人配送服务快步走向成熟的趋势。 11同时也是零售业的“练兵场”,爆发式增长的订单将“倒逼”行业技术、物流、运营等能力提升。...京东物流计划,未来 2到3 年间将继续研发并将数千台智能快递车投入使用。作为京东体系的一员,京东物流已连续多年给京东11和京东618提供无人配送服务支持。...顺丰已于今年9月下旬在苏州亮相其无人车,并计划在高校园区、景区、居民小区以及大型产业园区等不同的场景提供智慧物流服务;美团配送的对手达达已布局无人配送多时,今年7月对外发布无人配送开放平台,其无人配送服务已在

    2.1K20

    如何技术地识别双十一的“骗”局

    其实,数据掌握在 平台/商家 手里,平台/商家 想怎么改都可以,普通消费者是无法辨别。 因为你不可能长期针对某个商品进行监测,回到本文的主题, 如何技术地识别双十一里的“骗子”商品?...爬虫爬取的数据存放在哪里呢?作为制作爬虫,收集商品数据的收集方,会不会狼狈为奸,自己也去偷偷改动数据呢?...任何人都可以在公开的接口查询区块链中的数据,还可以在整个系统中分享与交换数据,可见区块链保持了系统信息的高度开放性和透明性。...如果,电商平台是基于区块链的,那商品的交易数据,价格变动将非常客观地记录在区块链上,任何人想要修改造假,都非常困难。还有,某宝一直被诟病的刷单、买好评等弊端,将被区块链技术所解决。...Ethereum 以太坊(Ethereum)并不是一个机构,而是一款能够在区块链上实现智能合约、开源的底层系统,以太坊从诞生到2017年5月,短短3年半时间,全球已有200多个以太坊应用诞生。

    5.9K40

    CCAI 2017 | 漆远:蚂蚁金服 AI 技术大揭秘, 开放“模型服务平台

    2015年我们用于广告取得非常好的效果,后来用于淘宝推荐,前年用到11推荐,今年又用到了蚂蚁的风控里面,其实它的核心技术就是我们能够通过系统和算法的结合,处理海量数据。...如果每个技术都作为一个好用的工具开放出来,您只想用这个工具而不太深入技术本身怎么办?我们开发了一个模型服务平台,将整个模型训练给您可视化,您通过简单的点击、拖拽数据就能产生所有的结果。...模型服务平台 我们今天讲到了开放与AI,这里讲到蚂蚁金融云和开放平台,希望我们的AI技术的能力开放服务于我们的客户和合作伙伴。...今天智能助理完成任务基于一系列的场景,因为支付宝我们是一系列的金融生活服务平台,今天就加上智能的定语叫智能的一系列的金融生活服务平台; 今天也介绍了基于哈希的海量特征提取,完全是从工业的角度,希望算得快...我们主题的是开放与AI, 技术成熟一个开放一个。从客服到模型部署平台到其他的每一个案例,包括舆情平台,我们都非常愿意赋能和服务客户,和我们的合作伙伴、与我们的客户共同探讨和创造未来。 谢谢大家!

    1.9K130
    领券