首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

中通大数据平台中的进化

一年一度的双十一又双叒叕来了,给技术人最好的礼物就是技术指南!...而经过这些年的发展,早已不仅仅局限于电商行业,现在各行各业其实都会采用类似方式做运营活动,汽车界有 818,电商有 618 、11.11 等等,各种各样的场景,对包括数据库在内的基础软件提出了很多新挑战...中,大家买买买后最期盼的事情就是收到快递。成立于 2002 年的中通快递,是一家以快递为主体,以国际、快运、云仓、商业、冷链、金融、智能、星联、传媒为辅的综合物流服务品牌。...对于企业而言,除了支持业务创新,也是一次对自身技术架构的练兵和全链路演练。通过大的极致考验,企业的 IT 架构、组织流程、人才技能都获得了大幅提升。...而在中的经验和思考,也会加速企业日常的业务创新节奏,提升技术驱动的创新效率,打造增长新引擎。

4.7K40
您找到你想要的搜索结果了吗?
是的
没有找到

拼多多11.11来了:百万商品每满300减50,首日平台全域消费需求强劲

拼多多11.11来了。...10月20日,拼多多正式启动了今年的11.11活动,全场百万商品每满300减50,上不封顶,小米、美的、伊利、蒙牛、TCL等1000余家品牌也将在期间组团为拼多多用户送上超额福利。...在每天的整点时刻,平台还将为用户提供满100减50的整点神券,确保消费者天天有特价,时时有惊喜。本次大活动将额外提供两天的返场时间,一直持续至11月13日24时。...“在平台和商家多项举措的推动下,平台全域消费在首日的表现均十分亮眼。”...拼多多大项目负责人表示,在期间,拼多多将联合更多的品牌和商家,进一步释放平台用户的消费活力,持续推动消费。 END

7.1K20

算法平台在线服务体系的演进与实践

图灵平台主要包括机器学习平台、特征平台、图灵在线服务(Online Serving)、AB实验平台功能。 ?...图灵平台痛点:图灵在线服务SDK部署在业务工程中,版本收敛难度,兼容难度;同时图灵新功能推广难度,需要业务工程升级图灵在线服务SDK。...如果灰度的功能有问题,会对线上的业务造成影响,产生Bad Case。针对上述上线前校验环节的各个问题,我们研发了图灵沙箱,在不干扰线上业务稳定的前提下,实现了算法的全链路仿真实验。...图灵沙箱是一个与图灵OS服务物理隔离但运行环境完全一致的服务,流量经过沙箱不会对线上业务造成任何影响。...如下图10所示,线上流量引流到线上环境沙箱,图灵OS和图灵沙箱的各环境配置及数据都一致(版本、参数、特征、模型等)。

1.9K41

【案例】腾讯企点助力“贸云展”平台升级,首场国家级数字贸易展开幕!

近日,一站式全流程数字展览平台“贸云展”平台升级完成,该平台是中展集团在中国贸促会领导下,基于腾讯云技术支持打造的线上展览展示平台,也是国内四线上展会平台之一。...平台首场国家级数字贸易展览会“中国-中西非国际贸易数字展览会” 开幕,并于2021年6月23至7月2日在“贸云展”平台举办。...随着线上、线下结合的数字化模式正成为会展行业新常态,中展集团充分发挥深耕行业30载积累的技术和生态优势,携手腾讯云实现全面升级贸云展平台,将腾讯云旗下腾讯企点、腾讯会议、腾讯同传等多个产品与服务与贸云展平台实现深度整合...贸云展平台还致力于促进企业与企业间的交流与商贸互动,基于数字做智慧化运营,帮助企业从营销获客、销售转化、交易协同、售后服务再到复购增购,形成完美数字化交易闭环,最终通过“贸云展”平台为双方企业搭建国际供应链...手慢无 | 企点客服618

1.9K20

天狮集团云函数实践:自定义业务逻辑实现跨境电商全球直播

电商直播等 CPU 密集型业务 直播带货已成为线上电商平台的标配功能。电商直播中,需要专业、稳定的直播推流、转码、分发、播放等服务,满足超低延迟、超高画质、超大并发访问量的要求。...电商等波峰波谷型业务 每年双11、618等电商期间,电商行业线上渠道面临历史级别的流量挑战,中大型电商平台的峰值调用量可达上千万 / 分钟,面临高于日常10至20倍的流量压力;日常运营活动中,例如精品秒杀...、限时抢购等,电商平台也同样面临大流量高并发、波峰波谷用户流量明显分化的典型场景。...(电商弹性架构图) 瞬时冷启动 云函数 SCF 底层采用自研的轻量级虚拟化技术,Micro Vm 启动时间短至 90 毫秒,函数冷启动减低至 200 毫秒,并且支持上万台计算节点同时扩容。...往期精选推荐   峰值利用率80%+,视频云离线转码自研上云TKE实践 腾讯首个CNCF沙箱开源项目 腾讯云72小时从0到1搞定企业云原生改造实战营精彩回顾 qGPU on TKE - 腾讯云发布下一代

2K40

浅聊电商系统如何备战618

作者:DearNicole,原文:https://www.jianshu.com/p/98332878b132 最近临时618,各大电商平台又开始新一轮的年中大,可以说618是电商平台上半年力度、影响最大的一次促销活动...所以对这两次大尤其重视。经历过这么多年的考验,各个公司也形成了一套适合自己的备战的策略。今天来给大家分享一二。 笔者所在公司也是电商行业,规模中等,一年的GMV(交易流水)也在几百亿。...峰值的订单一天也是百万单左右,所以压力还是有的,并且挑战还很大。如何保障期间系统的稳定性是我们近2个月重中之重的事情。 这里来跟大家分享下,我们是如何准备这次618的。...,所以一般会提前一段时间上线,在线上简单验证一段时间,才会放心在期间使用。...这样做是尽可能保证期间系统是稳定的,除非有紧急情况,否则尽量不动生产系统,期间发版一个是风险很大,另外是人在高压下也很容易出错,大家都是凡人。

53230

咖对话|“贸云展”触点思维,企业增长新机遇

新冠疫情常态化加速了会展业数字经济的发展进程,在此背景下,中国贸促会积极应对,主动出击,创新展会服务模式,由所属企业中展集团投资建设了贸云展平台。 贸云展平台是一个国家级的线上平台。...贸云展平台以“融汇线上线下、联结国内国际、服务中外企业、搭建贸平台”为宗旨,以新时代展览业创新发展理念为引领,运用现代信息技术打造新型线上展览展示平台,为疫情常态化下保持产业链、供应链的畅通、推动消费市场的扩大和结构升级...“贸云展”平台展现了实施快、上线快、安全稳定的特点,体现了优质平台的运营效率,一跃成为国内四线上展会平台之一。...随着线上、线下结合的数字化模式正成为会展行业新常态,中展集团充分发挥深耕行业30载积累的技术和生态优势,携手腾讯云实现全面升级贸云展平台,将腾讯云旗下腾讯企点、腾讯会议、腾讯同传等多个产品与服务与贸云展平台实现深度整合...目前“贸云展”已入驻“中国贸促会展览公共服务网”平台,为贸系统各单位、地方商务部门、各类展览行业企业和参展企业提供线上展览服务。

3.1K20

《阿里测试之道》第二章笔记

2.1 全链路的风险和挑战 2.1.1 全球最大洪峰下的高可用挑战 2019年双11零点交易峰值是2009年的1360倍 2018年收货地址不可修改 2.1.2纷繁复杂的用户场景 2.1.3 无处不在的用户体验...本次大线上报名数据分析 历史交易订单分析 4 预演环境准备 应用部署环境:多地多单元部署、云环境、非云环境 无线客户端测试包 无线网络环境:内网环境、外网环境、WiFi、4G 2.4.4 预演执行策略的制定...全民预演轮次及内容 2.4.5 预演问题收集及跟进 当日复盘模式进行复晒 201.9 延迟修复140例 告知客服,安抚客户 2.4.6 持续集成 2.4.7 全民演练支撑平台 1 准备过程自动化...2日常预案 2.5.2 预案评估方式 1 强弱依赖是服务预案的必要条件 2 预估流量、压测验证、确定外部服务是否需要提前降级 2.5.3 预案流程 2.5.4 预案平台 1 平台简介 2 平台功能...预案平台功能——态、日常态 2.5.5预案与攻防 2.5.6 预案的目标与展望 2.6 全链路预热 2.6.1 解法 1 系统预热 2 数据预热 缓存穿透:缓存中只有Key,没有Value

2.7K40

【对话】京东技术11.11基础架构峰会讲师:京东容器集群技术开放赋能

,特别在期间秒级Scale UP应对高峰流量经验丰富。...4 Q:在“11·11”备战的研发工作中,有什么有趣的事情吗? A:我们在结合调度资源时发现了一件有趣的事情:能节省数据中心的电力消耗。...我们实验了两个物理POD,根据服务器的CPU使用率、IO、主要应用负载等多个参考坐标对机器CPU自动降频,结果显示一共能节省17%的电力。...8 Q:您参加过几次京东的备战?请谈谈其中的“变”与“不变” A:我已经经历过10次了。其中不变的是,大家一直以技术为核心专注的投入到备战工作。...A:我会着重分享,JDOS阿基米德的研发经验以及在底层系统角度处理线上紧急问题时,是如何在不影响线上业务的情况下解决问题的,也会分享一些京东阿基米德平台在调度、提升服务器的使用率方面,如何实现使用更少的机器运行更多的业务

5.7K60

有赞全链路压测实战

有赞从去年开始通过全链路压测,模拟真实流量,串联线上全部系统,让核心系统同时达到流量峰值: 验证峰值流量下系统稳定性 容量规划 进行强弱依赖的划分 降级、报警、容灾、限流等演练 ......通过全链路压测这一手段,对线上系统进行最真实的演练,获取系统在压力时的表现情况,进而准确评估线上整个系统集群的性能和容量水平,不辜负百万商家的信任。...6.1 压测计划制定 要想模拟线上真实的流量情况,首先需要确认的就是压测场景、链路,压测的目录,以及压测的流量漏斗模型: ?...压测的场景:根据运营报备的商家活动的计划,制定的压测场景(比如秒杀、抽奖等),再结合近七天线上流量的场景情况,综合确定压测的场景; ?...压测目标:根据运营报备的商家预估的PV和转换率情况,结合去年同期线上流量情况和公司业务的增长速率,取值作为压测的目标 6.2 数据工厂 前面我们已经介绍了如何确定压测的目标、场景、链路,那么压测的数据怎么来尼

1.9K20

有赞全链路压测实战

有赞从去年开始通过全链路压测,模拟真实流量,串联线上全部系统,让核心系统同时达到流量峰值: 验证峰值流量下系统稳定性 容量规划 进行强弱依赖的划分 降级、报警、容灾、限流等演练 ......通过全链路压测这一手段,对线上系统进行最真实的演练,获取系统在压力时的表现情况,进而准确评估线上整个系统集群的性能和容量水平,不辜负百万商家的信任。...6.1 压测计划制定 要想模拟线上真实的流量情况,首先需要确认的就是压测场景、链路,压测的目录,以及压测的流量漏斗模型: ?...压测的场景:根据运营报备的商家活动的计划,制定的压测场景(比如秒杀、抽奖等),再结合近七天线上流量的场景情况,综合确定压测的场景; ?...压测目标:根据运营报备的商家预估的PV和转换率情况,结合去年同期线上流量情况和公司业务的增长速率,取值作为压测的目标 6.2 数据工厂 前面我们已经介绍了如何确定压测的目标、场景、链路,那么压测的数据怎么来尼

1.7K11

机器人大闹光棍节:直击双11京东全链路军演ForceBot

电商期间存在不同于日常流量场景的高流量冲击,为了应对流量场景,保证期间用户可以顺畅地进行购买的一系列流程,而不会出现某个环节(比如支付环节)上的系统宕机或者数据错乱(比如商品库存量读写错误)...等情况,必须要在前进行全链路压测,也就是进行前的军演,以便提前做好扩容及系统问题修复优化等。...更重要的一个问题是各系统的容量规划,每次大前备战会必不可少的讨论话题就是服务器资源申请扩容的问题,各团队基本都是依据往年经验和线上资源使用率给出评估量,提出一个扩容量需求,导致各个业务系统每次促销的扩容量都非常...既然全链路压测是电商前必不可少的一个环节,且传统的全链路压测方法又存在这么多的问题,那么,是否有更好的方法来进行全链路压测,以节省人力物力和时间成本,且能够得到线上的真实数据,对系统资源进行更优的配置从而降低扩容浪费等行为呢...京东也希望 ForceBot 未来可以实现“人工智能预言”,在全链路压测中引入 AI 技术,通过人工智能预言各个系统的流量值和资源分配建议,根据线上的系统军演数据预言未来的各系统场景。

1.3K60

电商GMV和支付规模预测

在电商时,为了能够合理地制定KPI、高效地商品备货和营销资源的安排,都通常都需要对这次大的GMV和订单规模做预测,避免出现诸如产品断货或者过剩、人员效率不高等问题,导致客户流失未能成交。...在传统的预测中,通常是基于历史GMV趋势做预测的,衡量的是历史期相对平销期流失爆发度,计算公式是本次大GMV=前平销期GMV*爆发系数,其中,前平销期GMV可以通过时间序列模拟获得,而期间的爆发系数通常是基于业务经验做推断获得的...这样,预测的输出结果就明确了,首先是用户id,用于用户的分类,例如基于此,可以将用户分为A组、B组等;其次是不同分类用户的购买概率,例如A类、B类客户购买概率分布是多少;最后是的购买金额。...针对模型选择方面,这里可以使用的模型还是很多,需要尽可能的实验尝试,比较经常用到的是GDBT模型和LR模型,但是需要明确不同的适用场景。...接下来还需要针对模型预测的结构做分析和检验,主要用到的是离线测试数据集检验和线上数据实测对比,需要综合评估准确率和召回率两个指标。

6.1K40

【收藏】10常用恶意软件检测分析平台

六、魔盾安全分析:https://www.maldun.com 魔盾安全分析 (MALDUN.COM) 提供了一个免费的基于虚拟执行的恶意软件及网页链接分析平台。...可以在线上传需要分析的文件,或提交可疑的网页链接,魔盾安全分析会在虚拟环境中执行这个文件或打开链接,并对各种恶意软件行为特征进行监控和评分,从而帮助了解该文件或链接是否隐藏了恶意代码,以及是否会对电脑造成危害...七、微步在线云沙箱:https://s.threatbook.cn ThreatBook Cloud Sandbox恶意软件分析平台,与传统的反恶意软件检测不同,微步云沙箱提供完整的多维检测服务,通过模拟文件执行环境来分析和收集文件的静态和动态行为数据...八、腾讯哈勃分析系统:https://habo.qq.com 哈勃分析系统,是腾讯反病毒实验室自主研发的安全辅助平台。...大圣云沙箱是一款基于云端架构的高级威胁检测和恶意软件免费分析服务,通过引入沙箱技术对最新高级恶意软件进行虚拟执行、行为捕获等全面深入的分析检测。

7.5K10

网易严选基于“服务画像”的长效稳定性能力建设实践

针对上述挑战,2019年严选决定建设一套长效的稳定性保障能力,并制定了阶段性目标,目标一:风险能力要充分识别,无故障;目标二:在高强度迭代压力下,持续性消费风险;目标三:守住基线,更快交付。...基础能力建设 从2019年开始,严选频繁落实研发标准和规范,以及快速建设了一些工具和平台。在工具平台建设方面,主要包括四部分,即监控-报警-快恢、性能和容量管理、可靠性评估和治理、变更管控。...在应急预案管理方面,严选第一件工作就是把预案标准化,建立了5W1H标准化在线管理,300+在线预案,已支撑20+场。...严选将预案实现了自动化,打通了各个技术平台,所有预案可一键执行,在高峰时段,做到了自动提前执行、自动恢复。同时,严选还建立了预案防腐,在S级之前,要做到100%评审、演练通过率。...例如,不仅要在之前做压测,平时也可以进行测试,实现常态化性能基线,安全保障是前提,做到基于依赖链路自动审计,将SOP线上化、压测值班线上化。

77230

双11在即,分享一些稳定性保障技术干货

每年一次的双十一大临近,因此上周末公司组织了一次技术交流闭门会,邀请了电商、物流、文娱内容、生活服务等知名一线互联网公司的技术大牛,一起探讨了一些稳定性保障相关的技术话题。...典型场景及优化方案 1、云资源稳定性保障 单云模式存在一定稳定性风险,混合云架构在容灾方面效果更好; 核心链路梳理,可以将历史或者峰值的访问URL存储起来,经过处理后作为核心链路参考; 验证线上的性能容量搭建单独的仿真环境...,为了避免和线上不一致,可通过一套标准的脚本来进行检查配置; 弹性伸缩容:设置动态扩缩容,超过固定的比例阈值,进行动态扩容(双十一零点峰值时候慎用); 云资源保障方面,和云厂商提前沟通,尽可能将没有业务的公司服务器资源和自己公司放在同一个可用区或机房...弱依赖提前主动降级; 预案:分为主动预案和紧急预案: 1)主动预案:提前进行风险识别,然后针对性的方案,可以降低已知的风险; 2)紧急预案:假设出现重大的问题,才需要决策是否启用的方案(风险较大); 3)预案平台...:预案平台的目的是留痕,方便后续把预案恢复回来; 熔断 熔断下游强依赖的服务; 四板斧:关停并转。

2.7K20

腾讯云,拿什么获得电商行业信赖?

01 解决第一步 满足基本需求 在满足当下用户交易需求的同时,各大电商平台和商家为了提高销量和GMV数据增长,会举办形式多样的活动。 只是,固然能为电商平台、商家带来流量。...以刚刚过去的618电商为例,对众多的消费者而言,他们进行的动作基本上可以分为:零点起床、打开购物车、合并支付三个步骤,操作简单,过程一气呵成。 相较之下,对于电商平台来说就没那么容易了。...因此,电商平台、商家都需要一款稳定的数据存储和弹性计算产品,帮助自己在这种关键时刻,获得足够的技术支持。...腾讯云的这一套数字化解决方案,为电商客户在这种关键时刻提供了强有力的技术保障,解决了平台短时间迸发巨额访问可能导致后端崩溃的问题。关键时刻信赖腾讯云这个想法,不再是空谈,而是一种实际。...02 全方位护航 安全问题不用愁 除了每年固定的节点,电商行业的日常风控和安全防范也是关键。

1.5K30

服务被干爆了!竟然是日志的锅!!

本文要介绍的是一个发生在我们线上环境的真实案例,问题发生在某次大期间,对我们的线上集群造成了比较大的影响,这篇文章简单复盘一下这个问题。...这里插播一个背景,我们的线上机器是配置了日志的自动压缩和清理的,单个文件达到一定的大小,或者机器内容达到一定的阈值之后,就会自动触发。 但是当天并没有触发日志的清理,导致机器磁盘一度被耗尽。...,或者做数据分析用的,但是期间日志量激增,导致磁盘空间占用极速上升。...对于第一个问题,那就是期间引入日志降级的策略,一旦发生磁盘爆满,就是将日志降级掉。 关于日志降级,我开发了一个通用的工具,就是通过配置的方式,动态推送日志级别,动态修改线上的日志输出级别。...并且把这份配置的修改配置到我们的预案平台上,期间进行定时或者紧急预案处理,即可避免这个问题。 关于日志降级工具的开发思路和相关代码,下一篇文章中给大家分享。

47420
领券