首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

落地百余场景、扛过11,蚂蚁TuGraph流式计算引擎正式开源!

本次,蚂蚁集团宣布将计算系统中的流计算引擎 TuGraph-Analytics 正式开源。结合蚂蚁计算领域其他项目的优异表现,该引擎又将对开源领域及产业界带来哪些价值?...对于数据模型天然适合模型,同时希望能够更快看到计算的价值的应用,流计算引擎 TuGraph-Analytics 是更加合适的选择。...2018 年的 11,流计算做到了在大促极端流量高峰情况下,动态识别超过六度关系链(隐蔽性强)的异常资金风险,这一风控能力在当时的业界非常领先。...“那时,我们从 6、7 月份就开始和业务同学一起闭关筹备 11,内部做了几轮流量压测,包括极端情况下的解决方案全部讨论完毕才确定推到 11。”...TuGraph-Analytics 作为流式计算引擎,偏重于流式实时的分析和计算

33340
您找到你想要的搜索结果了吗?
是的
没有找到

2023开放原子全球开源峰会,蚂蚁计算平台开源业内首个工业级流计算引擎

在高峰论坛上,蚂蚁技术研究院院长、计算负责人陈文光宣布开源 TuGraph 计算平台核心成员——工业级流式计算引擎 TuGraph Analytics。...计算目前已广泛应用在金融、政务、医疗等领域,备受全球研发机构和顶尖科技公司关注。流式计算是一种将流式计算计算结合的交叉创新,融合了流式计算的高度实效性和计算的灵活性,攻坚难度极高。...据了解,蚂蚁从2015年开始探索计算,布局了数据库、流式计算引擎学习等相关技术,打造了世界规模领先的计算集群,于业界首创了工业级流式计算引擎,多次问鼎数据库行业权威测试 LDBC 世界冠军并保持世界纪录...此次开源的工业级流式计算引擎是蚂蚁从2017年开始布局打造,经过五年多工业级应用大考,流式计算做到了在千亿数据规模的“”上秒级延迟计算,是蚂蚁风控的核心基础技术,成功解决了金融场景风险分析难、识别率低...此次流式计算引擎开源,是延续蚂蚁开源核心基础技术的实际动作,希望通过开放成熟的计算技术,服务更广阔的数字化产业,向世界输出中国科技公司的前沿技术影响力。

23920

蚂蚁金服, 开源业内首个工业级流计算引擎

在高峰论坛上,蚂蚁技术研究院院长、计算负责人陈文光宣布开源 TuGraph 计算平台核心成员——工业级流式计算引擎 TuGraph Analytics。...(:陈文光宣布开源业内首个工业级流式计算引擎 TuGraph Analytics) 去年9月,蚂蚁集团开源了 TuGraph 计算平台中的数据库 TuGraph DB。...据了解,蚂蚁从2015年开始探索计算,布局了数据库、流式计算引擎学习等相关技术,打造了世界规模领先的计算集群,于业界首创了工业级流式计算引擎,多次问鼎数据库行业权威测试 LDBC 世界冠军并保持世界纪录...此次开源的工业级流式计算引擎是蚂蚁从2017年开始布局打造,经过五年多工业级应用大考,流式计算做到了在千亿数据规模的“”上秒级延迟计算,是蚂蚁风控的核心基础技术,成功解决了金融场景风险分析难、识别率低...此次流式计算引擎开源,是延续蚂蚁开源核心基础技术的实际动作,希望通过开放成熟的计算技术,服务更广阔的数字化产业,向世界输出中国科技公司的前沿技术影响力。

25830

2018-08-15 实战回顾:苏宁金融营销系统的重构之路

这种情况下,无法满足营销数据可视化,活动效果数据分析等需求。 规则引擎引发的“血案”。 规则引擎及规则资格校验是一个计算资源消耗非常大的功能。营销前台、促销服务、电子券、任务服务都包含此功能。...满足营销数据可视化,活动效果数据分析等需求。 4. 拆分出规则引擎。 独立的规则引擎系统,承载上游所有促销形式的规则计算,节省资源。... 1:整体系统架构 V2.0 核心系统包括:营销统一服务、促销服务、电子券服务、任务服务、商品详情页促销前置服务、营销规则引擎、营销规则资格校验、营销活动中心、营销数据中心。...营销规则引擎:提供促销、电子券、任务等规则引擎处理服务 营销规则资格校验:提供促销、电子券、任务等规则资格校验服务 营销活动中心:包括营销活动管理、营销活动审批、预算管控、促销状态管理、促销结算、规则分发... 5:营销活动规则校验流程 V1.0 另外,规则引擎和资格校验服务未独立,促销服务、电子券服务、任务服务只能不断通过横向扩容,提高系统并发能力。

4.8K10

.Net Core 环境下构建强大且易用的规则引擎

对于 .Net 应用来说,可以通过 Kie 组件提供的 Rest 接口调用规则引擎运算。然而其过于庞大,仅仅只是需要规则引擎计算核心的部分。...其计算机制也与其他规则引擎大同小异: ? 2.2 设计规则配置 前文提到 对业务操作员要提供尽量简单的操作页面来配置规则 ,所以我们定义促销活动的规则配置就要尽量简单。 ?...在设计模型时,我们必须先参考现实生活中遇到的电商促销活动,大致可以想到有这么几种活动类型:满减促销、单品促销、套装促销、赠品促销、满赠促销、多买优惠促销、定金促销等。...注:想了解更多关于电商促销系统设计可参考脑 2.3 规则配置转换 为了实现 规则引擎和配置尽量不要耦合到一块,必须有中间层对规则配置进行转换为 Nrules 能够接受的规则描述。...,买两件时最优惠是参加 B 和 C 活动,那么其效果可能如下: ?

2K21

云服务市场硝烟起 三雄争霸

11”带来的购物狂潮余温尚存,“12”又火热来袭,而面对愈演愈烈的促销大战,云市场显然已按耐不住云服务商的热情,各家动作频频,其中以阿里云、天翼云、腾讯云为主要代表,借助岁末年关纷纷推出大幅度优惠促销活动...云市场短兵相接,促销活动夺眼球 记者了解到,12月18日前后,云服务商活动相对集中,中国电信、阿里、腾讯等大品牌均在此前后开展活动,其中,主要三家云服务商活动如下: 阿里云:12月18日起,阿里云将开启年度云促销盛典...天翼云:12月5日起,借天翼云门户全新改版以及四川资源池上线之际,中国电信天翼云推出了系列优惠活动,主要包括:从 12月5日开始,成功申请四川池公测的用户系享受为期4周的免费使用,小编实际体验后,发现天翼云本次公测放出的...据小编侧面了解,双十二天翼云也会针对四川池推出较为优惠的主机促销活动,预估活动力度在5折左右,另外还有Iphone 、mini的抽奖活动,可谓力度空间。...腾讯云:12月19日起,腾讯云将举办为期一周的年终大促活动活动包含新用户注册零门槛并赠送扶持基金,云服务器&带宽打折促销,千元云存储礼包免费送等,虽然细则还没有正式公布,但从优惠空前依稀可看出端倪。

37.8K50

深度解析京东个性化推荐系统演进史

1 推荐产品发展历程 多屏多类型产品形态 多类型主要指推荐类型覆盖到多种类型,如商品、活动、分类、优惠券、楼层、入口、文章、清单、好货等。...数据平台 京东拥有庞大的用户量和全品类的商品以及多种促销活动,可以根据用户在京东平台上的行为记录积累数据,如浏览、加购物车、关注、搜索、购买、评论等行为数据,以及商品本身的品牌、品类、描述、价格等属性数据的积累...推荐引擎处理逻辑主要包括分配任务,执行推荐器,合并召回结果。推荐器负责召回候选集、业务规则过滤、特征计算、排序等处理。推荐引擎技术架构如图7所示。 ? 7 推荐引擎技术架构 分配。...如用户选择“包治百病”标签,会按用户画像中的性别、年龄、品类、促销敏感度等画像模型进行推荐商品的重排序。 ? 10 用户画像示意图 ?...特征服务平台架构如图12所示。 ? 12 特征服务平台架构 场景特征回放技术 推荐的一般处理逻辑是每次请求会召回一批商品,然后根据用户的行为数据和用户模型计算出每个商品的特征。

2.2K71

深度解析京东个性化推荐系统演进史!

1 推荐产品发展历程 1.2、多屏多类型产品形态 多类型主要指推荐类型覆盖到多种类型,如商品、活动、分类、优惠券、楼层、入口、文章、清单、好货等。...三、数据平台 京东拥有庞大的用户量和全品类的商品以及多种促销活动,可以根据用户在京东平台上的行为记录积累数据,如浏览、加购物车、关注、搜索、购买、评论等行为数据,以及商品本身的品牌、品类、描述、价格等属性数据的积累...推荐引擎处理逻辑主要包括分配任务,执行推荐器,合并召回结果。推荐器负责召回候选集、业务规则过滤、特征计算、排序等处理。推荐引擎技术架构如图7所示。 ? 7 推荐引擎技术架构 分配。...如用户选择“包治百病”标签,会按用户画像中的性别、年龄、品类、促销敏感度等画像模型进行推荐商品的重排序。 ? 10 用户画像示意图 ?...特征服务平台架构如图12所示。 ? 12 特征服务平台架构 七、场景特征回放技术 推荐的一般处理逻辑是每次请求会召回一批商品,然后根据用户的行为数据和用户模型计算出每个商品的特征。

1.6K11

深度解析京东个性化推荐系统

1 推荐产品发展历程 多屏多类型产品形态 多类型主要指推荐类型覆盖到多种类型,如商品、活动、分类、优惠券、楼层、入口、文章、清单、好货等。...数据平台 京东拥有庞大的用户量和全品类的商品以及多种促销活动,可以根据用户在京东平台上的行为记录积累数据,如浏览、加购物车、关注、搜索、购买、评论等行为数据,以及商品本身的品牌、品类、描述、价格等属性数据的积累...推荐引擎处理逻辑主要包括分配任务,执行推荐器,合并召回结果。推荐器负责召回候选集、业务规则过滤、特征计算、排序等处理。推荐引擎技术架构如图7所示。 ? 7 推荐引擎技术架构 分配。...如用户选择“包治百病”标签,会按用户画像中的性别、年龄、品类、促销敏感度等画像模型进行推荐商品的重排序。 ? 10 用户画像示意图 ?...特征服务平台架构如图12所示。 ? 12 特征服务平台架构 场景特征回放技术 推荐的一般处理逻辑是每次请求会召回一批商品,然后根据用户的行为数据和用户模型计算出每个商品的特征。

2.3K31

一线互联网智能推荐系统架构演进

1 推荐产品发展历程 1.2、多屏多类型产品形态 多类型主要指推荐类型覆盖到多种类型,如商品、活动、分类、优惠券、楼层、入口、文章、清单、好货等。...三、数据平台 京东拥有庞大的用户量和全品类的商品以及多种促销活动,可以根据用户在京东平台上的行为记录积累数据,如浏览、加购物车、关注、搜索、购买、评论等行为数据,以及商品本身的品牌、品类、描述、价格等属性数据的积累...推荐引擎处理逻辑主要包括分配任务,执行推荐器,合并召回结果。推荐器负责召回候选集、业务规则过滤、特征计算、排序等处理。推荐引擎技术架构如图7所示。 ? 7 推荐引擎技术架构 分配。...如用户选择“包治百病”标签,会按用户画像中的性别、年龄、品类、促销敏感度等画像模型进行推荐商品的重排序。 ? 10 用户画像示意图 ?...特征服务平台架构如图12所示。 ? 12 特征服务平台架构 七、场景特征回放技术 推荐的一般处理逻辑是每次请求会召回一批商品,然后根据用户的行为数据和用户模型计算出每个商品的特征。

6K110

11.23 VR扫描:天气那么冷,看点VR资讯暖和暖和吧!

最新鲜的 VR 资讯 最in的内容 李嘉诚领投 Soul Machines完成750万美元的A轮融资 联想新平板Miix 520泄密:摄像头对应AR应用 索尼表示不参加黑色星期五的促销活动 VirZOOM...联想新平板Miix 520泄密:摄像头对应AR应用 联想目前正在打造 Miix 510平板电脑下一代产品:Miix 520,欲与微软的Surface竞争。...索尼表示不参加黑色星期五的促销活动 随着一年中最大的购物和销售日的到来,昨日HTC Vive宣布降价100美元参加黑色星期五五的促销活动。...索尼则表示在黑色星期五并没有统一的促销计划,零售商们可以自行举办促销活动。 VRPinea独家点评:在HTC Vive降价如此大的情况下,就看索尼零售商们的活动给不给力了。...Oculus Rift将自1212日起支持XBox One 外媒报道,Oculus宣布自1212日起Oculus Rift将支持XBox One游戏机。

10K120

搜索,大促场景下智能化演进之路

演进概述 阿里搜索技术体系目前基本形成了offline、nearline、online三层体系,分工协作,保证电商平台既能适应日常平稳流量下稳定有效的个性化搜索及推荐,也能够满足电商平台对促销活动的技术支持...针对以上问题,通过搜索技术团队自主研发的流式计算引擎Pora,收集预热期和11当天全网用户的所有点击、加购、成交行为日志,按商品维度累计相关行为数量,并实时关联查询商品库存信息,提供给算法插件进行实时售罄率和实时转化率的计算分析...随着时针跨过12点,流量风暴如期而至。Pora QPS飙升到40万/秒,接近日常QPS的10倍。...3 2015年11的实时计算体系 3. 2016年11,深度学习+强化学习独领风骚 2015年11,在线学习被证明效果显著,然而回顾当天观察到的实时效果,也暴露出一些问题。...2016年11,实时计算引擎从istream时代平稳升级到blink/flink时代,实现24小时不间断、无延迟运转,机器学习任务从几个扩大到上百个job。

6.5K40

深度解析京东个性化推荐系统演进史

1 推荐产品发展历程 多屏多类型产品形态 多类型主要指推荐类型覆盖到多种类型,如商品、活动、分类、优惠券、楼层、入口、文章、清单、好货等。...数据平台 京东拥有庞大的用户量和全品类的商品以及多种促销活动,可以根据用户在京东平台上的行为记录积累数据,如浏览、加购物车、关注、搜索、购买、评论等行为数据,以及商品本身的品牌、品类、描述、价格等属性数据的积累...推荐引擎处理逻辑主要包括分配任务,执行推荐器,合并召回结果。推荐器负责召回 候选集、业务规则过滤、特征计算、排序等处理。推荐引擎技术架构如图7所示。 ? 7 推荐引擎技术架构 分配。...如用户选择“包治百病”标签,会按用户画像中的性别、年龄、品类、促销敏感度等画像模型进行推荐商品的重排序。 ? 10 用户画像示意图 ?...特征服务平台架构如图12所示。 ? 12 特征服务平台架构 场景特征回放技术 推荐的一般处理逻辑是每次请求会召回一批商品,然后根据用户的行为数据和用户模型计算出每个商品的特征。

1.2K30

深度解析京东个性化推荐系统演进史

1 推荐产品发展历程 多屏多类型产品形态 多类型主要指推荐类型覆盖到多种类型,如商品、活动、分类、优惠券、楼层、入口、文章、清单、好货等。...数据平台 京东拥有庞大的用户量和全品类的商品以及多种促销活动,可以根据用户在京东平台上的行为记录积累数据,如浏览、加购物车、关注、搜索、购买、评论等行为数据,以及商品本身的品牌、品类、描述、价格等属性数据的积累...推荐引擎处理逻辑主要包括分配任务,执行推荐器,合并召回结果。推荐器负责召回 候选集、业务规则过滤、特征计算、排序等处理。推荐引擎技术架构如图7所示。 ? 7 推荐引擎技术架构 分配。...如用户选择“包治百病”标签,会按用户画像中的性别、年龄、品类、促销敏感度等画像模型进行推荐商品的重排序。 ? 10 用户画像示意图 ?...特征服务平台架构如图12所示。 ? 12 特征服务平台架构 场景特征回放技术 推荐的一般处理逻辑是每次请求会召回一批商品,然后根据用户的行为数据和用户模型计算出每个商品的特征。

2.8K90

vivo商城促销系统架构设计与实践-概览篇

促销模型不够抽象,维护混乱,没有独立的活动库存; 2. 混乱的活动共融互斥关系管理,缺乏统一的促销计价能力。...促销计价 基于高度灵活、抽象化的计价引擎能力,通过定义分层计价的促销计价模型,制定统一的优惠叠加规则与计价流程,实现vivo商城促销计价能力的建设。...推动完成vivo商城所有核心链路接入促销计价,实现全链路优惠价格计算的统一,如下图: 随着一期促销系统核心能力的完成,极大的满足了业务需要,各类优惠玩法随之增多。...面对新品发布、11大为客户等大流量场景,如何满足高并发场景下的高性能要求。 面对来自上游业务方的不可信调用,以及下游依赖方的不可靠服务等复杂系统环境,如何提升系统整体的稳定性,保障系统的高可用。...3.1 可扩展性 扩展性提升主要体现在两块: 优惠模型的定义,对所有优惠活动抽象出统一的优惠模型和配置管理界面; 促销计价引擎的建立,计价模型的统一。 相关的详细设计内容,会有后续文章进行说明。

10.5K11

基于Hybris平台的电商个性化服务实践

个性化服务流程 一个完整的服务场景是通过两个串联的步骤有序完成,首先电商网站动态的 收集客户属性、行为等特征,将具有相同属性或者特征行为的客户进行整理、分类、归纳到特定的目标客户群,最终电商网站主动向目标客户群提供个性化的服务...这就是我们要介绍的解决方案中的另一个关键模块 — 规则引擎模块。 在Hybris中,规则引擎模块主要是用于促销的业务,所解决的问题是为让电商网站中的所有客户平等的获得享受促销的权利。...由于Hybris自身的实现机制,当前的规则引擎是服务于促销的,也就是说规则引擎是通过Promotion Source Rule来驱动执行的。...挑战三:个性化的促销活动周期 相同的促销,每一个客户允许使用的时间是不同的。比如:客户A在2月1日-3月15日内使用;客户B在4月5日-5月12日内使用;那么如何动态分配活动周期为每个客户呢?...解决方案:利用Segment模型“持续时间”属性(单位:天)来动态计算促销活动周期。 技术实现:开始时间:客户分配时间;结束时间:通过持续时间和客户分配时间,推算出结束时间; 4.

1K10

美妆押宝双十一,各平台卷出新高度

各平台“内卷”双十一进入10月后,各电商平台先后公布双十一优惠活动细节,我们梳理了天猫、京东、抖音、快手四大典型电商平台的2022年十一的运营策略, 发现上述平台的运营各有侧重,对这次大促似乎志在必得...并配以档位促销优惠,分别为“每299元减50元”和“每1000元减100元”,均封顶40000元,活动期间同一款商品仅可参与其中一档促销。...源:财通证券作为电商后起之秀,抖音也不甘示弱,打造“一个重点、三大场景”创新玩法,力争抢占交易份额。据抖音公布的“双十一”招商规则显示,活动于10月24日预售,10月31日正式开卖。...在去年双十一,淘宝还只能提供购买日起15天的价保服务,今年则将规则改为按照双十一结束开始计算,将时间延长到了11月26日。...从用户收到货开始算起,价保服务最长可延至12月。

28.2K00

一文了解电商大促系统的高可用保障思路-献给技术伙伴们

电商大促活动通常会在一些特定的节点或者节日举行,比如“11”、“618”、“黑色星期五”等,这些时期的电商大促极具吸引力,既有大量的商品打折优惠,又有丰富多样的活动供消费者参与,是电商平台提升销售业绩的重要手段...1.2 典型的电商大促活动简介 618大促:每年6月是京东的店庆月,也是京东的电商促销主战场,在店庆月京东都会推出一系列的大型促销活动,从6月1日延续至6月18日(近几年开始从5.20日左右开启预售模式...双十一&双十二: 双十一是指各网络购物平台在每年11月11日的大型促销活动,最早起源于中国阿里巴巴旗下购物网站在2009年11月11日举办的“淘宝商城促销日”,现已演变成全行业一年一度的购物活动,及影响全球零售业的消费现象...双十一购物节战场延伸进12月,即“双十二”。(备注:淘宝商城项目刚独立,后更名为天猫,该营销活动主打品牌商的商品,是想要模仿美国感恩节大促销这种活动,通过一个活动或一个事件,让消费者记住淘宝商城)。...(参考维基百科) 除上述比较大型的电商促销活动外,其他零售电商平台比如苏宁818、国美418,以及其他电商平台也在自己造节日,而近几年的拼多多、抖音、快手等电商平台更多的是借势11或者618来提升整个电商平台的

40620

深度解析京东个性化推荐系统演进史

随着业务的快速发展以及移动互联网的到来,多屏(京东App、京东PC商城、M站、微信手Q等)互通,推荐类型从传统的商品推荐,逐步扩展到其他类型的推荐,如活动、分类、优惠券、楼层、入口、文章、清单、好货等...多屏多类型产品形态 多类型主要指推荐类型覆盖到多种类型,如商品、活动、分类、优惠券、楼层、入口、文章、清单、好货等。在移动互联时代,多屏场景非常普遍,整合用户在多屏的信息,能使个性化推荐更精准。...个性化推荐系统的主要优势体现为支持多类型推荐和多屏产品形态,支持算法模型A/B实验快速迭代,支持系统架构与算法解耦,支持存储资源与推荐引擎计算的解耦,支持预测召回与推荐引擎计算的解耦,支持自定义埋点功能...数据平台 京东拥有庞大的用户量和全品类的商品以及多种促销活动,可以根据用户在京东平台上的行为记录积累数据,如浏览、加购物车、关注、搜索、购买、评论等行为数据,以及商品本身的品牌、品类、描述、价格等属性数据的积累...特征服务平台架构如图12所示。 场景特征回放技术 推荐的一般处理逻辑是每次请求会召回一批商品,然后根据用户的行为数据和用户模型计算出每个商品的特征。

1.4K100
领券