首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

落地百余场景、扛过11,蚂蚁TuGraph流式计算引擎正式开源!

本次,蚂蚁集团宣布将计算系统中的流计算引擎 TuGraph-Analytics 正式开源。结合蚂蚁计算领域其他项目的优异表现,该引擎又将对开源领域及产业界带来哪些价值?...开源地址:https://github.com/TuGraph-family/tugraph-analytics 3 扛过 11 大考,落地百余场景,TuGraph-Analytics 筹划已久...2018 年的 11,流计算做到了在大促极端流量高峰情况下,动态识别超过六度关系链(隐蔽性强)的异常资金风险,这一风控能力在当时的业界非常领先。...“那时,我们从 6、7 月份就开始和业务同学一起闭关筹备 11,内部做了几轮流量压测,包括极端情况下的解决方案全部讨论完毕才确定推到 11。”...TuGraph-Analytics 作为流式计算引擎,偏重于流式实时的分析和计算

31240

大数据与云计算的新引擎 – Kona JDK 11揭秘

腾讯JDK团队针对大数据/机器学习和云计算等业务的前沿需求,正在探索新的长期支持版本Kona JDK 11,本文将对其中部分实践进行介绍,希望从生产经验的角度为大家的技术决策提供一手参考。...: ● 向量计算优化:针对大数据/机器学习场景的“算力”优化需求,移植并改进了社区前沿版本中的Vector API技术,将其作为Kona 11长期支持版本中的特性,并且与数据平台部团队合作在广告核心业务场景探索落地...Kona 11向量计算版本揭秘 在公司广告等核心业务中,性能/算力不仅仅意味着单位计算资源能够处理更多的业务流量,也深刻影响着我们能够扩展探索的模型复杂度等能力范围,但是,摩尔定律某种程度上在今天已经失效...云计算 + Kona JDK 11 Kona JDK 11在云微服务产品场景进行了初步落地探索: 1)在腾讯云中间件微服务产品中,我们将腾讯云中间件微服务支撑环境升级到Kona JDK 11后,对微服务应用进行了稳定性和性能压力测试...总结: JDK 11是一个值得认真考虑的版本,Kona JDK 11的针对性优化,让其在大数据/机器学习、云计算等场景具备明显的性能和功能优势,限于篇幅我们今天没有对大堆GC优化、ZGC等新特性生产化进行赘述

1.5K20
您找到你想要的搜索结果了吗?
是的
没有找到

2023开放原子全球开源峰会,蚂蚁计算平台开源业内首个工业级流计算引擎

---- 6月11日,2023开放原子全球开源峰会在北京开幕。本次峰会以“开源赋能,普惠未来”为主题。...在高峰论坛上,蚂蚁技术研究院院长、计算负责人陈文光宣布开源 TuGraph 计算平台核心成员——工业级流式计算引擎 TuGraph Analytics。...据了解,蚂蚁从2015年开始探索计算,布局了数据库、流式计算引擎学习等相关技术,打造了世界规模领先的计算集群,于业界首创了工业级流式计算引擎,多次问鼎数据库行业权威测试 LDBC 世界冠军并保持世界纪录...此次开源的工业级流式计算引擎是蚂蚁从2017年开始布局打造,经过五年多工业级应用大考,流式计算做到了在千亿数据规模的“”上秒级延迟计算,是蚂蚁风控的核心基础技术,成功解决了金融场景风险分析难、识别率低...此次流式计算引擎开源,是延续蚂蚁开源核心基础技术的实际动作,希望通过开放成熟的计算技术,服务更广阔的数字化产业,向世界输出中国科技公司的前沿技术影响力。

23220

蚂蚁金服, 开源业内首个工业级流计算引擎

6月11日,2023开放原子全球开源峰会在北京开幕。本次峰会以“开源赋能,普惠未来”为主题。...在高峰论坛上,蚂蚁技术研究院院长、计算负责人陈文光宣布开源 TuGraph 计算平台核心成员——工业级流式计算引擎 TuGraph Analytics。...(:陈文光宣布开源业内首个工业级流式计算引擎 TuGraph Analytics) 去年9月,蚂蚁集团开源了 TuGraph 计算平台中的数据库 TuGraph DB。...据了解,蚂蚁从2015年开始探索计算,布局了数据库、流式计算引擎学习等相关技术,打造了世界规模领先的计算集群,于业界首创了工业级流式计算引擎,多次问鼎数据库行业权威测试 LDBC 世界冠军并保持世界纪录...此次流式计算引擎开源,是延续蚂蚁开源核心基础技术的实际动作,希望通过开放成熟的计算技术,服务更广阔的数字化产业,向世界输出中国科技公司的前沿技术影响力。

24430

计算广告系列(六)-《计算广告》第二版思维导11-16章

本文是小编整理的《计算广告》第二版一书第十一章到第十六章的思维导,主要介绍计算广告中用到的主要技术。 第十一章 合约广告核心技术 合约广告的重点形式是按指定受众购买的,按CPM计费的展示量合约广告。...第十四章 点击率预测模型 点击率预测是计算广告中最为熟知也是最重要的问题之一。经典的点击率预估模型是逻辑回归模型,并逐渐发展为基于深度学习的预估模型。...思维导使用XMind进行编辑,想要PNG格式的图片嘛?后台回复“计算广告”即可!(小编没有原书的电子版,对此书感兴趣的可以购买原书,入门计算广告非常好的一本书!)

1.8K20

3000字11硬核科普:什么是边缘计算?与云计算有什么联系和区别?

随着近年来云计算的兴起,还有一个名词也渐渐走入公众的视野,那就是边缘计算。 其实云计算和边缘计算两者是不一样的概念,边缘计算是因为物联网技术的发展,催生出了边缘计算。...那么边缘计算到底是个什么样的技术,它背后的原理是啥?和云计算又有什么区别? 今天瑞哥用图解的形式来大家揭开边缘计算的神秘面纱! 什么是边缘?...边缘计算是一种将地理分布与云技术相结合的方法,边缘数据中心可以通过在地理位置上更接近您需要的数据源来帮助解决延迟问题。 边缘计算是一种分散式计算架构,而不是集中式计算模型(云计算)。...图片 在中国的大街小巷、各个商场,各种人脸支付,无人零售商店数不胜数,店内的摄像头和传感器会识别顾客并登记他们挑选要购买的商品,这些其实都是边缘计算的功劳。...边缘计算和云计算的比较 云计算计算依靠远程服务器网络在异地存储和使用数据,可以同时向大量人提供数据,不需要维护自己的基础架构。

1.5K40

3000字11硬核科普:什么是边缘计算?与云计算有什么联系和区别?

随着近年来云计算的兴起,还有一个名词也渐渐走入公众的视野,那就是边缘计算。 其实云计算和边缘计算两者是不一样的概念,边缘计算是因为物联网技术的发展,催生出了边缘计算。...那么边缘计算到底是个什么样的技术,它背后的原理是啥?和云计算又有什么区别? 今天瑞哥用图解的形式来大家揭开边缘计算的神秘面纱! 什么是边缘?...边缘计算是一种将地理分布与云技术相结合的方法,边缘数据中心可以通过在地理位置上更接近您需要的数据源来帮助解决延迟问题。 边缘计算是一种分散式计算架构,而不是集中式计算模型(云计算)。...在中国的大街小巷、各个商场,各种人脸支付,无人零售商店数不胜数,店内的摄像头和传感器会识别顾客并登记他们挑选要购买的商品,这些其实都是边缘计算的功劳。...边缘计算和云计算的比较 云计算计算依靠远程服务器网络在异地存储和使用数据,可以同时向大量人提供数据,不需要维护自己的基础架构。

1.1K30

机器学习&人工智能:数据赋能背后的黑科技

逍遥子也曾经讲过:“我们用大数据赋能了11,赋能了我们自己的运营能力。...2016年11,超过23万商家通过客户运营平台实现了店铺的个性化运营和粉丝会员的精准营销,显著提升了成交转化。下面以访客运营为例,介绍AI分群引擎的应用。...11大促店铺承接页个性化技术 今年11阿里巴巴首次实现了全面的全站个性化,包括从会场到大促承接页到店铺再到详情,而大促店铺承接页是连接会场与店铺的桥梁,大促承接页的整体活动氛围和布局由平台确定,商家可以通过页面装修工具来装修商品模块...基于流式计算的方法 基于流式计算引擎,实时更新商品之间的关联关系,更好地捕捉线上流量的变化 6....千牛头条11和热门频道 目前个性化算法支持了热门feeds流、11频道,后续会支持更多的频道和场景。

2K60

天猫11订单峰值58.3万笔秒,消费狂欢背后隐藏了哪些技术?

其中在杭州数据中心内,全球规模最大的液冷服务集群将有上万台液冷服务器投入生产处理 11 的海量计算工作,这些服务器的网线连起来可以绕地球一周。...运维机器人天巡 数据中心提供算力支撑,计算框架「流批一体」则大大提升了计算和查询的速度,流批一体意味着计算引擎同时具备流计算的低延迟和批计算的高吞吐高稳定性。...今年 11 前夕,淘宝首页大幅改版。在信息流、搜索、聚划算、会场和直播等用户场景,智能计算调用量日均已高达数千亿次。 平台对用户消费行为的洞察和商品推荐也更加精准,而这背后的技术引擎是智能搜索引擎。...直播实时翻译 此外,直播等新物种的出现也让购物更有「沉浸感」,今年阿里还为 100 万以上商品设计了 3D ,消费者看中后便可以点击链接购买,现场感更强。...阿里测算,这些数字化的 IoT 设备在今年 11 期间,会帮消费者节省 15 万个小时。 出身两个月不到的小蛮驴也已经应用在了双十一实践中,使社区无人配送成为可能。

8.3K10

搜索,大促场景下智能化演进之路

1 搜索智能化演进过程 1. 2014年11,实时之刃初露锋芒 技术的演进是伴随解决实际业务问题和痛点发展和进化的。...针对以上问题,通过搜索技术团队自主研发的流式计算引擎Pora,收集预热期和11当天全网用户的所有点击、加购、成交行为日志,按商品维度累计相关行为数量,并实时关联查询商品库存信息,提供给算法插件进行实时售罄率和实时转化率的计算分析...第一次在11大促场景下实现了大规模的实时计算影响11当天的流量分配。 2014年11当天,Pora系统首次经受了11巨大流量的洗礼,系统运行可以说是一波三折。...3 2015年11的实时计算体系 3. 2016年11,深度学习+强化学习独领风骚 2015年11,在线学习被证明效果显著,然而回顾当天观察到的实时效果,也暴露出一些问题。...2016年11,实时计算引擎从istream时代平稳升级到blink/flink时代,实现24小时不间断、无延迟运转,机器学习任务从几个扩大到上百个job。

6.5K40

Aerospike在实时竞价广告中的应用

如图11-9所示 11-9 实时竞价广告模式 与广告业务相关的术语 首先介绍几个与广告业务相关的术语: RTB(RealTime Bidding)实时竞价:一种利用第三方技术在数以百万计的网站上针对每一个用户展示行为进行评估以及出价的竞价技术...类似于11-10实时决策流程。...11-10 实时决策流程 分别通过HDFS和HBASE对日志进行离线和实时的分析,然后把用户画像的标签结果存入高性能的Nosql数据库Aerospike中,同时把数据备份到异地数据中心。...而缓存的具体应用架构,见图11-12 11-12 用户画像架构 此应用架构包含实时标签引擎和离线标签引擎两个主要部分,这样设计的原因主要是出于系统投入的成本来考虑。...通过离线计算的数据和日志主要都是数据量大,而且实时要求并不是特别高,比方说广告请求日志,竞价日志等等;而实时标签引擎则主要处理效果数据等,对实时性要求较高的数据,比方广告的展现,点击,转化数据等。

1.7K80

今天11,和心爱的她一起去「云露营」

---- 新智元报道 编辑:编辑部 【新智元导读】这个天猫11,酷炫的AI技术,为你我打造了一场如梦似幻的沉浸式购物之旅。 今年11,你买什么了?...「撑起」天猫11的硬核技术 说来,天猫怎么就忽然做起沉浸式购物了? 其实在过去的13个11里,天猫的底层技术基础设施得到了深厚的积累。而现在随着AI技术的革新,产品形态的创新,也变得千变万化。...天猫依托底层3D引擎(AceNNR)、AI引擎(MNN)、AR引擎、多媒体等技术,让我们能通过AR应用、3D展示等各种方法,看到各种产品的形态。...在经历过去三年的坚实「三步走」之后,今年11成为阿里全面serverless、深度用云的元年。...另外,今年阿里将自研CPU大规模应用于11活动,首次实现了芯片、计算架构及操作系统的协同优化,单位算力功耗降低了60%。 最初,阿里下定决心搞自研CPU的起因,也是为了满足计算场景的实际需要。

18.6K40

1682亿:“剁手”大军集结号是如何在11吹响的!

火爆的背后,你知道11的剁手大军们如何集结、又是如何做出购买决策的吗?不同类型的消费者,表现出怎样的购买倾向?...我们的解决思路是消费者初步打算在11买这类商品,就定义为进入。具体来说,当消费者在临近11的某段时间里浏览了其在11这天购买了的商品类别,我们就认为其进入了11大军。...从上面这个“气泡分布”中发现,11的开始和启动要远远早于1111日,甚至早于商家发力的预售预热阶段,提前到达战场的消费者占比接近八成(79%)。...这三类人群由于前期积累的购物车商品数量不同,在11购买额和购买节奏上也有很大的差距。 ?...而性别方面,男性消费者进入时间相对来说是比较靠后的,有大量的男士偏好11当天来购买。此外,我们还发现,消费能力弱的人对11的反应特别滞后。 ?

3.3K00

LayaAir 2.9.0的3D渲染效果大幅提升(支持CommandBuffer、反射探针等众多3D功能)、插件功能大幅升级

虽然LayaAir 2.8.0的首个beta版中还没有对淘宝小程序进行支持,但是为了不影响11等重要活动,我们在后续的beta版中就紧急升级适配,到目前为止,已知有不少开发者和品牌已经采用LayaAir...2.8.0 beta版推出了淘宝创意互动小程序的游戏,未来会有专门的文章为大家分享11的淘宝创意互动小程序(游戏)案例。...下图是3D粒子编辑面板界面效果。 ? 未来,还会推出更多LayaAir功能面板来替换Unity功能界面。提升会员功能的易用性。...在这两年中,有很多开发者在购买工具会员后,也在咨询能否提供更多的技术服务。经过引擎团队的讨论商议,我们从2.9.0beta版开始推出工具会员的服务版权益。...服务版其实是插件工具企业会员权益与个人版引擎共享技术服务的组合套餐,价格比分别单独购买更实惠。

1.2K40

即日起至11月30日,直播点播多款爆品,5折起售~

一年一度11,今年又有什么不同?...云产品会场 | 视频云专区 一看懂所有的点播直播买赠惊喜 看完上图如果你还选择困难,小编再帮你划重点: 云直播流量包,买!...最值得一提的是,购买200TB点播/直播流量包赠1年小程序点播/直播插件!一边省下小程序30000元/年的授权费用,一边拿到折扣流量包,完美杀!...视频云直播间优惠预告,11在售单品最高再降499元,更有100GB流量包6.6元限时秒杀。前10名下单用户还有机会赢499元富士相机哦~看直播还能参与3轮答题抽奖,腾讯定制公仔及QQ音箱带回家!...如果小伙伴们对于购买哪个规格还有疑问的话,可以直接后台回复“价格计算器”使用点播直播计算器来预估一下业务用量哦! ?

42K20

无法获得NVIDIA H100 GPU时该怎么办?

11月20日消息,英伟达(NVIDIA)推出的“Hopper”H100 GPU是目前全球AI巨头极力争夺的“战略资源”,但是由于供应量有限,很多订单都已经排到了2024年。...对于那些想要购买替代产品,并控制自己的预算的厂商来说,这可能意味着需要去考虑购买AMD MI300X 和 MI300A GPU 、英特尔Gaudi 2 加速器,或者尝试购买一些 Nvidia A100...假设AI厂商的 LLM 可以在没有太多 FP64 精度浮点的情况下进行 AI 训练——显然,有些模型可以使用 FP32 和较低的精度,因为上面的奇特 AI 引擎根本没有任何 FP64算术。...L40S 加速器,Lovelace AD102 是同一 GPU 的被动冷却服务器芯片变体,被用于 RTX 5000 和 RTX 6000 显卡,以及用于 OVX Metaverse 平台的 L40 CPU 计算引擎...)的比较: 由于 L40S 计算引擎通过 PCI-Express 结构直接相互连接,UltraStack 的性能提高了 35%,而且当从四台 X86 主机服务器减少到一台时,功耗降低了 35%,这是无可争议的

28910

首次揭秘1112背后的云数据库技术!| Q推荐

《数据 Cool 谈》第三期,阿里巴巴大淘宝技术部 12 队长朱成、阿里巴巴业务平台 11 队长徐培德、阿里巴巴数据库 11 队长陈锦赋与 InfoQ 主编王一鹏,一同揭秘了 11 12 背后的数据库技术...事实上为了保证稳定,往年 11 为了保证大促高峰能够平稳地过去,在一些计算量比较大或者稳定性风险比较高的地方就会实行降级策略,确保能够平稳度过流量高峰。...“大促的时候用比较高规格的存储机头,就是计算存储节点,一些熟悉数据库朋友的可能把它定义为引擎层、执行层,那是一个高规格的数据执行节点,但是我在日常不需要这么好的节点,就意味着它有个升降配的过程。...这样的描述很容易让技术人联想到搜索引擎。搜索引擎的确在功能上能够满足这些诉求,在技术上也非常成熟,但是应用在企业内部仅为了实现这一项功能,成本太高。...2021 年是阿里巴巴首个云上 100% 上云的 11 的一年,也是阿里云数据库全面云原生化的一年,但是峰值计算成本相比 2020 年下降了 50%,云数据库巨大的商业价值和潜力可见一斑。

31.7K50
领券