从 2009 年到 2021 年，从千万交易额到千亿交易额，双 11 已经开展了 12 年。如今，每年的双 11 以及一个月后的双 12，已经成为真正意义上的全民购物狂欢节。...是什么样的数据库撑起了 2021 年的双 11 双 12 的稳定进行？...《数据 Cool 谈》第三期，阿里巴巴大淘宝技术部双 12 队长朱成、阿里巴巴业务平台双 11 队长徐培德、阿里巴巴数据库双 11 队长陈锦赋与 InfoQ 主编王一鹏，一同揭秘了双 11 双 12 背后的数据库技术...事实上为了保证稳定，往年双 11 为了保证大促高峰能够平稳地过去，在一些计算量比较大或者稳定性风险比较高的地方就会实行降级策略，确保能够平稳度过流量高峰。...在水平扩展的集群中，每个节点服务数十个分区，每个分区使用单独线程响应的事务处理模型避免了锁竞争的开销。据悉，在大促场景下，Tair 提供了几乎直线般的 P99 访问延时。
TLDR: 本文将社交推荐任务建模在双曲空间学习之下，并提出了一种基于双曲图学习的社交推荐模型。...具体的，其设计了一个双曲社交预训练模块以保留社交结构作为特征，并从显式的异质图学习和隐式的特征增强两方面缓解社交推荐存在的问题。...最近，一些研究探索了将图嵌入学习转移到双曲空间的替代方法，双曲空间可以保留现实世界图的层级结构。 然而，直接将当前的双曲图嵌入模型应用于社交推荐并非易事，因为存在两大挑战：网络异质性和社交扩散噪声。...为了解决上述挑战，本文提出了一种基于双曲图学习的社交推荐（HGSR）模型。首先，利用双曲社交嵌入的预训练来探索社交结构，这可以保留社交网络的层级特性。...总之，本文提出了一种新颖的HGSR模型用于双曲空间的社交推荐。为了利用社交影响扩散引入的异质性和噪声问题，设计了一种社交预训练增强的双曲异质图学习方法。
此外，由于图神经网络在提取图数据特征方面的强大性能，一些研究将推荐系统与 GNN 结合了起来。...基于 GNN 的知识图谱推荐模型通常将用户-物品历史交互与外部知识图谱的交互统一为三部图，然而在数据统一之后，这些三部图通常呈现出无标度（或层次）图的特点，如图 1（a）所示，两项基准数据集的度分布近似于幂律分布...为了解决上述问题，本文提出了基于的双曲几何洛伦茨模型的知识感知推荐模型，简称为 LKGR。...3.2.2 洛伦茨消息传递 为了在洛伦茨流形上传播邻域信息，需要分别计算用户和物品邻域的洛伦茨线性组合。...图 3 展示了 topk 推荐任务下本文算法与基线算法的性能对比。
1 中国开源生态日益健全，场景从互联网向金融等延伸 最近几年，随着国际上开源生态的不断壮大，服务于开源事业的机构日益增多。基金会和企业日益成为开源发展中最重要的构成部分。...开源地址：https://github.com/TuGraph-family/tugraph-analytics 3 扛过双 11 大考，落地百余场景，TuGraph-Analytics 筹划已久...2018 年的双 11，流图计算做到了在大促极端流量高峰情况下，动态识别超过六度关系链（隐蔽性强）的异常资金风险，这一风控能力在当时的业界非常领先。...“那时，我们从 6、7 月份就开始和业务同学一起闭关筹备双 11，内部做了几轮流量压测，包括极端情况下的解决方案全部讨论完毕才确定推到双 11。”...在解决业务问题时，二者一般联动运行，比如基于 TuGraph-Analytics 进行实时数据分析，并将分析之后的数据写回到 TuGraph-DB，提供查询服务。
类似文章 OGG有传统的经典架构，也有最新的微服务，2个都可以远程捕获和应用数据，对数据库服务器是0侵入，而传统的经典架构是纯命令行模式，最新的微服务架构是图形化界面操作，几乎所有操作都可以在界面进行。...使用OGG for PG微服务快速双向同步RDS数据库（双主）：https://www.xmmup.com/shiyongogg-for-pgweifuwukuaisushuangxiangtongburdsshujukushuangzhu.html...使用OGG for mysql微服务搭建双主架构（含DDL）：https://www.xmmup.com/shiyongogg-for-mysqlweifuwudajianshuangzhujiagouhanddl.html...使用数据泵+OGG微服务 -- 创建专用网络 docker network create --subnet=172.72.7.0/24 ora-network -- OGG微服务 docker...constraint ORDERS_CUSTOMER_ID_FK; 5、使用ogg 12.2 replicate参数DBOPTIONS ENABLE_INSTANTIATION_FILTERING（推荐
类似文章 OGG有传统的经典架构，也有最新的微服务，2个都可以远程捕获和应用数据，对数据库服务器是0侵入，而传统的经典架构是纯命令行模式，最新的微服务架构是图形化界面操作，几乎所有操作都可以在界面进行。...使用OGG for PG微服务快速双向同步RDS数据库（双主）：https://www.xmmup.com/shiyongogg-for-pgweifuwukuaisushuangxiangtongburdsshujukushuangzhu.html...使用OGG for mysql微服务搭建双主架构（含DDL）：https://www.xmmup.com/shiyongogg-for-mysqlweifuwudajianshuangzhujiagouhanddl.html...使用数据泵基于flashback_scn+OGG微服务零停机迁移12c到19c：https://www.xmmup.com/shiyongshujubengjiyuflashback_scnoggweifuwulingtingjiqianyi12cdao19c.html...使用数据泵+OGG微服务 使用ogg 12.2 replicate参数DBOPTIONS ENABLE_INSTANTIATION_FILTERING（推荐）。
新商家事业部自去年12月成立以来，数据赋能商家就是重要的方向之一。我们将之前平台沉淀的数据和算法的能力转过来赋能我们为商家提供的工具和平台，这其中包括客户运营平台、千牛、服务市场等等。...很多技术在今年的双11也起到了非常显著的作用，为商家带来实实在在的收益。下面从客户运营平台、千牛头条、服务市场三个产品给大家分享一下我们如何通过ML&AI技术重新定义产品。...基于图挖掘的matching方法 包括adsorption、adar、jacacard、simrank、simrank++以及基于大规模流式计算的增量ItemCF方法； 2....原来的服务市场千人一面，不能很好匹配商家实际需求，导购效率较低。 为解决以上问题，我们设计了服务市场个性化框架（如下图），在个性化搜索和推荐场景中取得了显著的效果。...个性化导购框架 框架分为在线计算和离线计算，在线计算负责实时的商家行为分析，商品召回，个性化排序；离线部分负责商家/服务特征更新，订购模型训练以及候选商品池计算。
或双12这种大型促销的时候，QPS（Queries Per Second, 每秒查询率）在百万级别以上，我们支持高并发低延迟的业务需求，就是在这样的环境下产生的。”...而在服务层上，整个GeaBase分为存储层和计算层，GeaBase的功能主要通过计算层当中的各种模块实现。 在执行层上，使用异步执行引擎、优化通信等方法来提升性能。...在Strata大会的演讲现场，蚂蚁金服基础技术部图计算及存储技术团队负责人叶小萌介绍了一种基于GeaBase的好友推荐算法。...这种算法从GeaBase中提取用户的社交网络关系，并计算一个用户的朋友的集合（F）与其朋友的朋友的朋友的集合（FOFOF）的交集，并选择交集内元素多的好友推荐给用户。...事实上，蚂蚁金服使用基于GeaBase的推荐算法的领域并不局限于社交网络，在咨询推荐，理财产品推荐，征信评价（芝麻信用分）等业务场景中，图数据都得到了大量的应用。
，双12,三八男人节等活动； 其他的功能参考京东或国美在线等网站。...其他的略~~~~~ 需求功能矩阵 需求管理传统的做法，会使用用例图或模块图（需求列表）进行需求的描述。这样做常常忽视掉一个很重要的需求（非功能需求），因此推荐大家使用需求功能矩阵，进行需求描述。...，双12,三八男人节等活动 活动管理，秒杀 突增访问流量（可伸缩）实时性要求（高性能） 参考京东或国美在线 参考条件 以上是对电商网站需求的简单举例，目的是说明（1）需求分析的时候，要全面，大型分布式系统重点考虑非功能需求...日均UV量-每日的PV量-每天的并发量； （2） 峰值预估：平常量的2~3倍； （3） 根据并发量（并发，事务数），存储容量计算系统容量。...（不知道以上算是否有错误，呵呵~~） 服务器预估：（以tomcat服务器举例） （1） 按一台web服务器，支持每秒300个并发计算。
本专栏将使用tableau来进行数据分析，Tableau数据分析-Chapter13雷达图和凹凸图，记录所得所学，作者：北山啦 文章目录 本节要求 1 雷达图 1.1 数据表处理 1.2 创建计算字段...x->列，y->行，分析->取消聚合度量；标记->线，F1->颜色，路径->路径 添加各轴能力名称：复制y，双轴，设置同步轴 显示能力名->第二个图的标签,显示能力值标签->第一个图的标签...利润下拉列表->编辑表计算->特定维度、子类别 3. 复制行->双轴图->同步轴。 第二个图标签为->形状，实心圆。 4....推荐阅读： Tableau数据分析-Chapter01条形图、堆积图、直方图 Tableau数据分析-Chapter02数据预处理、折线图、饼图 Tableau数据分析-Chapter03基本表、...箱线图 Tableau数据分析-Chapter12 网络图与弧线图 Tableau中国五城市六年PM2.5数据挖掘 Python+Tableau广东省人口普查可视化分析
Olive流程图 正是在All-in无线后的这一年，个性化推荐开始在阿里逐步成长起来。 个性化推荐初逢双11 2015年，个性化推荐第一次在双11中大放异彩。...回到杭州之后，团队全员进入备战状态，我们的努力在双11当天得到了回报。2015年11月12日凌晨，推荐算法团队、手淘及天猫的众多小伙伴们并不觉得疲乏，大家的脸上都闪烁着喜悦。...对那些有运营能力的商家来说，我们希望其通过更多优质的商品和优秀的服务换来更多的流量或销量上的部分确定性。...赋能商家的Matrix系统流程图 个性化推荐的智能未来 个性化推荐从无到有，直到演进成为CEO逍遥子口中的“电商基础设施”，这一切来得极为不易。...从数据流通链路来看（比如下图所示的手淘场景数据流通图），我们可以很自然地将全链路多场景的推荐任务理解为推荐系统面向用户的连续决策过程。
由以HDFS作为基础存储平台的离线挖掘系统、用户行为实时收集并处理的近线系统及在线推荐服务构成，推荐平台提供了K近邻、矩阵分解、图模型等常见的推荐模型。...图3 算法比较 阿里巴巴搜索事业部算法专家严强：个性化算法IN双11 2015年双11天猫成交量高达912亿，移动端占比68.67%，其中各个平台的个性化推荐功能对于促进成交量起了非常重要的作用。...Olive是一个融合了实时流计算和在线学习的近实时机器学习系统，采用了典型的参数服务器架构，与MPI方案比，Olive无论在计算资源的节省方面还是训练速度方面都有大幅提升。 ?...图4 阿里个性化算法系统 美团网数据组技术专家付晴川：机器学习在用户画像上的应用 利用用户的各种行为数据来对用户进行画像，通过用户画像深入了解用户的各方面特点，并使用用户画像来给用户推荐更加个性化和精准的产品和服务...爱奇艺推荐系统也采用了典型工业推荐系统的技术架构（图6），由离线数据处理系统、近线准实时计算系统以及在线实时推荐三个部分构成。
一般来说做科学计算的用户对双精度（FP64）计算要求高， 对深度学习或者神经网络的用户来说对双精度计算要求不那么高，单精度（FP32）计算就可以了。...关于什么是单精度、双精度，可以看一下这个文章（科普 | 单精度、双精度、多精度和混合精度计算的区别是什么? ） 如果你对双精度计算要求高的话，那么你就只能买Tesla卡了。...经常遇到老师问能推荐一款2万以内的支持双精度的Tesla卡么？ ——还真的没有！32GB Tesla V100 行货的市场价格在6万左右，Tesla P100也要小3万....机架服务器不是不能装RTX卡，但是还是一个散热问题。我们不推荐用户装这种： NVIDIA双风扇GeForce RTX散热器破坏多GPU性能，是真的么？ ?...有个用户他准备插4片Tesla V100，内存是插满12根16GB的好，还是插6根32GB的好？ 一般来说是是16G × 12好， 因为可以尽量利用所有的内存通道。
云计算是个好东西，但它的成本优势更多体现在大数据处理上，每天需要处理几十几百 TB 甚至 PB 级别的数据时，云计算才会比自建维护机房要划算得多。如果处理的数据不大，自己组装个服务器要划算得多。...之前在《年轻人的第一台服务器：最低不到五千，捡垃圾搭建自己的科学计算平台》中推荐过几个 DIY 组装的方案。不过，这几套方案适合动手能力强、有一定基础的人。 这次，再来推荐几个更为简单易行的方案。...方案 1：双路 X99 主板 + 128G DDR4 服务器内存 CPU: E5-2678 V3，￥560 * 2个 = ￥1120 主板：华南金牌 X99-F8D，￥863 内存：三星 16G DDR4...机箱：先马坦克 3 （带 6 个 LED 风扇），￥229 散热器：兰硕 6 铜管散热器，￥66 * 2个 = ￥132 合计：￥5171 方案 4：双路 X99 主板 + 256G 服务器 DDR3...如果有更高的内存需求，那就需要上服务器主板了，具体可以参考 年轻人的第一台服务器：最低不到五千，捡垃圾搭建自己的科学计算平台 这篇文章。
演进的背景 运用机器学习技术来提升搜索/推荐平台的流量投放效率是目前各大互联网公司的主流技术路线，并仍然随着计算力和数据的规模增长，持续地优化和深入。...图1 搜索智能化演进过程 1. 2014年双11，实时之刃初露锋芒 技术的演进是伴随解决实际业务问题和痛点发展和进化的。...，并将计算结果实时更新同步给主搜、商城、店铺内引擎、天猫推荐平台、流量直播间等下游业务。...随着时针跨过12点，流量风暴如期而至。Pora QPS飙升到40万/秒，接近日常QPS的10倍。...图3 2015年双11的实时计算体系 3. 2016年双11，深度学习+强化学习独领风骚 2015年双11，在线学习被证明效果显著，然而回顾当天观察到的实时效果，也暴露出一些问题。
点击“博文视点Broadview”，获取更多书讯 今天是双12，错过双11的小伙伴们可不要连双12也错过了哦~~ 如果你不知道买哪些书，可以看看大家都在买哪些。...双12福利 京东满100减50，部分图书满减叠券300减200 当当科技好书五折封顶 还等什么？速抢吧！...04 ▊《软件研发效能权威指南》 茹炳晟，张乐 主编 研发效能重磅级案头手册 从底层逻辑、案例剖析到全景式思维导图“一网打尽” 在数字化时代，公司的业务都高度依赖信息技术，研发效能已经成为科技企业发展的核心竞争力...10 ▊《图灵宇宙：原初纪元》 张立波，武延军，赵琛 著 CCF科普阅读推荐图书 软件所科研人员专业打造 用1500+精美漫画讲述图灵奖得主精彩故事 跟着有趣的计算机科学家 轻松了解计算机史及前沿高科技知识...发布：刘恩惠 审核：陈歆懿 如果喜欢本文欢迎 在看丨留言丨分享至朋友圈 三连 热文推荐 7天搞定一门新技术！
在2023年11月12日，刚经过双11的购物节大压力的阿里，却从17:44起发生了服务宕机，旗下的淘宝、闲鱼、饿了么等服务出现服务中断，甚至让高校学生宿舍的洗衣机都“宕机”了。...:11 受影响产品 : 企业级分布式应用服务、消息队列 MQ、微服务引擎、链路追踪、应用高可用服务、应用实时监控服务、Prometheus监控服务、消息服务、消息队列Kafka版、机器学习、图像搜索、智能推荐...AIRec、智能开放搜索 OpenSearch、云行情、数据总线 DataHub、检索分析服务 Elasticsearch版、图计算服务 Graph Compute、实时计算 Flink版、智能数据建设与治理...、超级计算集群、批量计算、无影云桌面、弹性伸缩、弹性容器实例、弹性裸金属服务器、云服务器 ECS、轻量应用服务器、函数计算、Serverless 应用引擎、云托付、专有宿主机、GPU云服务器、弹性高性能计算...、操作审计、服务器迁移中心、运维编排、智能计算灵骏、云呼叫中心、交通云控平台、客服工作台、视觉智能开放平台、智能外呼机器人、智能语音交互、智能对话机器人、智能用户增长、运维事件中心、新零售智能助理、智能双录质检
用户购买时可以在线与客服沟通； 3、用户收到商品后，可以给商品打分，评价； 4、目前有成熟的进销存系统；需要与网站对接； 5、希望能够支持3~5年，业务的发展； 6、预计3~5年用户数达到1000万； 7、定期举办双11...，双12,三八男人节等活动； 8、其他的功能参考京东或国美在线等网站。...其他的略~~~~~ 需求功能矩阵 需求管理传统的做法，会使用用例图或模块图（需求列表）进行需求的描述。这样做常常忽视掉一个很重要的需求（非功能需求），因此推荐大家使用需求功能矩阵，进行需求描述。...量-每天的并发量； （2）峰值预估：平常量的2~3倍； （3）根据并发量（并发，事务数），存储容量计算系统容量。...（不知道以上算是否有错误，呵呵~~） 服务器预估：（以tomcat服务器举例） （1）按一台web服务器，支持每秒300个并发计算。
自研数据库POLARDB和OceanBase分别处理8700万、6100万笔/秒峰值请求、实时计算处理峰值每秒25.5亿笔、计算平台单日处理970PB数据、12亿笔物流智能化等……2019年双11期间，...在视觉方面，拍立淘日处理图片10亿张，今年双十一，视觉AI对拍立淘做了技术升级，从一图一物到一图多物的升级，比如之前只识别一个元素，到今天全身穿搭一次性识别，而且这个技术在计算机视觉领域顶级会议上ICCV...在双11中，阿里使用了全自研的一整套平台，平台包括超过10万台规模服务器集群，10+数据中心、10EB级别存储、每天千万级别的大数据和AI计算作业。...据统计，去年2018年双十一的时候，这样的实时推荐给商家的智能决策，90%都会被商家采用。...网络、服务器、存储这些基础设施多年来发生了翻天覆地的变化，微服务，容器化，数据库等一系列的底层技术和框架的持续演进，带动了电商技术今天在搜索，个性化推荐，视频互动，消息等各个应用领域支撑和连接着数亿消费者
本年度精英科研人才计划将延续人工智能领域顶尖科研人才培养，发布包含机器人、AI医疗、量子计算、智慧城市等12个前沿热议方向，71项研究课题。...目前在腾讯地图大数据实验室，负责人口建模、实时在线服务、人群画像挖掘等相关研发工作。...同时对数据库云原生构架、HTAP数据库构架、同城双活两地三中心构架等有深入研究，发表多篇相关领域文章及专利。曾作为中科院计算所硕士企业导师，辅导研究云原生计算缓存优化等课题。...作为核心研发人员先后参与腾讯大数据平台TDW、腾讯自研机器学习平台Angel等项目，在大数据分析、机器学习、图计算和联邦学习等方向拥有10年研发经验，发表顶会论文6篇，发明专利10余篇。...课题（七）——自然语言处理 课题（八）——视觉及多媒体计算 课题（九）——信息检索与推荐系统 了解犀牛鸟精英计划更多详情： 2021腾讯“犀牛鸟精英人才培养计划”申请启动 2021腾讯“犀牛鸟精英科研人才培养计划
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
