首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

京东商品详情页应对“11”大流量的技术实践

【编者按】此文是根据京东资深Java工程师张开涛11月21日在msup主办的 into100沙龙第14期《京东商品详情页应对大流量的一些实践》演讲中的分享内容整理而成。...我们有几亿个商品,对于这么多商品,你如果生成页面的话需要跑很多天,而且还无法应对一些突发情况。 ?...商品详情页涉及的服务 对于商品详情页涉及了如下主要服务: 商品详情页HTML页面渲染 价格服务 促销服务 库存状态/配送至服务 广告词服务 预售/秒杀服务 评价服务 试用服务 推荐服务...最早期的时候,我们商品详情页采用.NET技术,但是随着商品数量增加,而且随着商品数据库结构设计复杂性的变化,后来我们就生成了静态页,通过JAVA生成页面的片段,像商品介绍等等,都是通过一个一个片段输送出去的...比如展示商品详情页时,读取商品信息、商品相关信息:分类,商家,品牌等等信息然后渲染页面即可;而商品介绍读出来吐出去就可以了。

1.6K100

商品搜索引擎–商品推荐

因为工作需要,最近有在学习商品搜索引擎的东西。会涉及到系统推荐、个性化推荐和排序推荐。 排序推荐 比较偏向于 输入联想(类似于淘宝,我们输入手机,下面会提示推荐)。 但是本文,重点介绍个性化推荐。...系统推荐: 据大众行为的推荐引擎,对每个用户都给出同样的推荐,这些推荐可以是静态的由系统管理员人工设定的,或者基于系统所有用户的反馈统计计算出的当下比较流行的物品。...排序推荐:结合 用户输入的关键词、系统推荐、个性化推荐 三个维度进行排序推荐。...关于个性化推荐,根据推荐引擎的数据源有三种模式:基于人口统计学的推荐、基于内容的推荐、基于协同过滤的推荐 结合个人理解,具体化简述上面三个概念: (1)基于人口统计学的推荐:针对用户的“性别、年龄范围、...内容推荐和协同过滤推荐 结合 应该能满足大部分需求, 基于人口统计学的推荐看情况,如果有必要再实现。 另外 基于协同过滤 数据量 大的时候 才比较准。这种情况内容推荐 可以补位,推荐类似商品

1.4K50
您找到你想要的搜索结果了吗?
是的
没有找到

商品标题实体识别

比赛链接 https://www.heywhale.com/home/competition/620b34ed28270b0017b823ad/content/3 1 赛题背景 京东商品标题包含了商品的大量关键信息...,商品标题实体识别是NLP应用中的一项核心基础任务,能为多种下游场景所复用,从标题文本中准确抽取出商品相关实体能够提升检索、推荐等业务场景下的用户体验和平台效率。...本赛题要求选手使用模型抽取出商品标题文本中的实体。 与传统的实体抽取不同,京东商品标题文本的实体密度高、实体粒度细,赛题具有特色性。...值得注意的是实体不仅仅与实体词有关,而且与当前标题所售卖商品有关。...举例说明,一个售卖产品为手机壳的商品标题中出现的“iPhone13”与售卖产品为手机的商品标题中出现的“iPhone13”为不同的实体标签。

1.7K20

首次揭秘1112背后的云数据库技术!| Q推荐

从 2009 年到 2021 年,从千万交易额到千亿交易额, 11 已经开展了 12 年。如今,每年的 11 以及一个月后的 12,已经成为真正意义上的全民购物狂欢节。...刚刚过去的 2021 年 11,就有超过 8 亿消费者参与。 与攀升的交易额和参与人数相反, 11 的主要阵地“淘宝 APP”、 12 的主要阵地“天猫 APP”的崩溃情况逐年减少近无。...是什么样的数据库撑起了 2021 年的 11 12 的稳定进行?...《数据 Cool 谈》第三期,阿里巴巴大淘宝技术部 12 队长朱成、阿里巴巴业务平台 11 队长徐培德、阿里巴巴数据库 11 队长陈锦赋与 InfoQ 主编王一鹏,一同揭秘了 11 12 背后的数据库技术...在 11 12,这种方式的弊端会被进一步放大。数据显示,在 11 秒杀系统中,秒杀峰值交易数据每秒超过 50 万笔,是一个非常典型的电商秒杀场景。

31.7K50

Springboot+Java推荐算法+商品推荐系统+商品管理系统

面对海量的商品信息如何实现针对不同用户维度开展个性化商品推荐,实现用户线上选购商品,下订单,支付,物流配送等?...一、程序设计 本次商品推荐及管理系统主要内容涉及: 主要功能模块:商品推荐网站前台,商品管理系统后台 主要包含技术:springboot,mybatisplus,mysql,javascript,vue.js...商品推荐网站前台主要包括以下功能清单: 用户登录注册 商品轮播图 商品分类展示 商品推荐展示 用户购物车 订单管理 订单配送管理 个人中心 修改密码 商品管理系统后台主要包括以下功能清单: 管理员登录...[其他][9] [image.png] 其他效果省略 三、商品推荐设计 本次毕设系统在商品推荐算法设计中,主要采用基于用户协同过滤算法+商品内容关键词统计分析计算两种方式,其中基于用户协同过滤推荐算法主要利用用户历史购买商品的情况...,开展相似用户计算,商品关键词统计则是按照商品特征开展计算,两种计算方式结合优化商品推荐精准度。

8.2K63

推荐】飞林沙:商品推荐算法&推荐解释

做过商品或者条目推荐的同学,应该都创建过一张这样的Product Graph. 但是这样的图谱不具备文本含义的解释性,而且也没办法很好的和内容关联起来。...因为我们要时刻记得我们产生Topic的意义不仅仅是用来做推荐,还有为基于Link关系的商品推荐生成推荐理由,topic生成与商品之间的连接关系息息相关。 ?...作者从几个角度去出发,这几点都是值得我们在做推荐算法的时候考虑的: 推荐的递进性,我们过去无论在做商品聚类,还是基于标签推荐时,都是基于一个无向的“图模型”。...但是从工程角度上,并不适合上来就搭建这么复杂的模型,所以我们可以适当做简化,例如: 认为相同目录下的商品是替代关系,不同目录的商品是互补关系。... 通过抽取不同类目的关键词和情感词,给每个类目一组关键词,例如鞋子可以分成Size, 颜色, 舒适度,性价比等,然后通过关键词抽取对商品的不同维度去做分级,从而在推荐理由的时候就可以形成推荐产品的递进关系

1.2K50

11套路:先升再降?看我用Python记录商品每天价格!

打破这种规则很简单,可以用 Python 写一个定时监控商品价格的小工具。...思路 第一步抓取商品的价格存入 Python 自带的 SQLite 数据库 每天定时抓取商品价格 使用 pyecharts 模块绘制价格折线图,让低价一目了然 抓取京东价格 从商品详情的页面中打开 F12...控制面板,找到包含 p.3 的链接,在旁边的 preview 面板中可以看到当前商品价格 def get_jd_price(skuId): sku_detail_url = 'http://...sku_name_div = soup.find('div', class_="sku-name") if not sku_name_div: print('您输入的商品...推荐阅读 卧槽!Python人工智能调取摄像头神器校招毁约污点公司名录.pdf 前IBM中国总部数据科学家:下一个AI落地热门场景是? 扫码回复「大礼包」后获取大礼重磅!

68730

飞林沙:商品推荐算法&推荐解释

做过商品或者条目推荐的同学,应该都创建过一张这样的Product Graph. 但是这样的图谱不具备文本含义的解释性,而且也没办法很好的和内容关联起来。...因为我们要时刻记得我们产生Topic的意义不仅仅是用来做推荐,还有为基于Link关系的商品推荐生成推荐理由,topic生成与商品之间的连接关系息息相关。...作者从几个角度去出发,这几点都是值得我们在做推荐算法的时候考虑的: 推荐的递进性,我们过去无论在做商品聚类,还是基于标签推荐时,都是基于一个无向的“图模型”。...但是从工程角度上,并不适合上来就搭建这么复杂的模型,所以我们可以适当做简化,例如: 认为相同目录下的商品是替代关系,不同目录的商品是互补关系。... 通过抽取不同类目的关键词和情感词,给每个类目一组关键词,例如鞋子可以分成Size, 颜色, 舒适度,性价比等,然后通过关键词抽取对商品的不同维度去做分级,从而在推荐理由的时候就可以形成推荐产品的递进关系

2.5K90

基于java与springboot结合商品推荐算法实现商品推荐网站+商品管理系统后台,mysql,vue

面对海量的商品信息如何实现针对不同用户维度开展个性化商品推荐,实现用户线上选购商品,下订单,支付,物流配送等?...一、程序设计本次商品推荐及管理系统主要内容涉及:主要功能模块:商品推荐网站前台,商品管理系统后台主要包含技术:springboot,mybatisplus,mysql,javascript,vue.js...商品推荐网站前台主要包括以下功能清单:用户登录注册商品轮播图商品分类展示商品推荐展示用户购物车订单管理订单配送管理个人中心修改密码商品管理系统后台主要包括以下功能清单:管理员登录商品管理轮播图配置热销商品配置新品上线配置为您推荐配置商品分类管理会员管理订单管理二...、效果实现网站登录图片系统主页图片商品详情图片购物车图片我的订单图片后台商品管理图片轮播图管理图片订单管理图片热销商品管理图片其他效果省略三、商品推荐设计本次毕设系统在商品推荐算法设计中,主要采用基于用户协同过滤算法...+商品内容关键词统计分析计算两种方式,其中基于用户协同过滤推荐算法主要利用用户历史购买商品的情况,开展相似用户计算,商品关键词统计则是按照商品特征开展计算,两种计算方式结合优化商品推荐精准度。

1.1K20

直播继续搅局11

天猫:王牌主播打头阵 作为11赛场的擂主,天猫的11筹备自然是最值得期待的,截至目前公布出的成绩,也能够看出其火热程度。10月20日晚8点,天猫11正式开启预售。...今年天猫11共计1400万款商品集体打折,其中1000个品牌旗舰店的爆款商品将会全部补贴到5折。天猫此番大力度补贴为平台引流,最终受益的还是消费者。...今年11发布会上,天猫宣布将致力于打造一届“低碳11”,同时将全面升级已诞生15年的公益宝贝项目。如今阿里已经成为互联网行业最大的绿色电力交易主体。...除此之外,京东的售后服务保障也进行全面升级,11活动期间,京东超市价保政策升级为30天,购买带有“30天价保”标识的自营商品,30天内出现降价可享受补差价服务。...而个性化推荐榜单可以帮助榜单上的商品在主会场获得更多曝光,这些举动都可以说明抖音平台在不断完善自己电商版块的功能,为更好的GMV业绩铺路。

13.6K30

同款商品识别的克星--ArcFace!

ArcFace: Additive Angular Margin Loss for Deep Face Recognition(CVPR2019) 简 介 利用深度卷积神经网络(DCNNs)进行大规模人脸识别特征学习的一大挑战是设计合适的损失函数以提高识别能力...在本文中,我们提出了一个附加的角Margin损失(ArcFace)来获得高分辨的人脸识别特征。由于与超球面上的测地距离精确对应,所提出的弧面具有清晰的几何解释。...背 景 目前训练人脸识别的DCNN方案主要有两种: 训练一个多分类器,它可以将训练集合中的不同实体分开; 训练embeddings,例如triplet loss。...但是softmax的loss和triplet loss都存在一些缺点, 对于softmax来说: 线性转化矩阵和是线性相关的; 学习得到的特征对于闭集分类问题是可分离的,而对于开集人脸识别问题,学习到的特征是不可分辨的...ArcFace相较于Triplet-Loss有更好的margin; 小结 本文提出了一种Additive Angular Margin Loss ,该函数能有效地提高DCNNs学习的特征嵌入在人脸识别中的判别能力

3.1K10

大数据–商品推荐系统介绍(上)

这次我们介绍商品推荐系统: 推荐系统是什么 推荐引擎的分类 常见的推荐算法 混合的推荐机制(重要) 推荐系统架构 协同过滤的实现 推荐引擎解决的几个问题 主动的用户,通过类目和搜索进行引导,对结果页进行干预...被动的用户,通过用户的历史行为分析,推荐用户可能感兴趣的商品。...问题: 新用户怎么推荐?——–默认推荐 基于用户的协同过滤算法,推荐商品都是已经被购买过的,对于没有被用户购买过的商品,该如何推荐?...———混合推荐,将多种推荐模型的结果打乱混合推荐 商品数据和用户数量都很大的情况下,如何处理?...这听起来比较拗口,简单的说就是几件商品同时被人购买了,就可以认为这几件商品是相似的,可能这几件商品商品名称风马牛不相及,产品属性有天壤之别,但通过模型算出来之后就是认为他们是相似的。什么?

1.7K20

非常强大的商品实时推荐系统!

数据存储在Hbase的user表 产品画像记录 -> 实现基于标签的推荐逻辑 用两个维度记录产品画像,一个是喜爱该产品的年龄段,另一个是性别 数据存储在Hbase的prod表 事实热度榜 -> 实现基于热度的推荐逻辑...数据按时间窗口统计数据大屏需要的数据,返回前段展示 数据存储在Hbase的con表 b. web模块 前台用户界面 该页面返回给用户推荐的产品list 后台监控页面 该页面返回给管理员指标监控 2.推荐引擎逻辑说明...2.1 基于热度的推荐逻辑 现阶段推荐逻辑图 ?...根据用户特征,重新排序热度榜,之后根据两种推荐算法计算得到的产品相关度评分,为每个热度榜中的产品推荐几个关联的产品 2.2 基于产品画像的产品相似度计算方法 基于产品画像的推荐逻辑依赖于产品画像和热度榜两个维度...前台推荐页面 当前推荐结果分为3列,分别是热度榜推荐,协同过滤推荐和产品画像推荐 ? 4.

2.9K40

NER | 商品标题属性识别探索与实践

---- ©作者 | 康洪雨 单位 | 有赞科技 研究方向 | NLP/推荐算法 来自 | PaperWeekly 最近一段时间在做商品理解的工作,主要内容是从商品标题里识别商品的一些属性标签,包括不限于品牌...▲ 商品理解示例,品牌:佳丰;口味:蒜香味 本文主要记录下做这个任务上遇到的问题,踩的坑,模型的效果等。...主要内容: 怎么构建命名实体识别(NER)任务的标注数据 BertCRF 训练单标签识别过程及踩坑 BertCRF 训练超多标签识别过程及踩坑 CascadeBertCRF 训练超多标签识别过程及踩坑...而且抽出的字一般都是标题前 1、2 个字,这与商品品牌一般都在标题前面有关。...多标签样本是指一个标题中包含多个标签,比如下面这个商品包含 5 个标签。

2K20

商品搜索引擎—推荐系统设计

一、前言 结合目前已存在的商品推荐设计(如淘宝、京东等),推荐系统主要包含系统推荐和个性化推荐两个模块。...二、系统推荐 2.1、系统推荐目的 针对所有用户推荐,当前比较流行的商品(必选) 或 促销实惠商品(可选) 或 新上市商品(可选),以促进商品的销售量。...PS:根据我们的应用情况考虑是否 选择推荐 促销实惠商品 和 新上市商品。(TODO1) 2.2、实现方式 实现方式包含:系统自动化推荐 和 人工设置推荐。...(1)系统自动化推荐考虑因素有:商品发布时间、商品分类、库存余量、历史被购买数量、历史被加入购物车数量、历史被浏览数量、降价幅度等。...: GenericUserBasedRecommender:基于用户的推荐器,用户数量少时速度快; GenericItemBasedRecommender:基于商品推荐器,商品数量少时速度快,尤其当外部提供了商品相似度数据后效率更好

1.4K40

智慧零售商品识别系统方案解析,15分钟上手商品识别AI模型

2 基于EasyDL零售版的商品识别方案 将终端数据转化为数字资产 百度飞桨EasyDL零售版,针对快消零售业提供专业版服务,实现了低成本、高精度获取商品图像识别模型,完成智能化的店内陈列与费用核销。...通过 EasyDL 零售版,可以训练包含但不限于本品 SKU、竞品 SKU、POSM 助销物料、价签与价格等识别对象。...同时,还配套提供货架拼接、翻拍识别、空位识别商品陈列层数识别商品陈列场景识别等通用能力,从业务实际需求出发,有效获取网点真实商品分销和陈列数据,推动实时预警、及时跟进的市场策略落地,帮助快消品牌商顺利完成经营模式的数字化转型

1.3K10

Python帮你识破11的套路

商品“明降暗升”的传言早有耳闻:很多商品在双十一之前早早地把价格调高,加上优惠之后也不过就是跟以前的原价相当。让不知情的消费者在心理上感觉占了便宜。...这个传言是不是真的,很好判断,只要定期去访问商品页面,记录价格就可以。不过一般人也没闲工夫这么去做。于是,我们用 Python 做了一个可以定时监控商品的小工具,可以帮你监控想要关注的商品。...这款保暖背心产品,之前标价 39.9元,到11月之后却突然调价为 49.9元,并标注上了“11狂欢价”,也就是原价…… ? ? 代码实现 识别套路的代码其实并不复杂,主要就2点: 1....首先要设定你要监控的商品地址,通过 requests 库获取商品信息。...有这两步,就可以起到定时监控商品价格的效果了。为了便于查看,我们还可以增加一步: 3. 用 matplotlib 或者 pyecharts 等绘图库绘制出商品价格时间变化折线图。

1.8K20
领券