腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

CDN及云技术分享

专栏作者

140

文章

277689

阅读量

40

订阅数

讲讲对推荐系统特征工程的理解

缓存 kafka 云数据库 Redis 大数据特征工程

为什么会有两条线。有些场景的实时数据流比较难处理。比如说电商系统中，一笔订单在发生几天之后会产生推开，这种场景的实时数据是比较难处理，需要通过离线数据进行修正。还有比如说，点击对卖家进行收费，这会产生同行之间的恶性竞争，比如说卖家会故意点击对手卖家的商品产生不必要的广告费用。系统需要对这种行为进行监控，这种监控逻辑实时和离线都会存在，但有一些逻辑需要离线情况来计算。离线数据进行计算来达到最终数据一致性的标准。也有说法是根据更新的时效性，分位实时特征和离线特征两类，实时特征是秒级更新，离线特征多是天级任务或小时级任务更新。

2022-04-20

1.3K0

日更系列：一次线上服务内存问题

线上预估服务节前升级到线上，元旦假期出现了P99耗时超过检测阈值。因为正值节假日应用商店流量都有增长，便直观想简单扩容进行解决。但是简单看了下观察了cpu和内存，都是不忙。然后再细看内存里的各种统计指标。有两项指标MEM实际使用率和MEM CACHED这两项几乎涨到了物理内存的上限。实际使用率使用到了90%。观察到上涨的时机正是预估模型每天更新时间点，而且涨了之后并不会跟随pv变化而明显变化。

2022-01-29

7370

一次Redis内存满的问题以及工具使用

云数据库 Redis 缓存 analyzer

Redis Memory Analyzer (RMA)是个Redis的key占用分析工具。

2020-12-28

2K0

kafka的机器选型原则

kafka 缓存存储

kafka磁盘，会持久化每条消息到硬件存储，当达到一定数量时，broker成功接收才通知client发送成功，这时候才允许删磁盘。消息越快写到磁盘，给客户端的请求延时越低。消息会被保存一段时间再删除。

2020-06-22

1.3K0

innodb存储引擎原理

云数据库 SQL Server 全文检索缓存数据库存储

存储引擎位于文件系统（各种数据，二进制形式）之上，各种管理工具（连接池、语义分析器、优化器、缓存区、SQL接口）之下。

2019-05-27

2.5K0

[CDN]动态内容的缓存技术 CSI,SSI,ESI

缓存 cdn html javascript

CDN 中动态内容是不太好解决的，通常需要很麻烦的技术和方法来实现这些功能。

2018-09-19

3.1K0

微型分布式架构设计范例

缓存日志服务数据库 sql

设计该系统初衷是基于描绘业务（或机器集群）存储模型，分析代理缓存服务器磁盘存储与回源率的关系。

2018-08-26

1.8K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态