前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >用LUA字典进行IP数据去重操作

用LUA字典进行IP数据去重操作

作者头像
糖果
发布2019-11-20 19:44:03
8000
发布2019-11-20 19:44:03
举报
文章被收录于专栏:糖果的实验室糖果的实验室

因为业务需要,监控手机客户端对服务器在一分钟内请求的总数和IP访问量(求PV、IP数),要对IP数据进行去重操作,单位时间1分钟的HTTP请求,IP相同的只保留一个IP,少用IF,多用循环。利用Lua语言Table数据结构Key的唯一性,不能重复的特点进行去重操作,代码如下:

Moonscript实现:

Lua实现:

如果此方案有坑,望请大家留言。

与正文不相关的部分(可以忽略不看):

实际上为了简单,我们统计IP总数,并没有统计IP对应的出现次数,如果保存了 IP和IP出现的次数,其实就可以统计单位一分钟内某IP访问的频次,在实际业务当中,一个IP的请求次数是有一定的取值范围的,高出合格峰值很多的话,这个IP是应该被关注,后续可以将上面的方法,进行扩展,实时统计出IP请求量, 与设定的预警值进行比较,如果发现总请求次数与总IP数据过高,发出预警。

也可以将前Top10-100名IP请求的数,进行饼图可视化显示。

本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2019-01-02,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 糖果的实验室 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
灰盒安全测试
腾讯知识图谱(Tencent Knowledge Graph,TKG)是一个集成图数据库、图计算引擎和图可视化分析的一站式平台。支持抽取和融合异构数据,支持千亿级节点关系的存储和计算,支持规则匹配、机器学习、图嵌入等图数据挖掘算法,拥有丰富的图数据渲染和展现的可视化方案。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档