首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

spark分析网吧同行朋友思路

在mysql库中有2.5kw网吧轨迹数据, 需要计算同行关系:计算两人在相同网吧十分钟前后上下网三次及以上 (如:a和b在19号十分钟前后出现在了A网吧,又在21号十分钟前后出现在了B网吧, 再在22号十分钟前后出现在了...D网吧) 就需要保留他们的身份ID和一起上下网的次数。...2.5kw轨迹中有8k+网吧请问有什么思路吗? 如果flink有更好的处理方式也可以。 使用用一个mysql的连接器,但是这东西需要配置一个分区列。 直接用的网吧编号。...两个网吧,3w多数据,两个小时没跑完。。 (我们是先用连接器抽出数据,按照网吧分组计算单次然后聚合筛选3次及以上的) 网吧数据从几条到几万条不等。...处理思路: 按照网吧ID进行group by,然后同组内两两组合,判断A,B进入网吧时间差值是否小于10min,同时判断离开网吧的时间是否相差10min以内,如果两者都是true就保留,否则过滤。

86010
您找到你想要的搜索结果了吗?
是的
没有找到

IT 公司的 16 名员工被逮捕,缘起在 30 个城市的网吧部署挖矿恶意软件

大量电脑集体“中毒” 速度突然奇慢 刘先生是瑞安一家网吧的老板,为了吸引顾客,网吧的带宽和电脑配置都达到了相当高的标准。...更为离奇的是,电脑只要一开机,哪怕不运行任何程序,电脑系统资源的占有率就已经达到70%以上。 无独有偶。瑞安的不少网吧经营者都发现了类似情况,于是请专业人员维修。...眼见顾客不断流失,刘先生和其他网吧老板叫苦不迭。去年8月1日,无计可施的多位网吧老板集体向瑞安警方报案。...利用维护网吧电脑之机 植入程序 一个“黑客”链接逐渐变得清晰:金华的网络技术员刘某,是整个团伙的“大脑”,负责设计开发“挖矿程序”。...周某和熊某是湖南老乡,两人都从事网吧工作,有客户资源,负责推广程序。 下家是遍布全国的电脑维护公司,他们利用工作便利,可以接触到大量的网吧电脑,并神不知鬼不觉地植入挖矿程序。

55010

实战 | 记一次网吧挖矿应急响应

原创投稿作者:夜无名 0x01 前言 网上很少有关于对网吧应急类的文章,正好在今年的工作中处置过一起网吧挖矿的安全事件应急,网吧的网络环境与企业单位的环境都是天差地别的存在,网吧的网络环境杂乱无章各种病毒流氓软件...,基本上网吧的网络边界是不会存在流量审计这样的设备,且有两台服务器以上的网吧都算很不错的网吧了,所以在网吧环境下应急提升了不小的难度在此过程中也踩了不少坑也学到了不少,毕竟也是第一次到网吧处置安全事件。...因为是网吧环境,大家都知道现在网吧的客户端都是无盘系统启动的,每次开机都会还原为新的系统,所以客户机被植入挖矿病毒可能性不大同时也不排除有顾客在上网时段自己下载软件挖矿的可能性,但挖矿会占用电脑的算力也就会无法愉快的打游戏或者使用电脑...到现场后,与网吧老板和技术员沟通说明了来意,并也从部分网吧的老板口中得知网吧前段时间也有顾客反映玩游戏时时不时会卡一下有些显卡还烧坏了,因为客户机是无盘系统所以直接让网吧技术员登上三台服务器进行排查,在常规的排查过程中也使用专杀工具进行扫描...不出意外的又到现场来了,因为来的比较早在网吧技术员还没到在等的过程中就让前台随便给我开了一台客户机,因为网吧的客户机都是可以连接到服务器的平时他们技术员也是通过客户机去远程管理,就在等的过程中在客户机上敲了

2.1K10

一名黑客在网吧能做出什么神操作?

二、一名黑客会去网吧做神操作吗? 答:“这个问题其实可以分为两个问题,一个是“黑客会去网吧吗?”一个是“黑客去网吧会做神操作吗?”...没氛围,缺少网吧的感觉,所以黑客也是会去网吧的,有可能你在网吧上网的时候,你的旁边就有一名黑客哦,当然这种概率是很小的! 在说另一个,“黑客去网吧会做神操作吗?”...不会破解网吧收费系统、不会去网吧植马、也不会让网吧瘫痪 一样是拿着身份证去网吧,交钱,然后上机,没有别的神操作! 很多人看到这里就会好奇,为什么有技术还要乖乖交钱上网?...“脚本小子”在网吧的神操作可以多了去啦,因为我以前比较喜欢去网吧刷剧,玩游戏,为什么以前有这个习惯吗?...你快来看看,我这台电脑好像出问题啦”(ps:因为网吧机器有问题,经常是我帮忙解决,所以网吧很多人都认识我,都知道我会修电脑,网吧肯定也不例外啦,所以每次网吧出问题,她解决不了,都是第一时间叫我!)

1.4K30
领券