作者简介 邢钦华,携程风控团队高级研发经理。2016年加入携程,是风控大数据平台Chloro的设计和开发的主要参与者。专注于大数据流式处理和用户行为分析在互联网风控领域中的应用。 在实时风控系统中会涉及到非常多的数据衍生和解析,比如IP归属地解析、手机号归属地解析、银行卡卡BIN解析等等。以IP归属地为例,传统的实现IP归属地查询的方法是把IP地址信息存储到关系型数据库中,对于并发量比较少,实时性要求不高的情况下是可行的,但是一旦并发量增大时,会对关系型数据库产生很大的压力,并且访问速度会明显减慢,因此对于
假设一家商业网站开发了软件产品,他们希望知道都是来自哪里的用户下载或更新我们的软件,并进行可视化分析。
很多时候,我们获取了用户ip,但是想知道更多信息,怎么办?使用ip2location吧。
2022.10.20共发现匿名网络资讯信息103,249条;最近7天共发现匿名网络资讯信息891,289条,同比增长200.51%;最近30天共发现匿名网络资讯信息3,237,609条。
Ip2region - 准确率99.9%的离线IP地址定位库,0.0x毫秒级查询,ip2region.db数据库只有数MB,提供了java,php,c,python,nodejs,golang,c#等查询绑定和Binary,B树,内存三种查询算法。
跨国服务的网站通常需要针对不同国家和地区的用户显示不同的内容。通常我们会根据用户的IP地址识别Ta所在的国家和地区,而自己编写代码以及购买和维护IP数据库,或使用三方的IP数据服务,是潜在的996成本。虽然完整的IP数据库可以识别所有国家和地区,但很多时候,网站想要的只是区分个别几个国家和地区,如何不996快速实现这个需求呢?
[喵咪开源软件推荐(3)]全球IP库-GeoLite2-City #w-blog博客 哈喽大家好啊!喵咪开源软件推荐(3)终于和大家见面了,这次我们来说说什么呢?大家有没有遇到过这样一个场景,当你出国
这篇文章就来搜集整理一下网站限制IP访问的方法,以及梳理一下国内外免费在线和离线的IP库,方便大家使用。
2022.11.7共发现匿名网络资讯信息79,195条;最近7天共发现匿名网络资讯信息477,752 条,同比增长-2.6%;最近30天共发现匿名网络资讯信息2,301,723条。
安装geoip模块 ./configure \ --prefix=/usr/local/nginx \ --pid-path=/var/run/nginx.pid \ --user=nginx \ --group=nginx \ --with-stream \ --with-threads \ --with-file-aio \ --with-http_v2_module \ --with-http_mp4_module \ --with-http_sub_module \ --with-http_ssl
2022.10.23共发现匿名网络资讯信息49,638条;最近7天共发现匿名网络资讯信息775,042条,同比增长62%;最近30天共发现匿名网络资讯信息2,972,908条。
细心的小伙伴可能会发现,抖音新上线了 IP 属地的功能,小伙伴在发表动态、发表评论以及聊天的时候,都会显示自己的 IP 属地信息
描述: 为了实现根据访问者访问我们的网站时根据其IP显示其所属地,也为获取不同地区访问者的IP地址等相关信息为目的,所以在搜索引擎中查找解决方案,在网络上查询到如下几种方案Nginx+GeoIP2、使用收费 IP 识别接口、DNS 根据地域解析,然后经过多方面考究,最终还是使用Nginx+GeoIP2解决方案。
2022.11.10共发现匿名网络资讯信息43,355条;最近7天共发现匿名网络资讯信息458,957条,同比增长26.3%;最近30天共发现匿名网络资讯信息2,389,927 条。
2022.11.24共发现匿名网络资讯信息64,255;最近7天共发现匿名网络资讯信息603,254条,同比增长40.2%;最近30天共发现匿名网络资讯信息2,123,515条。
2022.10.18共发现匿名网络资讯信息129,025条;最近7天共发现匿名网络资讯信息699,443条,同比增长107.03%;最近30天共发现匿名网络资讯信息3,376,242条。
细心的小伙伴可能会发现,最近蘑菇新上线了 IP 属地的功能,小伙伴在发表动态、发表评论以及聊天的时候,都会显示自己的 IP 属地信息
2022.11.2共发现匿名网络资讯信息112,639条;最近7天共发现匿名网络资讯信息511,216条,同比增长-23.0%;最近30天共发现匿名网络资讯信息2,366,027条。
网络渗透测试完全模拟黑客可能使用的攻击技术和漏洞发现技术,对目标系统的安全做深入的探测,发现网络脆弱环节,能直观的让网络管理员知道自己网络所面临的问题。所以渗透测试是安全评估的方法之一。
我们生活在数据的黄金时代。有些公司将其分析为更好的自己,有些公司为了获利而进行交易,没有一家公司因其价值而自由放弃 - 对于他们的业务和犯罪分子。
现在很多IP的接口api很多我例举几个常用的出来: http://int.dpool.sina.com.cn/iplookup/iplookup.php //新浪 http://ip.ws.126.
2022.10.31共发现匿名网络资讯信息60,390条;最近7天共发现匿名网络资讯信息490,532条,同比增长-28.6%;最近30天共发现匿名网络资讯信息2,444,957条。
2022.11.6共发现匿名网络资讯信息58,061条;最近7天共发现匿名网络资讯信息458,947 条,同比增长-5.7%;最近30天共发现匿名网络资讯信息2,269,067 条。
网络攻击可以袭击任何组织,甚至大规模破坏其运作。就在最近,设施管理服务提供商ISS World发布了一份声明,其中提到自己是恶意软件攻击的受害者。ISS World的客户遍布全球70多个国家。ISS World还声称已经控制了袭击,并确定了威胁的根源。
来源 | https://gitee.com/lionsoul/ip2region
地理定位查询的的数据库比较多,而且大多都开放一些free的版本,国内的有纯真数据库等,但是他只提供文本的地理位置信息,不提供经纬度数据。国外的有MaxMind的GeoIP数据库、IP2Location数据库等,它们提供经纬度数据,本文简单介绍下,MaxMind的GeoIP,此数据库用于国家的查询。 首先,在MaxMind官网下载所需资源 GeoIP数据库下载地址:http://geolite.maxmind.com/download/geoip/database/GeoLiteCountry/GeoIP.d
今天博客开始继续更新,谢谢大家对我的关注和支持。这几天一直是在写一个ip代理池的开源项目。通过前几篇的博客,我们可以了解到突破反爬虫机制的一个重要举措就是代理ip。拥有庞大稳定的ip代理,在爬虫工作中将起到重要的作用,但是从成本的角度来说,一般稳定的ip池都很贵,因此我这个开源项目的意义就诞生了,爬取一些代理网站提供的免费ip(虽然70%都是不好使的,但是扛不住量大,网站多),检测有效性后存储到数据库中,同时搭建一个http服务器,提供一个api接口,供大家的爬虫程序调用。 好了,废话不多说,
最近,继新浪微博之后,今日头条、腾讯、抖音、知乎、快手、小红书、百家号等各大平台陆陆续续都上线了"网络用户IP地址显示功能",境外用户显示的是国家,国内的用户显示的省份,而且此项显示无法关闭,归属地强制显示;
2022.10.27共发现匿名网络资讯信息188,046条;最近7天共发现匿名网络资讯信息556,982 条,同比增长-37.5% ;最近30天共发现匿名网络资讯信息2,538,330 条。
DNS服务知识体系.png 一、DNS域名解析系统 1.DNS DNS(域名解析系统)是一个分布式数据库,以C/S方式工作。 DNS是一种在网络上为用户提供从域名向IP地址映射的服务,基于UDP运行,使用53号端口。 (1)常见后缀名 顶级域名(TLD)在根域名下,分为3大类:国家顶级域名、通用顶级域名、国际顶级域名。 ① 常用域名 域名名称 作用 .com 商业机构 .edu 教育机构 .gov 政府部门 .int 国际组织 .mil 美国军事部门 .net 网络组织,例如:因特网服务商和维
中安威士数据库漏洞扫描系统是在综合分析了数据库访问控制、数据库审计、资源管理、数据库加密以及数据库系统本身安全机制的基础上,深入研究了数据库系统本身存在的BUG以及数据库管理、使用中存在的问题后而设计出了一套专业的数据库安全产品。本系统通过读取数据库的信息与安全策略进行综合分析,在查出数据库中存在的漏洞后自动给出详细的漏洞描述、漏洞来源及修复建议、并提供完整的数据库漏洞报告、数据库安全评估报告。用户据此报告对数据库进行漏洞修复,大限度地保护数据库的安全。
ip2region v2.0 - 是一个离线IP地址定位库和IP定位数据管理框架,10微秒级别的查询效率,提供了众多主流编程语言的 xdb 数据生成和查询客户端实现。v1.0 旧版本: v1.0版本入口
在很多安全分析类产品建设的过程中都会涉及到关联分析,比如日志分析、soc、态势感知、风控等产品。之前的文章中阐述过五种最常见的关联分析模型,在文中也介绍了:要想达到很好的关联分析效果,前提是对采集过来的日志进行标准化解析。解析的维度越多、内容越准确,对关联分析的支撑性就越强。下面就来介绍一下日志解析的一些常用内容。
2022.10.11共发现匿名网络资讯信息153,896条;最近7天共发现匿名网络资讯信息469,588条,同比增长-24%;最近30天共发现匿名网络资讯信息3,786,523条。
◆ 一、开源项目简介 Ip2region - 准确率99.9%的离线IP地址定位库,0.0x毫秒级查询,ip2region.db数据库只有数MB,提供了java,php,c,python,nodejs,golang,c#等查询绑定和Binary,B树,内存三种查询算法。 ◆ 二、开源协议 使用Apache-2.0开源协议 ◆ 三、界面展示 ◆ 四、功能概述 ◆ Ip2region特性 ◆ 99.9%准确率 数据聚合了一些知名ip到地名查询提供商的数据,这些是他们官方的的准确率,经测试着实比经典的纯真IP
2022.11.8共发现匿名网络资讯信息65,418条;最近7天共发现匿名网络资讯信息512,761条,同比增长9.3%;最近30天共发现匿名网络资讯信息2,343,444条。
近日,泰国最大的蜂窝网络AIS被指使数据库脱机,数十亿实时互联网记录遭到泄漏,涉及到数百万泰国互联网用户,80多亿互联网记录。
3.用户画像及其他在线业务类:如美拍账号经济体系需要检测校验用户的常用登陆地信息。
MySQL 是一个数据库管理系统。如果我们要了解 MySQL 是什么,我们首先需要了解什么是数据库。
1、QQWry IP纯真数据库 纯真版IP地址数据库是当前网络上最权威、地址最精确、IP记录以及网吧数据最多的IP地址数据库。收集了包括中国电信、中国移动、中国联通、铁通、长城宽带等各ISP的最新准确IP地址数据。由于IP地址数据是民间收集的,而IP地址段会经常更改,所以有点遗漏、错误是难免的,也因此纯真IP数据库每5天更新一次。 数据库和代码下载地址:QQWry_IPLook.zip,源码如下: #!/usr/bin/env python2 # -*- coding: UTF-8 -*- from s
可能你是一名安全员,正在追踪写过威胁邮件或侵入他人公司系统的嫌疑人。你想过如何获得IP地址的地理位置在哪里吗?想过你正在使用的代理服务器是否在本地范围内吗?你肯定有与你通信人的IP地址,但想过要知道他
作者 | 刘志勇 策划 | Tina 微软断供俄罗斯 6 月 19 日,据海外多家媒体报道,俄罗斯境内用户已经不能正常地下载 Windows 10 和 Windows 11 系统安装程序了。 目前,当俄罗斯的用户试图从微软网站下载 Windows 11 系统安装镜像时,会出现这样的提示:“错误:您的请求有问题。如需帮助,请访问 Microsoft 支持联系页面”。如果尝试下载 Windows 10,则会出现错误:“404 - Not Found”,而所谓 404 ,意味着找不到该文件或者目录。
2022.10.10共发现匿名网络资讯信息30,158条;最近7天共发现匿名网络资讯信息451,982条,同比增长-29%;最近30天共发现匿名网络资讯信息3,672,037条。
上一篇博客讲了Linux抓取网页的方式,有curl和wget两种方式,这篇将重点讲Linux抓取网页的实例——抓取google play全球12国的游戏TOP排名
昨天用Nginx的方法实现了类似的功能,今天另外给大家推荐一个简单的方法,如果你的站点程序是使用的WordPress,那么可以直接在后台搜索插件:iQ Block Country
数据猿报道 安全研究人员贾斯汀·潘恩(Justin Paine)在一篇文章中表明自己发现了一个公开的ElasticSearch数据库,而该数据背后直指泰国一家移动网络运营商分部AIS。目前AIS已将暴露在网络上的数据库脱机。
美国商务部下属的国家电信与信息管理局近日发表声明,将于2015年放弃对ICANN的管理权。届时ICANN将不属于任何一个“政府或政府间组织”。如此一来,一个不能被任何政府单独控制的,公开、透明、平等的互联网中枢即将问世。 13个根服务器管理全球DNS ICANN的中文名称为“互联网名称与数字地址分配机构”,成立于1998年10月,总部设在美国加利福尼亚州,是一个非营利性国际组织。 在互联网世界里,“www.dnspod.com” 并不是一个真正意义上的“网址”,而只是一个域名,域名与IP地址之间是一一对应
昨日,安全研究人员Justin Paine在一篇文章中表明自己发现了一个公开的ElasticSearch数据库,而该数据背后直指泰国一家移动网络运营商分部AIS。目前AIS已将暴露在网络上的数据库脱机。
工欲善必先利其器,firefox一直是各位渗透师必备的利器,小编这里推荐34款firefox渗透测试辅助插件,其中包含渗透测试、信息收集、代理、加密解密等功能。 1:Firebug Firefox的 五星级强力推荐插件之一,不许要多解释 2:User Agent Switcher 改变客户端的User Agent的一款插件 3:Hackbar 攻城师必备工具,提供了SQL注入和XSS攻击,能够快速对字符串进行各种编码。 4:HttpFox 监测和分析浏览器与web服务器之间的HTTP流量 5:Live H
数据可视化一直是一个很有趣的领域。许多普通人直观上难以感受的数据,如漏洞分布、实时流量分析等,通过数据可视化的手法,可以清晰地看出数据的结构特点和每一个部分之间的内在联系。 著名数据可视化库 D3.js 的部分应用 D3.js 可视化群关系,来自利用 d3.js 对大数据资料进行可视化分析 数据可视化除了常用的图表之类,与地理位置信息系统(GIS)的结合也是其中一个有趣的应用。 首先是数据的准备,要做全球的分布图,得有全网扫描的实力才行哦。HeartBleed 风波的当天晚上,ZoomEye 就给全球
领取专属 10元无门槛券
手把手带您无忧上云