首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

利用python爬取人人数据

人人网站需要用户登录才能看到其相应的借贷人信息。也就是说在爬取数据时,需要用户登录。回顾之前的代码,我想是保存cookie这种方法是不能用了。必须找到一种新的方法来模拟登录网站。...查了许多资料,数据捉取无外乎有3种方法: 1.直接抓取数据。 2.模拟浏览器抓取数据。...vb_login_username'] = '你的用户名' br['vb_login_password'] = '你的注册密码' 这段代码中老是遇到问题,第一,select_form中的nr怎么找,第二,在人人网站源代码中如何找所谓的...相应数据图展示: ?...后来运行上述代码大概爬了3000多条就中断了(应该是同一ip访问过多的问题),如果需要大量数据的可以考虑分批爬取,多台电脑同时进行。

1.7K50

产品设计原则

【字数:2395;阅读时长:10min】 平台:P2P的信息中介平台,连接借款人和投资人以及企业盈利的直接载体。...在设计产品的时候,我们需要充分考虑政策环境、技术环境、竞争环境,并且结合平台资源与合作机构资源,设计出完善的生态系统。 ?...目前市场同质化产品较为严重,所以要以客户需求为中心,需要做些突出产品优势的特点内容,并将此最大化的展示出来,吸引更多的用户形成闭环使用 3、合理规划收益,兼顾企业发展 企业主要以收取借款人和投资人的服务费用为利润来源...4、构成指标 产品包括:产品额度、产品期限、产品利率、还款方式等,需要研究的是产品额度和期限,需要建模或者创建规则的前提下去指定对应的产品,而还款方式也是其中一个很重要的指标,比如等额本息和等额本金真正的区别到底是什么...5、风险控制 风险控制分为前调查、待中审查和后管理 ? 产品设计,设计多方利益与安全性,所以我们在设计产品需要把握一些基础原则,希望这些原则可以给你带来参考价值!

1.1K50
您找到你想要的搜索结果了吗?
是的
没有找到

针对诈骗行业诈骗链分析

一.概述 1.1某天,一位上朋友告诉笔者,他被骗了。被骗方式很独特,因为自己没钱所以选择贷款,在贷款过程中惨遭诈骗。...异常缓存 构造Payload:App/Runtime/Logs/21_10_16.log 获取泄漏的admin表账号密码 进入后台 2.1.2 数组可控导致RCE 可上传文件名被直接带入数据包中...笔者能力有限,第二套诈骗贷款源码疑似一键搭建,均采用最新版宝塔+宝塔免费版WAF,在权限获取方面不足,转而向客服处寻找突破点 前台: 找到客服入口,上传图片,会转到通过websocket上传的数据包...修改websocket数据包,构造XSS Cookie Get 三.客服系统控制/PC控制 3.1控制数据库 登陆mysql数据库查看诈骗嫌疑人登陆IP 杭州的电信基站动态IP,判断是家庭路由...四.总结 诈骗类案件的典型特征是,犯罪嫌疑人以“无抵押无审核”为噱头招揽需要贷款的被害人,并以“账户冻结需做解冻”才能完成放款等名义收取保证金,又以保险费、激活费、服务费等名义再次收费。

61020

714高炮丨深度解读那点事儿

每个月使用花呗、借呗已经不能满足他们的消费欲望,加上互联网金融的普及,各类平台悄然兴起。今年,315晚会曝光了“714高炮”,一时间非法网成为社会关注的焦点。...对于非法网,我们要保持高度警惕,但同时也要小心披着外衣到处吆喝实为骗取用户钱财的贷款类诈骗。...小知识 正规的平台为了提高风控能力以及工作效率,都是由系统自动根据借款人的信息进行授信的。因此,人工是无法强行开通额度和提高额度的。 正规的贷款平台不会在贷款前收取任何费用,更不会收取保证金。...打击非法网,腾讯在行动 正所谓,“道路千万条,安全第一条。不警惕,亲人两行泪”。...315的曝光不仅给这些非法网敲响了警钟,也提醒我们,面对处处潜藏的深坑,用户需要保持高度警惕,平台也需要有力的监管。

1.1K10

微众微粒、蚂蚁借呗、京东金条,谁能赢得下半场?

另外也有数据显示,小公司业务规模近年来已从高峰时增长98%降至不足10%。...典型的是P2P在经历过前期跑马圈地、烧钱营销之后,模式逐渐分化,一大批平台被迫转型或退出,而那些专注P2P的规范平台也将迎来好时光,陆金所(现在是平安普惠承接贷款业务)、人人、宜人等已组成第一阵容...而白名单的建立背后依靠的是央行的个人征信数据+互联网大数据。这些数据既包括公安数据、学历数据、人行征信数据等第三方客观数据,也包括交易数据和兴趣爱好、人口学特征等网络行为数据。...这是微粒征信系统的基础。如今微粒用户只需要一键点击“借钱”,系统会在几秒钟之内判断个人信用情况,并给出一定的额度。 再看蚂蚁借呗和京东金条,他们主要依托的则是电商数据和支付数据。...如要一定要对这三家PK结果做一个预测,虽然互联网大数据风控时间短,还需要验证,但在BAT巨头里,腾讯携支付数据和社交数据,似乎更有潜力,我们暂且边走边验证。

67610

互金协会P2P大数据揭示的趋势

虽然部分平台数据披露不够完整,但是这一百多家平台几乎囊括了行业最优秀的平台,大量数据依然值得分析。...数据来源:中国互金协会、麻袋研究院 3、在余额与累计借贷金额不相关 从在余额与累计借贷金额所呈现的散点图可知,各平台这二者相关系数仅0.3,并不呈现明显的相关性。...数据来源:中国互金协会、麻袋研究院整理 从历史数据看,陆金服可谓一枝独秀,几乎没有受到各种现金政策、政策的影响。...你我(2017.6)、翼龙(2017.5)、点荣金融(2017.5)、团(2017.5)、红岭创投(2017.5)、宜信惠民(2017.4)等与首次登记披露相比,在余额变化不超过6%。...增幅最慢的是信普惠,累计增幅仅7.8%,平均每月增长率不到1%。

66420

P2P信用评分项目分享(一)

这是 Python数据科学的第 53 篇原创文章 【作者】:xiaoyu 【介绍】:一个半路转行的数据挖掘工程师 【知乎专栏】:https://zhuanlan.zhihu.com/pypcfx 全文...2数据探索 和之前的套路一样,建模前的数据探索十分重要,发现数据分布特征,数据联系和内在规律等。首先导入数据后观察数据缺失值,异常值,分布规律等。...# 导入数据集,合并训练数据和测试数据 data_train = pd.read_csv('cs-training.csv') data_test = pd.read_csv('cs-test.csv'...很明显,数据不均衡,坏用户只占了6.68%,后续建模部分进行处理。...含义是:除了房贷车之外的信用卡账面金额(即贷款金额)/信用卡总额度。实际上,这个特征值大部分情况是小于1的,因为超出额度属于透支。但是我们发现有很多特征值已经达到了几万,这在实际中是不可能的。

1.2K30

P2P合规检查实操要点

行业期盼已久的全国性合规检查标准终于出台——《关于开展 P2P 网络借贷机构合规检查工作的通知》(以下简称《检查通知》)已下发至各省市整治办,通知要求2018年12月底前完成合规检查,但依然没有给出具体备案时间...,条件成熟的机构才可申请备案。...麻袋研究院仍然从平台实操角度出发,对《检查通知》及其附件108条的重点择要解读: 一、接受检查的对象是谁 《检查通知》写明,“针对已经纳入各省(区、市、计划单列市)风险专项整治名单的机构开展检查...至于中国互金协会检查涉及到100多家会员机构,据麻袋研究院了解,中国互金协会有可能聘请第三方机构如律所加入检查队伍,奔赴各省市会员单位检查。...从中国互金协会披露的数据来看,行业排名靠前的平台,在过去一年业务规模均有增长,《检查清单》对“幅度较大”没有明确定义,给各省市监管部门和协会检查时留下了自由裁量空间。

53920

行业步入新周期,出借人的投资秘籍在哪?

文/孟永辉 经历了资本撤离、政策监管的洗礼后,行业发展正迎来新的发展机遇期。以BAT为代表的科技巨头对金融行业的赋能、平台自身合规性建设的加快、出借人的日益成熟都让行业进入到发展新周期。...据第一发布的统计数据显示,截至5月末,全国在营P2P机构多达890家。...很多出借人在选择平台的时候,比较迷信名目繁多的评级和排名,甚至还有一些出借人比较看重平台的获奖情况。...虽然某些时候平台的评级排名和获奖情况可以在一定程度上彰显平台的质量和实力,但是,如果将评级排名和获奖情况看成是唯一的衡量标准,显然有些太过武断了。 首先,评级排名并不能反映平台的真正实力。...supportLists]第一,[endif]面对复杂的项目,出借人要多维度考量。衡量项目优劣有很多维度:贷款人信用、项目周期、项目盈利情况、贷款人还贷能力等因素都关系着项目的质量。

40110

银行借“大数据”实现POS“秒

POS最快2分钟可放贷 去年10月,中信银行携手银联商务推出了“POS商户网络贷款”业务。...与传统贷款动辄几个月甚至半年的等待周期相比,该业务可以说是实现了“秒”。截至2014年4月16日,中信银行济南分行全辖业务累计发生额7千多万元,余额2千多万元,今年累计笔数460多笔。...而中信银行的POS则无需抵押,虽要求申请者有房产,但只是作为贷款参考依据,无需进行抵押。...自去年年底以来,他已经通过POS累计获得100万元贷款。 银行聚焦互联网“大数据” 互联网金融的崛起,使银行纷纷将目光转向大数据。在得数据者得天下的移动互联时代,银行也动作频频。...除了与银联商务合作开展POS外,中信银行还与腾讯合作,通过电商平台开展小微企业贷款业务。 招商银行也采取了这种模式,选择与电商平台敦煌签约,发行联名金融服务卡“敦煌生意一卡通”。

1.1K80

“不做金融”周鸿祎,半年靠生意赚21亿

△图源:环球网 周鸿祎做的哪门子网生意? 都说360做金融赚钱是真香,到底有多香,咱直接上数据!...看到这一串数据,还是不得不感(xiao)叹(sheng)一(bi)句(bi):做金融是真能吸金呐! 不过话说回来,虽然现如今360数科赚钱能力这么强,但老周的生意,走得并不算顺利。...近几年来,监管越收越紧,在贷款利率上,无论是对消费者还是小微企业,360数科都有所下调。...对于消费者,名义年利率从19年的16.6%下调至如今的12.9%,实际年利率也从19年的28.8%下调至如今的23.0%,低于24%的利率规定。...然而,与生意相比,周鸿祎在“主战场”互联网安全领域的日子,似乎就不那么好过了。 生意比“主职”还赚钱 虽然在巅峰时期,三六零安全科技股份有限公司的总市值一度飙升至4400多亿。

66540

阿里小:封闭流程与数据挖掘

封闭流程与数据挖掘   启示在于两个词:“封闭流程”和“数据挖掘”。   ...站在“大数据”概念的今天来看,传统的金融领域信用风险评价是典型的“小数据”和“小数据分析体系”,或者说是“低活跃性数据分析体系”。   ...无论是商业银行为企业授信、信用卡的审批、亦或是资本市场的尽职调查,关注的几个要点都是行业状况(针对企业)、财务数据和历史借贷信用记录。信用风险评价模型虽然林林总总,也离不开对这三项数据划红线。...但是对于低净值融资人,则面临着信息获取成本高、信息不真实、数据过于低频的问题,加大了风险控制的难度。   阿里巴巴的优势在于数据本身。...配合数据的特点,阿里引入了新的信用风险评价技术模型,其核心是通过不同侧面的低质量、高频率数据的相互印证技术达到对高质量数据的拟合。

865120

资金存管业已完成,行业开启发展新世代

随着资金存管的逐步落地,行业将会进一步进化,真正落地到合规层面的平台或才是这场净化的最终赢家。...从这个逻辑上来看,资金存管政策的出台正在将行业带入到一个发展的深水区,同时拉响了监管进入到终极决战的集结号。 资金存管让平台不再仅仅只是一个平台,而是一个“平台+银行”的模式。...在单纯的平台,借款人和放贷人仅仅只是通过平台达成了交易,但是两者之间并不存在必然的联系。...笔者认为,如果平台前期的政策监管仅仅只是从外部给平台下达了一个约束文件的话,那么资金存管则是给行业带上了一个“紧箍咒”,这让很多的平台不敢再为了流量而为所欲为,回归合规,回归行业最本质的含义将会成为主流...未来,真正考验平台的将会是功能的完备上,功能单一的平台将会逐步退出历史舞台。

34040

早报:中国网络直播用户规模年底将达3.92亿

1、新设网络小被叫停,真正持有网络小牌照的仅几十家机构 近日,设在央行的互联网金融风险专项整治工作领导小组办公室与设在银监会的P2P风险专项整治工作领导小组办公室联合发布《关于规范整顿“现金...之家研究院院长于百程表示,《通知》对于“现金”并未做严格定义,只是规定“具有无场景依托、无指定用途、无客户群体限定、无抵押”等特征,小额信贷业务都需要符合这一要求,范围比较大。...记者了解到,当前市场上真正持牌的“现金”机构很少。尽管没有确切的统计数据,业界估计当前“现金”平台总数在2000至5000家之间,其中真正持有网络小牌照的仅几十家。...截至目前,获得云服务牌照的企业达44家,分别是: 阿里云、上海优刻得、腾讯云、上海福虎、浙江帕摩数据、百度云、上海有孚网络、中企网络、鹏博士、三快云(美团云)、宿科技、北京联想调频、上海蓝云网络、...宁夏西云数据、中国移动、金山云、上海宽惠网络、北京森华易腾、深圳市赛柏特、天津卓朗、太平洋电信、华为、浪潮、北京互联港湾、北京闪迅网联、上海美橙科技、北京迅达云成、杭州云际视界、润泽科技、广东唯一络、

1.1K80

P2P公司用大数据扩大企业边界

实际上,互联网大数据技术对于P2P公司扩张企业边界,同样具有重要意义。 人言“它山之石可以攻玉”,阿里今年“双十一”物流配送体系在数据的流转和分享模式方面创新,或许可以给我们一些启发。   ...首先,在信审风控方面,互联网大数据技术让信审流程的准确性,高效性,透明度都得到了极大提升。作为信息交流的平台,对借款人资格的审核和把关,也就是进行信用审核,是P2P平台的重要职责之一。...互联网大数据技术的进步,让P2P平台有能力通过互联网抓取更为丰富和精确的信息,用户在互联网上的社交行为信息,包括其在微博、微信、论坛的活跃程度,发言数量,都可以被采集并成为个人信用评估的重要参考,这种通过数据系统建立严密高效的信审模型...近期,宜信宜人推出了“极速模式”借款服务,通过对互联网大数据技术的准确把控,宜信宜人建立了一套高效运行的大数据信审系统,借款人通过“极速模式”提交借款申请,在10分钟内就能快速完成审核。...见东北新闻:P2P公司用大数据扩大企业边界

65660
领券