首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

利用python爬取人人数据

人人网站需要用户登录才能看到其相应的借贷人信息。也就是说在爬取数据时,需要用户登录。回顾之前的代码,我想是保存cookie这种方法是不能用了。必须找到一种新的方法来模拟登录网站。...查了许多资料,数据捉取无外乎有3种方法: 1.直接抓取数据。 2.模拟浏览器抓取数据。...vb_login_username'] = '你的用户名' br['vb_login_password'] = '你的注册密码' 这段代码中老是遇到问题,第一,select_form中的nr怎么找,第二,在人人网站源代码中如何找所谓的...前面废话说了一堆,都是我学的比较菜,也就是我的经验之谈。 2.selenium包的尝试(重点) 首先你得安装好它,直接pip install selenium即可。...相应数据图展示: ?

1.7K50

MySQL 表数据多久一次盘?

数据 我们这篇「短文」讨论的是【MySQL 表数据多久一次盘】,从这个标题中我们可以分裂成两个问题: 刷什么到磁盘 什么时候刷到磁盘 我们分开来讨论。 2....刷什么到磁盘 看上去有点废话,肯定是将数据刷入磁盘。所以我们更多需要讨论的是【数据是以什么样的形式被刷入磁盘】。...当使用 InnoDB 作为存储引擎的 MySQL 运行时,表中一行一行的数据会被组织在一页一页当中,放在 Buffer Pool 中。...Buffer Pool 可以看另一篇:详细了解 InnoDB 内存结构及其原理 这一页一页的数据,就存放在 Buffer Pool 中。...当 DML 语句(也就是 CRUD)语句对表数据进行了变更之后,数据所在的那一页就会被标记为脏页。

66510
您找到你想要的搜索结果了吗?
是的
没有找到

P2P用户数据分析——以拍拍为例

近两年P2P行业风云变幻,雷声不断,不巧前几日我也中招,之前给亲戚介绍的P2P平台出现到期未还款的现象,吃惊之余赶忙给平台客服打电话,被告知借款人逾期,目前正加紧催收。...在当前经济下行压力增大的环境下,P2P行业风险日益暴露,加之备案一拖再拖,P2P平台举步维艰。...本期“品玩SAS”我们就深入研究下P2P平台的用户情况,以期对P2P的参与者有一个清晰的认识。...,是国内首家P2P平台,2017年11月10日,拍拍在美国纽约证券交易所上市。...2 数据介绍 本文以拍拍2015年1月1日至2017年1月30日的328553条贷款数据(该时间段10%的真实数据)为研究对象。

3.7K31

互金协会P2P大数据揭示的趋势

虽然部分平台数据披露不够完整,但是这一百多家平台几乎囊括了行业最优秀的平台,大量数据依然值得分析。...数据来源:中国互金协会、麻袋研究院 3、在余额与累计借贷金额不相关 从在余额与累计借贷金额所呈现的散点图可知,各平台这二者相关系数仅0.3,并不呈现明显的相关性。...数据来源:中国互金协会、麻袋研究院整理 从历史数据看,陆金服可谓一枝独秀,几乎没有受到各种现金政策、政策的影响。...你我(2017.6)、翼龙(2017.5)、点荣金融(2017.5)、团(2017.5)、红岭创投(2017.5)、宜信惠民(2017.4)等与首次登记披露相比,在余额变化不超过6%。...增幅最慢的是信普惠,累计增幅仅7.8%,平均每月增长率不到1%。

66420

姜建:互联网金融竞争力在大数据

9月29日,工商银行互联网金融战略暨网络融资中心成立发布会上,董事长姜建表示,互联网金融的竞争力在于大数据的运用,金融大数据方面,银行具有优势,而互联网金融的生命力则在客户体验的不断改善。...姜建介绍,研究表明,金融大数据必须具备一些主要特质,比如要有足够大的规模和足够长的积累,要有种类的多样性,包括交易数据、消费数据、日常行为数据等,而且要能通过智能挖掘和分析产生商业价值,银行,尤其银行有优势...金融大数据方面,姜建介绍工行积累了30多年数据,八年前建立起数据仓库和集团信息库两大数据平台,实现对所有客户和账户信息的集中管理。...标准化信贷方面,目前,工行基于客户线上线下直接消费的信用贷款产品“逸”客户数已达到430万户,余额突破2000亿元;契合小微企业“短频急”融资需求的互联网贷款产品“通”,已累计为近8万小微客户发放贷款...言及下一次金融危机或来自于互联网金融,姜建表示,如果忽略互联网金融的本质,会出大问题,且目前大数据用于风控的时间还很单薄,网络融资不易,风险管理不到位极易出问题。 互联网思维在深入银行。

62630

从SAP最佳业务实践看企业管理(185)-FI-157应收账款

然后根据相关事务(应收款、预付款、项凭证等)客户付款活动,更新总帐(损益)科目和客户帐户。通过帐户过帐并管理所有业务事务,并为此创建客户主数据记录。使用一次性客户,以避免建立庞大的主数据量。...业务处理科目应收款包含以下主要活动: · 过帐预付款请求 · 手动过帐预付款 · 过帐客户发票 · 使用发票参考过帐项凭证 · 使用付款程序或电子支付中心(EPIC)过帐付款 · 手动过帐付款 · 自动清算客户帐户中的未项目...· 手动清算客户帐户中的未项目 · 手动处理银行对帐单 · 帐户对帐单的重新处理 · 催款 · 帐户余额利息计算 · 一次性帐户过帐 · 设置信用限额 · 信用控制报表 一般业务流程:在该文档中,您会发现一些涵盖以下一般业务流程的事务...您必须为每个所需帐户创建主记录 参见创建客户主数据(155.18)业务情景客户主记录已创建,并且现在可以过帐科目创建一次性帐户使用一次性帐户管理一次性客户 参见创建客户主数据业务情景一次性客户帐户已创建...催款数据已在客户主记录和未项中更新(最后催款等级和最后催款日期)。启动利息计算程序计算过期项目的利息应收会计F.2B打印催款信。

1.5K90

响铃:爆雷=靴子落地,P2P或不再负重前行

累积交易规模上,除了钱爸爸的325亿元,银票140亿元、投融家103亿元都是庞然物,而不可一世的牛板金更是高达390亿元,这些平台一旦出现合规问题,造成的影响是社会性的。...从而,再来看所谓爆雷“安全港”中宜人、爱钱进、无忧车、微等,就能发现这次集中爆雷有明显的选择性,在合规经营上投入较多、过去不能靠高额收益揽客被挤压市场的,似乎生存环境反而更好了些。...2、大树确实好乘凉 在因为自己投资的平台爆雷而一片唉声叹气的微信群中,如果有人问现在还有什么平台值得信任,回答往往分成两类:专业一点的,会提供宜人、人人、爱钱进、微之类处在“安全港”的平台,而不关注这些的会给出一个简单的答案...1、第一次洗牌:竞争洗牌 P2P平台2011年进入快速发展期,2012年进入了爆发期,平台如雨后春笋成立,这一时间也正是移动互联网兴起之时。...那些不懂移动互联网思维的平台纷纷面临经营困境,据之家数据显示,2016年1月份问题平台达到1351家,而P2P累计平台数量为3917家,问题平台占1/3。

62020

SAP-FICO-AR-关于剩余支付和部分支付的区别

: 借:银行存款或现金科目金额15000 :客户账号(双击可查看此客户账号对应的总账科目)金额15000 保存过账.退出....(显而易见,此金额为负的未项目是由我们上次收款产生).点击菜单"凭证->模拟".系统预制一张凭证: 借:银行存款或现金科目金额1000 :客户账号(双击可查看此客户账号对应的总账科目)金额1000...,可发现系统预制一张凭证: 借:银行存款或现金科目金额15000 客户账号(双击进入该会计凭证行的明细信息,反映了剩余款项的付款条件情况)金额1000 (即本次还款与发票的差额) :客户账号...(即上次收款后,还剩余的未款项).点击菜单"凭证->模拟".系统预制一张凭证: 借:银行存款或现金科目金额1000 :客户账号(双击可查看此客户账号对应的总账科目)金额1000 保存过账,退出....(不更改原行项目的帐期) 剩余项目法是在第一次收款时就已将原来的发票做清账,而同时又产生另外一个未项目,新产生的未项目金额即是客户还未付款的金额.

98810

一次澄清:数据分析思维五误区

今天我们正本源,一次性跟大家解释清楚:哪些数据思维的常见误区。 误区一:数据分析思维是4P,4C,SWOT,PEST,五力模型…… 澄清:这些太过宏观,完全没法具体分析。...那感觉,就像我们看大学生写的课后作业《腾讯发展的十成功要点》一样 (~ ̄▽ ̄)~ 优化策略:在企业里工作,要解决真实商业场景的真实问题,就要具体问题具体分析。...而且,针对留存这个问题,还有个经典困惑:如果我们把3个月内有付费定义为留存,一个月买1000产品,连续买3个月,和一次买6000,半年买一次的有什么区别?...看似一次买6000,半年买一次是“流失”了,可有的消费者就是喜欢囤货,就是喜欢蹭618,双11(刚好上下半年各一次)……那这个定义本身都有问题,要怎么“分析呢?”...当然,还有一类误区是直接把统计学方法当做数据分析方法。不过这个误区一般存在于没有见过真实商业数据的在校学生群体。真正进入企业工作后,大家都被糟糕的数据质量和混乱的问题搞得晕头转向,没人迷信这个了。

1.8K20

matinal:SAP 上线期初数据导入需要做什么,应该做什么?

财务期初数据导入顺序: (1)维护尚未存在的供应商/客户主数据,注意相同供应商/客户可统一使用同一编号; (2)固定资产、无形资产主数据及其明细导入,检查无误后过帐到总帐; (3)应收/应付明细未项目导入...,不是未项明细管理,提供前月结帐日的总帐科目余额, 录入会计凭证分录为: 借:应收票据 :9999999999 2.总账未项明细管理:应收票据-商业承兑、应付票据-银行承兑/商业承兑 在SAP中的总帐科目中...9999999999 或借:9999999999 :应付票据-商业/银行承兑 (四)存货 1.存货数据导入的步骤: (1)在导库存数量之前,必须先按sd提供的物料编码将标准价格导入系统,导入方式为CATT...a)供应商应付未项明细 b)供应商预付未项明细,同时提供供应商预付款的特别总帐标识 导入分录为: 借:9999999999 :XXXX供应商 2.客户明细未项 系统上线前应尽可能清理掉往来挂帐!...对于在SAP系统中还未有客户主数据的(如,其他应收款客户等)必须先在系统里建立相应的主数据 a)客户应收未项明细 b)客户预收未项明细,同时提供客户预收款的特别总帐标识 导入分录为: 借:XXXX客户

34811

一次表delete删数据导致数据库异常

一、问题描述 早上正在上班路上,群里客户说,有一张24G的表,delete删了26小时还没有跑完,目前进程还在跑让帮忙处理下,停止当前进程,并保留对应条件的数据,多余数据删掉。...二、查看数据库情况 1.未开归档 2.UNDO表空间爆满 三、提出方案 1.经过沟通,该表为测试数据表,目前没有在使用;于是打算rename该表,通过ctas的方式去将需要的数据捞出来,重建索引和相关约束...and username = '**' and status = 'ACTIVE' and s.SQL_TEXT like '%delete * from *****%'; --数据库级...rename table to table_20210410; 8.CTAS将需要的数据捞到新表(原来的表名)中。...11.比对无效对象,数据是否一致 12.drop掉rename的表。 drop table USER.TABLE_20210410 cascade;

61630

【钱塘号热词】“双克”AI辩论赛,贝索斯荣登最短世界首富……

根据现场公布的数据显示,Model 3已经获得了超过50万份订单,这可不是什么免费预约,而是需要1000美元或8000元人民币作为定金。...NO.10 红岭创投 7月27日,至今运营超过8年的“老兵”,以标规模、本金垫付、股债双投等著称的红岭创投突然宣布,将清盘业务。...平台董事长周世平亦在社区发帖称“贷有规模,有不良资产,但没有利润。红岭创投将通过三年的过渡期将现有的产品全部完。” 该消息传出后,迅速在互金圈内引起热议,投资人群刚刚稍有放松的情绪,又再度紧绷。...行业排名第一的陆金所遭遇危机,排名前十的红岭创投又准备退出清盘,一时间让人感觉到行业的岌岌可危,行业似乎就此逐步走向穷途末路。...网友评论:红岭创投的清盘和转型也意味着行业的旧时代划上了句号,但在告别了野蛮生长后,平台在满足合规性的前提下,已迈出了探索新模式的步伐。

857110

响铃:网络借贷面临终极大考,未来该何去何从?

无论是对第一梯队的陆金所、人人等,还是对行业新秀飞、中业兴融等而言,都是史无前例的一次考验。...如根据之家的数据显示,截至2017年3月23日,全国共有235家P2P平台与银行签订直接存管协议,只占P2P行业正常运营平台总数的10.06%,其中有142家平台完成直接存管系统对接并上线,...3、银行顾虑犹存 尽管已有民生银行、江西银行、徽商银行、恒丰银行和华兴银行等38家银行布局P2P平台资金直接存管业务。但不管从数据还是市场反响上都可以看出,银行承接P2P存管业务的速度并不快。...比如喊着“37°理财家”(37°C为人体安全体温,意思是用大数据风控护航健康理财)的中业兴融选择在社区医疗、三农健康以及出境旅游等垂直领域发展,并提出安心、健康、合规三宣言。...但一旦真刀实枪对垒,政策真正落地,那些逾期、坏账数据等没办法掩饰,平台也将“裸泳”。 “存管家”就宣称自己是一套具备自主管理、自主运营且安全高效的存管业务技术系统,且支持账户资金信息查询需求。

1.2K10

数据将这样改变互联网

其实,通过对阿里巴巴B2B、C2C平台上商家信用记录的收集和挖掘,阿里巴巴2010年便针对淘宝商家推出了阿里小(现改称蚂蚁小)。...然而,得益于与百度大数据的合作,北京朝阳悦城近来却客流火爆。...据介绍,通过将百度海量的线上数据悦城线下多年积累的数据结合在一起挖掘、分析,悦城对自身特色以及消费者需求的认识有了质的提升,不仅推出了精品百货等新业务,一系列诸如哆啦A梦展、梵高展等更有针对性、更精准的推广计划也随即出台...“经济云图”则是阿里巴巴向政府主动开放数据、辅助政府进行经济决策的一次尝试。打开“经济云图”页面,一个地区的电子商务交易规模、趋势、买家卖家规模、趋势结构分布等数据二楚。...“我们向政府主动开放电商数据,希望对政府数据开放有一定的示范推动作用。”潘永花说。 内容来源:人民-人民日报

59280

逾期赖账两把刀“撸口子”,现金行业会不会坏账过多而亏死?

12月1日发布的《关于规范整顿“现金”业务的通知》,现金行业顿时炸开了锅。...“撸口子”的人大有一种“视死如归”的豪情壮志:人死债,再敢逼我,我就死给你看。 小编前几个月还在网上看到一篇文章,《撸口子狂魔自述:55家撸18万,全村500人都逾期》,想想都可怕。...基数,服务费高,在这个逻辑上,躺着也能来钱。 其次,通过续客户比例控制风险。现金本身面向的客户为中低收入人群,但是用户黏性高的出奇,这种小额现金产品大部分用于提前消费。...《监管并非“一刀切”,趣店等中概股集体止跌,看你敢不敢低位承接?》 信用体系建设 现金火爆的现象本质上是征信系统的覆盖面不足导致的。...另一方面可以通过大数据的力量相对准确地评估个人信用。 如果腾讯或阿里的征信牌照能够申请下来,同时能够纳入全国的信用征用体系,相信不仅仅是现金,其它很多类似问题都可以得到有效解决。

1.2K00

名人效应!任泉投资融360已上市 坐拥全套域名

据晚间消息,融360创始人兼CEO叶及Star VC创始人任泉现身融美国纽交所上市现场,证券代码为“JT”。...[图片] 图:融360 纽交所现场屏还播放着Star VC五位明星股东黄晓明、李冰冰、任泉、章子怡、黄渤的视频,祝福融360成功上市、股票大涨。...融360官域名启用的是rong360.com,目前,品牌相关域名rong360.cn/.net/.com.cn/.org等都被融360收购了,域名保护意识不错。...这些年,因为360的缘故,许多带有“360”的品牌名都火了,除了融360之外,还有ABC360(abc360.com)、360装房(360zfw.com)、360财富(360caifu.com)等等。...据悉,在此之前还有信而富(crfchina.com)、趣店(qufenqi.com)、和信贷(hexindai.com)以及前两天小编刚报道的拍拍(ppdai.com)等等。

69600

从SAP最佳业务实践看企业管理(187)-FI-158应付账款

image.png FI158应付账款 该业务情景处理在应付帐款中为供应商过帐会计数据。供应商在此处对数据进行排序,使数据可用于其他区域(如采购系统)。...过帐应付帐款中的数据时,系统会创建凭证并将输入的数据过帐到总帐中。然后根据相关事务(应付款、预付款、项凭证等)供应商付款活动,更新总帐科目和供应商帐户。...应付会计 F-47 将预付款请求作为未备注项过帐到指定的总帐科目(预付款请求(供应商))。...参考发票输入供应商项凭证 项凭证包含必要的审批签名和总帐科目分配 应付会计 FB65 过帐会计凭证以允许记供应商 检查并下达冻结的发票 此活动将检查并下达冻结的发票 应付会计 MRBR 下达付款发票...应付会计 F110orEPIC_PROC 为付款选择供应商未项目。 检查付款建议支付的发票并根据需要冻结发票 检查、冻结发票 应付会计 F110 冻结不需支付的供应商未项。

90390

SAP最佳业务实践:FI–应付账款(158)-10 F-53手动过帐付款

在付款记帐:抬头数据 屏幕上,进行以下输入: 字段名称 用户操作和值 注释 凭证日期 * 例如:当天日期 过帐日期 * 例如:当天日期 公司代码 1000 货币 CNY CNY 参照 (*) 可选 银行数据...科目 *(国内帐户银行转帐) 例如:10020102 金额 * 例如:1900 起息日 * 例如:当天日期 未项目选择 科目 * 输入含未发票的现有供应商: 科目类型 K ?...选择 处理未项目。 ? 3. 在 付款记帐 处理未项 屏幕上,先取消所有的项目(选择 全选,然后选择 取消激活项目),选择所需项目(未发票、项凭证等)。 ? ? ? 4....双击该行,点击 其它数据。 6. 在原因代码字段输入068,选择 返回。 ? 7. 选择 过账 (Ctrl+ S)。 8. 系统显示消息凭证 XXXXXXXXXX 记帐到公司代码1000。...系统会清算在处理未项目和进行付款时所选的未发票和项凭证。 ?

2.6K110

SAP最佳业务实践:FI–应收帐款(157)-8 F-31付款退款–手动

项目已过帐(如果没有发现未项目,请先用FB75 过账一张项发票)。 角色:应收会计 会计核算-财务会计-应收账款-单据录入-其他-对外支付 1....银行数据 科目 *(国内帐户银行转帐) 例如,10020109 金额 * 例如,1900 起息日 * 例如,当天日期 未项选择 科目 * 输入含未发票的现有客户: 科目类型 D ?...选择 处理未项。 ? 3. 在 付款记帐 处理未项 屏幕上选择所需项目(未发票、项凭证等)。 ? 4. 选择 (NWBC: 更多…®)凭证 ®模拟,系统会弹出信息 请修正被标识的行。...双击该行,然后 回车,在屏幕 付款记帐 改正总帐科目项 上,选择 其它数据,在字段 原因代码 输入以下的数据,然后选择 返回。 字段名 描述 用户操作和值 注释 原因代码 062 例 ? 5....这笔付款结清了所选的未发票。

1.3K40

数据24小时 | 医疗保险公司Clover Health获1.6亿美元融资,平台蓝金所将建企业大数据金库

主要利用“医疗+大数据”模式对患者可能存在的健康隐患进行分析、判断。 此外,该公司还将保险与大数据结合起来,旨在通过数据库检索出潜在高危病患,为其提供预防方案,从而降低患者就医费用。...vArmour主要利用大数据分析技术,通过扫描网络数据的方式,为企业提供安全解决方案,从而使企业有效应对威胁事件。...BigID宣布完成210万美元融资,为企业打造数据隐私管理平台 随着“大数据”的不断发展,数据隐私问题越来越得到企业的重视,即使目前监管机构对对其监管力度已经逐渐增强,然而个人数据仍面临更大风险。...平台蓝金所将建实体企业大数据金库,为企业提供资源对接服务 近日,专注于供应链金融的互联网金融服务公司蓝金所宣布将建立实体企业大数据金库,该大数据金库将集资本、资源以及服务为一体,旨在为企业提供资源对接服务...根据双方签订的协议显示,届时将借助九次方大数据数据采集、清洗以及数据建模、可视化等方面的技术优势,进一步构建“互联网+大数据”生态圈,从而提升公司在大数据领域的应用水平,完善产业布局。

68040
领券