爬了知乎 200 万数据,图说程序员都喜欢去哪儿工作

作者:gaga salamer

因为最近和朋友吃饭,大家都到了大三季,都在纠结自己该以哪里作为自己职业发展的起点?也想看看自己的背景,能不能找到靠谱的师哥师姐帮忙,那么师哥师姐都在哪里发光发亮呢?

我当时也是午休的时候想到,知乎有那么多结构化的好的数据,不如抓取之,拿来分析可以看看名校生们都在哪?

我们行业的人都喜欢哪,哪里每年带走一堆人?

然后花半小时写了个多线程爬虫,爬下来几百万数据(其中每个学校的大圆圈占比代表该校学生在调研总数中的占比):

这次抓取的数据量有将近 200 万,跑了一个下午,然后我把没有公司或者教育学校的筛掉,就还剩 25 万了~

原文发布于微信公众号 - 钱塘大数据(qtbigdata)

原文发表时间:2017-12-12

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏凌帅的阅读思考与实践

【荔枝分享】从10万到200万再回到100万,这位军哥哥有话说...

先做自我介绍。我是军人出身,现在也在体制内工作,坐标成都,利用业余时间写作和投资区块链。

354
来自专栏FreeBuf

老牌黑客Zoz:一百种销毁数据的方法,不如一个有安全意识的你自己

为期三天的 DEFCON CHINA 已经结束了,现场有很多有趣的人和事。本篇回顾将带大家了解一下那位留着莫西干发型、热情健谈,而且想法和行动都很不拘一格的老牌...

924
来自专栏肖洒的博客

西电睿思年度非官方关键字榜单

首先要说的是真的特别喜欢睿思,也特别喜欢它的宗旨!“永远不去谋求任何商业利益,只为西电人有一个高速下载的地方,有一个开心聊天交朋友的地方而努力”。睿思背后的技术...

461
来自专栏互联网数据官iCDO

今日头条投放没效果?可能不是你自己的问题!

原创作者:宋星 本文长度为1000字 ,建议阅读5分钟。 作者系iCDO创始人,网站分析在中国创始人,宋星 写在前面:这篇文章只是描述我遇到的问题,不涉及任...

2599
来自专栏镁客网

4D打印裙问世!未来可订制专属你的裙子

1313
来自专栏大数据文摘

科学家计划把维基百科写入苹果树DNA中

1958
来自专栏华章科技

爬了知乎200万数据,图说程序员都喜欢去哪儿工作~

因为最近和朋友吃饭,大家都到了大三季,都在纠结自己该以哪里作为自己职业发展的起点?也想看看自己的背景,能不能找到靠谱的师哥师姐帮忙,那么师哥师姐都在哪里发光发亮...

581
来自专栏C语言及其他语言

爱自黑的程序员,了解一下??

程序员是所有行业中最喜欢黑自己的,因为当年天朝第一土豪程序员狠狠的黑了一把自己。在2012年这个世界末日程序员们把自己黑出了天际,2012年2月凤凰网报道专题《...

691
来自专栏PPV课数据科学社区

数据可视化-- 大数据用Tableau,小数据用Excel

数据分析体系可分为数据整理、数据分析、数据呈现。数据整理包含对源数据的获取、筛选、清洗、整理和统计,数据整理是对源数据的初加工,是数据分析工作的前置。数...

3625
来自专栏腾讯移动品质中心TMQ的专栏

腾讯TMQ在线沙龙回顾|冒烟测试

冒烟测试 活动时间:2017年7月18日 QQ群视频交流 活动介绍:TMQ在线沙龙第二十四期分享 本次分享的主题是:冒烟测试 共有204位测试小伙伴报名参加活动...

2126

扫描关注云+社区