腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

业余草

专栏作者

563

文章

1188994

阅读量

42

订阅数

一行代码搞定Spring Boot反爬虫，防止接口盗刷！

spring 爬虫 javascript 云数据库 Redis tcp/ip

做电商网站的时候，总有竞争对手利用爬虫来爬你的数据。如果你没有反爬虫措施，网站都可能被爬垮。作为程序员，我们希望自己动手解决它！

2020-07-06

1.2K0

我和爬虫躲猫猫，反爬虫之日志分析

爬虫 tcp/ip nginx

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

2019-10-25

9320

Deepfakes 换脸教程！

爬虫卷积神经网络

这两天，ZAO 太火了。而它的背后却是 Deepfakes，作为程序员，我们很有必要来体验一把 Deepfakes ！

2019-09-06

4.6K0

反爬虫我从 Robots.txt 配置开始

爬虫网站 https 网络安全

基本上，所有公开你能访问到的网站都有 Robots.txt。可能只是你没有注意到而已，比如淘宝的：https://www.taobao.com/robots.txt、百度网盘的：https://pan.baidu.com/robots.txt。

2019-06-20

2.6K0

论程序员的取财之道

就在这两天，世界互联网大会在乌镇隆重召开，IT圈可是热闹极了。各大老在谈论互联网的同时，也谈论了属于我们的机会。特摘录了下面3句话送给大家。习主席说：“赚不到钱，并不是没钱可赚，而是你不在赚钱的圈子内。马云说：“成不了富人，并不是不能变富，而是没有富人的思维。” 我们不缺机会，缺的是了解机会的意愿，判断机会的眼光，尝试机会的勇气，坚持机会的恒心以及相信自己的信念。抢购商机现在每次有抢购机会都有黄牛存在。以前抢购火车票的黄牛现在没了机会，但他们又出现在各大团购网站上。前段时间的淘宝众筹上的迅雷赚钱宝，非常火，淘宝上搜索一下立马就出现代购，代抢的了。这就是商机。一个简单的程序，加上高配的电脑，和优质的带宽。搞定普通用户还是不成问题的。也有用户一次抢购很多，然后高价在淘宝上卖。赚些差价。这虽然是一种商机，但却是我痛恨的，我深受其害。爬虫商机自从有了互联网，盗版的东西就非常多。现在网络小说，网络写手都很赚钱。程序员写一个爬虫，把别人写的爬出来，放到自己的“圈里”，赚黑钱。这种做法我也是很痛恨的，但是没办法，时代造就了机会。自己建站赚钱对程序员来说，自己创建一个网站很简单的。主要是内容来源，可以自己写技术博客，资讯博客，科技博客等，当你的浏览器达到一定的程度。可以使用百度广告联盟，阿里妈妈广告联盟等加入广告赚钱。这种赚钱方式干净，并且盈利也很可观。接私活赚钱程序员可以上猪八戒网站接一些自己可以做的私活进行赚钱。但是一定要谈好需求，如果一个很小的需求，你理解错了，那么花更多的时间，就不划算了。录制视频赚钱现在各大在线视频网站很火，再加上北京宣布的，雾霾停课等方案，在线视频网络越来越火，程序员可以录制一些有价值的教学视频，发布到csdn学院等，赚取利润分成。成立外包公司赚钱这种做法还是有一定难度的。不是人人都可以实现的。就是程序员自己开一家公司，招聘一些程序员，外派到其他公司干活，赚取利益。自己公司其实就是一个空壳。

2019-01-21

3370

微博爬虫“免登录”技巧详解及 Java 实现(业余草的博客)

目前，对于微博的爬虫，大部分是基于模拟微博账号登录的方式实现的，这种方式如果真的运营起来，实际上是一件非常头疼痛苦的事，你可能每天都过得提心吊胆，生怕新浪爸爸把你的那些账号给封了，而且现在随着实名制的落地，获得账号的渠道估计也会变得越来越少。但是日子还得继续，在如此艰难的条件下，为了生存爬虫们必须寻求进化。好在上帝关门的同时会随手开窗，微博在其他诸如头条，一点等这类新媒体平台的冲击之下，逐步放开了信息流的查看权限。现在的微博即便在不登录的状态下，依然可以看到很多微博信息流，而我们的落脚点就在这里。本文详细介绍如何获取相关的Cookie并重新封装Httpclient达到免登录的目的，以支持微博上的各项数据抓取任务。下面就从微博首页http://weibo.com开始。

2019-01-21

2.3K0

业余草(www.xttblog.com)告诉你如何让网站网址实现百度秒收录

网站爬虫 seo

一个网站要想关键词有排名，必须先收录！同样的一篇文章，收录快的网站，排名一般好于收录慢的网站（也有特别特殊情况）。因此，作为一个站长，觉得网站SEO优化的核心目标便是实现网站文章的秒收录。

2019-01-21

5880

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态