不二小段-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

不二小段

专栏成员

37

文章

67606

阅读量

31

订阅数

程序员必读的互联网书单（文末有福利）

程序员是最能够体会知识恐慌的一个群体，我们每天面临太多的新技术，时时刻刻都在学习和创造新内容。同时我们还需要了解互联网的风口与产品理念，否则非常容易被互联网抛下。在这样的前提下，如何高效阅读与学习便成为我们面临的一大难题。

2018-10-08

3330

延禧攻略变微商独播？心疼爱奇艺一秒钟

今年以来最火的剧应该就是《延禧攻略》了，上线33天以来播放量和话题量节节高升，拿下了单日播放6.5亿，累积播放95亿的成绩，目测今天零点之后就要破百亿了，我虽然不热衷追剧，但也陪女朋友看过一点。《延禧攻略》原定周四至周日每晚更新两集，VIP提前8集，今天（周一）也改成了周一到周日更新。

2018-10-08

5890

惊了！百度官方居然推出了免费不限速的网盘下载工具？！

百度网盘是大家十分熟悉的一款产品，曾经功能、速度都还算良心，一度十分火爆。后来，经历了8秒教育片和几次限速之后，大家虽然迫不得已还在用，但是怨声载道。不甘心的技术宅们自然不愿掏钱买会员，去享受原本免费的服务，于是出现了各种魔改客户端，或者油猴脚本，配合别的下载器绕过限制或是多线程加速下载。然而官方经常封杀这些手段，导致这些办法也都是游击战性质，都不是长久之计。

2018-07-25

6130

【爬虫军火库】如何优雅地复制请求头

『回』字有四种写法。 ——鲁迅复制请求头可以说是写爬虫代码的一个日常操作了，虽然不是所有网站都会检校请求头中的字段，但是如果遇到爬虫无法正常返回网页内容时，我们的第一反应依然是，加个headers试试——从最常见的UA，Host，到防盗链的Referfer，有时要添加cookie，等等。如果我们能够明确地知道，加上哪一个，或者哪两个，甚至哪几个字段就能正确请求，那便也算了，偏偏有时没办法确定问题出在哪里，最简单粗暴的做法还是全写上吧。当我们通过任何方式抓到一个请求的时候，总是能看到请求头的。但是用起来

2018-04-16

1.1K0

【Scrapy】走进成熟的爬虫框架

今天简单聊聊Scrapy的安装。前几天有小伙伴留言说能不能介绍推荐一下爬虫框架，我给他推荐了Scrapy，本来想偷个懒，推荐他去看官方文档，里面有一些demo代码可供学习测试。结果收到回复说文档中演示用到的网站已经无法访问了。所以只能自己来简单写一下了，也算是自己一个学习记录。 Scrapy是什么？定义介绍我也不复制粘贴了。简单来说，Scrapy是一个中大型的爬虫框架，框架的意义就在于帮你预设好了很多可以用的东西，让你可以从复杂的数据流和底层控制中抽离出来，专心于页面的解析即可完成中大项目爬虫，甚至是分

2018-04-08

9570

【爬虫军火库】生成指定日期间的日期列表

今天没能空下来时间写太多，所以只简单记录一个很具体的需求：指定了起止日期，如何生成一个日期列表。这个需求是我之前在抓取一个环保的历史数据时遇到的：如图，在这个页面上，我们需要手动通过日期控件选

2018-04-08

1.4K0

读书笔记：增长黑客（一）

读书笔记 GROWTH HACKER 增长黑客（一） 1 增长黑客的崛起什么是“增长黑客” 这一说法源于硅谷，最早在 2010 年由 Qualaroo 的创始人兼首席执行官 Sean Ellis

2018-04-08

1K0

没有更多了

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态