腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

未闻Code

专栏作者

582

文章

1068802

阅读量

92

订阅数

一日一知：自学爬虫的求职建议

php 网络安全二叉树 python

前几天有一位知识星球中的同学讲了他目前的状况，希望咨询一些未来发展的问题，感觉应该和许多想要去好一点大公司的求职者有一些共性建议：这位同学目前是专升本，专科大三下半年在小公司实习过，从专科大三实习到去年9月入学现在的本科学校，期间一直在兼职接单，做过很多项目，自己也有一直在学习，但是学习的很散（基础的东西很薄弱、知识体系很散东一点、西一点），目前希望能够去一个好点的大公司。对大项目架构、设计模式什么的一窍不通。app 大多数JAVA层的都能解决，so层算法还原不行，只能frida-rpc，web 可以解决少部分加密，风控解决不了只会普通的用iP去怼。

2022-04-07

8801

极其简单，加速Github Release 下载

git github https 网络安全开源

有一些开源软件，它的新版本是通过Github Release来发布的。你在它的官网点击下载以后，实际上是从一个Github的地址下载文件。

2022-04-07

9.8K0

一日一技：如何提取网页中的日期？

https 网络安全

最近我发现Python的一个第三方库，叫做htmldate，经过测试，它提取新闻的发布时间比较准确。我们来看看这个库怎么使用。首先使用pip安装：

2022-04-07

1.3K0

你以为的万能爬虫方法，其实一行代码就能识别！

javascript selenium api 网站网络安全

在以前的公众号中，我提到Selenium/Puppeteer/Pyppeteer有很多特征可以被网站检测到。于是，有些同学想到了另一个方法，就是自己写一个Chrome插件，在网站打开的时候，注入到页面中，然后通过这个注入的JavaScript代码来操作页面，获取数据。

2022-02-11

1.5K0

一日一技：带过期时间的缓存、全文搜索、频率限制怎么做？

tcp/ip 网络安全缓存官方文档 python

实际上，这些功能其实都可以使用Redis来实现，而且每个功能只需要1分钟就能做出来。全文搜索功能在搜索英文的时候，甚至可以智能识别拼写错误的问题。

2022-01-05

3980

一日两技：关于Instagram和Golang的ORM框架

https 网络安全 go 编程算法 php

如果你想访问Instagram，那么你需要访问国外网站。如果你需要保存某个账户下面的图片，那么你需要用电脑网页版一张一张保存

2021-12-08

7300

习惯从右往左阅读的阿拉伯人如何写代码？

python selenium 网络安全 node.js

考大家一个问题，我发现目前在Google上面还搜索不到。由于阿拉伯文是从右往左读，他们的阅读习惯就是从右往左看。那么，编程的时候虽然用的是英文，但是阿拉伯人写代码是怎么写的？欢迎大家文末留言探讨~

2021-12-08

1.3K0

一日一技：使用装饰器简化大量 if…elif…代码

github https git 开源网络安全

今天在 Github 阅读EdgeDB[1]的代码，发现它在处理大量if...elif...else判断的时候，使用了一个非常巧妙的装饰器。我们来看看这个方法具体是什么样的。

2021-11-15

4930

一日一技：HTTPS 证书和中间人攻击的原理

https 网络安全 http

有同学在知识星球和公众号粉丝群里面提到，希望我讲一讲 HTTPS 证书、为什么使用 Charles、Fiddler、MitmProxy 抓 HTTPS 的请求要安装证书、 requests 发送请求的时候，verify 参数除了 False/True 还能填写什么参数。今天我们就这几个问题来做一个简单的介绍。

2021-11-12

4K0

未闻Code·知识星球周报总结（五）

云数据库 Redis 网络安全 scrapy 验证码 python

如果download middleware中响应状态异常时，需要进行验证码处理，其中可能包含下载验证图片，向验证码接口或本地服务发送请求获取验证结果，带着验证结果向目标验证地址发送请求，向上次响应状态异常的URL重新发送请求等许多操作。因为scrapy是异步的，如果这里的各种请求用requests完成的话，同步操作会影响scrapy的速度，那么如何在download middleware中使用scrapy.request完成所有操作呢？或者有其他更好的方案来解决scrapy中过验证的操作（因为觉得上边在download middleware各种请求太繁琐了）？

2021-10-19

1.1K0

一日一技：如何让 Python 提醒你不能覆盖某个父类方法？

python ide 网络安全

在前几天的文章：一日一技：在 Python 里面如何实现一个抽象类中，我们讲到Python 可以实现一个抽象类。抽象类里面有一些抽象方法，在继承这个抽象类的时候，子类必须实现这些抽象方法。

2021-10-19

8740

一日一技：如何替换URL中的query字段？

php https 网络安全编程算法正则表达式

在我们写爬虫的时候，可能会需要在爬虫里面基于当前url生成一个新的url。例如下面这段伪代码：

2021-09-09

1.6K0

一日一技：Golang 如何突破 JA3?

编程算法 go https 网络安全腾讯云测试服务

在之前的文章里面，我们讲到了网站通过 JA3算法，利用一些指纹信息来识别你的请求，无论你是否使用了代理 IP，网站都能识别到你。

2021-09-09

1.8K0

预防老年痴呆，写个小游戏来锻炼大脑

安全网络安全 python

最近一段时间，我感觉自己大脑出现了衰退的症状，说话口误逐渐增多，也常常忘记事情。

2021-09-09

8680

一日一技：前端与后端都是怎么读写 Cookies 的？

php javascript api 网络安全

大家应该看过一些网站，在第一次访问的时候，它会弹出一些小提示或者操作指导，类似于下图所示：

2021-07-20

7990

再见 HTTP 1.1，怎样把网站升级成 HTTP 2？

http https 网络安全 nginx 网站

由于网站并行加载的资源比较多，HTTP 2 相比 HTTP 1.1 来说，所有的连接共享一个 TCP 连接，同时一个域名下还没有最多同时连接数的限制，加载速度会比 1.1 好一些。

2021-06-23

2.1K0

一日一技：如何捅穿Cloud Flare的5秒盾

http 爬虫 tcp/ip https 网络安全

经常写爬虫的同学，肯定知道 Cloud Flare 的五秒盾。当你没有使用正常的浏览器访问网站的时候，它会返回如下这段文字：

2021-05-14

5K0

一日一技：在什么情况下使用@property比较好？

tcp/ip java 云数据库 Redis 网络安全

我在2016年的时候，写过一篇文章，介绍@property装饰器。4年过去了，本来以为这个装饰器使用起来应该是很自然的事情，但还是有同学不知道在什么场景下可以使用它。

2020-11-19

4870

一日一技：如何从 URL 中快速提取域名？

https 网络安全 php

有时候，我们要从一段很长的 URL 里面提取出域名。例如从https://www.kingname.info/2020/10/02/copy-from-ssh/，我需要获取的是kingname.info。

2020-11-03

4.7K0

一日一技：FastAPI如何关闭接口文档？

api 官方文档 https 网络安全 php

FastApi 自带的接口文档，让我们在开发后端接口的时候省了不少的工作量。它能自动根据你的代码识别接口的参数，还能根据你的注释生成接口的说明，如下图所示：

2020-09-14

5.2K1

点击加载更多

社区活动

RAG七天入门训练营

鹅厂大牛手把手带你上手实战

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态