腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

进击的Coder

专栏作者

552

文章

1254194

阅读量

199

订阅数

记一次爬虫逆向攻防的详细过程

爬虫 python javascript 编程算法

大家好！说个冷知识，由于大数据、区块链、物联网、人工智能、虚拟现实等新兴科技的极速发展与广泛应用，全球对 Python 技术服务的需求量开始呈指数级增长，这导致需求远远大于供给，供不应求或成为常态。之所以会这样，是因为无论是哪一类风头正盛的科技热点，其在技术上都与 Python 有着不可或缺的紧密关联。不平衡的供需关系，使 Python 技术服务的报酬变得极高。目前几乎所有的 Python 圈内人，都在做 Python 副业赚外快，赚 W 又快又轻松。本月 Python 副业兼职记录每年 6 月

2022-07-19

8260

618 来了！《Python3网络爬虫开发实战（第二版）》第二波赠书活动也来了！

爬虫 python javascript https

“ 阅读本文大概需要 3 分钟。 ” 大家好！我是崔庆才。大家可能知道我在去年年底刚刚出版了《Python3网络爬虫开发实战（第二版）》，短短几个月来，现在已经印刷四次，售出约三万册。为了感谢大家的支持，同时也继续宣传下这本书，我来做赠书活动啦，一共送 10 本，活动为期一周。书籍简介没错，就是这本：我个人于 2015 年研究 Python 爬虫技术，并于 2018 年出版了个人第一版爬虫书《Python3 网络爬虫开发实战》，出版至今，此本书一直处于市面上所有爬虫书的销冠位置，销量 10

2022-06-20

9790

用 Python 把网络上的付费资源都爬了一遍！

爬虫 python javascript

昨天在朋友圈里，看见有 Python 圈子里的朋友晒了张图，是其用 Python 技术兼职赚钱的接单记录，在了解详情后我大为震撼，竟然有人单靠 Python 爬虫做副业就能半个月赚 3W！可仔细想想，5 月已经过半，Python 爬虫接单的高潮期已经到来，各类甲方对爬虫服务的需求量其实已经很大了，给出的报酬也很丰厚，所以对掌握企业级爬虫技术的朋友来说，兼职接单月入 3W 似乎也简单。当下各领域对爬虫服务的需求量虽说很大，但其对技术的要求可一点都不低，通常高价值的爬虫项目都需要攻破各类反爬虫措施才能完成

2022-05-17

1.6K0

PyScript 来了！终于可以在浏览器运行 Python 应用

python html 爬虫 javascript

这是「进击的Coder」的第 619 篇技术分享整理：梦依丹来源：CSDN（ID：CSDNnews） “ 阅读本文大概需要 3 分钟。 ” 在 PyCon US 2022 上，Python 开发商 Anaconda 发布了 PyScript，该框架可以在浏览器中运行 Python 应用。它允许开发者在HTML中创建丰富的 Python应用程序，Python 代码可与 JavaScript 实现双向通信。 1. PyScript 是什么？在 PyScript 的官网是这样介绍的：“Run Pyth

2022-05-10

1.2K0

【网易内部资料】2022 年高级前端大厂面试指南

webpack 打包云直播 api javascript

“一到面试我就心里没底，关键时刻总掉链子。”“明明做足了准备，但是为什么我被刷了？”许多小伙伴在后台私信我们，询问关于面试的话术技巧，话术固然重要，但是展现自己的核心竞争力更是关键，在这里小编为大家总结了如何在面试中能够凸显自身能力的面试干货。 01 面试题已经问腻了好的岗位都需要真的懂开发什么叫真的懂开发，很多人以为前端就是写个页面，但是真正的大厂做前端，你的工作不只是页面，更是整个前端工程，所以这里给大家总结一下大厂的工程化体系。这一系列的体系在很多大厂中都是要根据项目专门设计和制作的。所以如果

2022-05-05

6430

Python 免费获取音乐平台 VIP 音乐

爬虫 python javascript

Hi，大家好，大家的五一假期开心吗？最近圈子里的朋友们应该都很开心，毕竟从四月末至今，各种好消息就一直没停过！有人跳槽成功进大厂，开启了年薪 30 个 W 的爬虫工程师生涯，也有人靠 Python 爬虫做兼职，仅仅半个月就赚了 2W！无论是要搞定面试拿高薪，还是想兼职赚钱接大单，都要有足够的技术储备和实战经验才能实现。所以公众号每月都能收到上百条咨询爬虫学习的留言，能看出，大家对爬虫技术的需求都很大，也很迫切。爬虫的逆向破解，是 Python 爬虫中的重点，也是各类甲方最重视的技术点，逆向破解+反

2022-05-05

2.5K0

原创丨JavaScript 逆向过程中无限 Debug 的绕过方案

javascript 爬虫 python

这是「进击的Coder」的第 608 篇技术分享作者：崔庆才在做爬虫的时候，我们经常会在代码里面遇见 debugger 这么一个关键字。debugger 是 JavaScript 中定义的一个专门用于断点调试的关键字，只要遇到它，JavaScript 的执行便会在此处中断，进入调试模式。有了 debugger 这个关键字，我们可以非常方便地对 JavaScript 代码进行调试，比如使用 JavaScript Hook 时，我们可以加入 debugger 关键字，使其在关键的位置停下来，以便查找逆向

2022-04-24

2.5K0

这个好玩！分享几个爬虫“逆向破解”的练手项目

爬虫 python javascript

Hi，大家好。四月过半，Python 爬虫兼职接单高潮期已经到来，最近圈子里喜报频传，很多朋友都接到了大单，甚至有人靠 Python 爬虫做副业半个月就赚了 3W！进入四月以来，公众号后台每天都会收到近百条关于爬虫技术变现与爬虫技术进阶的问题留言。可以看出，大家对爬虫高效进阶与极速变现方案的需求变得越来越迫切。回复完留言之后，我意识到，虽然当下各类甲方对爬虫服务的需求很大，给出的报酬也很诱人，但大部分人的技术却无法满足兼职需求，破不了反爬虫措施，接不了高价值的单。结合多年爬虫项目接单经验，这里给想

2022-04-19

9910

《Python3网络爬虫开发实战（第二版）》第一波赠书活动来了～

爬虫 python javascript https

“ 阅读本文大概需要 3 分钟。 ” 大家好！我是崔庆才。大家可能知道我在去年年底刚刚出版了《Python3网络爬虫开发实战（第二版）》，短短几个月来，现在已经印刷三次，售出两万多册。为了感谢大家的支持，同时也继续宣传下这本书，我来做赠书活动啦，一共送 10 本，活动为期一周。书籍简介没错，就是这本：我个人于 2015 年研究 Python 爬虫技术，并于 2018 年出版了个人第一版爬虫书《Python3 网络爬虫开发实战》，出版至今，此本书一直处于市面上所有爬虫书的销冠位置，销量 10w

2022-04-12

1.6K0

月薪没到 30k 的前端开发注意了！这个消息跟你们息息相关...

webpack 打包 api javascript 网站

网易等大厂的前端岗位一直紧缺，特别是资深级。最近，一位小哥面进网易，定级 P4（资深），总包 60W，给大家带来真实面经要点分享。网易的要求有： 1.对性能优化有较好理解，熟悉常用调试工具 2.掌握 HTML/CSS/JS，熟练使用前端框架，vue 为必须项 3.熟悉 Node.js 开发，有良好的业务理解力…… 主要缺少清晰的底层逻辑以及大型项目实战经验！这些从网易限时免费为大家提供的，价值 ¥299 的前端内训课里都可以学习到，由网易一线前端大佬讲解！注意！仅限前 30 名，先报

2022-03-28

3040

JavaScript 逆向爬虫中的浏览器调试常见技巧

javascript ajax html

这是「进击的Coder」的第 592 篇技术分享作者：崔庆才 “注：本文来自《Python3网络爬虫开发实战（第二版）》一书。 ” 现在越来越多的网站也已经应用了这些技术对其数据接口进行了保护，在做爬虫时如果我们遇到了这种情况，我们可能就不得不硬着头皮来去想方设法找出其中隐含的关键逻辑了，这个过程我们可以称之为 JavaScript 逆向。既然我们要做 JavaScript 逆向，那少不了要用到浏览器的开发者工具，因为网页是在浏览器中加载的，所以多数的调试过程也是在浏览器中完成的。工欲善其事，必先利

2022-03-21

2K0

机密！网易前端开发者内训课程，白嫖了！（内附网易三大项目实战）

单元测试云直播 webpack javascript 打包

无论是开发 app 还是小程序，源代码都是很重要的，高质量的代码编写能力也逐渐成为高级前端的标配。为了写出高质量的代码，掌握源码技巧和代码架构方案，巧用设计模式简化代码能起到不错的效果。除了掌握技巧以外，如果要做一个大型项目，那能够玩转好 webpack 肯定是锦上添花。webpack 是一个打包器，它能将多个 js 文件打包成一个文件，学会利用批量引入优化加载，配置好代码让项目更小，运用 webpack 插件和 loader 开发等都是很好的最佳实践。从上面的招聘 JD，我们可以看到现在对高级前端的

2022-03-14

6070

2021 年 JavaScript 明星项目公布，最受欢迎的竟是它？

react javascript rust vue.js node.js

【编者按】在过去一年中，JavaScript 生态圈的技术框架大放异彩，根据 GitHub 中增加的星星数量排名，JavaScript 领域最受欢迎的项目是 zx、Vite 和 Next.js。开发者越来越看重速度的提升，为构建更好的网站和应用，元框架开始走进大家的视野。许多社区成员都开始从事开发工作，为用户带来更好的体验。今年又将出现哪些表现出色的项目呢？让我们一起来看看吧！这是「进击的Coder」的第 577 篇技术分享作者：Michael Rambeau编译：郭露来源：CSDN（ID：CSDNnew

2022-03-04

1.1K0

万物皆可 API！

api python 网站 javascript

反正大意就是说，有些命令的执行结果如果能够通过 HTTP的 API 暴露出来，我们就能更方便地获取到命令的执行结果，在某些场景下会非常方便。

2022-01-05

4270

GitHub 新出的功能！可以帮我们自动写代码

python javascript 编程算法神经网络

今天逛 GitHub 的时候发现了 GitHub 出了一个新的 Feature，叫做 GitHub Copilot，说可以帮我们自动写代码！

2021-07-22

1.4K0

效率提高十倍，Puppeteer 如何启动交互模式？

node.js javascript 开源

当我们使用 Selenium 开发爬虫的时候，使用 Jupyter 写代码会比用 PyCharm 写代码更方便。如果使用 PyCharm 写代码并直接运行，当某一行报错的时候，整个程序就挂了，改了代码以后必须完全从头开始，这样会非常浪费时间。但如果使用 Jupyter 写代码，那么我们只需要重试出问题的这一行代码就可以了，不需要把整个程序再重启一次。

2020-12-31

1.6K0

爬虫如何正确从网页中提取伪元素？

css html selenium javascript xslt & xpath

可以看到，在源代码里面没有请抓取我！这段文字。难道这个网页是异步加载？我们现在来看一下网页的请求：

2020-12-15

2.7K0

JavaScript 混淆与逆向必读之 AST 节点类型名词基础

javascript express 爬虫编程算法 https

在《Python3 反爬虫原理与绕过实战》[1]一书中给出了“爬虫与反爬虫都是综合技术的应用”、“技术在对抗中进步”这样的观点。随着时间的推移、技术的普及和进步，Web 应用方给爬虫增加了越来越多的限制，其中效果最显著的就是代码混淆。

2020-07-21

1.6K0

Scrapy 和 Pyppeteer 更优雅的对接方案

scrapy http javascript https 网络安全

现在越来越多的网页都已经演变为 SPA 页面，而且越来越多的网站采用了各种 JavaScript 混淆和加密技术，这使得 JavaScript 逆向难度变得很大，Ajax 接口模拟爬取也变得越发困难，因此模拟浏览器爬取不失为一个不错的爬取方案。

2020-07-21

2.8K1

精品连载丨安卓 App 逆向课程之二逆向神器 frida 的介绍

https 网络安全 javascript python linux

前阵子受《Xposed模块编写的那些事》[1]这篇文章的帮助很大，感觉有必要写一篇文章。现在最火爆的又是frida，该框架从Java层hook到Native层hook无所不能，虽然持久化还是要依靠Xposed和hookzz等开发框架，但是frida的动态和灵活对逆向以及自动化逆向的帮助非常巨大。

2020-06-17

2.4K0

点击加载更多

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态