首页
学习
活动
专区
工具
TVP
发布

未闻Code

专栏成员
586
文章
1129720
阅读量
93
订阅数
一日一技:Python如何同时调用多个GPT的API?
相信很多同学或多或少都在Python中使用过GPT API,通过Python安装openai库,来调用GPT模型。
青南
2023-09-11
3660
爬虫出海Step by Step(一)
上周的文章《一日一知:国内爬虫开发人员的未来》发布以后,很多同学私信我表示对爬虫出海很有兴趣,希望我能详细介绍一下。因此,我准备用几篇文章来介绍爬虫出海的具体做法细节和注意事项。
青南
2022-05-23
1.6K1
如何提问:为什么X-Y问题会浪费大家的时间?
这个同学写的爬虫代码运行一段时间以后,内存会急剧上升,因此它觉得上Requests 有内存泄漏的问题。于是大家都在回答怎么检测哪一行代码导致了内存泄漏,以及出现了内存泄漏应该怎么办。甚至有人为了复现这个问题,专门写了很长的代码,搞了几十个线程,循环请求一个网站几十万次来验证Requests在什么情况下会内存泄露。
青南
2022-04-07
8660
你以为的万能爬虫方法,其实一行代码就能识别!
在以前的公众号中,我提到Selenium/Puppeteer/Pyppeteer有很多特征可以被网站检测到。于是,有些同学想到了另一个方法,就是自己写一个Chrome插件,在网站打开的时候,注入到页面中,然后通过这个注入的JavaScript代码来操作页面,获取数据。
青南
2022-02-11
1.6K0
一日一技:前端与后端都是怎么读写 Cookies 的?
大家应该看过一些网站,在第一次访问的时候,它会弹出一些小提示或者操作指导,类似于下图所示:
青南
2021-07-20
8570
一日一技:FastAPI如何关闭接口文档?
FastApi 自带的接口文档,让我们在开发后端接口的时候省了不少的工作量。它能自动根据你的代码识别接口的参数,还能根据你的注释生成接口的说明,如下图所示:
青南
2020-09-14
6.1K1
一日一技:为 pymongo 的批量插入功能进一步加速
我们知道,使用 Pymongo 插入数据的时候,凑够一批数据,并调用insert_many()批量插入,速度会远远超过一条一条插入。在默认情况下,我们只给这个方法传一个参数:包含字典的列表:
青南
2020-05-14
2.6K0
从零开发一个爬虫框架——Tinepeas
Scrapy 是一个非常优秀的爬虫框架,为了向 Scrapy 致敬,也为了让大家更好地理解 Scrapy 的工作原理,我们自己模仿 Scrapy 的数据流,写一个爬虫框架。
青南
2020-05-14
8280
一日一技:如何正确使用 re.sub 的第二个参数
在Python的正则表达式模块re中,我们常用的一个方法是 re.sub。它的作用是正则替换。例如我要把字符串 abc123xyz456中的数字替换为 *号:
青南
2020-05-13
1.4K0
(最新版)如何正确移除 Pyppeteer 中的window.navigator.webdriver
在《在Pyppeteer中正确隐藏window.navigator.webdriver 》一文中,我们介绍了修改源代码使Pyppeteer 打开的 Chrome 隐藏window.navigator.webdriver的方法。
青南
2020-03-13
1.4K0
从Workflowy到印象笔记
Workflowy是一个极简风格的大纲写作工具,使用它提供的无限层级缩进和各种快捷键,可以非常方便的理清思路,写出一个好看而实用的大纲。如下图所示。
青南
2018-08-30
1.1K0
没有更多了
社区活动
【纪录片】中国数据库前世今生
穿越半个世纪,探寻中国数据库50年的发展历程
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档