首页
学习
活动
专区
工具
TVP
发布

技术小牛

专栏作者
75
文章
119959
阅读量
10
订阅数
【selenium应用实践】怎样实现自动监测百度收录站点链接数量
前段时间写了一篇文章介绍了使用python爬虫自动抓取百度site:命令的结果,但那个方案有个问题是不稳定,而且只是判断了是否收录,具体收录了多少个链接不清楚,这无法达到持续关注收录数量是否有增加的目的,于是用selenium写了这个实现方案,可以精准监测收录数量
风柏杨4711
2022-08-28
4420
使用Gmail邮箱攻略
使用Gmail邮箱攻略 1、打开“邮箱—邮箱设置—邮箱管理—新建邮箱” 2、手动配置邮箱 3、使用自定义代理,填入下方表格的服务器IP地址和端口(任选一组):
风柏杨4711
2022-08-28
1.2K0
怎样实现两台redis服务器的数据迁移
有一台原本已用了一年的华为云服务器到期了,因为各方面的考虑,准备迁移到腾讯云上面去,因为redis里也有一些持久化保存的数据,所以也需要做迁移。
风柏杨4711
2022-08-15
1K0
怎样用python爬虫实现自动监测百度是否收录域名
那怎样确认自己的站点是否被百度收录呢?最直接的办法当然是直接搜索网站名称(通常是首页的标题title),但理论上来说,这个办法并不准确,因为有可能已经收录了,但因为权重问题,排名靠后,所以理论上你得将所有搜索结果页都翻遍了都没有才能确认是没收录,工作量太吓人了吧,肯定有更好的办法。
风柏杨4711
2022-08-15
8940
【python爬虫教程】用python抓取肯德基某地的门店列表实例代码(支持分页)
这是一个用python开发的一个简单的爬虫,作用是抓取肯德基官方网站公布的门店列表,支持关键词搜索, 支持分页
风柏杨4711
2022-08-15
5690
PGSQL删除数据库里提示数据库有连接会话,不能删除怎么办?
由于现今大部分的应用是使用了数据库连接池的,所以当页面或接口访问完后,数据库的连接并不会马上断开,这导致有时候想用navicat删除某些因测试目的建立的数据库时,会导致删除失败,提示
风柏杨4711
2022-04-13
2.1K0
MQTT协议学习总结
本文纯手打,只是本人近期摸索MQTT的总结,不是从其它地方复制的,所以有可能因为认知的偏差或文笔水平导致个别的地方表述不准确,如有问题,欢迎指出。
风柏杨4711
2021-12-24
1.5K0
珠宝订货(订单)系统与ERP实现库存信息同步的实现方案分享
客户已有一个用了多年的珠宝ERP,里面有商品信息及准确的库存,他们原有的订货系统已经满足不了业务发展的需要,将要切换成包含PC端及小程序端,功能更先进及完善的珠宝订货系统-优订货。
风柏杨4711
2021-11-22
6930
PHP数组迭代器的使用方法
近来在开发一个视力筛查电子报告系统的产品,这个产品的作用是自动提取视力筛查过程中得到的屈光检查数据,并结合数据自动生成通俗易懂且专业的电子报告,以方便家长可以通过公众号或H5链接查阅。
风柏杨4711
2021-11-08
1.2K0
PHP边运行边输出运行结果的实现方法
在开发过程中,经常会需要做批量处理,例如数据同步或格式转换时往往涉及大批量的数据处理,由于数据量大,数据里往往存在各种的差异,导致运行过程容易出问题,所以能在运行过程中实时输出每条记录运行的情况(成功或失败,失败的原因及引发异常的原始数据信息)是非常有助于排查问题的,我这里分享两个自己做了简单封装的方法,我自己觉得很好用,希望也对你们有用。
风柏杨4711
2021-11-03
7460
HTTP状态码502与504的区别及解决思路
首先得搞清楚502错误和504错误的区别,以我比较熟悉的PHP为例,502是PHP-FPM(PHP的进程管理器没办法从进程池里找到可分配的进程来处理请求了,就会返回502错误,本质上是PHP进程状态异常—进程不够用了或者PHP服务根本就没开启),这种情况下应该检查PHP服务是否启动了,如果启动了,就要看一下是不是进程池太小,已经全部处于繁忙状态,这种情况下通常将PHP的可用进程数提高数提高就能解决问题;而504错误是网关超时,它代表负责处理HTTP请求的PHP进程超过了约定的最长时间仍未返回处理结果,出现这种异常的原因通常是sql执行的时间太长或代码里出现了死循环之类的问题。
风柏杨4711
2021-08-20
5.1K0
批量上传图片/文件时相应的服务器配置怎样修改
WEB服务器对于客户端上传文件的大小和数量是有限制的(有默认的最大值),如果优订货业务系统有特殊需要,例如系统要支持批量上传操作有,就要修改服务器配置以适应业务的需要,否则会报413状态异常,那具体有哪些相关的配置项呢?
风柏杨4711
2021-08-05
1.3K0
怎样用命令行查看和删除redis的数据
新部署了一台外部服务器的情况下,如果服务器的6379商品没有开放,但又需要查看或清理redis上的数据怎么办呢?可以通过SSH连接上去用命令行进行处理,步骤如下: 1)通过SSH登录服务器; 2)执行redis-cli -h 127.0.0.1 -p 6379,这时与redis建立了连接,但未鉴权的情况下是无法进行下一步操作的; 3)执行auth [密码], 如 auth 123456,如果密码是正确的,页面上会输出OK字样,说明已经通过鉴权,可以对redis进行常规操作了; 4)选择数据库,通常redis默认会创建0-16号数据库,如果没有特殊操作,默认是在0号数据库的,所以输入 select 0后回车就可以了,如果操作成功,控制台会输出OK; 5)通过keys [键名] 可以快速找到已有的key值,键名是支持正则表达式的,如寻找包含product字符串的键名,就可以用 keys product,控制名会输出结果; 6)如果要删除指定的key,可以使用 del [键名],这个命令同样是支持正则表达式的,例如,删除所有以product开头的键值,就可以用 del product*,就可以达到目的;
风柏杨4711
2021-08-05
2.4K0
php获取第N周的日期区间的工具方法
php的日期库函数是很强大的,比如获取某个时间戳是当年度的第几周,可以用date(‘W’,$timestamp)实现,但如果已知是第几周,想取这周对应的时间区间怎么处理呢? php的库函数里没有相应的方法,所以我封装了以下方法: /** * 获取第n周的日期区间 * @param [int] $no 要获取第几周的日期 * @param [string] $dateFormat 日期格式 * @return string 日期区间字符串 */
风柏杨4711
2021-07-23
1.3K0
正向代理和反向代理的区别是什么?
首先,从字面上理解,代理的意思是代替办理,就是一方委托另一方办事,在计算机网络的世界里,代理通常是指客户端与服务端之间的中介。
风柏杨4711
2021-05-24
8230
什么是反向代理?正向代理和反向代理的区别是什么?
首先,从字面上理解,代理的意思是代替办理,就是一方委托另一方办事,在计算机网络的世界里,代理通常是指客户端与服务端之间的中介。
风柏杨4711
2021-05-21
8630
【玩转腾讯云】手把手教你申请免费的SSL证书
近年来,网络安全越来越受到重视,其中,网络传输内容的安全是重要一环,因为数据在网络中传输,是难以避免被抓取的,对传输内容加密,是有效避免数据泄露或被篡改的办法。
风柏杨4711
2021-04-23
4.9K0
composer install或composer update很慢的解决办法
当composer install或composer update很慢或卡住不动时,可以是composer的源出了问题,可以切换使用的源站来解决问题,网上大多数博客只会提到packagist.phpcomposer.com这个源站,应该是最早的国内源站的缘故吧 ,其实除了这个,国内两大云服务商阿里云和腾讯云也有提供这个源站服务的,具体如下:
风柏杨4711
2021-03-15
1.9K0
通过Nginx配置快速完成服务器校验的办法
很多平台在配置域名或服务器指向时,会要求用户将指定的文件放到服务器根目录下,他们通过访问域名根目录下这个文件的uri以确认用户对这个服务器(的目录)是有控制权限的,很常见的如:微信的网页授权域名添加修改,支付授权目录设置等场景都会需要校验流程。
风柏杨4711
2021-03-15
1.8K0
排查服务不可用是否防火墙配置问题的小窍门
今天用workerman实现一个WebSocket长链接时,在开发环境没问题,但在生产环境(做了反向代理)就一直连接不上,在解决这个问题时有些心得,跟大家分享一下。
风柏杨4711
2021-03-15
3730
点击加载更多
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档