降低 CDN 付费 HTTPS 流量消耗实践总结

从明月下定决心开始使用又拍云 CDN 的时候,就有一个问题困扰着我,那就是 CDN 流量消耗是越来越大,最夸张的时候一天流量消耗达到了惊人的 2G 多了,这对于 HTTPS 付费流量来说成本不低呀!这样每天的流量就意味着白花花的银子在流出,而实际来看网站本身的 IP 和 PV 都没有啥大的波动变化,这也说明 CDN 流量存在比较严重的“损耗”。

通过分析 Nginx 的站点日志文件发现每天有很多稀奇古怪的蜘蛛爬虫来访,并且来访量都不小,动辄几百 MB,天天都来风雨无阻呀都是!为此还夸张的屏蔽了所有海外 IP 的访问,虽然流量是降下来了但是谷歌也无法抓取网站了,甚至谷歌 AdSense 广告都不能正常的投放了,最后只能是放弃了这个方法。还是果断在 CDN 的“User-Agent 防盗链”里屏蔽这些垃圾爬虫的抓取和访问:

现在每天的日志里来访的爬虫看起来顺眼了很多:

至少看着都“正常”了很多嘛!

可惜这样观察了一周多,流量的消耗依然没有多大的改观,看来垃圾爬虫不是主要的原因,继续排查中……。

为了降低 CDN 流量消耗,明月还在 CDN 里启用了“源站资源迁移”,这是又拍云 CDN 都有的,有点儿类似七牛云但又有一些区别,又拍云官方的介绍是“可将源站静态资源无缝迁移到又拍云存储,当客户端下次访问相同的资源时,无需回用户自主源。”,七牛云是通过水煮鱼的插件来实现这个功能的,又拍云是直接在 CDN 抓取的时候同步这些源站资源的,这点儿我感觉是本质上的一个区别,看来又拍云做的更加智能化,用户只需要创建好云存储空间启用这个功能即可,一切都是自动智能完成的。

目前 imydl.tech 和 imydl.com 的源站资源迁移都开启了

为了保险期间同样的在上述两个“云存储空间”里也配置了跟 CDN 一样的“User-Agent 防盗链”,这里要说明一下,“云存储空间”几乎提供了跟 CDN 一样的配置后台,基本上 CDN 需要配置的“云存储空间”里也可以配置,甚至给云存储空间绑定特有的域名都可以(明月不建议大家用这个,涉及到修改源站的静态资源链接,感觉是没有必要的)大家有空可以研究一下。

在又拍云 CDN 支持了“最低 TLS 版本功能”和“智能压缩功能”后(可参考【

又拍云 CDN 又增添两大给力功能支持

】一文),明月第一时间都开启了(又拍云 CDN 和“云存储空间”都开启了支持),在服务器端也对最低 TLS 版本限定到 TLSv1.2,至今也有 10 多天了,终于看到了一点儿效果:

上图分别是 imydl.com 和 imydl.tech 两个站点 Nginx 日志文件统计的流量(昨天)

又拍云 CDN 里统计的两个站点的流量消耗

可能大家看图有点儿懵圈,我给大家解析一下,以 imydl.com 为例:Nginx 里的流量消耗是1.52GB,又拍云 CDN 里流量消耗是862MB。而 imydl.tech:Nginx 里的流量消耗是864MB,又拍云 CDN 里流量消耗是615MB。也就是说 CDN 层面的流量消耗终于算是下降下来了,最高下降比高达 56%。

至此, CDN 流量损耗终于算是“止损”成功了,再次压缩了 CDN 成本的支出!如果你跟明月一样碰到了 CDN 流量损耗过快的问题,建议根据今天明月分享的这个思路调整一下即可,当然明月这个是基于又拍云 CDN 的,如果是其它 CDN 的话只能是根据实际情况来想办法了,其实明月最后还是要给大家再次推荐一下又拍云 CDN ,虽然是付费的 CDN ,但是运用好了其实是花不了多少钱的,不要犹豫了,快来注册激活吧:又拍云 CDN 。

  • 发表于:
  • 原文链接https://kuaibao.qq.com/s/20180819G0SN7300?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码关注腾讯云开发者

领取腾讯云代金券