降低 CDN 付费 HTTPS 流量消耗实践总结

从明月下定决心开始使用又拍云 CDN 的时候,就有一个问题困扰着我,那就是 CDN 流量消耗是越来越大,最夸张的时候一天流量消耗达到了惊人的 2G 多了,这对于 HTTPS 付费流量来说成本不低呀!这样每天的流量就意味着白花花的银子在流出,而实际来看网站本身的 IP 和 PV 都没有啥大的波动变化,这也说明 CDN 流量存在比较严重的“损耗”。

通过分析 Nginx 的站点日志文件发现每天有很多稀奇古怪的蜘蛛爬虫来访,并且来访量都不小,动辄几百 MB,天天都来风雨无阻呀都是!为此还夸张的屏蔽了所有海外 IP 的访问,虽然流量是降下来了但是谷歌也无法抓取网站了,甚至谷歌 AdSense 广告都不能正常的投放了,最后只能是放弃了这个方法。还是果断在 CDN 的“User-Agent 防盗链”里屏蔽这些垃圾爬虫的抓取和访问:

现在每天的日志里来访的爬虫看起来顺眼了很多:

至少看着都“正常”了很多嘛!

可惜这样观察了一周多,流量的消耗依然没有多大的改观,看来垃圾爬虫不是主要的原因,继续排查中……。

为了降低 CDN 流量消耗,明月还在 CDN 里启用了“源站资源迁移”,这是又拍云 CDN 都有的,有点儿类似七牛云但又有一些区别,又拍云官方的介绍是“可将源站静态资源无缝迁移到又拍云存储,当客户端下次访问相同的资源时,无需回用户自主源。”,七牛云是通过水煮鱼的插件来实现这个功能的,又拍云是直接在 CDN 抓取的时候同步这些源站资源的,这点儿我感觉是本质上的一个区别,看来又拍云做的更加智能化,用户只需要创建好云存储空间启用这个功能即可,一切都是自动智能完成的。

目前 imydl.tech 和 imydl.com 的源站资源迁移都开启了

为了保险期间同样的在上述两个“云存储空间”里也配置了跟 CDN 一样的“User-Agent 防盗链”,这里要说明一下,“云存储空间”几乎提供了跟 CDN 一样的配置后台,基本上 CDN 需要配置的“云存储空间”里也可以配置,甚至给云存储空间绑定特有的域名都可以(明月不建议大家用这个,涉及到修改源站的静态资源链接,感觉是没有必要的)大家有空可以研究一下。

在又拍云 CDN 支持了“最低 TLS 版本功能”和“智能压缩功能”后(可参考【又拍云 CDN 又增添两大给力功能支持】一文),明月第一时间都开启了(又拍云 CDN 和“云存储空间”都开启了支持),在服务器端也对最低 TLS 版本限定到 TLSv1.2,至今也有 10 多天了,终于看到了一点儿效果:

上图分别是 imydl.com 和 imydl.tech 两个站点 Nginx 日志文件统计的流量(昨天)

又拍云 CDN 里统计的两个站点的流量消耗

可能大家看图有点儿懵圈,我给大家解析一下,以 imydl.com 为例:Nginx 里的流量消耗是1.52GB,又拍云 CDN 里流量消耗是862MB。而 imydl.tech:Nginx 里的流量消耗是864MB,又拍云 CDN 里流量消耗是615MB。也就是说 CDN 层面的流量消耗终于算是下降下来了,最高下降比高达 56%。

至此, CDN 流量损耗终于算是“止损”成功了,再次压缩了 CDN 成本的支出!如果你跟明月一样碰到了 CDN 流量损耗过快的问题,建议根据今天明月分享的这个思路调整一下即可,当然明月这个是基于又拍云 CDN 的,如果是其它 CDN 的话只能是根据实际情况来想办法了,其实明月最后还是要给大家再次推荐一下又拍云 CDN ,虽然是付费的 CDN ,但是运用好了其实是花不了多少钱的,不要犹豫了,快来注册激活吧:又拍云 CDN

查看熊掌号

原文链接:https://www.imydl.com/wzjs/8671.html

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏*坤的Blog

DNS线路

4K5
来自专栏Spark学习技巧

干货!一次kafka卡顿事故排查过程

由于一次功能上线后,导致某数据量急剧下滑,给我们紧张的呢!排查过程也是个学习过程!抛开结果,方法论可供参考~

884
来自专栏FreeBuf

极客DIY:利用Arduino制作智能家居系统

智能家居系统简单来说是融合了自动化控制系统、计算机网络系统和网络通讯技术于一体的网络化智能化的家居控制系统。 本文中所展示的智能家居系统可以对室内外温度、天气变...

2238
来自专栏编程一生

系统的稳定性建设

2502
来自专栏企鹅号快讯

由近20万“肉鸡”组成的僵尸网络PyCryptoMiner正疯狂开采门罗币

“用指尖改变世界” ? F5 Networks的安全研究人员已经发现了一个新的Linux加密僵尸网络并将其命名为“PyCryptoMiner”,它正在扩展到SS...

2748
来自专栏FreeBuf

序列化漏洞影响半数以上Android手机

Stagefright漏洞爆出没多久,Android平台又爆出一重大漏洞,影响55%的手机。IBM的X-Force应用安全研究团队近日发现了这一漏洞。 攻击者可...

2159
来自专栏企鹅号快讯

还在让浏览器自动保存密码?“自动填充”功能曝重大安全隐患

“用指尖改变世界” ? 来自普林斯顿大学的隐私安全保护专家警告说,互联网广告公司或者数据分析公司可以使用隐藏的登录字段从网页浏览器中提取用户保存的用于登录某些网...

1989
来自专栏程序员的SOD蜜

闲话权限系统的设计

一、权限的本质 权限管理,首先要理清权限的本质:权限就是对受保护资源的有限许可访问。 理解了权限的本质,就好谈权限的管理了。 权限就是对受保护资源的有限许可访问...

3818
来自专栏FreeBuf

如何破解一台智能咖啡机

随着物理网的普及,其安全性尤其重要,近日有国外黑客破解一台智能咖啡机,下面就一起来看一下吧。 故事起因 最近一名意大利黑客Simone Margaritelli...

2165
来自专栏大宽宽的碎碎念

初创公司如何避免服务器被攻击

1.1K5

扫码关注云+社区

领取腾讯云代金券