前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >降低 CDN 付费 HTTPS 流量消耗实践总结

降低 CDN 付费 HTTPS 流量消耗实践总结

作者头像
明月登楼
发布2018-08-23 19:04:09
1.7K0
发布2018-08-23 19:04:09
举报

从明月下定决心开始使用又拍云 CDN 的时候,就有一个问题困扰着我,那就是 CDN 流量消耗是越来越大,最夸张的时候一天流量消耗达到了惊人的 2G 多了,这对于 HTTPS 付费流量来说成本不低呀!这样每天的流量就意味着白花花的银子在流出,而实际来看网站本身的 IP 和 PV 都没有啥大的波动变化,这也说明 CDN 流量存在比较严重的“损耗”。

通过分析 Nginx 的站点日志文件发现每天有很多稀奇古怪的蜘蛛爬虫来访,并且来访量都不小,动辄几百 MB,天天都来风雨无阻呀都是!为此还夸张的屏蔽了所有海外 IP 的访问,虽然流量是降下来了但是谷歌也无法抓取网站了,甚至谷歌 AdSense 广告都不能正常的投放了,最后只能是放弃了这个方法。还是果断在 CDN 的“User-Agent 防盗链”里屏蔽这些垃圾爬虫的抓取和访问:

降低 CDN 付费 HTTPS 流量消耗实践总结
降低 CDN 付费 HTTPS 流量消耗实践总结

现在每天的日志里来访的爬虫看起来顺眼了很多:

降低 CDN 付费 HTTPS 流量消耗实践总结
降低 CDN 付费 HTTPS 流量消耗实践总结

至少看着都“正常”了很多嘛!

可惜这样观察了一周多,流量的消耗依然没有多大的改观,看来垃圾爬虫不是主要的原因,继续排查中……。

为了降低 CDN 流量消耗,明月还在 CDN 里启用了“源站资源迁移”,这是又拍云 CDN 都有的,有点儿类似七牛云但又有一些区别,又拍云官方的介绍是“可将源站静态资源无缝迁移到又拍云存储,当客户端下次访问相同的资源时,无需回用户自主源。”,七牛云是通过水煮鱼的插件来实现这个功能的,又拍云是直接在 CDN 抓取的时候同步这些源站资源的,这点儿我感觉是本质上的一个区别,看来又拍云做的更加智能化,用户只需要创建好云存储空间启用这个功能即可,一切都是自动智能完成的。

降低 CDN 付费 HTTPS 流量消耗实践总结
降低 CDN 付费 HTTPS 流量消耗实践总结
降低 CDN 付费 HTTPS 流量消耗实践总结
降低 CDN 付费 HTTPS 流量消耗实践总结

目前 imydl.tech 和 imydl.com 的源站资源迁移都开启了

为了保险期间同样的在上述两个“云存储空间”里也配置了跟 CDN 一样的“User-Agent 防盗链”,这里要说明一下,“云存储空间”几乎提供了跟 CDN 一样的配置后台,基本上 CDN 需要配置的“云存储空间”里也可以配置,甚至给云存储空间绑定特有的域名都可以(明月不建议大家用这个,涉及到修改源站的静态资源链接,感觉是没有必要的)大家有空可以研究一下。

在又拍云 CDN 支持了“最低 TLS 版本功能”和“智能压缩功能”后(可参考【又拍云 CDN 又增添两大给力功能支持】一文),明月第一时间都开启了(又拍云 CDN 和“云存储空间”都开启了支持),在服务器端也对最低 TLS 版本限定到 TLSv1.2,至今也有 10 多天了,终于看到了一点儿效果:

降低 CDN 付费 HTTPS 流量消耗实践总结
降低 CDN 付费 HTTPS 流量消耗实践总结
降低 CDN 付费 HTTPS 流量消耗实践总结
降低 CDN 付费 HTTPS 流量消耗实践总结

上图分别是 imydl.com 和 imydl.tech 两个站点 Nginx 日志文件统计的流量(昨天)

降低 CDN 付费 HTTPS 流量消耗实践总结
降低 CDN 付费 HTTPS 流量消耗实践总结

又拍云 CDN 里统计的两个站点的流量消耗

可能大家看图有点儿懵圈,我给大家解析一下,以 imydl.com 为例:Nginx 里的流量消耗是1.52GB,又拍云 CDN 里流量消耗是862MB。而 imydl.tech:Nginx 里的流量消耗是864MB,又拍云 CDN 里流量消耗是615MB。也就是说 CDN 层面的流量消耗终于算是下降下来了,最高下降比高达 56%。

至此, CDN 流量损耗终于算是“止损”成功了,再次压缩了 CDN 成本的支出!如果你跟明月一样碰到了 CDN 流量损耗过快的问题,建议根据今天明月分享的这个思路调整一下即可,当然明月这个是基于又拍云 CDN 的,如果是其它 CDN 的话只能是根据实际情况来想办法了,其实明月最后还是要给大家再次推荐一下又拍云 CDN ,虽然是付费的 CDN ,但是运用好了其实是花不了多少钱的,不要犹豫了,快来注册激活吧:又拍云 CDN

查看熊掌号

本文系转载,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文系转载前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
内容分发网络 CDN
内容分发网络(Content Delivery Network,CDN)通过将站点内容发布至遍布全球的海量加速节点,使其用户可就近获取所需内容,避免因网络拥堵、跨运营商、跨地域、跨境等因素带来的网络不稳定、访问延迟高等问题,有效提升下载速度、降低响应时间,提供流畅的用户体验。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档