专栏首页草根博客站长有话说降低 CDN 付费 HTTPS 流量消耗实践总结

降低 CDN 付费 HTTPS 流量消耗实践总结

从明月下定决心开始使用又拍云 CDN 的时候,就有一个问题困扰着我,那就是 CDN 流量消耗是越来越大,最夸张的时候一天流量消耗达到了惊人的 2G 多了,这对于 HTTPS 付费流量来说成本不低呀!这样每天的流量就意味着白花花的银子在流出,而实际来看网站本身的 IP 和 PV 都没有啥大的波动变化,这也说明 CDN 流量存在比较严重的“损耗”。

通过分析 Nginx 的站点日志文件发现每天有很多稀奇古怪的蜘蛛爬虫来访,并且来访量都不小,动辄几百 MB,天天都来风雨无阻呀都是!为此还夸张的屏蔽了所有海外 IP 的访问,虽然流量是降下来了但是谷歌也无法抓取网站了,甚至谷歌 AdSense 广告都不能正常的投放了,最后只能是放弃了这个方法。还是果断在 CDN 的“User-Agent 防盗链”里屏蔽这些垃圾爬虫的抓取和访问:

现在每天的日志里来访的爬虫看起来顺眼了很多:

至少看着都“正常”了很多嘛!

可惜这样观察了一周多,流量的消耗依然没有多大的改观,看来垃圾爬虫不是主要的原因,继续排查中……。

为了降低 CDN 流量消耗,明月还在 CDN 里启用了“源站资源迁移”,这是又拍云 CDN 都有的,有点儿类似七牛云但又有一些区别,又拍云官方的介绍是“可将源站静态资源无缝迁移到又拍云存储,当客户端下次访问相同的资源时,无需回用户自主源。”,七牛云是通过水煮鱼的插件来实现这个功能的,又拍云是直接在 CDN 抓取的时候同步这些源站资源的,这点儿我感觉是本质上的一个区别,看来又拍云做的更加智能化,用户只需要创建好云存储空间启用这个功能即可,一切都是自动智能完成的。

目前 imydl.tech 和 imydl.com 的源站资源迁移都开启了

为了保险期间同样的在上述两个“云存储空间”里也配置了跟 CDN 一样的“User-Agent 防盗链”,这里要说明一下,“云存储空间”几乎提供了跟 CDN 一样的配置后台,基本上 CDN 需要配置的“云存储空间”里也可以配置,甚至给云存储空间绑定特有的域名都可以(明月不建议大家用这个,涉及到修改源站的静态资源链接,感觉是没有必要的)大家有空可以研究一下。

在又拍云 CDN 支持了“最低 TLS 版本功能”和“智能压缩功能”后(可参考【又拍云 CDN 又增添两大给力功能支持】一文),明月第一时间都开启了(又拍云 CDN 和“云存储空间”都开启了支持),在服务器端也对最低 TLS 版本限定到 TLSv1.2,至今也有 10 多天了,终于看到了一点儿效果:

上图分别是 imydl.com 和 imydl.tech 两个站点 Nginx 日志文件统计的流量(昨天)

又拍云 CDN 里统计的两个站点的流量消耗

可能大家看图有点儿懵圈,我给大家解析一下,以 imydl.com 为例:Nginx 里的流量消耗是1.52GB,又拍云 CDN 里流量消耗是862MB。而 imydl.tech:Nginx 里的流量消耗是864MB,又拍云 CDN 里流量消耗是615MB。也就是说 CDN 层面的流量消耗终于算是下降下来了,最高下降比高达 56%。

至此, CDN 流量损耗终于算是“止损”成功了,再次压缩了 CDN 成本的支出!如果你跟明月一样碰到了 CDN 流量损耗过快的问题,建议根据今天明月分享的这个思路调整一下即可,当然明月这个是基于又拍云 CDN 的,如果是其它 CDN 的话只能是根据实际情况来想办法了,其实明月最后还是要给大家再次推荐一下又拍云 CDN ,虽然是付费的 CDN ,但是运用好了其实是花不了多少钱的,不要犹豫了,快来注册激活吧:又拍云 CDN

查看熊掌号

原文链接:https://www.imydl.com/wzjs/8671.html

我来说两句

0 条评论
登录 后参与评论

相关文章

  • HTTPS 要比 HTTP 多用多少服务器资源?

    HTTP 访问,用户只需要完成 TCP 三次握手,建立 TCP 连接就能够直接发送 HTTP 请求,获取应用层数据。而 HTTPS=HTTP+SSL,也就是说 ...

    明月登楼
  • 命令行界面 (CLI)、终端 (Terminal)、Shell、TTY,这些都是啥意思?

    为什么突然想写这样一篇文章呢?其实是因为在最近计划发布的一篇关于 WSL (Windows Subsystem for Linux) 的博文中,我打算对终端模拟...

    明月登楼
  • Typecho 下谷歌 AdSense 文章内嵌广告体验

    昨天明月将本博客“文章页脚广告位”的广告更换为了谷歌 AdSense “文章内嵌广告”,本来是想用“匹配内容”的,可惜iMydl.tech目前还没有达到“匹配内...

    明月登楼
  • 运营商再度提升CDN关注,SDN/NFV成2015年重要关注点

    2015年3月31日,2015第三届亚太CDN峰会圆满落下帷幕,本届CDN峰会以“大数据背景下的流量经营”为主题,力邀广电总局、工信部、腾讯云、阿里、迅雷、乐视...

    SDNLAB
  • CDN加速静态文件访问

    (1)用户向浏览器提交要访问的域名。 (2)浏览器对域名进行解析,得到域名对应的IP地址。 (3)浏览器向所得的IP地址发送请求。 (4)浏览器根据返...

    海仔
  • 中国 CDN 编年史

    CDN的全称是(Content Delivery Network),即内容分发网络。CDN是构建在网络之上的内容分发网络,依靠部署在各地的边缘服务器,通过中心平...

    边缘计算
  • 推荐13个常用前端公共库CDN服务资源

    CDN公共库是指将常用的JS库存放在CDN节点,以方便广大开发者直接调用。与将JS库存放在服务器单机上相比,CDN公共库更加稳定、高速。 公共CDN能为您的应用...

    小弟调调
  • 直播风口下的CDN行业,原快播技术团队能否再造一个Uber?

    2015年A轮融资的846家创业公司,如今倒闭了一大批,股灾、O2O泡沫破灭之后,资本的寒冬骤然降临。但某些细分市场,比如企业级服务、视频直播、共享经济等,仍...

    曾响铃
  • 视频互联网直播/点播服务器中关于内容分发CDN的相关问题汇总

    算下来我有一段时间没写CDN了,但是我们的视频直播点播服务器能够进行CDN网络分发,所以我几乎每天都会接触到这方面的东西。

    EasyNVR
  • 2021-01-07:cdn加速是什么原理?

    CDN(Content Delivery Network):内容分发网络是指一组在地理上分散的服务器,它们协同工作以提供互联网内容的快速交付,一般各种网页静态资...

    福大大架构师每日一题

扫码关注云+社区

领取腾讯云代金券