快手短视频打造高稳定千亿级别对象存储平台

作者介绍:赵健博,快手大数据架构团队的负责人,负责快手公司内Hadoop生态中存储、调度、计算、AI架构等子系统内核与周边子系统的研发,与在公司内的应用。先后就职于百度、奇虎360、58集团,快手。大数据领域专家,2009年毕业于中国科学院计算所,主要研究领域包括分布式计算、调度与存储系统等。

快手每天都有海量的视频数据上传存储,到目前为止所有的视频以及衍生数据总量更是数量庞大,且视频本身有大有小,如何存储这些数据将是一个颇具挑战性的问题。本次演讲介绍一种可以快速构建海量短视频存储的服务的方案、我们在实践中遇到的问题以及解决方案,例如我们是怎么解决高可用、高扩展性、高性能等问题的。

主要内容:

在线短视频存储服务系统的要求;

在线短视频存储服务系统的架构与实现细节;

实践中遇到的问题与解决方案;

未来规划。

听众受益:

掌握如何快速构建一个海量对象存储服务;

了解到海量分布式存储服务可能会遇到的一些问题,如可用性、扩展性、性能问题,并针对这些问题提供一种解决方案。

演讲视频

幻灯片

以上就是赵健博老师在 QCon 上海 2018 的精彩分享,更多架构话题探索请持续关注新一届的 QCon 大会。

  • 发表于:
  • 原文链接:https://kuaibao.qq.com/s/20190104G15UHD00?refer=cp_1026
  • 腾讯「云+社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。

扫码关注云+社区

领取腾讯云代金券