银行TB级非结构化数据对象存储建设难点分析及探讨

随着企业业务的快速发展,业务应用系统产生的非结构化数据(包括文件、图片、音视频文件等)的规模也越来越庞大。随着容量的不断增大(从TB到百TB级别)和文件数量(从千万到十亿级别)的不断增加,传统文件存储的容量和性能都遇到了瓶颈,普通NAS仅能承载十TB级别的容量,企业的技术部门需要不断寻求新的解决方案,应对百TB级别存储的挑战,解决容量和性能问题。

我们使用传统的文件存储系统NAS,通过标准的NFS或CIFS接口给业务应用提供数据访问的接口,但NAS存在卷容量受限的问题,目前针对百TB级非结构化数据的存储,传统方案为堆叠多个NAS卷存储进行组合存储以及历史数据归档多个存储卷的方法临时性地解决问题。

分布式对象存储,通过软件整合服务器及其磁盘阵列,提高存储服务能力,提供标准HTTP接口(S3接口)给业务应用系统提供数据访问接口,具有高扩展性、高性能高可用、操作简单、成本低廉等优点,是目前解决百TB级别非结构化数据存储的方案之一。

基于以上所述,期望建设分布式对象存储以及应用存储迁移时所需解决的问题如下:

1、运维管理方面,提供用户权限管理、监控管理、日志管理等,并对接告警系统;

2、运维操作方面,方便用户进行存储申请、故障处理(包括服务器/硬盘替换等)、扩容操作,降低运维成本;

3、存储对应用透明,应用层无需关注存储内部的变化,解决NAS管理问题:如多卷拆分管理问题、历史和在线数据管理问题;

4、如何解决数据备份和数据恢复问题。

本次活动将邀请该领域专家与大家共同深入交流探讨相关问题,欢迎参与。

活动资料:

IBM Cloud Object Storage 在银行业非结构化数据存储场景下的对象存储解决方案解析

主题资料:

金融企业百TB级非结构化数据对象存储建设难点分析及探讨

  • 发表于:
  • 原文链接https://kuaibao.qq.com/s/20181203B06SH500?refer=cp_1026
  • 腾讯「云+社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。

扫码关注云+社区

领取腾讯云代金券

年度创作总结 领取年终奖励