前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >将PB级数据传输到云端的四个步骤

将PB级数据传输到云端的四个步骤

作者头像
静一
发布2018-03-28 11:07:00
1.1K0
发布2018-03-28 11:07:00
举报
文章被收录于专栏:云计算D1net云计算D1net

如今,各种组织正在越来越多地使用公共云基础设施,但是人们发现将数百TB或PB数据向云端的迁移比想像得更复杂,更具破坏性,并且不具备灵活性。

云存储的商业价值是可取的,但是大量的数据对迁移,兼容性和敏捷性提出了巨大的挑战。存储行业专家阐述如何将PB级规模的数据传输到云环境的四个步骤。

(1)将数据漂移和转移到云原生存储

根据定义,还没有在云端的数据存储在具有特定数据访问协议的孤岛中。将这样的数据转移到公共云上非常复杂。相反,漂移和转移策略更实用,将存储的数据转移到使用本地存储的云原生格式。所以这一步骤成本低,且风险低,并且可以随着时间的推移而完成。可以在本地部署数据中心实现到云存储的迁移,当时机合适时,将数据准备迁移到公共云。

(2)自动化操作

具有内置自动化功能的数据管理软件基于IT设置和控制的策略,即使是单个管理员也可以在全球组织中管理多PB级混合云基础架构。定义用于保护,同步,位置,访问,容量使用等服务目标,并让软件控制数据的放置及其传送到应用程序。用户为其应用程序使用正确的策略来存储。随着业务需求的发展,IT所控制的政策也会随之演变。

(3)保持灵活性

所有关键的公共云提供商(Amazon,Google,Microsoft和Rackspace)都使用对象存储平台来长期保留和管理最终用户的数据。虽然对象是其默认设置,但却有足够的差异,采用专有技术将一个运营商,甚至PB级数据的一部分从一个提供商转移到另一个供应商可能是可以忍受的。通过跨所有位置和云端的数据管理,跨云平台兼容性提供了架构师希望构建到其基础架构中的灵活性。这样可以确保IT完全控制,无论位置如何,均可实现通用管理,并可防止提供商锁定。

(4)掌握元数据

由于技术上的限制,SAN和NAS系统等传统存储器并没有考虑元数据。云原生存储使用对象数据保留元数据,而不是在单独的数据库中,只有其自己的应用程序才能读取。云存储(无论是公共云,云原生内部部署,还是二者的组合)是利用元数据的理想媒介。而治理,组织,分析与PB级数据相关的元数据在几年前是不可想象的。

公共云存储厂商SwiftStack公司总裁兼首席产品官Joe Arnold说:“基于消费,弹性可扩展性,改进的协作以及公共云的其他关键优势的定价是可实现的目标,但是组织拥有大量数据,必须注意其独特的环境。幸运的是,这些组织还会发现,正确的云数据管理策略和工具将从这些数据中释放出更多的价值,并随着业务需求和工作负载的发展而发生变化。”

SwiftStack公司将公共云资源的基本属性带入企业基础架构:基于消费的可扩展性,灵活性和定价。传统应用程序可以通过文件服务访问和使用存储,并通过对象访问云原生应用程序。

根据管理政策,用户可以自由地将私有数据中心和公共云之间的工作负载移动到亚马逊或谷歌公司的云平台,无论从云端到云端,还是从内部部署到公共云,数据仍然受到内部IT的管理控制,驻留在用户和应用程序需要的地方。组织可以使用标准的商品硬件和服务器硬件,选择驱动器和网络,并且线性扩展,因此可以独立和有效地增加容量和吞吐量。

本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2017-09-21,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 云计算D1net 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
对象存储
对象存储(Cloud Object Storage,COS)是由腾讯云推出的无目录层次结构、无数据格式限制,可容纳海量数据且支持 HTTP/HTTPS 协议访问的分布式存储服务。腾讯云 COS 的存储桶空间无容量上限,无需分区管理,适用于 CDN 数据分发、数据万象处理或大数据计算与分析的数据湖等多种场景。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档