将PB级数据传输到云端的四个步骤

如今,各种组织正在越来越多地使用公共云基础设施,但是人们发现将数百TB或PB数据向云端的迁移比想像得更复杂,更具破坏性,并且不具备灵活性。

云存储的商业价值是可取的,但是大量的数据对迁移,兼容性和敏捷性提出了巨大的挑战。存储行业专家阐述如何将PB级规模的数据传输到云环境的四个步骤。

(1)将数据漂移和转移到云原生存储

根据定义,还没有在云端的数据存储在具有特定数据访问协议的孤岛中。将这样的数据转移到公共云上非常复杂。相反,漂移和转移策略更实用,将存储的数据转移到使用本地存储的云原生格式。所以这一步骤成本低,且风险低,并且可以随着时间的推移而完成。可以在本地部署数据中心实现到云存储的迁移,当时机合适时,将数据准备迁移到公共云。

(2)自动化操作

具有内置自动化功能的数据管理软件基于IT设置和控制的策略,即使是单个管理员也可以在全球组织中管理多PB级混合云基础架构。定义用于保护,同步,位置,访问,容量使用等服务目标,并让软件控制数据的放置及其传送到应用程序。用户为其应用程序使用正确的策略来存储。随着业务需求的发展,IT所控制的政策也会随之演变。

(3)保持灵活性

所有关键的公共云提供商(Amazon,Google,Microsoft和Rackspace)都使用对象存储平台来长期保留和管理最终用户的数据。虽然对象是其默认设置,但却有足够的差异,采用专有技术将一个运营商,甚至PB级数据的一部分从一个提供商转移到另一个供应商可能是可以忍受的。通过跨所有位置和云端的数据管理,跨云平台兼容性提供了架构师希望构建到其基础架构中的灵活性。这样可以确保IT完全控制,无论位置如何,均可实现通用管理,并可防止提供商锁定。

(4)掌握元数据

由于技术上的限制,SAN和NAS系统等传统存储器并没有考虑元数据。云原生存储使用对象数据保留元数据,而不是在单独的数据库中,只有其自己的应用程序才能读取。云存储(无论是公共云,云原生内部部署,还是二者的组合)是利用元数据的理想媒介。而治理,组织,分析与PB级数据相关的元数据在几年前是不可想象的。

公共云存储厂商SwiftStack公司总裁兼首席产品官Joe Arnold说:“基于消费,弹性可扩展性,改进的协作以及公共云的其他关键优势的定价是可实现的目标,但是组织拥有大量数据,必须注意其独特的环境。幸运的是,这些组织还会发现,正确的云数据管理策略和工具将从这些数据中释放出更多的价值,并随着业务需求和工作负载的发展而发生变化。”

SwiftStack公司将公共云资源的基本属性带入企业基础架构:基于消费的可扩展性,灵活性和定价。传统应用程序可以通过文件服务访问和使用存储,并通过对象访问云原生应用程序。

根据管理政策,用户可以自由地将私有数据中心和公共云之间的工作负载移动到亚马逊或谷歌公司的云平台,无论从云端到云端,还是从内部部署到公共云,数据仍然受到内部IT的管理控制,驻留在用户和应用程序需要的地方。组织可以使用标准的商品硬件和服务器硬件,选择驱动器和网络,并且线性扩展,因此可以独立和有效地增加容量和吞吐量。

原文发布于微信公众号 - 云计算D1net(D1Net02)

原文发表时间:2017-09-21

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏韩伟的专栏

论可复用的游戏服务器端开发框架(一)

本文试图以游戏服务器端开发的角度,探讨在需求高度变化的环境下,可重用模块构建的可能性和基本方案。 可复用框架的必要性与可行性 在现代游戏产品的开发中,游戏服务...

5466
来自专栏云计算D1net

如何让数据迁移到云端更加容易

如今,许多企业都在采用“云优先”的策略,并建议IT团队评估云存储是否是一个可以接收所有请求的可行选项。实施这种策略是可以理解的,因为云计算提供了许多好处,包括促...

3496
来自专栏程序人生 阅读快乐

构建高可用VMware vSphere 5.X虚拟化架构

《构建高可用VMware vSphere 5.X虚拟化架构》以VMware vSphere 5.1版本为例,介绍在企业应用平台上,如何构建高可用ESXi主机、高...

721
来自专栏云计算D1net

将应用程序移动到云计算的5个步骤

组织对于关键业务应用程序的迁移,需要进行充分的前期准备,并保持其在整个过程中所需要的控制。 ? 业务应用程序以创纪录的数量进入云端,使用户和IT团队进入了访问...

3455
来自专栏EAWorld

企业全面移动化实践指南

随着智能手机普及和移动网络的提速,企业移动办公正在逐步成为主流工作模式,企业移动移动信息化是必然趋势。企业全面移动化不是一件简单的事情,在实践过程中肯定会遇到诸...

1271
来自专栏叔叔的博客

自动化测试从入门到放弃

912
来自专栏智能计算时代

为什么IoT开发人员困惑MQTT和CoAP?

最近在Exadel,我们遇到了一个有趣的挑战,对物联网的开发者。因为IoT应用程序获得了如此多的动力,所以有越来越多的选择如何开发它们。对于设备通信,两个专门的...

4325
来自专栏腾讯大数据的专栏

主流大数据系统在后台的层次角色及数据流向

最近有不少质疑大数据的声音,这些质疑有一定的道理,但结论有些以偏概全,应该具体问题具体分析。对大数据的疑问和抗拒往往是因为对其不了解,需要真正了解之后才能得出...

1927
来自专栏云计算D1net

多云工作负载迁移:自动化是何作用?

为了高效地管理一个多云计环境,请同时考虑应用架构和用户部署两方面的选项。此外,自动化可有助于多云的高效管理,但它对于工作负载决策方面具有战略意义。 ? 云计算正...

2707
来自专栏携程技术中心

干货 | 携程新风控数据平台建设

作者简介 刘丹青,携程信息安全部高级开发工程师。2014年加入携程,主要负责验证码、风控数据平台的开发设计工作,提供性能测试与性能优化的相关支持。 前言 近几...

3278

扫码关注云+社区