聚合国内IT技术精华文章,分享IT技术精华,帮助IT从业人士成长

AWS DataSync 支持在 AWS、Google Cloud 和 Azure 之间移动数据

2022-06-21 14:42 浏览: 2621052 次 我要评论(0 条) 字号:

作者 | Renato Losio
译者 | 刘雅梦
策划 | 丁晓昀

亚马逊最近宣布,AWS DataSync 现在支持将 Google Cloud Storage 和 Azure Files 存储作为存储位置。数据服务的这两个新选项有助于数据在 AWS 中的移入和移出,但数据传输费用可能仍然是一个限制条件。

DataSync 可以跨不同的存储位置复制和同步数据,并且能将其移动到 AWS 中,从而支持多云工作流或数据保留的需求。DataSync 依靠专有网络协议来运行并验证一次性和周期性的数据传输,并根据作业的大小进行扩展。该服务提供了包括 / 排除筛选器、带宽限制控制,并支持从临时网络问题中自动恢复。AWS EMEA(欧洲、中东和非洲区域)首席布道师 Danilo Poccia 解释道:

通过这种方式,可以简化数据处理或存储整合任务。如果你需要与使用 Google Cloud Storage 或微软 Azure Files 的客户、供应商或合作伙伴进行数据的导入、共享和交换,这也会很有帮助。DataSync 提供了端到端的安全性,包括加密和完整性验证。

Google Cloud Storage 和 Azure Files 存储是首批针对竞争对手提供服务的源,但它们并不是唯一受支持的存储位置:AWS DataSync 可以与 NFS、SMB、Hadoop 分布式文件系统(HDFS)、自管理对象存储以及不同的 AWS 服务(比如 Amazon S3 或 Amazon FSx)进行数据同步。

来源:https://aws.amazon.com/blogs/storage/how-to-move-data-from-azure-files-smb-shares-to-aws-using-aws-datasync/

虽然 Poccia 解释了如何将数据从 Google Cloud Storage 移动到 Amazon S3,而 AWS 高级专家解决方案架构师 Rodney Underkoffler 和 Aidan Keane 则展示了如何从 Azure Files SMB 共享中移动数据。在过去,云提供商解释了如何使用 DataSync 在 AWS 帐户之间传输数据。Corey Quinn 在他的新闻稿中写道:

这可能是我最近看到的最令人印象深刻的 AWS 特性之一。它既承认了其他云的存在,也承认了客户有时可能希望数据驻留在云中的事实。这做得很好。

Rackspace Technology 的产品总监 Larry Hau 对此也表示了赞同:

这似乎是一笔大买卖(……)AWS 一直在进行客户锁定,而这一做法恰恰相反。虽然出口(Egress)仍然是一个障碍,但这使得数据迁移变得更加容易了,尤其是对于 BCP/DR 来说。

AWS DataSync 可能有助于跨主要云提供商来迁移数据,但数据传输费用可能是一个重大的障碍。为了减轻影响并降低出口费用,AWS 建议在源环境中部署 DataSync 代理,因为它会在复制时压缩传输中的数据。

新的存储选项并没有特定的 DataSync 成本,但将数据移动到 AWS,客户需要支付谷歌云(Google Cloud)和微软 Azure 上的数据传输费用。从 AWS 上转移数据时,客户则需要为从 EC2 到互联网的数据传输付费。

AWS DataSync 的复制速率取决于数据量和网络条件。例如,对于本地和 AWS 之间的数据传输,任务可以完全使用 10 Gbps 的网络链路。

作者介绍:

Renato 在意大利、英国、葡萄牙和德国拥有多年的软件工程师、技术主管和云服务专家的经验。他现住在柏林,作为 Funambol 的首席云架构师在远程工作。他的主要工作兴趣是云服务和关系数据库。他是 AWS Data Hero 的获得者。

原文链接:

https://www.infoq.com/news/2022/06/aws-datasync-gcp-azure/

点击底部阅读原文访问 InfoQ 官网,获取更多精彩内容!

今日好文推荐

软件架构如何“以不变应万变”

风口浪尖的 Web 3.0,接下来的路该怎么走?

河南赋红码事件程序员不背锅;马斯克:向TikTok和微信学习;华为宣布将调整绩效考核指标 | Q资讯

从维护性工作到软件开发革命,运维 15 年间的大逆转

点个在看少个 bug 



网友评论已有0条评论, 我也要评论

发表评论

*

* (保密)

Ctrl+Enter 快捷回复