欢迎访问集团网商讯

亚马逊推出三种新的S3对象存储服务 EFS的速度提高

金融科技 2024-03-181742yu66841

AWS的一位存储高管表示,在亚马逊的简单存储服务推出18年后,要保持企业平台的最新状态,还有很多工作要做。

AWS storage副总裁兼杰出工程师Andy Warfield表示,三种新的S3对象存储服务和亚马逊弹性文件服务(EFS)的加速使开发人员能够处理AI和ML工作负载。

Warfield说:“如果开发人员在任何时候都必须考虑存储,或者他们将如何让应用程序谈论他们的数据,那对我们来说是一个失误。”

新的S3功能包括将PyTorch Lightning的检查点直接保存到S3,在Outposts上为Amazon S3提供身份验证缓存以减少网络流量,以及为AWS上的Bottlerocket Linux容器操作系统提供S3容器存储接口(CSI)驱动程序。

据供应商介绍,亚马逊EFS的吞吐量翻了一番,现在提供每秒20吉比特的读取和5吉比特的写入。

Warfield说,对S3的这些添加旨在最大限度地减少开发人员考虑存储实现所需的时间。

TechTarget企业战略小组分析师Simon Robinson表示,S3开源标准的对象存储在企业云和数据中心都被广泛采用,只会增加额外的复杂性和功能来满足人工智能需求。

他说:“人工智能时代的物体正在从廉价和深入发展到更多。”

简单存储服务

Outposts上的Amazon S3身份验证缓存消除了每次请求都需要向父AWS区域进行身份验证的数据。此服务使硬件能够在本地缓存身份验证和授权一段时间。Outposts是一个内部部署的IT即服务平台,通过本地硬件提供云服务。

去年11月发布的PyTorch的Amazon S3连接器使用PyTorch开源机器学习框架将S3直接连接到作业。今天提供的新功能增加了对保存模型检查点的支持,而不会暂停PyTorch Lightning正在进行的作业,PyTorch是PyTorch针对大型语言模型和生成人工智能工作负载的变体。

Bottlerocket现在支持亚马逊S3 CSI驱动程序的Mountpoint,使亚马逊弹性Kubernetes服务或具有文件系统接口的自管理Kubernete集群中的容器可以访问S3对象。

Robinson说,亚马逊EFS的速度提高表明,该供应商继续认真对待企业文件存储系统。但他补充道,要赶上其合作伙伴NetApp,它还有一段路要走。NetApp和亚马逊的联合产品Amazon FSx for NetApp OnTap上个月提高了吞吐量,将速度从36 GBps提高到72 GBps。

Robinson说,几十年来,NetApp一直是企业存储领域的主导者,因此任何诞生于云存储领域的产品都可能落后于现有的内部部署产品。

他说:“要大规模地建立企业档案是非常困难的。NetApp之所以如此占主导地位,是因为他们已经做了30年。AWS正在迎头赶上。”

Silverton Consulting总裁兼创始人Ray Lucchesi表示,NetApp并不是唯一一家关注云主导地位的数据中心存储供应商。

他说:“戴尔技术公司、日立Vantara和IBM都将云视为下一个巨大的收入来源,但他们并没有停滞不前。”。

Warfield表示,新发布的版本恰逢AWS Pi Day 2024,还重点关注超标量如何在企业生成人工智能战略中变得更具可塑性。供应商这样做的努力最终应该会渗透到与存储相关的企业服务中。

Warfield表示:“客户希望(在存储方面)拥有尽可能多的灵活性。我们正在努力为他们提供所需的API,这样他们就不必做额外的工作来适应特定类型的存储。”

Robinson说,随着时间的推移,S3及其相关API的普及使对象存储能够在应用程序和企业使用中得到采用,为AWS的发展铺平了道路,因为客户寻求将数据带到云端。

他说,其他供应商和存储公司正在为某些工作负载推出对象存储的替代方案,例如Hammerspace的新NFS产品,但对象可能仍然是云的存储基础设施。

Robinson说:“我不认为S3完全改变了存储环境是夸大其词。不仅是存储体系结构,还有应用程序环境。”

Lucchesi说,S3使对象存储,一种以前小众的数据中心存储格式,成为一种更容易访问和廉价的云存储形式。与S3交互的语言,以及获取和放置请求,反映了当时如何与互联网交互。

“问题是,你打算把(对象存储)用于什么?”他说。“S3现在已经无处不在。很长一段时间以来,对象存储一直在寻找一款杀手级应用——S3就是这样。”

The End
免责声明:本文内容来源于第三方或整理自互联网,本站仅提供展示,不拥有所有权,不代表本站观点立场,也不构成任何其他建议,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容,不承担相关法律责任。如发现本站文章、图片等内容有涉及版权/违法违规或其他不适合的内容, 请及时联系我们进行处理。

Copyright © 2099 集团网商讯 版权所有

苏ICP备2023036119号-9 |——:合作/投稿联系微信:nvshen2168

|—— TXT地图 | 网站地图 |