如何为工作负载选择正确的块存储

云计算
re:Invent
0
0
## 视频 <video src="https://dev-media.amazoncloud.cn/30-LibaiGenerate/31-LiBaiRebrandingVideo/CMP202-How_to_choose_the_right_block_storage_for_your_workload-LBrebrandingWCaptionCN.mp4" class="bytemdVideo" controls="controls"></video> ## 导读 [Amazon EC2 ](https://aws.amazon.com/cn/ec2/?trk=cndc-detail)为云中的块存储提供了多种选择。了解如何为工作负载选择合适的块存储选项,是优化存储解决方案成本的关键点。在本讲座中,将通过逐步解说存储选择及其功能的决策树来帮助您为工作负载选择理想的选项。本讲座涵盖 I-family 实例组合和 [Amazon EBS](https://aws.amazon.com/cn/ebs/?trk=cndc-detail) 选项,以及在各种场景下的本地 NVMe 存储数据永久性以及计划外事件的讨论。 ## 演讲精华 <font color = "grey">以下是小编为您整理的本次演讲的精华,共1200字,阅读时间大约是6分钟。如果您想进一步了解演讲内容或者观看演讲全文,请观看演讲完整视频或者下面的演讲原文。</font> 雷娜·古普塔(Reena Gupta)是亚马逊云科技(Amazon Web Services)的一名产品经理,主要负责存储业务。在一场约100人的演讲活动中,她以第三人称的方式向观众介绍了亚马逊弹性块存储(EBS)的相关内容。 在这个数字化的快节奏时代,人们的生活产生了大量的数据,即以PB和TB为单位的数据。大多数应用程序都需要处理这些数据,例如数据库、分析引擎和搜索索引等。因此,选择合适的块存储解决方案变得至关重要。 为了满足这些需求,亚马逊云科技不断创新,目前提供了超过650种亚马逊EC2实例类型和多种块存储服务,如实例存储和弹性块存储(EBS)。 在EC2实例上,有两种主要的块存储选项:本地实例存储和亚马逊EBS卷。本地实例存储在服务器上物理连接到EC2实例,提供高达7.5TB的SSD存储;而EBS卷则是网络附带的块存储,可以扩展到64TB。此外,亚马逊简单存储服务([Amazon S3](https://aws.amazon.com/cn/s3/?trk=cndc-detail))用于对象存储,具有高耐用性;而亚马逊弹性文件系统([Amazon EFS](https://aws.amazon.com/cn/efs/?trk=cndc-detail))或亚马逊FSx则适用于Windows文件存储。 为了实现数据持久性,可以使用诸如EBS快照或亚马逊云科技备份等备份解决方案,将卷跨存储类型备份到S3。 GP3、IO2 Provisioned IOPS 和 HDD 等 EBS 卷类型为网络附连持久存储提供了高性能、可用性和耐用性。例如,GP3 卷可扩展至16,000 IOPS和1,000MB/s的吞吐量,而IO2可提供高达256,000 IOPS和4,000MB/s的吞吐量。I系列实例利用本地NVMe SSD提供数百万的IOPS、低至微秒的低延迟以及实时工作负载的高性能。" "EBS卷提供了高度耐用(99.999%可用性)、高可用性和高性能的块存储。GP3卷类型通过价格与性能的平衡,提供高达16,000 IOPS和1,000MB/s的吞吐量,适用于大多数工作负载,如开发和测试环境。Provisioned IOPS卷(如IO2 Block Express)专为任务关键、低延迟需求而设计,如Oracle、Microsoft SQL Server和MongoDB数据库。HDD卷(如ST1和SC1)为大型流媒体和顺序工作负载(如[Amazon EMR](https://aws.amazon.com/cn/emr/?trk=cndc-detail)、ETL、数据仓库和日志处理)提供最高达500MB/s的突发吞吐量。" "EBS快照功能允许创建卷的点存拷贝至[Amazon S3](https://aws.amazon.com/cn/s3/?trk=cndc-detail),为在EBS卷上备份数据提供简单且经济高效的方法。弹性卷允许在线扩展EBS卷性能,而不会对应用程序产生干扰。快速快照恢复消除了从快照恢复EBS卷时的初始化影响,从而实现立即全面性能。 社交媒体公司需要针对RocksDB和Druid实时数据库工作负载的高百万级IOPS、每秒多GB处理能力以及低延迟。为了满足这些需求,亚马逊云科技的I4I和I4G实例能够提供最佳性能,而I3N实例则提供了高达15TB的密集存储容量。在处理过的数据后,他们将其从实例存储移动到持久的S3存储中。 - 零售公司需要一个电商平台运行在商业数据库上的10万IOPS、每秒多GB处理能力和毫秒级延迟。针对他们的使用场景,亚马逊云科技的EBS提供了灵活扩展至64TB的能力,确保数据在实例生命周期之外保持持久性,并支持使用亚马逊云科技EBS快照进行定期备份。 - 房地产公司在实例存储上运行Splunk工作负载,需要高密度、高性能的存储与在亚马逊云科技EBS上运行的PostgreSQL工作负载相结合,以实现关键任务的数据持久性。 - ScalaDB(一家数据库提供商)注意到,相较于上一代产品,亚马逊云科技的i4i实例在使用过程中,延迟降低了40%,价格性能提高了30%。 选择正确的亚马逊云科技EC2块存储选项取决于诸如工作负载特性、性能需求、数据持久性需求、所需功能以及总体拥有成本等因素。需要考虑的关键问题包括: - 你的工作负载类型是什么?在线交易处理数据库适合使用亚马逊云科技GP3卷,而分析工作负载则是亚马逊云科技I系列实例存储的好用例。 - 你的性能需求如何?例如,需要多少IOPS、处理能力和延迟?需要数百万IOPS和微秒级延迟的工作负载更适合实例存储,而低于400K IOPS的需求则更适合亚马逊云科技EBS。 - 是否需要数据在亚马逊云科技EC2实例生命周期之外保持持久?如果是,那么亚马逊云科技EBS可能是更好的选择。 - 是否需要内置的高可用性、备份或其他功能?亚马逊云科技EBS提供了许多强大的数据保护功能。 - 考虑每个候选块存储选项的总拥有成本是多少? 如果你的工作负载需要高IOPS和微秒级的延迟,那么I系列实例的实例存储可能是一个合适的选择。而对于低于40万IOPS的亚毫秒级延迟需求,EBS卷可能会更适合。如果您的应用程序是无状态的,不需要数据持久性,实例存储可以很好地满足需求。然而,如果您需要在EC2实例生命周期之外的数据耐用性和可用性,EBS卷可能是更好的选择。 总的来说,在选择适用于块存储需求的EC2实例存储和EBS之间时,需要仔细评估你的具体工作负载特性、性能需求(如IOPS、吞吐量、延迟)、数据持久性的需求以及所需功能。通过测试不同的选项来确定最佳匹配。在做决策时,可以参考具有指导意义的视频和演示文稿幻灯片。 **下面是一些演讲现场的精彩瞬间:** 雷娜·古普塔(Reena Gupta)是亚马逊云科技的一位产品经理,她在与同事艾伦·陈(Aaron Chen)共同介绍之前,开始讨论数据块存储。 ![](https://d1trpeugzwbig5.cloudfront.net/CMP202-How_to_choose_the_right_block_storage_for_your_workload/images/rebranded/CMP202-How_to_choose_the_right_block_storage_for_your_workload_0.png) 在演讲中,他们将概述亚马逊EC2上可用的不同数据块存储选项,以帮助客户根据其业务需求选择合适的方案。 ![](https://d1trpeugzwbig5.cloudfront.net/CMP202-How_to_choose_the_right_block_storage_for_your_workload/images/rebranded/CMP202-How_to_choose_the_right_block_storage_for_your_workload_1.png) 演讲者详细解释了实时数据处理如何需要能够快速从存储中检索数据,以便用于数据库、分析和搜索索引等工作负载。 ![](https://d1trpeugzwbig5.cloudfront.net/CMP202-How_to_choose_the_right_block_storage_for_your_workload/images/rebranded/CMP202-How_to_choose_the_right_block_storage_for_your_workload_2.png) 由于亚马逊云科技的顾客的存储需求各异,如高IOPS、低延迟、数据持久性和定期备份,因此亚马逊云科技致力于提供一种能够满足所有需求的块存储解决方案。 ![](https://d1trpeugzwbig5.cloudfront.net/CMP202-How_to_choose_the_right_block_storage_for_your_workload/images/rebranded/CMP202-How_to_choose_the_right_block_storage_for_your_workload_3.png) 演讲者深入探讨了亚马逊云科技提供的不同类型的数据存储解决方案,如EBS、S3和根据工作负载需求的EFS。 ![](https://d1trpeugzwbig5.cloudfront.net/CMP202-How_to_choose_the_right_block_storage_for_your_workload/images/rebranded/CMP202-How_to_choose_the_right_block_storage_for_your_workload_4.png) 存储优化实例专为数据库和分析等存储密集型工作负载提供数百万的IOPS和非常低的延迟。 ![](https://d1trpeugzwbig5.cloudfront.net/CMP202-How_to_choose_the_right_block_storage_for_your_workload/images/rebranded/CMP202-How_to_choose_the_right_block_storage_for_your_workload_5.png) 领导者强调了亚马逊云科技的学习资源,以了解重要的举措,如i4i、i4g和EBS。 ![](https://d1trpeugzwbig5.cloudfront.net/CMP202-How_to_choose_the_right_block_storage_for_your_workload/images/rebranded/CMP202-How_to_choose_the_right_block_storage_for_your_workload_6.png) ## 总结 雷娜·古普塔(Reena Gupta)和艾伦·陈(Aaron Chen)这两位亚马逊云科技的产品经理,在亚马逊云科技的re:Invent上发表了一场关于如何选择适合您工作负载的合适数据块存储解决方案的演讲。他们首先概述了在亚马逊EC2上可用的各种数据块存储选项——本地实例存储和弹性块存储(EBS)。 关于本地实例存储的一些关键点包括: - I3和I4实例系列针对存储工作负载进行了优化,提供了数百万的IOPS和稳定的低延迟。这要归功于亚马逊云科技设计的高性能Nitro SSD的支持。 - 尽管在实例生命周期内持续存在,但如果实例停止/终止,数据将不再存在。为了实现持久性,需要复制数据或复制到EBS/S3。 - 适用于需要高IOPS的实时分析和其他低延迟敏感工作负载的场景。 关于EBS的一些关键点包括: - GP3用于通用目的,IO2 Block Express用于关键任务低延迟需求。 - 快照、弹性卷和快速快照恢复等功能增加了耐用性、灵活性和可用性。 - 与EC2实例独立存在,允许灵活性。 他们提供了一个决策流程图来确定正确的数据块存储: - 确定工作负载和基本性能需求 - 考虑IOPS、延迟和数据持久性需求 - 评估如备份和可扩展性的功能 - 比较性能、功能和成本方面的选项 真实的客户示例展示了如何使用指南来选择最佳的存储方案。主讲人强调了对不同的选项进行测试以确定最佳选择的重要性。 ## 演讲原文 ## 想了解更多精彩完整内容吗?立即访问re:Invent 官网中文网站! [2023亚马逊云科技re:Invent全球大会 - 官方网站](https://webinar.amazoncloud.cn/reInvent2023/?s=8739&smid=19458 "2023亚马逊云科技re:Invent全球大会 - 官方网站") [点击此处](https://aws.amazon.com/cn/new/?trk=6dd7cc20-6afa-4abf-9359-2d6976ff9600&trk=cndc-detail "点击此处"),一键获取亚马逊云科技全球最新产品/服务资讯! [点击此处](https://www.amazonaws.cn/new/?trk=2ab098aa-0793-48b1-85e6-a9d261bd8cd4&trk=cndc-detail "点击此处"),一键获取亚马逊云科技中国区最新产品/服务资讯! ## 即刻注册亚马逊云科技账户,开启云端之旅! [【免费】亚马逊云科技“100 余种核心云服务产品免费试用”](https://aws.amazon.com/cn/campaigns/freecenter/?trk=f079813d-3a13-4a50-b67b-e31d930f36a4&sc_channel=el&trk=cndc-detail "【免费】亚马逊云科技“100 余种核心云服务产品免费试用“") [【免费】亚马逊云科技中国区“40 余种核心云服务产品免费试用”](https://www.amazonaws.cn/campaign/CloudService/?trk=2cdb6245-f491-42bc-b931-c1693fe92be1&sc_channel=el&trk=cndc-detail "【免费】亚马逊云科技中国区“40 余种核心云服务产品免费试用“")
目录
亚马逊云科技解决方案 基于行业客户应用场景及技术领域的解决方案
联系亚马逊云科技专家
亚马逊云科技解决方案
基于行业客户应用场景及技术领域的解决方案
联系专家
0
目录
关闭