使用亚马逊云科技构建高效、敏捷和创新的云

## 视频 <video src="https://dev-media.amazoncloud.cn/30-LibaiGenerate/31-LiBaiRebrandingVideo/STG103-Build_with_the_efficiency__agility___innovation_of_the_cloud_with_AWS-LBrebrandingWCaptionCN.mp4" class="bytemdVideo" controls="controls"></video> ## 导读 组织正在使用云存储构建，以提高灵活性、优化成本和加速创新。在本论坛中，了解应用程序和工作负载如何利用云存储的规模、灵活性和弹性，并了解使这成为可能的亚马逊云科技存储产品组合。深入了解各公司用于构建数据环境的设计模式，这些数据环境适用于使用容器策略迁移的应用程序、使用 Serverless 计算构建的无状态应用程序、大规模分析以及 AI 和 ML 模型的训练。 ## 演讲精华 <font color = "grey">以下是小编为您整理的本次演讲的精华，共1400字，阅读时间大约是7分钟。如果您想进一步了解演讲内容或者观看演讲全文，请观看演讲完整视频或者下面的演讲原文。</font> 可扩展性、安全性、高性能、完全托管、成本优化和全球部署。例如，S3现已拥有超过200万亿个对象，并处理每秒超过1亿次的请求，展示出强大的可扩展性。 拉杰什强调，亚马逊云科技致力于解决这些问题，使客户能够专注于将数据用于数据分析、[机器学习](https://aws.amazon.com/cn/machine-learning/?trk=cndc-detail)、高性能计算和业务关键应用程序。他鼓励与会者在遇到存储期望无法满足的情况时寻求亚马逊云科技的帮助，因为他们已经成功帮助客户以各种方式优化存储，例如从调整部署大小到加速访问。举例来说，一位因内部基础设施不稳定而过度分配2-3倍存储的客户，在亚马逊云科技的帮助下优化至仅所需容量，从而节省了60%以上的成本。 拉杰什简要介绍了亚马逊云科技的一些主要存储服务： - 用于交易访问的块存储服务，如EBS - 用于数据湖和档案的对象存储服务，如S3和S3 Glacier - 用于共享文件系统的文件存储服务，如FSx和EFS - 用于企业间数据流的数据传输服务，如亚马逊云科技传输家族 - 用于集中备份的数据保护服务，如亚马逊云科技备份 他总结道，由于其丰富的服务功能，客户可以通过各种方式让数据发挥价值，从数据分析到实际应用。 关键业务应用程序使用案例 在讨论关键业务应用程序的使用案例时，Rajesh解释道，许多客户正逐渐将这类工作负载迁移至亚马逊云科技，以实现成本优化、创新、更快的执行速度和全球覆盖等好处。这些实例包括Windows应用程序、SAP、数据库、大型机现代化以及虚拟机。 在数据库方面，亚马逊云科技提供了多种权衡因素供用户选择，例如运营需求、总体拥有成本和可用性要求。选项包括但不限于完全托管的关系数据库服务（RDS）和在EC2上部署的自管数据库，搭配EBS卷。企业级功能如SQL Server AlwaysOn可用性群组可支持跨可用性区域的高可用性架构。 例如，Salesforce最初在使用通用EBS运行用于[机器学习](https://aws.amazon.com/cn/machine-learning/?trk=cndc-detail)应用的MongoDB。为了提高面向客户的ML预测性能，他们部署了IO2 EBS卷并调整了IOPS，从而提高了预测结果的呈现速度。 至于虚拟机，Rajesh强调，通过保留VMware工具和操作体验，VMware Cloud on Amazon Web Services使得客户能够将基于VMware的环境升降机至亚马逊云科技，从而协助客户加快数据中心疏散的速度。近期，亚马逊云科技还通过与NetApp ONTAP的集成扩展了其针对数据密集型虚拟机工作负载的功能，从而改善了那些具有未充分利用资源客户的总体拥有成本。 总之，Rajesh强调了亚马逊云科技的托管服务所带来的优势，如快速、灵活和低成本，同时让客户避免了对员工的再培训或对应用程序的再认证。亚马逊云科技负责处理与部署和管理基础设施相关的大量工作。 通过将熟悉的文件系统作为托管服务提供，亚马逊云科技承担了操作系统、容量、许可、补丁和备份责任。这消除了客户在这些操作上的负担，为他们提供了速度和灵活性。例如，新南威尔士州的电子健康部门（eHealth NSW）能够使用FSx for NetApp ONTAP的本地SnapMirror功能快速将内部数据复制到亚马逊云科技的FSx上。 在数据湖方面，亚马逊云科技存储专家约书亚·伯金（Joshua Burgin）进一步阐述了如何利用亚马逊云科技构建数据湖。数据湖可以将来自各种来源和格式的不同数据整合到一个中央库中，以便进行分析和获取业务洞察。针对数据湖的基础设施，S3提供了一个理想的、可扩展的、安全且集成的数据存储解决方案。 约书亚强调了S3提供的多种存储类别，可以根据数据的访问模式匹配存储成本：S3标准适用于频繁访问，S3偶尔访问和S3一区偶尔访问适用于较少访问，Glacier Instant Retrieval适用于需要毫秒级访问的归档数据，Glacier灵活检索和Glacier深度归档适用于具有不同检索需求的长期存储。 对于不确定访问模式的客户，S3智能分层使用[机器学习](https://aws.amazon.com/cn/machine-learning/?trk=cndc-detail)来自动根据观察到的访问情况将对象转换到最佳层。约书亚表示，自推出以来，智能分层已为客户节省了超过10亿美元。 给客户的一个例子是汤森路透公司在S3上构建了一个分析平台，每秒处理4000个事件，并能够扩展到10,000个事件，没有观察到数据丢失或停机时间。 在[机器学习](https://aws.amazon.com/cn/machine-learning/?trk=cndc-detail)方面，约书亚探讨了如何通过[机器学习](https://aws.amazon.com/cn/machine-learning/?trk=cndc-detail)引入一个独特的以数据为中心的数据管道，该管道涵盖了数据准备、模型构建、训练、部署和管理。首先需要制定一个集中的数据战略和整理计划。训练通常需要大量的计算资源，通常会利用GPU，因此优化数据流以适应GPU对于性能和成本至关重要。 亚马逊云科技允许将FSx for Lustre附加到S3数据湖上，作为训练期间的本地数据源，同时还将检查点返回到S3。这种策略为Netflix在训练自己的大规模[机器学习](https://aws.amazon.com/cn/machine-learning/?trk=cndc-detail)模型时提供了4倍的性能提升，确保了他们的GPU集群中的数据一致性。 此外，亚马逊云科技还支持容器和[无服务器](https://aws.amazon.com/cn/serverless/?trk=cndc-detail)架构，使开发者可以专注于编写代码而不是基础设施管理。亚马逊云科技的ECR（Elastic Container Registry）是一个可扩展、安全的容器镜像存储服务，用于管理和分发应用程序的容器镜像。Amazon Lambda是一种[无服务器](https://aws.amazon.com/cn/serverless/?trk=cndc-detail)函数服务，可以在亚马逊云科技完全托管的环境中运行、调度和扩展用户代码。这些功能使得开发人员可以轻松地将容器化应用程序部署到亚马逊云科技，并根据需要进行扩展。 Leijsh，一位专家，回来探讨容器和[无服务器](https://aws.amazon.com/cn/serverless/?trk=cndc-detail)的使用案例。他认为，容器是自固定虚拟机以来的一种发展，更轻便且可扩展。亚马逊云技术提供了强大的容器平台，如Lambda、Fargate、EKS和ECS。虽然容器通常是无状态的，但在现实生活中，它们常常需要集成持久的存储。亚马逊云技术的存储服务，如EBS、S3和FSx，已与亚马逊云技术的容器服务集成。一个新兴趋势是使用像FSx这样的文件存储来支持跨可用性区域的容器化工作负载，从而实现更多灵活性而不需支付跨区域费用。 提供的客户示例中，T-Mobile将其内部微服务环境迁移到了EFS上，这使他们每个应用程序的成本降低了40-70%，简化了复杂性，并提高了部署速度。 在数据保护方面，Leijsh承认，传统的备份解决方案来自Veritas、CommVault和Rubrik等供应商，以及混合选项如亚马逊云技术Storage Gateway。然而，原生亚马逊云技术备份提供一个全面集中的备份服务，已与15种亚马逊云技术服务集成，并不断扩展其生态系统。亚马逊云技术备份允许用户定义备份策略、计划和保留期限以满足合规要求。它可以直接使用，也可以通过备份ISV合作伙伴（经过验证可与亚马逊云技术集成）使用。例如，Workday利用亚马逊云技术备份来自动化多个服务的复杂备份需求，以满足其审计客户的需求。 总之，Leijsh强调，亚马逊云技术提供了丰富的学习资源，以帮助人们继续学习，包括亚马逊云技术技能构建器网站、存储提升指南和存储黑带认证。他感谢与会者的参与，并邀请他们提供关于从使用案例到存储服务的映射方法的反馈。这次讲座展示了亚马逊云技术存储服务如何满足不同客户的需求，包括针对关键业务应用、文件共享、数据湖、[机器学习](https://aws.amazon.com/cn/machine-learning/?trk=cndc-detail)和数据保护的现实例子。 **下面是一些演讲现场的精彩瞬间：** 雷杰什·维贾扬介绍了他自己以及他在re:Invent上关于云存储使用案例和应用的演讲。  作为亚马逊云科技的一部分，他们提供了一套全面的服务，能够轻松、安全地传输、存储、访问和保护任何类型和大小的数据。  通过在亚马逊云科技上运行VMware Cloud on Amazon Web Services (亚马逊云科技)，企业可以无缝地将VMware环境扩展到云端。  亚马逊云科技为各种使用场景提供了文件存储解决方案，包括通用文件共享、独立软件供应商（ISV）应用、数据库和数据保护等。  通过集中数据，打破数据孤岛，企业可以实现更好的数据治理、保留策略和访问控制。  演讲者还探讨了构建[机器学习](https://aws.amazon.com/cn/machine-learning/?trk=cndc-detail)模型的复杂性，包括集中数据、选择算法、调整超参数和训练模型等方面。  ## 总结 亚马逊云科技提供了一系列全面的存储服务以满足各种数据需求，使得客户能够高效地构建应用程序，推动创新并解锁数据洞察。本次演讲将概述关键存储使用案例以及亚马逊云科技的存储服务如何解决这些问题。对于像数据库这样的关键业务应用程序，亚马逊云科技提供了诸如EBS和FSx等块存储选项以及RDS和DynamoDB等数据库服务。这不仅支持轻松迁移内部部署应用程序，还能根据需要优化成本和性能。VMware Cloud on 亚马逊云科技还便于虚拟机工作负载的简单迁移。对于基于文件的应用程序，亚马逊云科技提供了诸如FSx for Windows和ONTAP之类的完全托管NAS解决方案，以在不修改应用程序的情况下实现快速迁移，从而提高灵活性并降低总拥有成本。使用S3作为耐用且可扩展的数据库来构建数据湖是一种常见模式。通过使用S3智能分层等功能将数据价值与成本相匹配，并利用Athena等分析服务，可以提取见解。对于[机器学习](https://aws.amazon.com/cn/machine-learning/?trk=cndc-detail)，S3和FSx for Lustre有助于创建数据湖并通过保持GPU饱和来实现快速训练。容器利用EBS、EFS和S3在AZ之间进行有状态持久化，提高了应用程序的可用性。最后，亚马逊云科技备份和ISV合作伙伴（如Commvault和Veritas）允许实施针对云原生和内部部署应用程序的集中数据保护。本演讲提供了关于如何通过其广泛的服务来解决各种使用案例的概述。 ## 演讲原文 ## 想了解更多精彩完整内容吗？立即访问re:Invent 官网中文网站！ [2023亚马逊云科技re:Invent全球大会 - 官方网站](https://webinar.amazoncloud.cn/reInvent2023/?s=8739&smid=19458 "2023亚马逊云科技re:Invent全球大会 - 官方网站") [点击此处](https://aws.amazon.com/cn/new/?trk=6dd7cc20-6afa-4abf-9359-2d6976ff9600&trk=cndc-detail "点击此处")，一键获取亚马逊云科技全球最新产品/服务资讯！ [点击此处](https://www.amazonaws.cn/new/?trk=2ab098aa-0793-48b1-85e6-a9d261bd8cd4&trk=cndc-detail "点击此处")，一键获取亚马逊云科技中国区最新产品/服务资讯！ ## 即刻注册亚马逊云科技账户，开启云端之旅！ [【免费】亚马逊云科技“100 余种核心云服务产品免费试用”](https://aws.amazon.com/cn/campaigns/freecenter/?trk=f079813d-3a13-4a50-b67b-e31d930f36a4&sc_channel=el&trk=cndc-detail "【免费】亚马逊云科技“100 余种核心云服务产品免费试用“") [【免费】亚马逊云科技中国区“40 余种核心云服务产品免费试用”](https://www.amazonaws.cn/campaign/CloudService/?trk=2cdb6245-f491-42bc-b931-c1693fe92be1&sc_channel=el&trk=cndc-detail "【免费】亚马逊云科技中国区“40 余种核心云服务产品免费试用“")