AWS亚马逊Redshift的特点功能介绍

Redshift即是AWS提供的一款：云上数据仓库服务

Redshift同我们前面使用的RDS一样，是一个全托管的服务（非完全的server less，可以选择集群数量和性能，但是无需管理）

Redshift同RDS一样，只需要鼠标点击几下，即可得到一款可用的高性能、高可靠的数据仓库服务。

但是与RDS不同的是，Redshift可以选择集群模式，也就是可以选择Redshift底层，基于多少台硬件服务器提供算力和存储。

同时，从概念上也不同，我们列个表格来看一下Redshift和RDS的区别

那么来看看Redshift有什么特点。

Amazon Redshift 使用了多种创新技术，对于大小在 100GB 到 1PB 或更高的数据集，可以实现很高的查询性能，并使用了列式存储。Amazon Redshift 采用了大规模并行处理 (MPP) 数据仓库架构，可以对 SQL 操作进行并行分布处理，以便利用所有可用资源。底层硬件支持高性能数据处理，使用本地连接的存储以便尽可能增大 CPU 与驱动器之间的吞吐量，同时使用 10GigE 网状网络以便尽可能增大节点之间的吞吐量。

仅需在 AWS 管理控制台中单击几下或通过一次简单的 API 调用，您就能在性能或容量需求发生变化时，轻松更改云数据仓库中的节点数量或类型。

利用 Amazon Redshift，您只要用单个 160GB DC2.Large 节点就可开始，并能一路扩展到使用 16TB DS2.8XLarge 节点的 1PB 或者更多压缩用户数据。 调整大小时，Amazon Redshift 可将您现有的集群置于只读模式，并预置一个您选定大小的新集群，然后将数据从您的旧集群并行复制到您的新集群。在预置新集群的同时，您可继续对您的旧集群进行查询。一旦您的数据被复制到新集群，Amazon Redshift 会自动将查询重新定向至新集群，并移除旧集群。

Amazon Redshift 处理数据仓库的管理、监控及扩展所需的所有工作，从监控集群运行状况、备份到进行修补和升级。

在性能和容量需求发生变化时，您可以轻松调整集群大小。通过处理所有这些耗时耗力的任务，Amazon Redshift 使您得到了解脱并专注于您的数据和业务。

Amazon Redshift 的自动快照功能连续地将集群上的数据备份至 Amazon S3。备份是连续、递增而自动的。

Amazon Redshift 按用户定义的期间存储您的快照，此期间可以是 1 到 35 天。您可在任何时候拍摄您自己的快照，这些快照利用所有现有的系统快照，并可保留到您明确地删除它们时为止。

Redshift 还能将您的快照异步复制到另一个区域的 S3 中进行灾难恢复。一旦您删除了某个集群，您的系统快照也将被移除，但您的用户快照在您明确地删除它们之前仍可使用。

您可通过 AWS 管理控制台或 Amazon Redshift API 使用任何系统快照或用户快照来恢复您的集群。

系统元数据恢复后，您的集群就可供使用，并且您可在用户数据在后台输出时开始运行查询。

Amazon Redshift 拥有多种能够提高数据仓库集群可靠性的功能。

所有写入集群内节点的数据均会自动复制到集群内的其他节点，且所有数据会被连续备份至 Amazon S3。Amazon Redshift 会持续监控集群的运行状况并会自动从出现故障的驱动器重新复制数据，并在必要时替换节点。

并且这一切完全无需用户管理，AWS为您管理一切，用户只需要关心业务开发即可。

借助 Amazon Redshift，您可以配置防火墙规则，以控制对数据仓库集群的网络访问。您可以在 Amazon Virtual Private Cloud (Amazon VPC) 中运行 Amazon Redshift，将您的数据仓库集群隔离在您自己的虚拟网络中。

Amazon Redshift 与 AWS CloudTrail 相集成，使您能够对所有的 Redshift API 调用进行审计。Amazon Redshift 还会记录所有的 SQL 操作，包括连接尝试、查询和数据库变动。您可以使用 SQL 查询在系统表格中访问这些记录，或选择将其下载到 Amazon S3 上的某个位置。

Amazon Redshift 是一种 SQL 数据仓库解决方案，使用了行业标准的 ODBC 和 JDBC 连接。可以从控制台的连接客户端选项卡中下载我们的定制 JDBC 和 ODBC 驱动程序。

Amazon Redshift 与其他 AWS 服务相集成，并内置了命令将数据从 Amazon S3、Amazon DynamoDB 或 Amazon EC2 实例以及使用 SSH 的本地服务器中并行加载到每个节点。Amazon Kinesis 还集成了 Amazon Redshift 作为数据目标。

亚马逊云计算的Amazon EC2是一种 Web 服务，可在云中提供大小可调的计算容量。该服务旨在降低开发人员进行网络规模级云计算的难度。 Amazon EC2 的 Web 服务接口非常简单，您可以轻松获取和配置计算能力。使用该服务，您可以完全控制您的计算资源，并可以在成熟的亚马逊 AWS 计算环境中运行。Amazon EC2 将获取并启动新服务器实例所需要的时间缩短至几分钟，这样一来，在您的计算要求发生变化时，您便可以快速扩展计算容量。Amazon EC2 按您实际使用的容量收费，从而改变了成本结算方式。 Amazon EC2 还为开发人员提供了创建故障恢复应用程序以及排除常见故障情况的工具。

北京——2022年1月18日 ，近日，亚马逊云 科技 宣布推出专为紧耦合高性能计算（HPC）工作负载构建的全新实例Amazon Elastic Compute Cloud (Amazon EC2) Hpc6a。Amazon EC2 Hpc6a实例搭载了第三代AMD EPYC处理器，与计算优化型Amazon EC2实例相比，用于HPC工作负载的性价比提升高达65%，进一步扩展了亚马逊云 科技 的HPC计算选项组合。客户通过Hpc6a实例可以更经济、高效地在亚马逊云 科技 中扩展HPC集群，运行计算密集型工作负载，如基因组学、计算流体动力学、天气预报、分子动力学、计算化学、金融风险建模、计算机辅助工程和地震成像。客户可以按照即用即付的低成本模式，按需使用Hpc6a实例，而无需预付费用。

众多不同行业机构都使用HPC解决他们最复杂的学术、科学和业务问题。然而，有效使用HPC的成本很高，为了处理大量数据，HPC集群需要具备强大的计算力、高性能的内存和存储，以及低延迟的网络。一些机构通过在本地构建基础设施来运行HPC工作负载，这需要高昂的前期投资，包括冗长的采购周期、监控软硬件更新等持续的管理开销，而当基础设施变得过时且必须升级时，又必然会面临灵活性受限的挑战。许多行业客户选择在云中运行其HPC工作负载，充分利用云提供的安全性、可扩展性和弹性。众多工程师、研究人员和科学家通过亚马逊云 科技 运行其最大型、复杂的 HPC 工作负载，并选择使用具有增强网络的Amazon EC2实例（例如C5n、R5n、M5n和C6gn）来扩展高性能紧耦合HPC工作负载，这些工作负载需要实例间高水平通信，处理数千个相互依赖的任务。虽然这些实例的性能能够满足大多数 HPC 用例，但随着需要解决的问题越来越困难，工作负载不断扩展，规模可能增长至需要亚马逊云 科技 中的数万台服务器处理，客户希望在运行HPC工作负载时最大限度地提高性价比。

新的Hpc6a实例专为在云中大规模运行 HPC 工作负载提供最佳性价比。HPC6a实例将HPC工作负载性价比提升高达65%，可在一系列集群规模（多达数万个内核）中执行复杂计算。默认状态下，Hpc6a实例搭载了网络接口Elastic Fabric Adapter (EFA)。EFA网络具有低延迟、低抖动和高达100 Gbps的网络带宽，可帮助客户提高运营效率，对于实例间有大量通信的工作负载可以快速交付计算结果。 Hpc6a 实例搭载了主频可高达3.6 GHz频率的第三代 AMD EPYC 处理器，并提供 384 GB 内存。使用 Hpc6a 实例，客户可以更经济高效地通过HPC解决他们最大、最困难的学术、科学和业务问题，并以高性价比获得亚马逊云 科技 服务的诸多优势。

亚马逊云 科技 Amazon EC2副总裁David Brown 表示：“通过为几乎所有类型的工作负载持续创新，并推出新的专门构建的Amazon EC2实例，我们为客户一些最关键的业务应用提供了超高的性价比。虽然高性能计算帮助解决了科学、工程和商业等领域一些最困难的问题，但对于许多机构而言，有效运行 HPC 工作负载仍然非常昂贵。Hpc6a实例专为HPC工作负载构建，可以帮助客户在几乎任何规模的 HPC 集群中将性价比提升高达65%，消除客户对成本的顾虑，专注于解决核心业务问题。”

AMD服务器业务高级副总裁兼总经理Dan McNamara 表示“我们很高兴能够继续与亚马逊云 科技 合作，为他们的客户提供用于高性能计算工作负载的全新、强大的实例。AMD EPYC处理器正帮助各种规模的客户解决一些最困难、复杂的问题。从大学到企业再到大型研究机构，由第三代AMD EPYC处理器支持的HPC6a实例为更多全球客户带来强大的HPC性能，且具有云的可扩展性。”

客户可通过Amazon ParallelCluster（一种开源集群管理工具）使用Hpc6a实例，可与其他实例一起预置Hpc6a实例，并在相同HPC集群中灵活地为不同的工作负载运行不同的优化实例。Hpc6a实例基于Amazon Nitro 系统，Amazon Nitro将许多传统虚拟化功能卸载到专用硬件和软件，而具有更高性能、高可用性和更高的安全性，同时减少虚拟化开销。Hpc6a 实例可作为按需实例或预留实例购买，也可通过 Savings Plans 购买。 Hpc6a 实例现已在美国东部（俄亥俄）和 Amazon GovCloud（美国西部）区域推出，其他区域也将很快推出。

Maxar是一家地理空间智慧公司，与诸多创新企业和50多个政府合作监测全球变化、提供宽频通信，以及基于空间架构和地球智能的能力提供先进的空间操作。“Amazon EC2 Hpc6实例的推出是亚马逊云 科技 又一次重大的发布，让Maxar能够继续满足并超越客户对大型计算工作流的要求，无论是加速数值天气预报工作负载的研究和运营，还是使用Maxar Precision3D 产品套件创建全球最优秀、先进和精确的数字孪生模型。” Maxar Technologies高级副总裁兼首席产品官Dan Nord 表示，“Hpc6a的AMD EPYC（Milan）处理器与EFA网络功能相结合，与其他可选项相比，帮助我们将性能提升了60%，同时更具成本效益。这让Maxar能够在自己构建的一套亚马逊云 科技 HPC集群配置中进行战略性选择，最大限度的满足客户需求，同时最大限度地提高灵活性和韧性。”

DTN的全球气象站网络提供超本地、准确和实时的气象情报，为企业提供可操作的见解。 DTN首席技术官Lars Ewe 表示：“与亚马逊云 科技 合作，让我们能够更好地服务客户，为他们提供高分辨率天气预报系统，并为分析引擎提供数据。我们很高兴看到 Hpc6a 实例的高性价比，希望它将成为我们未来HPC工作负载的首选Amazon EC2 实例。”

TotalCAE在计算机辅助工程（CAE）高性能计算方面拥有超过 20 年的经验。 TotalCAE 通过管理客户的HPC工程环境和工程应用程序，来帮助客户消除IT难题，让客户专注于工程，而不是IT。 “TotalCAE平台让CAE部门可以轻松地获得亚马逊云 科技 的敏捷性和灵活性，只需单击几下即可用于数百个工程应用程序，例如Ansys Fluent、Siemens Simcenter STAR-CCM+和Dassault Systèmes Abaqus。” TotalCAE总裁 Rod Mach 表示，“作为亚马逊云 科技 HPC能力合作伙伴网络成员（HPC Competency Partner），我们帮助客户在云中运行其CAE 工作负载。通过HPC6a 实例，我们以更低的成本将计算流体动力学工作负载的性能提升了 30%，让 TotalCAE 能够为客户提供行业领先的性价比和云强大的可扩展性。”

---