Amazon Keyspaces:工作原理 - Amazon Keyspaces(Apache Cassandra 兼容)

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

Amazon Keyspaces:工作原理

Amazon Keyspaces 消除了 Cassandra 的管理开销。要了解原因,不妨先从 Cassandra 架构开始,然后将其与 Amazon Keyspaces 进行比较。

架构简析:Apache Cassandra 与 Amazon Keyspaces

传统的 Apache Cassandra 部署在由一个或多个节点组成的集群中。您负责管理各个节点,并随着集群的扩展添加和删除节点。

客户端程序通过连接到其中一个节点并发出 Cassandra 查询语言 () CQL 语句来访问 Cassandra。CQL与关系数据库中使用的流行语言类似。SQL尽管 Cassandra 不是关系数据库,但CQL它提供了一个熟悉的界面,用于在 Cassandra 中查询和操作数据。

下图显示了一个由四个节点构成的简单 Apache Cassandra 集群。

Apache Cassandra 集群的图表,该集群包含 4 个节点并与客户端应用程序交互。

生产 Cassandra 部署可能由数百个节点构成,这些节点在一个或多个物理数据中心内的数百台物理计算机上运行。这会给应用程序开发人员带来运营负担,这些人员除了安装、维护和操作软件之外,还需要预置、修补和管理服务器。

使用 Amazon Keyspaces(Apache Cassandra 兼容),您无需预置、修补或管理服务器,因此可以专注于构建更好的应用程序。Amazon Keyspaces 提供两种读取和写入吞吐能力:按需和预置。您可以根据工作负载的可预测性和可变性选择表的吞吐容量模式,以优化读取和写入价格。

借助按需模式,您只需为您的应用程序实际执行的读取和写入付费。您无需事先指定表的吞吐能力。Amazon Keyspaces 几乎能在应用流量上升或下降时立即满足您的需求,因此对于流量不可预测的应用程序来说,它是一个不错的选择。

如果您的应用程序流量可预测,并且可以提前预测表的容量需求,那么预置容量模式可以帮助您优化吞吐量的价格。使用预置容量模式时,请指定您的应用程序预计每秒需要执行的读取和写入次数。您可以通过启用自动扩展来自动增加和减少表的预置容量。

在以下情况下,您可以每天更改一次表的容量模式:您需要了解有关工作负载的流量模式的更多信息,或如果您预计流量会突增(例如,您预计会发生导致大量表流量的重大事件)。有关预置读取和写入容量的更多信息,请参阅在 Amazon Keyspaces 中配置读/写容量模式

Amazon Keyspaces(Apache Cassandra 兼容)将数据的三个副本存储在多个可用区中,以实现持久性和高可用性。此外,您可以从专为满足大多数安全敏感型组织的要求而打造的数据中心和网络架构中受益。当您创建新的 Amazon Keyspaces 表时,系统会自动启用静态加密,并且所有客户端连接都需要传输层安全 () TLS。其他 AWS 安全功能包括监控AWS Identity and Access Management、和虚拟私有云 (VPC) 端点。有关所有可用安全功能的概述,请参阅Amazon Keyspaces(Apache Cassandra 兼容)中的安全性

下图显示了 Amazon Keyspaces 的架构。

与客户端应用程序交互的 Amazon Keyspaces 示意图。

客户端程序通过连接到预先确定的终端节点(主机名和端口号)并发出语句来访问 Amazon Keyspaces。CQL有关可用端点的列表,请参阅Amazon Keyspaces 的服务端点

Cassandra 数据模型

业务案例数据的建模方式对于从 Amazon Keyspaces 实现最佳性能至关重要。较差的数据模型会显著地降低性能。

尽管CQL看起来很相似SQL,但Cassandra和关系数据库的后端却大不相同,必须以不同的方式处理。下面是需要考虑的一些更重要的问题:

存储

可以在表中直观地显示您的 Cassandra 数据,其中每行表示一条记录,每列表示该记录中的一个字段。

表设计:查询优先

里面没有 JOIN s CQL。因此,您应该根据数据的性质,以及需要如何访问数据来满足业务使用案例的要求,设计您的表。这可能会导致重复数据的逆规范化。您应该专门为特定的访问模式设计每个表。

分区

您的数据存储在磁盘分区中。存储数据的分区数以及数据在分区之间的分布方式由您的分区键 决定。分区键的定义方式会对查询的性能产生重大影响。有关最佳实践,请参阅如何在 Amazon Keyspaces 中高效使用分区键

主键

在 Cassandra 中,数据以键/值对的形式存储。每个 Cassandra 表都必须有一个主键,这是表中每行的唯一键。主键是一个必需的分区键与多个可选的聚类列的组合。组成主键的数据在表中的所有记录之间必须是唯一的。

  • 分区键 - 主键的分区键部分是必需的,可确定数据存储在集群的哪个分区中。分区键可以是单个列,也可以是由两列或多个列组成的复合值。如果单列分区键会导致单个分区,或者导致极少数分区具有大部分数据,从而承担大部分磁盘 I/O 操作,则应使用复合分区键。

  • 聚类列 - 主键的可选聚类列部分决定如何在每个分区中聚类和排序数据。如果您在主键中包含聚类列,聚类列可以有一个或多个列。如果聚类列中有多个列,则排序顺序由各列在聚类列中从左到右的列出顺序决定。

有关 No d SQL esign 和 Amazon Keyspaces 的更多信息,请参阅。No design 的主要区别和SQL设计原则有关 Amazon Keyspaces 和数据建模的更多信息,请参阅。数据建模最佳实践:设计数据模型的建议

通过应用程序访问 Amazon Keyspaces

Amazon Keyspaces(适用于 Apache Cassandra)实现了 Apache Cassandra 查询语言 (CQL)API,因此你可以使用已经使用的 Cassandra CQL 驱动程序。要更新您的应用程序,只需更新您的 Cassandra 驱动程序或 cqlsh 配置以指向 Amazon Keyspaces 服务端点即可。有关所需凭证的更多信息,请参阅创建和配置 AWS Amazon Keyspaces 的凭证

注意

为了帮助您入门,您可以在上的 Amazon Keyspaces end-to-end 代码示例存储库中找到使用各种 Cassandra 客户端驱动程序连接亚马逊密钥空间的代码示例。GitHub

考虑以下 Python 程序,该程序连接到 Cassandra 集群并查询表。

from cassandra.cluster import Cluster #TLS/SSL configuration goes here ksp = 'MyKeyspace' tbl = 'WeatherData' cluster = Cluster(['NNN.NNN.NNN.NNN'], port=NNNN) session = cluster.connect(ksp) session.execute('USE ' + ksp) rows = session.execute('SELECT * FROM ' + tbl) for row in rows: print(row)

要对 Amazon Keyspaces 运行同一个程序,您需要: