Amazon Neptune 引擎版本 1.2.0.0(2022 年 7 月 21 日) - Amazon Neptune

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

Amazon Neptune 引擎版本 1.2.0.0(2022 年 7 月 21 日)

截至 2022 年 7 月 21 日,引擎版本 1.2.0.0 正在普遍部署中。请注意,新版本在每个区域的发布需要几天的时间。

注意

如果从 1.2.0.0 之前的引擎版本升级:

  • 引擎版本 1.2.0.0 为自定义参数组和自定义集群参数组引入了一种新格式。因此,如果您要从 1.2.0.0 之前的引擎版本升级到引擎版本 1.2.0.0 或更高版本,则必须使用参数组系列 neptune1.2 重新创建所有现有的自定义参数组和自定义集群参数组。早期版本使用参数组系列 neptune1,而这些参数组不适用于版本 1.2.0.0 及更高版本。请参阅Amazon Neptune 参数组了解更多信息。

  • 引擎版本 1.2.0.0 还引入了一种新的撤消日志格式。因此,必须清除早期引擎版本创建的所有撤消日志,并且 UndoLogsListSize CloudWatch 指标必须降至零,然后才能开始从 1.2.0.0 之前的版本进行任何升级。如果您尝试开始更新时撤消日志记录过多(200000 或更多),则在等待清除撤消日志完成时,升级尝试可能会超时。

    您可以通过升级集群的写入器实例(清除发生的地方)来加快清除速率。在尝试升级之前执行此操作可能会在开始之前减少撤消日志的数量。将写入器的大小增加到 24XL 实例类型,可以将清除率提高到每小时超过一百万条记录。

    如果 UndoLogsListSize CloudWatch 指标非常大,那么提出支持案例可能会帮助您探索降低该指标的其它策略。

  • 最后,1.2.0.0 版本中有一项重大变化,会影响之前使用 Bolt 协议和 IAM 身份验证的代码。从版本 1.2.0.0 开始,Bolt 需要一个用于 IAM 签名的资源路径。在 Java 中,设置资源路径可能如下所示:request.setResourcePath("/openCypher"));。在其它语言中,可以将 /openCypher 附加到端点 URI 之后。有关示例,请参阅 使用 Bolt 协议

此版本的后续补丁版本

此引擎版本中的新增功能

  • 增加了对全球数据库的支持。一个 Neptune 全球数据库跨多个 AWS 区域,并由一个区域中的一个主数据库集群和其它区域中最多五个辅助数据库集群组成。

  • 根据数据面板操作,在 Neptune IAM policy 中增加了对比之前更精细的访问控制的支持。这是一个重大变化,因为必须调整基于已弃用的 connect 操作的现有 IAM policy 以使用更精细的数据面板操作。请参阅IAM政策的类型

  • 改进了读取器实例的可用性。以前,当写入器实例重启时,Neptune 集群中的所有读取器实例也会自动重启。从引擎版本 1.2.0.0 开始,读取器实例在写入器重启后保持活动状态,这提高了读取器的可用性。读取器实例可以单独重启以获取参数组的更改。请参阅在 Amazon Neptune 中重启数据库实例

  • 添加了一个新的 neptune_streams_expiry_days 数据库集群参数,允许您设置在删除流记录之前在服务器上保留它们的天数。范围为 1 到 90,默认值为 7。

此引擎版本中的改进

  • 提高了字节码查询的 Gremlin 序列化性能。

  • Neptune 现在使用 DFE 引擎处理文本谓词,以提高性能。

  • Neptune 现在使用 DFE 引擎处理 Gremlin limit() 步骤,包括非终端和子遍历限制。

  • 更改了 DFE 对 Gremlin union() 步骤的处理以与其它新特征配合使用,这意味着引用节点会按预期显示在查询配置文件中。

  • 通过并行化 DFE 中一些昂贵的联接操作,将性能提高多达 5 倍。

  • 对于 Gremlin DFE 引擎,添加了对于 OrderGlobalStep order(global)by() 调制支持。

  • 在 DFE 的 explain 详细信息中添加了注入的静态值的显示。

  • 提高了修剪重复模式时的性能。

  • 在 Gremlin DFE 引擎中添加了顺序保存支持。

  • 提高了带有空筛选条件的 Gremlin 查询的性能,例如:

    g.V().hasId(P.within([]))
    g.V().hasId([])
  • 改进了 SPARQL 查询使用的数值太大而使 Neptune 无法在内部表示时的错误消息。

  • 通过减少禁用流时的索引搜索,提高了删除带有关联边缘的顶点的性能。

  • 将 DFE 支持扩展到 has() 步骤的更多变体,特别是扩展到 hasKey()hasLabel(),以及 has() 中字符串/URI 的范围谓词。这会影响如下查询:

    // hasKey() on properties g.V().properties().hasKey("name") g.V().properties().has(T.key, TextP.startingWith("a")) g.E().properties().hasKey("weight") g.E().properties().hasKey(TextP.containing("t")) // hasLabel() on vertex properties g.V().properties().hasLabel("name") // range predicates on ID and Label fields g.V().has(T.label, gt("person")) g.E().has(T.id, lte("(an ID value)"))
  • 添加了 Neptune 特定的 openCypher join() 函数,该函数可将列表中的字符串串联成单个字符串。

  • 更新了 Neptune 托管式策略,以包含数据访问权限和新的全球数据库 API 的权限。

在此引擎版本中修复的缺陷

  • 修复了未指定内容类型的 HTTP 请求会自动失败的错误。

  • 修复了查询优化器中阻止在查询中使用服务调用的 SPARQL 错误。

  • 修复了 Turtle RDF 解析器中的一个 SPARQL 错误,即特定的 Unicode 数据组合会导致失败。

  • 修复了 SPARQL 错误,即 GRAPHSELECT 子句的特定组合会生成错误的查询结果。

  • 修复了一个 Gremlin 错误,该错误会导致在联合步骤中使用任何筛选步骤的查询出现正确性问题,例如:

    g.V("1").union(hasLabel("person"), out())
  • 修复了一个 Gremlin 错误,即 both().simplePath()count() 将导致在没有 count() 的情况下返回的实际结果数翻倍。

  • 修复了一个 openCypher 错误,即服务器在向启用了 IAM 身份验证的集群发出 Bolt 请求时生成了错误的签名不匹配异常。

  • 修复了一个 openCypher 错误,即如果在请求失败后提交,则使用 HTTP 保持活动状态的查询可能会被错误关闭。

  • 修复了一个 openCypher 错误,该错误可能导致在提交返回常量值的查询时引发内部错误。

  • 修复了 explain 详细信息中的一个错误,以便 DFE 子查询 Time(ms) 现在可以正确计算出 DFE 子查询中运算符的 CPU 时间。以下面的 explain 输出摘录为例:

    subQuery1 ╔════╤════════╤════════╤═══════════════════════╤═══════════════════════════════════╤══════╤══════════╤═══════════╤═══════╤═══════════╗ ║ ID │ Out #1 │ Out #2 │ Name │ Arguments │ Mode │ Units In │ Units Out │ Ratio │ Time (ms) ║ ╠════╪════════╪════════╪═══════════════════════╪═══════════════════════════════════╪══════╪══════════╪═══════════╪═══════╪═══════════╣ ... ╟────┼────────┼────────┼───────────────────────┼───────────────────────────────────┼──────┼──────────┼───────────┼───────┼───────────╢ ║ 1 │ 2 │ - │ DFEChunkLocalSubQuery │ subQuery=...graph#336e.../graph_1 │ - │ 1 │ 1 │ 1.00 │ 0.38 ║ ║ │ │ │ │ coordinationTime(ms)=0.026 │ │ │ │ │ ║ ╟────┼────────┼────────┼───────────────────────┼───────────────────────────────────┼──────┼──────────┼───────────┼───────┼───────────╢ ... subQuery=...graph#336e.../graph_1 ╔════╤════════╤════════╤═══════════════════════╤═══════════════════════════════════╤══════╤══════════╤═══════════╤═══════╤═══════════╗ ║ ID │ Out #1 │ Out #2 │ Name │ Arguments │ Mode │ Units In │ Units Out │ Ratio │ Time (ms) ║ ╠════╪════════╪════════╪═══════════════════════╪═══════════════════════════════════╪══════╪══════════╪═══════════╪═══════╪═══════════╣ ║ 0 │ 1 │ - │ DFESolutionInjection │ solutions=[?100 -> [-10^^<LONG>]] │ - │ 0 │ 1 │ 0.00 │ 0.04 ║ ║ │ │ │ │ outSchema=[?100] │ │ │ │ │ ║ ╟────┼────────┼────────┼───────────────────────┼───────────────────────────────────┼──────┼──────────┼───────────┼───────┼───────────╢ ║ 1 │ 3 │ - │ DFERelationalJoin │ joinVars=[] │ - │ 2 │ 1 │ 0.50 │ 0.29 ║ ╟────┼────────┼────────┼───────────────────────┼───────────────────────────────────┼──────┼──────────┼───────────┼───────┼───────────╢ ║ 2 │ 1 │ - │ DFESolutionInjection │ outSchema=[] │ - │ 0 │ 1 │ 0.00 │ 0.01 ║ ╟────┼────────┼────────┼───────────────────────┼───────────────────────────────────┼──────┼──────────┼───────────┼───────┼───────────╢ ║ 3 │ - │ - │ DFEDrain │ - │ - │ 1 │ 0 │ 0.00 │ 0.02 ║ ╚════╧════════╧════════╧═══════════════════════╧═══════════════════════════════════╧══════╧══════════╧═══════════╧═══════╧═══════════╝

    下表最后一列中的子查询时间加起来为 0.36 毫秒 (.04 + .29 + .01 + .02 = .36)。当您将该子查询的协调时间相加 (.36 + .026 = .386) 时,您会得到一个结果,该结果接近于上表最后一列中记录的子查询的时间,即 0.38 毫秒。

此版本支持的查询语言版本

在将数据库集群升级到版本 1.2.0.0 之前,请确保您的项目与以下查询语言版本兼容:

  • 支持的 Gremlin 最早版本:3.5.2

  • 支持的 Gremlin 最新版本:3.5.4

  • openCypher 版本:Neptune-9.0.20190305-1.0

  • SPARQL 版本:1.1

引擎版本 1.2.0.0 的升级路径

由于这是主要引擎版本,因此无法对其进行自动升级。

您只能从引擎版本 1.1.1.0 的最新补丁版本手动升级到版本 1.2.0.0。早期引擎版本必须先升级到 1.1.1.0 的最新版本,然后才能升级到 1.2.0.0

因此,在尝试升级到此版本之前,请确认您当前正在运行版本 1.1.1.0 的最新补丁版本。否则,请先升级到 1.1.1.0 的最新补丁版本。

升级之前,您还必须使用参数组系列 neptune1.2 重新创建您在先前版本中使用的任何自定义数据库集群参数组。请参阅Amazon Neptune 参数组了解更多信息。

如果您先升级到版本 1.1.1.0,然后立即升级到 1.2.0.0,则可能会遇到如下错误:

We're sorry, your request to modify DB cluster (cluster identifier) has failed. Cannot modify engine version because instance (instance identifier) is running on an old configuration. Apply any pending maintenance actions on the instance before proceeding with the upgrade.

如果遇到此错误,请等待待处理操作完成,或者立即触发维护时段,让之前的升级完成(请参阅维护 Amazon Neptune 数据库集群)。

升级到此版本

如果数据库集群运行的引擎版本有此版本的升级路径,则可以立即对其进行升级。您可以使用控制台上的数据库集群操作或使用 SDK 升级任何符合条件的集群。以下 CLI 命令将立即升级符合条件的集群:

对于 Linux、OS X 或 Unix:

aws neptune modify-db-cluster \ --db-cluster-identifier (your-neptune-cluster) \ --engine-version 1.2.0.0 \ --allow-major-version-upgrade \ --apply-immediately

对于 Windows:

aws neptune modify-db-cluster ^ --db-cluster-identifier (your-neptune-cluster) ^ --engine-version 1.2.0.0 ^ --allow-major-version-upgrade ^ --apply-immediately

您可以指定 --no-apply-immediately,而不是 --apply-immediately。要执行主要版本升级,需要使用 allow-major-upgrade 参数。另外,请务必包括引擎版本,否则您的引擎可能会升级到其它版本。

如果集群使用自定义集群参数组,请确保包含以下参数以指定此参数组:

--db-cluster-parameter-group-name (name of the custom DB cluster parameter group)

同样,如果集群中的任何实例使用自定义数据库参数组,请确保包含此参数以指定此参数组:

--db-instance-parameter-group-name (name of the custom instance parameter group)

升级前始终先测试

发布新的主要或次要 Neptune 引擎版本时,请务必先在该版本上测试您的 Neptune 应用程序,然后再升级到该版本。即使是次要版本升级,也可能引入会影响代码的新特征或行为。

首先,将当前版本的发行说明页面与目标版本的发行说明页面进行比较,以查看查询语言版本是否会发生变化或是否会发生其它重大更改。

在升级生产数据库集群之前测试新版本的最佳方法是克隆生产集群,以便克隆运行新的引擎版本。然后,您可以在不影响生产数据库集群的情况下在克隆上运行查询。

请在升级之前始终创建手动快照

在执行升级之前,我们强烈建议您始终创建数据库集群的手动快照。拥有自动快照只能提供短期保护,而手动快照在您显式删除它之前仍然可用。

在某些情况下,作为升级过程的一部分,Neptune 会为您创建手动快照,但您不应依赖此快照,无论如何都应创建自己的手动快照。

当您确定不需要将数据库集群恢复到其升级前的状态时,可以显式删除自己创建的手动快照以及 Neptune 可能已创建的手动快照。如果 Neptune 创建手动快照,则其名称将以 preupgrade 开头,后跟数据库集群的名称、源引擎版本、目标引擎版本和日期。

注意

如果您在待处理操作正在进行时尝试升级,则可能会遇到如下错误:

We're sorry, your request to modify DB cluster (cluster identifier) has failed. Cannot modify engine version because instance (instance identifier) is running on an old configuration. Apply any pending maintenance actions on the instance before proceeding with the upgrade.

如果遇到此错误,请等待待处理操作完成,或者立即触发维护时段,让之前的升级完成。

有关升级引擎版本的更多信息,请参阅维护 Amazon Neptune 数据库集群。如果您有任何问题或疑问,可通过社区论坛和 AWS Premium Support 联系 AWS Support 团队。