当前位置:

首页 > 系统应用 > 从多区域AWSAPI中移除隐藏的往返请求

从多区域AWSAPI中移除隐藏的往返请求

本文目录

    直到最近,亚马逊云科技全球路由服务的每个新客户端会话都会以一个请求开始。该请求的唯一目的是确定应使用哪个 AWS 区域进行身份验证。我们采用这一临时解决方案多年,直到最近才将其移除。推动我们这样做的原因并非出于延迟方面的考虑,而是源于一系列区域性服务中断事件。我们构建服务时的限制条件本文将要介绍的是

    直到最近,亚马逊云科技全球路由服务的每个新客户端会话都会以一个请求开始。该请求的唯一目的是确定应使用哪个 AWS 区域进行身份验证。我们采用这一临时解决方案多年,直到最近才将其移除。推动我们这样做的原因并非出于延迟方面的考虑,而是源于一系列区域性服务中断事件。

    我们构建服务时的限制条件

    本文将要介绍的是由我和我的团队在亚马逊云科技内部运行的一项用户设置服务。该服务供其他需要快速、低延迟访问用户设置的亚马逊云科技团队在内部使用。我们的服务存储着在应用程序启动时会被调用的用户状态,可以将其看成是无论用户身处何地都需要快速加载的设置。该服务的架构如下:在两个区域内部署 API Gateway(APIGW)REST API,配置基于延迟的 Route 53 路由,并让基础设施自动决定流量的着陆点。

    在集成 AWS Identity and Access Management (IAM) 时,我们遇到了一个限制。由于我们是按身份存储设置,所以需要在 APIGW 中使用 IAM 身份验证。当时,唯一的选择是使用 AWS Signature Version 4 (SigV4)。

    SigV4 是专门用于受 IAM 保护的 API Gateway 请求的身份验证方案。它会把每个已签名请求牢牢绑定到特定的服务和区域。签名时,区域信息会直接写入凭证作用域。换句话说,如果一个请求是按 us-west-2(俄勒冈)签的,却跑到了 eu-west-1(爱尔兰),那在加密层面上就已经不成立了。请求甚至还没来得及被处理,签名验证就会先一步失败。

    这种区域绑定限制导致了一种权衡:我们希望让基础设施(DNS 服务 Route 53)来决定由哪个区域提供服务,但客户端必须先确定一个区域,才能构建出有效的请求。因此,我们围绕这一限制构建了我们的服务。

    作为临时解决方案,我们实现了一个云区域上线前的探测步骤。首先,客户端会调用一个轻量级的 DiscoverRegion 端点。由于其唯一作用是返回区域名称,所以不需要身份验证。这样可以确定哪个区域“最近”,将该结果缓存起来,然后使用 SigV4 对该区域内的所有后续调用进行签名。总体而言,初始请求时需要发送两个请求才能完成一项操作。

    这成为了我们的生产架构,并且多年来运行良好。然而,us-east-1(北弗吉尼亚)地区发生的一系列事件,包括网络问题(2021 年 12 月)、Lambda 故障(2023 年 6 月)和 DynamoDB 故障(2025 年 10 月),直接影响了我们的服务。由于我们依赖 API Gateway、Lambda 和 DynamoDB,尽管该服务在架构上是全球性的,但我们无法将流量从受影响的区域转移出去。那些已完成区域发现并为 us-east-1 签署请求的客户端,在加密层面上与该区域绑定了。如果将请求重定向到 us-west-2,针对 us-east-1 的 SigV4 签名将失效。唯一的恢复途径是重新执行发现流程。

    这些事件促使我们在 2025 年第四季度对设置服务进行了重构,实现了区域级弹性,而“发现”步骤以及其所需的客户端区域固定机制却成了障碍。当时,非对称签名第 4 版(SigV4a)已经推出有一段时间了(于 2021 年第三季度发布);只是在此之前,我们根本没有理由采用它。

    我们从跟踪记录中发现了什么

    把请求流程放到整体重构里一并分析后,延迟带来的变化就很清楚了。看第 90 百分位(p90):当用户和被发现的端点处在同一区域时,新客户端会话的 DiscoverEndpoint 延迟大约在 75–100 毫秒。可一旦进入常见的跨区域场景,比如用户在 us-west-2,而端点在 us-east-1,距离不算远,也绝谈不上近,DiscoverEndpoint 的 p90 延迟就会抬升到约 315 毫秒。至于最坏情况,例如 us-west-2 的用户去访问 ap-south-1(孟买),p90 延迟更是直接飙到 1 秒。

    虽然这可以归因于多种因素,例如客户端往返时间、区域路由效率低下、网络连接速度慢等,但我们仍然希望避免这类请求往返,并以此来降低延迟。

    当架构稳定,而且除了构建新的全球服务之外没有其他明显的替代方案时,这种延迟开销还算是一个可以接受的折中方案。然而,在服务中断事件发生后,我们得知 SigV4a 可以完全省去发现步骤。因此,在重新设计的全球服务中,我们就不愿意继续保留每个新会话 100 毫秒的延迟了。

    延迟数据显而易见,但成本不限于此,只有当我们开始围绕这些成本进行设计时,它们才变得清晰。

    客户端状态。一旦客户端将某个区域设为固定区域,它就会在整个会话期间保持该选择。如果该区域在发现调用后出现性能下降,客户端的签名请求就会开始失败——此时重试逻辑必须检测到这一情况,使缓存的区域失效,并在重试原始调用之前重新执行发现操作。这一失败路径比看起来要复杂得多。

    运行态耦合。为实现全局故障转移而进行的设计,意味着我们需要在区域之间干净利落地切换流量。这就要求更新发现端点的响应,并确保客户端能在合理的时限内获取到新的选择结果。在稳态运行期间,发现层原本只是一个次要的细节,如今却直接成了故障转移设计的关键路径。

    客户端库的复杂性。由于要将该服务对外开放给多个内部调用方,所以我们发布了一个封装了服务发现和签名功能的客户端库。该库需要管理区域缓存的生命周期、重试逻辑以及凭证作用域。这绝非简单的抽象。

    具体流程如下:客户端调用 GET /discover(无需身份验证),返回一个区域名称(如 us-west-2),随后对该区域的 POST /settings 请求进行签名并发送。身份验证需要两次往返。发现步骤通常不会出现在大多数架构图中——它位于客户端库内部,但总会增加延迟。

    图 1:SigV4 流程——客户端首先调用 DiscoverRegion 端点,缓存返回的区域,然后对绑定到该单一区域的请求进行签名并发送(图片由作者制作)

    SigV4a 改变了什么

    AWS Signature Version 4A(SigV4a)改变了签名范围。SigV4a 签名对一组区域有效,而非仅对单一区域有效。之所以能够实现这一点,是因为 SigV4a 使用的是 ECDSA-P256(一种非对称椭圆曲线签名算法),而非 HMAC-SHA256:使用这种非对称模型,服务不用确切地知道生成该签名的区域就可以进行验证签名,只要该签名对允许的区域集有效即可。

    因此,客户端在对请求进行签名时,不再需要事先知道目标区域。它可以针对声明的区域集进行一次签名,然后发送至全局入口点。全局基础设施(例如 Route 53 或 Global Accelerator)会解析出实际的端点。无论最终由哪个区域的部署来处理该请求,该请求在加密层面上始终是有效的。

    图 2:SigV4a 流程——客户端针对一组区域进行一次签名,并将签名发送至全局入口点,该入口点会将其路由至最近的正常运行区域(图片由作者制作)

    切换完成后,客户端针对区域集 {us-west-2,eu-west-1} 给一个 POST /settings 请求签名,并将其发送至全局入口点(https://global.settings.service——这是一个基于延迟的路由端点,而非 https://region.settings.service)。Route 53 负责解析目标。客户端永远不会知道是哪个区域处理了该请求,也不需要知道。此外,全局入口点也可以是一个 CloudFront 目标,这样就可以将请求引入亚马逊的骨干网,并在其网络内部进行高效地路由。重试逻辑也变得更简单了——如果请求失败,只需要重试即可。由于签名在两个区域都有效,所以基础设施可以在客户端不知情的情况下将重试请求路由到其他地方。

    此次迁移实际涉及的内容

    我们之前架构中的区域发现步骤并非疏忽所致。在构建该服务时,SigV4 是唯一可用的选项,而当时采用的变通方案是正确的决定。此次迁移并非在纠正错误,而是利用了初始设计时尚不存在的一项功能。

    签名机制的变更本身微乎其微。在库的层面上,主要区别在于:不再需要在签名时锁定单个区域字符串,而是声明一个区域集合:

    // SigV4:  为一个区域签名 —— 必须匹配目标区域sign (request, region= "us-west-2")// SigV4a: 为区域集签名 —— 基础设施解析目标区域sign (request, regionSet= ["us-west-2", "eu-west-1"])
    复制代码

    区域集只是一个列表——它可以小到仅包含两个相邻的区域,用于 Active-Passive 故障转移;也可以限定为单个地理区域(例如:所有欧盟的区域),以满足数据驻留的要求。它还支持通配符,例如 X-Amz-Region-Set=us-west-*,此时请求可以在 us-west-1(旧金山)或 us-west-2(俄勒冈)中发起。除此之外,SDK 调用的结构完全相同。如果你的签名逻辑封装在客户端库中(我们的就是如此),那么差异仅集中在一个地方。

    困难之处在于部署,而非代码本身。由于有多个内部团队依赖我们的客户端库,所以我们无法一蹴而就:保持现有的 SigV4 端点不变,我们并行部署了一个与 SigV4a 兼容的新端点。虽然 SigV4a 本身并不严格要求创建新端点,但此举使得迁移过程更易于理解:新设计将区域发现和手动路由整合为单个全局入口点,为未来的工作(如 IPv6)提供了更简洁的 DNS 架构,同时也与更广泛的安全驱动型基础设施变更(新的 API 网关部署在不同的 AWS 账户中)相契合。

    两个端点并行运行。我们新发布了客户端库的一个大版本。该版本采用 SigV4a 签名并指向新端点,同时开展了一项迁移活动:在内部渠道发布公告,并直接联系调用量较大的团队,提前充分沟通了弃用时间表。并行运行期持续了约三个月,我们通过服务指标跟踪了各个库版本的采用情况——观察随着各团队进行更新,SigV4 与 SigV4a 请求的比例变化。

    此次部署遇到的问题主要与流程相关,而非算法问题。

    首先,部分客户的环境中存在企业防火墙或网络控制措施。这些措施将旧域名列入了白名单,但未将新域名列入。在更新这些白名单之前,发往新端点的请求会被静默丢弃。

    其次,并非所有团队都在使用我们提供的 SDK 客户端。有些团队实现了自定义签名逻辑,需要直接联系。这时仅更新库依赖关系是不够的。

    第三,SDK 版本管理成为了一项实际限制。部分客户端仍然在使用旧版 SDK,若不先进行许多无关的重构以升级到新版,则无法支持 SigV4a。

    当旧端点的流量降至可忽略不计的水平,且剩余调用方已确认迁移计划后,我们将其连同 DiscoverRegion 端点一同退役。整个迁移过程历时约六个月:构建并部署 SigV4a 端点耗时约三个月,随后又花了三个月进行并行运行以及完成调用方迁移。技术变更本身微乎其微,但协调成本却不容小觑。

    迁移完成后,我们确认,发现过程的往返延迟已不复存在。我们并未测量 ECDSA 签名与 HMAC 的 CPU 开销——在现代硬件上,前者耗时不足一毫秒,与网络往返延迟相比根本不值一提。

    在哪些情况下 SigV4 仍然是最佳选择

    SigV4a 并非一个通用的改进方案。它解决的是一个特定的问题——在签名时不知道目标区域的动态路由。如果你的系统中不存在这个问题,那么 SigV4 将是一个更简单的解决方案。

    首先需要确认的一个硬性限制是:并非所有 AWS 服务和 API 类型都支持 SigV4a。例如,S3 虽然支持 SigV4a,但仅限于多区域访问点,而不支持标准区域端点。支持 IAM 身份验证的 API Gateway REST API 支持 SigV4a;而 HTTP API 则不支持。在评估 SigV4a 是否能从架构层面解决你的问题之前,请先确认你所使用的具体服务和端点类型是否接受 SigV4a 签名。

    SigV4a 的支持范围可能比你预想的要窄。当缺少支持时,它会返回 403 错误,而且其中不会提供任何有用的诊断信息。

    何时使用 SigV4 :

    • 你正在使用的 AWS 服务或 API 类型不支持 SigV4a。

    • 你的服务部署在单个区域中,或者客户端始终针对已知的稳定区域。

    • 受监管要求或数据驻留要求限制,请求必须限定在单个特定区域内——在这种情况下,SigV4 的区域范围限定是一项功能,而非限制。

    • 你的客户端工具不提供可靠的 SigV4a 支持。

    何时考虑 SigV4a :

    • 你正在使用的服务明确支持此功能。

    • 客户端进行预检发现步骤,纯粹是为了满足区域范围内的身份验证要求。

    • 你正在跨区域构建基于延迟的路由或 Active-Passive 故障转移方案。

    • 简化客户端实现(移除区域缓存状态)是一个有意义的目标。

    是什么让这件事值得去做

    在构建该服务时,采用发现步骤是正确的决策——当时,SigV4 是唯一的选择,而且多年来一直运行良好。当区域性故障迫使我们认真对待全球故障转移时,迁移工作才开始变得值得一做,而发现步骤恰恰成了阻碍这一进程的障碍。

    核心问题在于耦合:SigV4 的区域范围模型迫使客户端做出本应由基础设施负责的路由决策。SigV4a 消除了这一限制。如果你的客户端正在执行一个预检步骤,而该步骤的唯一目的是确定应为哪个区域进行签名,那么这就是信号。该步骤的存在源于身份验证模型,而非因为它本身能带来什么附加价值。

    本文内容来源于网友投稿,如有侵权请联系删除。
    作者最新文章
    系统应用
    相关文章 更多
    docker容器自动重启怎么解决 排查原因与修复方法
    docker容器自动重启怎么解决 排查原因与修复方法

    遇到Docker容器频繁自动重启?本文提供从查看容器日志、解读退出代码到配置Restart Policy的完整排查与修复方案,确保服务稳定性。

    Linux设置静态路由命令与永久生效教程
    Linux设置静态路由命令与永久生效教程

    学习如何在Linux中使用命令行添加临时静态路由,并通过修改网络配置文件实现重启后依然有效的永久静态路由设置,涵盖CentOS和Ubuntu的不同配置方法。

    摄像头连接电脑后怎么打开查看实时画面教程
    摄像头连接电脑后怎么打开查看实时画面教程

    摄像头连接电脑后不知如何查看画面?本教程演示如何使用Windows自带的“相机”应用快速调取实时视频流,无需下载额外软件,步骤简单直观,适用于大多数USB及内置摄像头。

    如何在 windows 11 关闭自动关机
    如何在 windows 11 关闭自动关机

    针对 Windows 11 电脑在无人操作时自动关机或重启的问题,本文详解如何通过任务计划程序禁用更新重启任务,并调整电源睡眠策略,从根源解决非预期的自动关机现象。

    电脑摄像头怎么测试人脸识别功能及效果判断方法
    电脑摄像头怎么测试人脸识别功能及效果判断方法

    详细讲解在Windows电脑上测试摄像头人脸识别功能的步骤,包括开启Windows Hello、录入面部数据、不同环境下的效果验证及常见问题排查,帮助用户确认设备兼容性与识别准确率。

    docker 容器无法启动的配置检查命令及排查方法
    docker 容器无法启动的配置检查命令及排查方法

    当 Docker 容器启动后立即退出时,不要盲目重启。本文详解如何通过 docker logs 查看标准输出错误,利用 docker inspect 检查挂载与网络配置,并修正入口点脚本权限问题,提供一套高效的因果排查流程。

    安卓手机投屏到电脑win10怎么设置教程
    安卓手机投屏到电脑win10怎么设置教程

    详解如何利用Windows 10自带功能将安卓手机画面投射至电脑屏幕,涵盖开启步骤、连接技巧及延迟分析,适合临时演示与多屏协作场景。

    移动硬盘解除加密怎么操作?详细步骤教程
    移动硬盘解除加密怎么操作?详细步骤教程

    详细介绍如何在Windows系统中为移动硬盘解除BitLocker加密,包括解锁驱动器、关闭加密功能及监控解密进度的完整操作流程,帮助用户安全移除数据保护。

    笔记本电脑耳机没声音怎么设置?Windows 10解决方法
    笔记本电脑耳机没声音怎么设置?Windows 10解决方法

    本文详解Windows 10笔记本耳机无声音的常见原因与解决方法,涵盖物理接口检查、默认播放设备切换、驱动程序更新及音频增强关闭等操作,并分析蓝牙耳机连接异常的例外场景。

    sata固态硬盘安装win10系统怎么分区详细教程
    sata固态硬盘安装win10系统怎么分区详细教程

    还在为SATA固态硬盘装Win10怎么分区头疼?本教程详解安装过程中的分区步骤,涵盖4K对齐检查、ESP引导分区处理及容量规划建议,助你一次性搞定系统盘,避免后期卡顿与空间浪费。

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    macOS软件
    macOS软件

    正软商城macOS软件专区,精选适用于Mac电脑的办公、设计、影音、效率、开发和系统工具,提供软件功能介绍、macOS兼容版本、正版授权及购买下载服务。

    Mac软件 更多
    Blender
    Blender
    Windows、macOS 和 Linux

    Blender 是一款免费开源、跨平台的专业 3D 创作软件,集建模、动画、渲染、视频编辑与视觉合成等功能于一体,广泛应用于影视动画、游戏设计和建筑可视化等领域。软件支持 Cycles 物理渲染器与 Eevee 实时渲染引擎,并提供多边形建模、骨骼绑定、物理模拟等专业工具。Blender 兼容 Windows、macOS 和 Linux 系统,安装包轻巧、运行流畅,依托活跃的全球开发者社区持续更新,是从初学者到专业创作者都值得选择的正版 3D 创作工具。

    灵活计算器
    灵活计算器
    macOS/iOS/Android

    灵活计算器是一款笔记式算数应用,支持实时计算、动态关联和云端同步功能。记录、整理和输出之间的过渡会更自然,适合长期写作、做笔记或持续沉淀个人内容。

    赤友清理大师
    赤友清理大师
    macOS

    赤友清理大师是一款为 Mac 设计的智能清理优化工具,可精准扫描垃圾、大文件、重复文件等,释放磁盘空间。做扫描整理、文字提取和表格转换时,它能把识别后的处理步骤接得更顺,资料录入这类场景会省下不少时间。

    WINDOWS 更多
    Blender
    Blender
    Windows、macOS 和 Linux

    Blender 是一款免费开源、跨平台的专业 3D 创作软件,集建模、动画、渲染、视频编辑与视觉合成等功能于一体,广泛应用于影视动画、游戏设计和建筑可视化等领域。软件支持 Cycles 物理渲染器与 Eevee 实时渲染引擎,并提供多边形建模、骨骼绑定、物理模拟等专业工具。Blender 兼容 Windows、macOS 和 Linux 系统,安装包轻巧、运行流畅,依托活跃的全球开发者社区持续更新,是从初学者到专业创作者都值得选择的正版 3D 创作工具。

    Windows 10
    Windows 10
    Windows

    Windows 10 是一款微软推出的经典操作系统,拥有硬件兼容性与多任务处理能力。它更偏向把系统状态查看和常用调节动作放在一起,适合需要持续观察和微调设备状态的场景。

    极度公式
    极度公式
    Windows/macOS/Linux

    极度公式是一款跨平台专业LaTeX公式识别编辑软件,支持OCR公式识别和多平台编辑。和使用说明,避免使用,享受完整功能与稳定支持。做扫描整理、文字提取和表格转换时,它能把识别后的处理步骤接得更顺,资料录入这类场景会省下不少时间。