最初发布于metalbear.com。

在 ECS 上,判断一项改动是否生效的通常做法是把它部署上去。你构建镜像、推送镜像、注册新的任务定义修订版本、等待 rollout 并观察发生了什么,如果不对就再来一遍。这样的循环对人类来说或许还能接受,但编码智能体几秒钟就能写完一项改动,然后要等一次完整的 rollout 才知道它是否生效,而且它很少能一次就成功。你从智能体那里获得的绝大部分速度提升,最终都花在了等待 rollout 上。

今天我们推出面向 ECS 的 mirrord。你的代码现在可以运行在你的笔记本电脑、CI runner 或编码智能体的沙箱中,就像它是你预发布环境中的一个实时任务一样,拥有该任务的网络、环境变量和 IAM 任务角色。它能访问与已部署服务相同的数据库、队列以及内部和外部 API。只有携带你的会话标头的请求才会被送到它这里,因此你、你的队友和你的智能体可以各自同时运行自己版本的服务,共用你们已经在用的预发布环境。你只需运行代码就能知道改动是否生效,无需部署任何东西,也无需自建环境。

为什么这在 ECS 上此前无法实现

这一类别中的每一个工具,包括 Telepresence、Signadot 和 mirrord,都是基于 Kubernetes 构建的,并且主要依赖它做两件事:

  • Kubernetes 允许工具把自己的组件放到你的服务旁边
  • Kubernetes API 为开发者的笔记本电脑提供了访问该组件的途径,并由 RBAC 控制

ECS 这些都没有。你无法向正在运行的任务中添加容器,也没有在任务启动时添加容器的钩子。AWS 提供了打开 shell 或向任务转发端口的方法,但没有任何方法能把任务的流量发送到你的机器上,也没有一个笔记本电脑和任务都能访问并认证的共享 API。为了让 mirrord 在 ECS 上工作,我们必须自己构建进入任务的通道,以及自己构建将你的机器连接到该任务并对双方进行认证的方式。

我们构建了什么

你为每个服务的任务定义添加一个小型 setup 容器,并部署一次。此后它就一直保留在原位,因此你无需为了测试改动而重新部署,只需在更新 mirrord 本身时才重新部署。任务启动时,setup 容器会把 mirrord 加载到你的应用容器中,在那里它以应用的网络和环境运行。你的镜像保持不变。

为了连接两端,你的机器和任务各自向一个我们称为 sessions-manager 的组件发起出站 HTTPS 连接,该组件将它们配对并在两者之间中继流量。你的机器和任务都不需要为此接受入站连接,因此你无需开放任何新端口。

Architecture diagram: a client calls a public load balancer, which routes to an ECS task on Fargate inside an AWS VPC. mirrord runs inside the task's app container, next to the unchanged orders app (v1), which talks to an RDS Postgres database with no public endpoint. The task and the developer's machine or agent sandbox, running orders app v2, each connect out over HTTPS to the sessions-manager in MetalBear Cloud.
用于 ECS 的 mirrord,配合 MetalBear Cloud 中的 sessions-manager。mirrord 在你的应用容器内运行,任务和你的机器都向外连接到 sessions-manager,因此你的本地代码可以通过该任务访问私有数据库。

你可以选择 sessions-manager 的运行位置:在你自己的 Kubernetes 集群中,或托管在 MetalBear Cloud 中。无论哪种方式,会话流量都通过 HTTPS 经过它,并且你的任务和开发者都必须对它进行身份认证。安全细节见文档。

设置完成后的样子

此后,你或你的智能体在本地启动该服务,使用mirrord up,然后用你的会话头发送请求到该服务通常的 staging 地址:

mirrord login
mirrord up --key $USER

# 从另一个终端,或从你的智能体
curl -H "baggage: mirrord-session=$USER" https://orders.staging.example.com/orders

你用以下方式选择会话键--key。携带该键发往 staging 的请求会转到你的机器,其他人的请求仍然发往已部署的任务。你的代码的出站调用从任务内部发出,因此它们能到达只有该任务才能访问的私有数据库和内部 API,并且你的本地进程以任务的环境和 IAM 任务角色运行。出问题时,你只需修改代码并再次运行,中间无需构建或发布任何东西。

Request routing diagram: two requests go through the load balancer to the ECS task. mirrord in the app container checks each one. The request with the baggage header mirrord-session set to your key goes through MetalBear Cloud to the orders app v2 on your machine or agent sandbox. The request without the header is served by the deployed orders app v1.
mirrord 会检查每个请求的会话头。带有你的键的请求会转到你机器上或你智能体沙箱中的代码;其他所有请求照常由已部署的任务处理。

试一试

从以下地址开始metalbear.com/mirrord/ecs。ECS 示例应用使用 Terraform 在一个私有 RDS 数据库旁边部署一个小型服务,然后带你了解如何在本地针对该数据库运行这个服务。

如果你在其他平台上,Lambda、Cloud Run、Vercel 和 Cloudflare 都在等待名单上,你可以在那里告诉我们你需要哪一个。