用途:帮助把自建 Apache Kafka(本地、EC2、Docker、Kubernetes 等非 MSK 部署)迁移到 Amazon MSK Express。范围不含从 MSK Standard(Provisioned)迁至 MSK Express。
主要阶段:
- 发现:盘点源集群的 broker、topic、分区数、配置、认证与负载指标,并收集消费端机架亲和性、AWS 议价等影响成本的目标决策。输入可为 IaC 文件(Terraform、CDK、Docker Compose、Kubernetes 清单)、Kafka CLI 输出或手工信息,输出 migrate-to-msk-skill-artifacts/<cluster_name>/cluster-config.json。
- 评估:按拓扑、Kafka 版本、配置、认证、配额五个维度校验兼容性,并生成目标 Express 规格。输出 compatibility.<cluster_name>.json、msk_sizing_pricing.md、msk-sizing-inputs.<cluster_name>.json。
- 模拟(可选):在客户账户中部署临时隔离的 MSK Express 集群与压测设施,运行端到端延迟或负载下 broker 重启测试,并查看 CloudWatch 仪表盘。
使用方式:脚本通过 uv run 在本地运行,采用 PEP 723 内联依赖,属纯文件处理器,不调用 AWS API、不联网、仅用标准库。可先说明从哪一阶段开始。数据复制可用 MSK Replicator。
安全建议:传输中加密(TLS)、静态加密(KMS)、优先 IAM 认证、凭据存于 Secrets Manager、私有子网部署、启用 CloudTrail 与 CloudWatch 告警,并妥善处理发现与评估输出中的敏感信息。
限制:从 MSK Standard 迁移不在范围内;评估在部分数据缺失时仅输出 ADVISORY 提示而不补全数据;broker 数与成本须原样引用规模脚本输出,不得估算;未提供具体命令细节与官方文档链接以外的内容。