参考来源与致谢
- 引用来源:京东从OpenStack切换到Kubernetes的经验之谈
- 原作者:原页面署名作者或发布机构(剪藏记录未保存可核验的个人署名)
- 感谢词:感谢原作者及发布机构对技术知识的公开分享。本文已结合企业运维场景完成脱敏、核验与原创重写,并非原文转载;如权利人需要更正署名或来源信息,请联系本站。
适用场景 #
已有基于 OpenStack 管理容器的平台,容器规模持续增长,出现以下问题时,可考虑迁移到 Kubernetes:
- 应用部署仍依赖物理机时代的编译打包、自动部署工具,容器启动后还需分发配置,启动慢。
- 线上线下环境不一致,镜像难以做到“一次构建,随处运行”。
- 调度方式单一,仅按物理机剩余资源筛选,资源利用率遇到瓶颈。
- 扩容缩容、高可用依赖人工运维,难以在平台层统一实现。
迁移目标不是替换 IaaS,而是构建直面应用的容器引擎:以镜像为中心,打通源码到镜像再到上线部署的流程,统一日志、监控、排障、编排能力。
准备与风险 #
迁移前必须完成以下准备,否则风险不可控:
- 备份:备份现有 OpenStack 集群配置、网络与存储配置、镜像仓库数据、CI/CD 流水线定义。备份需在独立存储上验证可恢复。
- 测试环境:先在非生产环境搭建目标 Kubernetes 集群,验证网络、存储、镜像构建、负载均衡、DNS 解析等链路。
- 回退方案:保留原 OpenStack 平台可运行状态,明确回退触发条件与操作步骤,确保业务可切回。
- 分批迁移:按 IDC 或业务域分批,先迁非核心业务,再迁核心业务。
破坏性操作(如删除旧集群、清理存储卷、变更网络配置)前,必须确认备份可用、测试环境验证通过、回退路径明确。生产环境变更建议在维护窗口执行。
参数一律使用占位符,例如 [服务器地址]、[管理员账号]、[镜像仓库地址]、[集群名称],避免在文档或脚本中写入真实凭据。
处理步骤 #
1. 梳理现状与痛点 #
盘点现有容器数量、应用类型、依赖的配套工具、网络与存储方案。明确哪些能力必须保留,哪些可以重构。常见痛点包括部署链路长、环境不一致、调度不灵活、资源利用率低。
2. 设计目标平台架构 #
以 Kubernetes 为核心,整合原有存储与网络方案。定义系统与应用两级模型:一个系统对应一个 namespace,一个应用对应一组提供相同服务的容器实例。应用层管理版本、域名解析、负载均衡、配置文件。
3. 打通以镜像为中心的 CI/CD #
通用流程如下:
- 开发者提交代码到源码库。
- 触发构建任务,生成构建 Pod。
- 构建 Pod 拉取源码,编译打包。
- 将产物与 Dockerfile 发送到构建节点,构建镜像。
- 推送镜像到镜像仓库。
- 按环境创建或更新应用容器。
关键变化:应用部署在镜像构建阶段完成,镜像包含完整软件栈,实现开箱即用,减少对旧自动部署工具的依赖。
4. 集成网络与外部负载均衡 #
可沿用原有 VLAN 网络方案,每个 Pod 占用一个网络端口并拥有独立 IP。基于 CNI 标准开发集成组件,将 Kubelet 与网络服务对接。当创建、删除或修改 LoadBalancer 类型 Service 时,由集成组件调用底层负载均衡接口,实现外部服务负载均衡。同时提供集群内部 DNS 解析。
5. 配置灵活调度 #
按应用类型设置不同资源限制,并打上不同标签。基于标签实现多样调度策略。在线与离线任务可在部分 IDC 实验性混合部署,以提升资源利用率。具体提升幅度取决于业务负载特征,需以实际压测与监控数据为准。
6. 分批迁移业务 #
按 IDC 分批,先迁非核心,再迁核心。迁移过程中推动业务方关注应用服务而非单个容器:容器 IP 不固定,服务发现应使用域名、负载均衡或服务自注册,避免依赖容器 IP。
验证方法 #
- 功能验证:应用可正常构建镜像、部署、启动、对外提供服务。
- 网络验证:Pod 间通信正常,Service 负载均衡生效,内部 DNS 解析正确。
- 调度验证:标签与资源限制按预期生效,扩容缩容可秒级完成。
- 稳定性验证:在测试环境进行长时间压力与稳定性测试,观察容器与节点异常。
- 监控验证:日志、监控、告警链路完整,可定位到具体应用与实例。
验证通过后再扩大迁移比例。具体版本支持范围与参数含义,请查阅对应版本官方文档。
回退建议 #
- 保留原 OpenStack 平台与旧部署工具,迁移期间双轨运行。
- 按批次记录迁移清单,出现严重问题时按批次回退。
- 回退前确认数据一致性,尤其是存储卷与配置数据。
- 回退操作同样需在维护窗口执行,并提前通知业务方。
常见问题 #
容器 IP 不固定,服务发现怎么做? #
不要以容器 IP 作为主要标识。使用域名、负载均衡或服务自注册方式。平台可提供智能域名解析与高性能负载均衡服务配合 Kubernetes。
旧工具链还要不要保留? #
迁移期可保留,但应逐步将部署动作前移到镜像构建阶段,减少运行时依赖。
OpenStack 与 Kubernetes 运维复杂度差异? #
OpenStack 涉及多个项目与组件,组件间通过消息队列通信,还需考虑扩展与备份,排查定位难度较高。Kubernetes 组件较少、功能清晰,声明式 API 与标签机制便于平台层统一管理。实际复杂度仍取决于具体部署规模与集成方案。
大数据、机器学习等离线计算如何接入? #
可采用单独划分区域的方式,各自使用相对独立的计算资源,但纳入统一平台管理。是否混部需结合业务优先级与资源隔离要求评估。
