曾海剑-大规模DevOps云原生转型血泪史-20241106.pdf

1、大规模DevOps云原生转型血泪史曾海剑广东移动云原生总架构师 目 录contents01转型血泪史02踩坑分析03减负与规模化实践PART 01转型血泪史GOPS 全球运维大会 2024 深圳站第三方开发模式背景团队众多上百个不同的合作商的开发团队水平参差人员分散变动频繁分散在不同合作商办公环境远程开发各团队开发人员水平参差不齐由于每年投资缩减，人员变动大，普遍技能水平低开发团队GOPS 全球运维大会 2024 深圳站阶段1：开源+放养（技术方案）l 一套云原生环境：K8S+CephFSl 全套DevOps工具：代码仓库：Gitlab流水线：Jenkins镜像仓库：Harbor制品仓库：Ne

2、xus代码扫描：SonarqubeGOPS 全球运维大会 2024 深圳站阶段1：开源+放养（实施方式）问 题过 程建平台选试点做培训投入大整合难没人用搭戏台没人用GOPS 全球运维大会 2024 深圳站阶段2：开源+保姆（技术方案）l 三套云原生环境：测试环境（SIT）预发环境（UAT）生产环境（PROD）x2l 三条流水线：develop：发布到SIT环境master：发布到UAT环境release：发布到PROD环境GOPS 全球运维大会 2024 深圳站阶段2：开源+保姆（实施方式）问 题过 程帮编写帮配置帮调试累瓶颈复制难当保姆小规模GOPS 全球运维大会 2024 深圳站阶段3：商

3、用+外援（技术方案）l 商用的云原生技术底座l 商用的全套DevOps工具自建自维外部支持手工编写自助配置愿景GOPS 全球运维大会 2024 深圳站阶段3：商用+外援（实施方式）问 题过 程买产品买培训买支持配置工作量大培训成本高严重依赖供应商找外援小规模PART 02踩坑分析GOPS 全球运维大会 2024 深圳站问题分析：团队角度常 态团队没有DevOps和云原生技能开发/运维人员本来的工作量就很大理解好需求，编写好程序才是开发人员的本职工作6-7k薪酬的现实，做不出20-30k薪酬的效果源 头开发人员是价值创造的源头开发人员最了解自己开发的应用应该如何编译、打包和部署DevOps平台首

4、先应该为开发人员服务外 援团队不会只能靠专家把团队教会团队不想只能靠专家下手干但不是每个企业都有能力承担引入或者培养专家的成本GOPS 全球运维大会 2024 深圳站问题分析：团队角度转型难负担认知负担工作负担GOPS 全球运维大会 2024 深圳站问题分析：技术角度现有开源方案优 势劣 势灵活：很多功能都可以通过编程实现灵活：很多功能都需要通过编程实现面向专家GOPS 全球运维大会 2024 深圳站问题分析：技术角度现有商用方案优 势劣 势配置：用界面配置代替编程封装：对开源工具做了整合与封装支持：有供应商提供的专家团队支持配置工作量大培训成本高支持和定制严重依赖供应商面向专家开源封装GOP

5、S 全球运维大会 2024 深圳站问题分析：总结开源方案商用方案租户想要的自己动手带着施工队租房拎包入住PART 03减负与规模化实践GOPS 全球运维大会 2024 深圳站工具平台设计思路学习k8s学习DevOps编写/配置/调试工作量认知减负工作减负不用学不用写不用配GOPS 全球运维大会 2024 深圳站阶段4：自研+自助Dory-Engine：开源的面向开发人员的远程开发环境GOPS 全球运维大会 2024 深圳站远程开发模式研发过程迁移无运维参与基于DORY部署基于容器调测（serverless）配额隔离GOPS 全球运维大会 2024 深圳站架构GOPS 全球运维大会 2024 深

6、圳站演示GOPS 全球运维大会 2024 深圳站规模化应用成果跨省市/跨部门外包开发/自主开发 合作开发商 26 开发人员 1400+业务系统 120+代码仓库 130+微服务种类 800+环境种类包括：开发调试/预发/生产/异地容灾接管k8s集群 16 节点数 800+CPU架构跨X86/ARM64跨开源/国产k8s产品 跨v1.18.x-v1.31.xk8s版本接管GPU算力集群 3 部署Pod 3000+平台运营团队（自有人员）2 平台教练团队（外包人员）3GOPS 全