中国移动“行云”自动化平台合作案例集（2021-2022版）

(2021-2022版） 1 中国移动研究院 目录 前言3 效能提升永无止境，“行云”的持续探索与实践4 “行云”助力中国移动省公司敏捷创新实践7 协同互补、深度合作，设计院“探云”平台与研究院“行云”对接落地1 “行云”平台助力中移物联网公司Open-Sigma项目Web自动化测试1 中移集成借助AUTO推动云网基础设施快速落地2 中国移动与华为携手合作共同推进云化网络自动化集成能力3 中兴通讯助力中国移动推进AUTO自动化集成4 爱立信积极支持中国移动AUTO自动化能力提升5 中国移动携手新华三：从云到网，以合作共进加速行云创新6 浪潮助力中国移动网络云资源池建设7 长江计算加速中国移动云网自动化建设8 超聚变助力中国移动“三朵云”基础设施建设走向自动化9 神州数码全力支持中国移动“行云”平台建设10 曙光助力中国移动云网建设自动化11 迈普助力“行云”自动化集成稳步推进12 实现网络转型，英特尔及其合作伙伴助您一臂之力13 联想支持中国移动云网自动化建设14 中国移动携手东信北邮推进5GC自动化集成测试15 触点互动助力中国移动AUTO5GC网元自动化测试演进16 思博伦助力中国移动加速自研UPF测试进程17 中盈助力中国移动云资源池高效建设18 荣联助力中国移动云网资源池高质量建设19 数字化是实现中国式现代化的战略引擎，也是重组全球要素资源和竞争格局的关键力量。中国移动主动融入、全面落实国家战略，推进数智化转型，加快高质量发展，勇做网络强国、数字中国、智慧社会主力军，向世界一流信息服务科技创新公司坚实迈进。 面对大规模、多样化、高复杂度和快速变化的市场需求给数字化基础设施建设带来的巨大挑战，中国移动积极开展基础设施自动化技术研发，全面支撑公司网络云、IT云的建设，并向边缘计算、5G专网、算力网络等领域稳步拓展。“行云”自动化平台由工具化向远程化、智能化持续演进，化繁为简，降本增效，大幅提升数字化基础设施建设的效率与质量。 中国移动研究院联合多家内外部单位，共享技术创新成果，共促产业合作共赢。本案例集介绍了2021-2022年间“行云”自动化平台的主要工作进展和内外部单位的合作案例，以期交流总结经验，相互学习促进，协同构建面向未来的基础设施自动化技术与产业新生态。 “行云”（AUTO）是面向中国移动云网基础设施软硬件系统集成、测试验证、建设交付等环节，致力于提升工程效能的自动化平台。目前已全面应用于中国移动各期网络云、IT云建设，并向边缘云、5G专网及算力网络等领域稳步拓展，累计服务19个省，近200个大规模资源池和近20万服务器，为提升中国移动云网基础设施建设效率与质量发挥了重要作用。 近两年来，研究院“行云”团队在前期成果的基础上，持续提升平台自动化水平，丰富面向不同场景的产品功能及交付形态，增强功能灵活扩展和按需定制能力，为不同使用者提供自助服务，逐步发展成为中国移动云网领域重要的共性基础能力和业界领先的基础设施自动化平台。 持续提升自动化水平 平台在前期工具化、远程化的基础上，经过大幅软件重构和流程优化，向现场“零接触”的无人化/智能化的阶段稳步迈进。在现场完成设备上架、连线、上电、设备序列号采集和自动化工具运行环境准备等简单操作基础上，后续所有自动化工具部署、资源池数据同步、交换机和服务器设备ZTP、验收测试用例执行及测试报告发送等所有操作，都由后台全自动进行，无需任何人工参与。 平台支持“随建随验”模式，项目可以按原有规划进度或操作习惯推进工程建设，自动化工具在后台“无感式”的完成自动化参数配置、固件升级、测试验收等相关工作，并随时提供最近进展和问题报告。这种“现场简单操作+后台全自动”无人化/智能化模式，最大限度提升了工程效率、减少了对现场人员及技能的需求。 覆盖更多应用场景 随着信息通信系统向平台通用化、架构云化转型，起源于网络云的AUTO行云平台的相关自动化能力，对IT云、边缘计算、5G专网和算力网络等技术评测和集成交付也同样适用。特别是在核心网领域在业界率先实现了全自动化的UPF、5GC的自动化测试以及5G专网系统的一键式自动化交付，彰显了中国移动网络转型过程中数字化能力的稳步提升。 “行云”平台以持续集成-持续测试-持续交付为理念，面向产品研发、实验室验证等多种场景，将原来建设交付阶段的集成验证前置，可支撑内外部产品研发、试验试点过程中的快速回归测试和多厂商集成验证，推动产品的迭代开发和快速成熟。目前这种模式已经在网络云实验室测试、服务器厂商BMC固件开发以及自研专网5GC产品等场景中得到广泛应用。 丰富多种产品形态 随着使用场景愈加丰富，平台针对不同规模、不同使用环境和不同功能要求，提供了多种产品形态和使用模式，例如部署形态上，既有包括微型服务器、LTE网络连接的“软硬一体式”的AUTOBox，也有基于容器微服务甚至单个exe可执行文件提供的纯软件形态；软件功能上，既有包括完整自配置、自测试功能且完全无人化自动运行的AUTOPro，也有通常只进行测试、需要人工单轮执行的AUTOLite；使用方式上，则提供Web界面、命令行和消息接口等不同的方式，方便不同用户使用或者被集成。 支持灵活扩展和按需定制 “行云”是面向多厂商集成而生，因此从一开始就高度重视面向可适配不同技术与产品实现方案，具备可灵活扩展、按需定制的能力来设计。基于合理设计、持续优化的自动化框架，平台可以在接口消息、命令行、报文解析、Web页面等基础自动化能力之上，快速构造面向各类通用硬件设备、云平台、MANO、SDN、MEP、UPF、算力网络等场景自动化能力。 按照自动化框架与设计数据、配置参数等相分离的原则，不同的数据与配置文件也按照IaC（基础设施即代码）的原则进行独立开发和版本管理，甚至以“低代码”方式开放给内外部合作伙伴参与研发。基于模块化设计和微服务部署，可以确保各种能力能够作为“插件”载入启用、独立升级，从而满足各类灵活扩展和按需定制要求。 提供自助服务能力 在平台以全自动“无人化”模式为主提供服务的过程中，面向实际工程中工具使用、数据更新、任务调度与结果查看等具体问题和不同需求，平台通过界面或接口提供了多种自服务能力。 例如，用户可自助式在线提交或更新设备序列号，提高已整改问题的复测优先级，这些自助操作即时生效，赋予现场人员对平台运行的一定的掌控力，极大减少了线下沟通成本和后台操作需求，受到使用者的一致好评。 广东公司 在2021年网络云三期建设项目中，广东公司工建团队在集团研究院“行云”团队大力支撑下，于华南大区湛江数据中心完成首个资源池从硬集到软集全过程自动化的交付新模式探索，并形成以硬集配置检查、软硬衔接配置、CI-CT部署等功能为主的一整套交付管理流程，广东公司申报并入选2021年度全国十佳工程建设实践案例。通过推广试用，验证“行云”自动化平台已具备一定的网络云自动化投产能力。 在2022年广东佛山OpenUPF现网试点试商用测试中，使用“行云”平台对OpenUPF产品进行一键式可视化安装及冒烟测试，将重复性的操作系统安装以及多达上百项的产品配置实现自动化完成，将交付时间由原来的3小时缩短至 1小时内，极大地提高产品交付效率与产品质量。 浙江公司 浙江公司作为集团信息技术中心一级IT云落地实施单位之一，为推进数智化转型、实现高质量发展，依托智慧中台引入了自动化集成与测试能力。工程项目通过应用AUTO自动化能力，2022年在宁波浙东、杭州湾两个节点6个POD完成了自动化测试验收，涉及服务器7800余台，网络设备1300余台，网络连 线6万余条，有效提升现场的硬集质量和整体交付效率。 2021年网络云三期硬集建设中，浙江公司使用“行云”平台进行自动化测试验收、软硬衔接配置以及CI-CT部署等，硬集测试平均单次检测耗时1-2小时，软集测试耗时2天（首次全量检测），平均每个资源池发现重点问题10-15个，集成团队以此进行整改，大幅提升交付质量，为顺利交付运维提供保障。同时，在宁波资源池仅用4天完成了软集CI-CT部署，是历时最短的一次 CI-CT部署，浙江公司愿意与研究院一起继续推进集成创新的落地的实践，提高网络云的集成自动化能力。 湖南公司 硬集自动化验收：网络云三期株洲节点工程共需新建7个资源池涉及3个 机房，新增计算、存储服务器5000余台，各类组网、安全设备1000余套。湖 南移动硬集团队针对此情景，采用“通用服务器+CPE”方式，采用了针对7个资源池各部署一套AUTO工具的策略，互不干扰实现各资源池的同步检测。AUTO工具接入网络后，硬集团队专人负责和施工一起进行随工随验，及时下载AUTO报告，根据报错梳理定位问题原因，使其整个测试过程能够低报错，高效率、短时间通过。 软集测试验收：网络云三期湖南节点软集测试测试用例环境搭建复杂，涉及7个资源池，I层基础验收和可靠性验收消耗的人力约为10人月/池，亟需自动化测试工具提升测试效率。集团研究院的AUTO软集测试工具应运而生，针对I层基础验收和可靠性验收用例开发了自动化测试脚本，通过在资源池近端搭建AUTO代理服务器和预置环境，从集团侧下发自动化测试脚本，驱动代理服务器和资源池I层交互运行脚本并返回结果，最终形成综合测试报告，并配套执行过程log，整个脚本执行过程无需人工干预,极大的提升了验收效率。 山东公司 网络云三期山东公司在济南资源池通过AUTO工具进行虚拟层自动化测试验收，十分受益。AUTO验收工具部署简单、使用方便，全程自动化运行并且随配随验，降低了一线人员的工作量。自动生成验收报告清晰定位问题，方便维护人员实时解决，并且通过邮件接收报告和进度，大大提升了网络云工程验收效率。 山东省采用AUTO自动化测试工具验收测试了G-VNFM、NFVO+功能、NFVO-VNFM接口、VIM/PIM北向运维接口、NFVO-OSS接口、NFVO-安全控制器接口等测试用例，极大程度上减少了验收难度和工作繁杂度。AUTO工具使得验收结果更加简洁和直观的呈现。自动化工具使得验收工作更加方便，不仅提升了效率，更是极大地节省了时间，MANO的验收在两个月内顺利完成，使得资源池内工作更高效地开展和进行。 中国移动通信集团设计院有限公司是中国移动下属专业公司及研发机构之一。为应对网络云化建设带来的挑战，抓住网络转型机遇，中国移动设计院于2019年始进军云集成领域，承担了中国移动网络云资源池二期硬件集成、三期硬件集成和软集集成等项目，创新设计集成一体化服务模式，为中国移动打造自主设计、自主搭建、自主掌控的下一代网络提供坚实保障。 按照集团公司力量大厦战略，设计院与研究院同合力、促活力、强能力，在网络云资源池二、三期8个大区、15个省、60余个资源池的硬件、软件集成交付与验收上线工作中，设计院“探云”平台与研究院AUTO“行云”平台分工合作，在“探云”平台在完成硬件、软件规划设计及集成LLD的基础上，利用AUTO工具进行测试与验收。硬集阶段基于AUTO工具的随建随验模式完成整体验收工作，软集阶段利用AUTO工具完成虚拟层云平台、NFVO+等的自动化验收，有效缩短工程验收周期，对保障工程实施质量起到重要作用。 后续，为进一步支撑中国移动云资源池集成交付工作，设计院与研究院双方将以党建为引领，推动科技创新实现新突破，结合业务交集，发挥各自优势，共同聚焦云网建设过程中的优化点、难点问题，共同分享学习，深化业务交流，携手助力中国移动构建强化自主核心能力的未来网络。 中移物联网按照中国移动整体战略布局，专业化运营物联网专用网络，开发运营物联网连接管理平台OneLink和物联网应用开放平台OneNET，设计生产物联网专用模组和芯片，打造智能组网、智能安防、智能家居、智能穿戴等行业终端，推广物联网解决方案，形成了五大方向业务布局和物联网“云-管-端-边”全方位的体系架构。 中国移动OpenSigma边缘计算通用平台是边缘计算应用的接入平台和边缘网络能力和行业特色能力