北京大兴国际机场网络运维优化与创新

项目背景

北京大兴国际机场定位为大型国际枢纽机场，是国家发展一个新的动力源，支撑雄安新区建设的京津冀区域综合交通枢纽；按2025年旅客吞吐量7200万人次、货邮吞吐量200万吨、飞机起降量62万架次的目标设计。大兴国际机场网络包括内部网络系统、旅客无线接入网络系统以及配套的安全管理系统。其中，内部网络系统承载着所有大兴国际机场的关键业务，一旦出现严重的网络问题，将可能是全局性的影响，导致大兴国际机场业务运行降效或停滞。为保证网络平台运行稳定、提供可靠连续的业务支撑，大兴国际机场网络运维团队由网络一线和网络二线两个团队协同工作，网络一线运维团队负责日常运维工单和简单故障处理，网络二线为网络一线运维提供技术支持并负责复杂故障、运维规范、网络优化、承接运维需求以及运维创新等方面的工作。新华三运维团队作为网络二线团队的重要组成部分，人员比例达到70%，在大兴国际机场网络二线技术支持工作中也发挥出至关重要的作用。

新华三运维团队按照AIO（All In One）“智简、至暖、致远”的运维管理外包服务模式，满足客户高效统一运维需求，帮助客户以更低的运营成本与更快的业务变革速度顺利推进数字化转型。

需求挑战

大兴国际机场是一座超大型国际枢纽机场，在投入运行初期网络运维存在如下挑战：

•   需对网络资源、运维文档等台账进行完善和补充；

•   需对多驻场团队和设备厂商进行统一管理；

•   需建立完善有效的网络运维体系，提高运维管理质量；

•   需对网络运行中存在未知隐患进行优化；

•   需对全网制定切换演练方案，验证网络运行的可靠性。

大兴机场运维方案

大兴国际机场二线运维服务针对当前存在的挑战，将网络运维按照不同阶段进行分解，遵守每个阶段工作有重点、有目标、有计划的原则，对大兴国际机场网络运维进行优化，从而提升网络运维服务的整体质量。

•   过渡承接期：整合各运维团队和设备厂商资源进行统一管理，并建立完善的网络台账、运维知识库、运维管理制度，降低运维管理复杂度提高运维工作效率。

•   稳定运维期：以平台体系建设为重点，同时稳定开展业务流程、现场工程师管理规范、考勤管理、培训计划等其他运维服务工作。

•   运维优化期：使用自动化脚本、运维自动化工具对网络进行深度巡检，发现网络运行隐患并优化，同时逐步实现运维自动化，再向AIOps运维智能化过渡。

1

运维服务优化

大兴国际机场运维团队通过网络巡检和切换演练解决网络运行中的隐患的同时，也不断从日常运维中吸取总结运维经验和管理流程，形成管理规范文档，以方便后期的运维工作参考。

设备信息台账优化

工欲善其事必先利其器，对于网络运维工作而言，拥有一本完整台账和一个有效的网管监控平台是一切运维工作的良好开端。在日常的运维工作中设备信息和资产信息也是动态变化的，如何能够同步保持台账和网管监控平台的实时更新显得尤为重要。我们通过对全网设备进行全面摸排和梳理完善了网络台账和网管监控信息，达到全网设备资产均在册，在册资产均受监管的目标，为日常运维提供极大的便利性。

AIO运维服务管理

大兴国际机场网络二线运维团队以新华三AIO运维服务的核心理念进行运维团队管理，以提高大兴国际机场网络运维服务整体质量为目标，对不同远程运维团队、不同厂商设备资源进行整合，统一规范和集中管理，建立有效的沟通矩阵，协助大兴国际机场解决网络运维中多服务商、多厂商管理难度高的问题，提升网络运维的整体管理水平。

运维体系建设

在运维工作中，运维团队通过处理故障、网络隐患优化、网络切换演练和需求处理等工作积累了大量的规范要求和经验知识，如何将这些规范要求和经验知识整理成册变成有形资产以提高网络整体的运维规范性和技术水平显得尤为重要。通过对日常故障处理、实施方案等知识进行总结归档完成知识库SOP、MOP、EOP共计70篇、编写运维流程规范共计20篇，并通过在网络二线团队和网络一线团队之间组织37次培训考试、46次每周团队内部专题讨论，并设置专职审核岗位进行日常工作审核，在向每一位工程贯彻管理规范的同时提高每位工程师技术能力。

网络深度巡检

网络故障发生了能够快速解决固然重要，但是如果能通过网络巡检和梳理发现网络中运行的隐患并防患于未然更加重要。我们在梳理分析历史巡检内容和管理流程后，通过优化网络日常巡检模板和巡检制度使网络一线的日常巡检工作更加完善和有效。同时借助新华三以及其他自动化巡检工具，网络二线运维团队针对核心、汇聚和骨干设备的运行配置、协议状态和版本补丁等方面进行深度巡检，共输出66篇巡检报告，并针对巡检报告问题进行分析并编写方案进行优化解决。

切换演练

网络建设按照设备冗余和链路冗余的原则进行设计，但是通过梳理和分析发现部分设备的配置缺失导致设备或者链路冗余并不能达到预期的效果，我们通过梳理全网的配置进行分析，针对不满足冗余条件的场景提出优化方案，在进行大量的配置优化操作后按计划进行了关键设备切换演练且均到达理想效果，在很大程度上减少了单机设备故障引起业务中断的风险。

2

主动式服务

为保障节假日和重大时刻机场网络能够稳定运行和快速响应故障，除了日常运维工作的开展，新华三运维团队从全局出发在新华三集团资源的支持下提供主动运维服务，如备件先行、版本评估、版本升级等。

主动运维防患于未然——“扫雷”服务

新华三主动规划的特色“扫雷行动”，针对重要客户、重要局点、关键产品和解决方案的高危版本进行全面梳理和排查，提升客户对我司产品和解决方案的体验感、客户满意度，避免客户在网设备因已知问题引起重大事故，提前进行风险排查和防范。针对“扫雷”中发现的问题进行风险评估后制定设备版本升级计划和后期设备入网的版本统一原则。

“无线春风护航”服务

新华三2021年无线产品春风护航行动，针对大兴国际机场无线网络进行梳理，从软件版本、设备配置和信号测试等方面入手重点排查在网设备的潜在风险及隐患，向客户提出预警和修改方案，并对隐患进行整改，提升服务质量，提高客户满意度和旅客无线网络体验。

重大时刻保障

过去的一年里，新华三在每一个重大节日和关键时刻都不遗余力，由新华三行业/产品技术专家、一线人员、总部市场/服务领导等组成大兴国际机场服务保障小组，通过现场备件及时到位、后端技术专家随时待命、现场技术工程师轮班值守三管齐下，保障了元旦、春运、国庆等节假日和两会、建党百年等关键时刻网络系统稳定运行，让每名旅客“乘兴而来，尽兴而归”。

方案亮点

近年来在各种运维大会上AIOps成了高频词汇，不同行业、不同企业的运维现状也不尽相同，对AIOps和未来的建设计划也不尽相同。AIOps与其说是产品，不如说是一种理念和策略，通过以数据为基础、算法为支撑、场景为导向的AIOps平台，为企业现有运维管理工具和管理体系赋予统一数据管控能力和智能化数据分析能力，全面提升运维管理效率。如何优化现有的运维模式，提高网络运维效率是大兴国际机场甲方团队和新华三网络运维团队一直探索的方向。

1

新技术简报

大兴国际机场甲方团队和新华三网络运维团队成立技术创新小组制定运维创新计划，研究行业前沿智慧机场解决方案、物联网技术、网络安全、软件定义网络、Wi-Fi 6、5G、云计算和大数据等专业技术，共输出13篇《新技术简报》。

2

网络自动化运维

日常网络运维中不乏一些需要经常性重复、难度较低的工作，但是开展这些工作所花费的时间较多且会因人员变化导致效果差别较大；如每日对汇聚及以上两百台左右设备的数十项巡检指标进行巡检，定期梳理两千台左右的网络设备信息，定期统计两千台左右设备的端口表使用信息，分析关键链路带宽使用情况等。我们通过提炼工作内容和工作要求，制定标准化的方法和输出方式，使用python编程语言开发对应自动化运维系统，在提高运维工作效率的同时加强标准化的管理。

自动化巡检子系统

针对日常巡检工作量大、频率高、人工巡检比较费时费力的问题，运维团队开发了自动化巡检脚本。按照大兴国际机场巡检管理规范输出巡检文件，效率从原来每次4-5小时的巡检工作提升至每次1小时左右。

设备信息台账子系统

将设备上线后需要手动收集设备的软件版本、补丁版、设备系统名称等信息的工作，通过编写自动采集脚本来完成，提高了信息收集的效率和有效性。

设备端口表子系统

定期收集网络设备的端口使用情况，自动生成设备端口表，效率提升至1小时/张网。

网络带宽监控子系统

针对当前网管无法针对防火墙的每一条带宽策略进行监控，使用网管平台分析专线带宽利用率峰值时步骤繁琐、耗时较长，且需要定期对网络带宽进行统计分析的场景，我们开发了网络带宽监控子系统，按照指定时间范围自动生成防火墙带宽策略流量分析图、大兴国际机场自用专线带宽流量分析图，使运维工程师分析工作效率大幅提升。

防火墙策略带宽监控

大兴机场自用专线带宽监控

网络运维工作台账管理系统

开发工作台账管理系统，进行二线团队工作的录入、更新和导出，提高二线工作的跟踪和分析的效率。

客户受益

大兴国际机场网络二线运维团队在一年多的运维服务中，陪伴客户左右共同进步、共同成长，取得了不错的成绩。

•   保质保量完成日常故障处理，日常运维需求对接等日常基础网络运维工作；

•   通过梳理日常运维工作流程优化了网络运维管理规范、补充完善了网络运维体系；

•   通过网络深度巡检发现并优化网络运行隐患，制定切换演练方案保证了网络的可靠性；

•   参考AIOps的运维理念，开发自动化运维工具提高运维的工作效率，为未来网络运维自动化、智能化打下了一定的基础。

点击“阅读原文”可下载《数字化运维2022》全部内容