Closed
[NetworkManager] 启动枚举与网卡重命名存在竞态,偶发管理口未被接管,请回合 NetworkManager 项目修复 #121
changxian_guAdd on  15 days agoClosed at  3 days ago
changxian_gu
changxian_gu
15 days ago Create

问题描述

多网卡服务器(鲲鹏920X)反复执行 reboot -f,几十次后出现管理口 eno1 开机未 UP、未配置 IP 的问题。

故障现场中,内核及 udev 均能识别 eno1,但 NetworkManager 未暴露对应设备对象,无法自动激活连接。现象与 NetworkManager 项目已修复的启动枚举竞态高度吻合。

环境信息

故障复现环境为基于 openEuler 软件包的linux:

  • 架构:aarch64
  • 内核:4.19.90-25.17.307.po1.aarch64
  • NetworkManager:1.26.2-11.po1.aarch64
  • 网卡:板载 HNS3,同时安装 Intel、Mellanox 网卡
  • eno1 驱动:hns3 23.7.1
  • 网卡固件:3.10.24.15

另外已检查 openEuler 官方源码包 NetworkManager-1.26.2-19.oe2003sp4.src.rpm:源码仍使用旧链路快照,spec 引用的 15 个补丁均未修改 nm-manager.c,未包含该修复。

复现步骤

  1. 配置 eno1 静态 IP,设置 ONBOOT=yes。
  2. 在具备多种网卡的服务器上,反复执行 reboot -f。
  3. 每次启动后检查 ip link、ip addr 和 nmcli device status。
  4. 偶发出现 eno1 保持管理状态 DOWN,且不在 NetworkManager 设备列表中的情况。

实际结果

  • ip link 能看到 eno1,但接口缺少 UP 标志。
  • eno1 未配置 IP。
  • udev 记录包含正确的 ID_NET_NAME=eno1 和 ID_NET_DRIVER=hns3。
  • nmcli device show eno1 返回:

Error: Device 'eno1' not found.

  • NetworkManager D-Bus 的 Devices、AllDevices 中均不存在 eno1 对应对象。
  • 驱动初始化及 PHY attach 完成,但 eno1 没有进入 net open 和连接激活流程。

预期结果

NetworkManager 正确跟踪网卡 ifindex 与重命名事件,接管 eno1,并按照配置自动拉起接口、配置 IP。

日志与对照

故障启动中,NetworkManager 在约 9.3 毫秒内创建两个名称为 eth0 的设备对象:

[35.283462] manager: (eth0): new Ethernet device (/org/freedesktop/NetworkManager/Devices/5)
[35.292721] manager: (eth0): new Ethernet device (/org/freedesktop/NetworkManager/Devices/10)
[35.778043] device (eth0): interface index 10 renamed iface from 'eth0' to 'enp151s0f0np0'

现场板载 eno1 的 ifindex 为 2,Mellanox 网卡 enp151s0f0np0 的 ifindex 为 10。eno1 在内核中存在,但此前创建的 /Devices/5 已不存在。

对比此前连续 9 次启动,eno1 均激活成功;故障这次未出现 eno1 激活日志。

NetworkManager 项目修复及原因分析

NetworkManager 项目的修复提交:

NetworkManager 项目提交说明:启动枚举使用链路快照,期间处理 netlink 事件可能发生网卡改名。使用过期名称创建 NMDevice 时,按名称查询可能取得另一网卡的 ifindex,导致原 ifindex 没有 NMDevice,不被 NetworkManager 管理。

修复通过在枚举循环中按 ifindex 重新获取最新链路,避免使用过期名称。

修复请求

当前openeuler 20.03 版本未合入此修复,请合入修复

二、缺陷分析结构反馈
影响性分析说明:

缺陷严重等级:(Critical/High/Moderate/Low)

缺陷根因说明:

受影响版本排查(受影响/不受影响):
openEuler-20.03-LTS-SP4
openEuler-22.03-LTS-SP4
openEuler-24.03-LTS-SP1
openEuler-24.03-LTS-SP3
openEuler-24.03-LTS-SP4

修复是否涉及abi变化(是/否):
openEuler-20.03-LTS-SP4
openEuler-22.03-LTS-SP4
openEuler-24.03-LTS-SP1
openEuler-24.03-LTS-SP3
openEuler-24.03-LTS-SP4

likedislike
openeuler-ci-botopeneuler-ci-botCollaborators
15 days ago Assign jiangheng12138 as responsible person
openeuler-ci-botopeneuler-ci-botCollaborators
15 days ago Modify description of issue
openeuler-ci-botopeneuler-ci-botCollaborators
15 days ago Assign MrRlu、sunsuwan、Apricity_HW、robert-xingwang、qq_30036869 as responsible person
openeuler-ci-bot
openeuler-ci-botCollaborators
15 days ago Comments:

以下的要求不是强制性的, 未按模板评论时对issue无任何影响
issue处理注意事项:
1. 当前issue受影响的分支提交pr时, 须在pr描述中填写当前issue编号进行关联, 否则无法关闭当前issue;
2. 模板内容需要填写完整, 无论是受影响或者不受影响都需要填写完整内容,未引入的分支不需要填写, 否则无法关闭当前issue;
3. 以下为模板中需要填写完整的内容, 请复制到评论区回复, 注: 内容的标题名称(影响性分析说明, 缺陷严重等级, 受影响版本排查(受影响/不受影响), 修复是否涉及abi变化(是/否))不能省略,省略后defect-manager将无法正常解析填写内容.
评论区可能使用到的指令说明:

指令 指令说明 使用权限
/check-issue 触发defect-manager校验 不限
/reason xxx /reason +挂起或取消条件 不限

影响性分析说明:

缺陷严重等级:(Critical/High/Moderate/Low)

缺陷根因说明:

受影响版本排查(受影响/不受影响):

  1. openEuler-20.03-LTS-SP4:
  2. openEuler-22.03-LTS-SP4:
  3. openEuler-24.03-LTS-SP1:
  4. openEuler-24.03-LTS-SP3:
  5. openEuler-24.03-LTS-SP4:

abi变化(是/否):

  1. openEuler-20.03-LTS-SP4:
  2. openEuler-22.03-LTS-SP4:
  3. openEuler-24.03-LTS-SP1:
  4. openEuler-24.03-LTS-SP3:
  5. openEuler-24.03-LTS-SP4:

缺陷issue处理具体操作请参考:
https://atomgit.com/openeuler/cve-manager/blob/master/cve-vulner-manager/doc/md/defect-manager-manual.md
pr关联issue具体操作请参考:
https://docs.atomgit.com/docs/help/home/org_project/pullrequests/pr-related-issue

likedislike
openeuler-ci-botopeneuler-ci-botCollaborators
15 days ago Added label: sig/Networking
openeuler-ci-bot
openeuler-ci-botCollaborators
15 days ago Comments:

Welcome To openEuler Community

Hey @qq_30036869 , thanks for your contribution to the community.

Bot Usage Manual

I'm the Bot here serving you. You can find the instructions on how to interact with me at Here . That means you can comment below every pull request or issue to trigger Bot Commands. You can self-configure the PR merge rules for this repository. For more details, please refer to Here.

Contact Guide

If you have any questions, please contact the SIG: Networking ,
and any of the maintainers: @Apricity_HW, @MrRlu, @robert-xingwang, @sunsuwan ,
and any of the committers: @jiangheng12138, @zhongxuan2 .

likedislike
openeuler-ci-botopeneuler-ci-botCollaborators
15 days ago Added label: DEFECT/UNFIXED
liu-haodong142liu-haodong142
15 days ago Associated pull request
liu-haodong142liu-haodong142
15 days ago Associated pull request
liu-haodong142liu-haodong142
15 days ago Associated pull request
changxian_gu
changxian_gu
13 days ago Comments:

您好, 请问大概在什么时间点合入20.03 LTS

@liu-haodong142

likedislike
liu-haodong142
liu-haodong142
10 days ago Comments:

您好, 请问大概在什么时间点合入20.03 LTS

@liu-haodong142

@qq_30036869

您是管理员吗,我已经在263pr中sync openEuler-20.03-LTS ,具体合入时间正在等待管理员审核。

likedislike
changxian_gu
changxian_gu
10 days ago Comments:

您能@ 下维护本仓库的管理员吗, 我只是在使用openEuler系统时发现了此bug, 希望openEuler官方可以合入

likedislike
liu-haodong142
liu-haodong142
9 days ago Comments:

您能@ 下维护本仓库的管理员吗, 我只是在使用openEuler系统时发现了此bug, 希望openEuler官方可以合入

@qq_30036869
好的,我会在pr中@管理员,申请尽快合入@Apricity_HW

likedislike
openeuler-ci-botopeneuler-ci-botCollaborators
3 days ago Associated pull request
openeuler-ci-botopeneuler-ci-botCollaborators
3 days ago Associated pull request
openeuler-ci-botopeneuler-ci-botCollaborators
3 days ago Associated pull request
qinxue
qinxue
3 days ago Comments:

影响性分析说明:
多网卡服务器(鲲鹏920X)反复执行 reboot -f,几十次后出现管理口 eno1 开机未 UP、未配置 IP 的问题。NetworkManager无法自动激活连接。
缺陷严重等级:(Critical/High/Moderate/Low)
Low
缺陷根因说明:
故障现场中,内核及 udev 均能识别 eno1,但 NetworkManager 未暴露对应设备对象,无法自动激活连接。

受影响版本排查(受影响/不受影响):

openEuler-20.03-LTS-SP4:受影响
openEuler-22.03-LTS-SP4:受影响
openEuler-24.03-LTS-SP1:受影响
openEuler-24.03-LTS-SP3:受影响
openEuler-24.03-LTS-SP4:受影响
abi变化(是/否):

openEuler-20.03-LTS-SP4:否
openEuler-22.03-LTS-SP4:否
openEuler-24.03-LTS-SP1:否
openEuler-24.03-LTS-SP3:否
openEuler-24.03-LTS-SP4:否

likedislike
openeuler-ci-botopeneuler-ci-botCollaborators
3 days ago Removed responsible person jiangheng12138、sunsuwan、Apricity_HW、robert-xingwang、qq_30036869
openeuler-ci-bot
openeuler-ci-botCollaborators
3 days ago Comments:

@MrRlu 经过defect-manager解析,已分析的内容如下表所示:

状态 需分析 内容
已分析 1.影响性分析说明 多网卡服务器(鲲鹏920X)反复执行reboot-f,几十次后出现管理口eno1开机未UP、未配置IP的问题。NetworkManager无法自动激活连接。
已分析 2.缺陷严重等级 Low
已分析 3.缺陷根因定位 故障现场中,内核及udev均能识别eno1,但NetworkManager未暴露对应设备对象,无法自动激活连接。
已分析 4.受影响版本排查 openEuler-20.03-LTS-SP4:受影响,openEuler-22.03-LTS-SP4:受影响,openEuler-24.03-LTS-SP1:受影响,openEuler-24.03-LTS-SP3:受影响,openEuler-24.03-LTS-SP4:受影响
已分析 5.abi变化 openEuler-20.03-LTS-SP4:否,openEuler-22.03-LTS-SP4:否,openEuler-24.03-LTS-SP1:否,openEuler-24.03-LTS-SP3:否,openEuler-24.03-LTS-SP4:否

请确认分析内容的准确性,确认无误后,您可以进行后续步骤,否则您可以继续分析

likedislike
qinxue
qinxue
3 days ago Comments:

@qq_30036869 已合入,没问题的话,帮忙关下issue

likedislike
openeuler-ci-botopeneuler-ci-botCollaborators
3 days ago Close issue
openeuler-ci-botopeneuler-ci-botCollaborators
3 days ago changed custom state from 待办的 to 已完成
openeuler-ci-botopeneuler-ci-botCollaborators
3 days ago Added label: DEFECT/FIXED; Removed label: DEFECT/UNFIXED,sig/Networking