天宫之印服务器TG225 Pro B1更换Raid卡 麒麟V10系统启动异常修复

背景

Zabbix 运维监控平台报警应用系统业务IP Ping 连通性异常，主机操作系统监控agent离线。远程登录服务器BMC查看服务器宕机，操作系统无法正常加电拉起，BMC查看系统告警日志显示Riad卡故障离线，一键收集日志等待厂家分析。

启动事件应急流程

创建事件单----400报修故障、派发备件----确认更换窗口----更换备件、服务器加电开机----登录系统测试网络连通性、同步时钟----应用系统业务测试----事件单回填完成应急处理

BIOS

基本输入输出系统 BIOS（Basic Input Output System），是加载在计算机硬件系统上的最基本的软件代码。BIOS 是在操作系统 OS（Operating System）之下的底层运行程序，BIOS 是计算机硬件和 OS 之间的抽象层，用来设置硬件，为 OS 运行做准备，BIOS 主要功能是上电、自检和检测输入输出设备和可启动设备，包括 CPU/内存初始化，硬件扫描和寻找启动设备，启动系统，目前使用鲲鹏 920 处理器的服务器均使用 SPI （Serial Peripheral Interface）Flash 存储 BIOS 代码。

BIOS在系统中的位置

服务器前面板

服务器后面板

Raid 卡更换

1，打开机箱，拆卸Raid卡所在的PCIe 插槽

2，定位Raid卡集成在PCIe 插槽中的solt，更换故障Raid卡，恢复数据和供电线缆

3，Raid配置信息核对

（1）服务器开机按Delete 进入服务器BIOS---高级设置---选择BROADCOM <MegaRAID 9560-8i 4GB>

（2）选择Main Menu

（3）选择Virtual Driue Manaqement 查看raid 配置

（4）硬盘raid 配置信息正确加载到raid卡中

文件系统修复

服务器开机加载系统内核后无法正常启动系统提示报错如下：

分析原因是raid 硬件故障导致raid卡上缓存数据没有回刷到硬盘中从而导致系统启动文件丢失

输入ls /dev/mapper 查看文件系统分区

通过 xfs_repair -n 先查看修复内容

xfs_repair -n /dev/mapper/klas-root > /tmp/xfs_repair.log 2>&1

xfs_repair修复文件系统

xfs_repair /dev/mapper/klas-root
xfs_repair -L /dev/mapper/klas-root

-L 参数会清空日志，会丢失用户数据和文件，谨慎使用。

重启系统

reboot

救援模式

根分区的文件系统损坏无法进入单用户模式需要通过挂载镜像进入 livecd 的救援模式系统启动进去紧急模式，提示输入root密码

You are in emergency mode. After logging in, type "journalctl -xb" to view
system logs, "systemctl reboot" to reboot, "systemctl default" or "exit"
to boot into default mode.
Give root passuord for naintenance
(or press Control-D to continue):

由于/etc/fstab文件内的磁盘挂载命令执行失败导致的系统开机启动进入紧急模式，未知root密码挂载iso镜像救援模式修改fstab文件。

（1）BMC 远程控制台挂载 ISO 镜像，重启服务器F2选择光驱启动

（2）进入引导界面后选择 Troubleshooting

（3）选择 Rescue a Kylin Linux Advanced Server system 按回车键进救援模式

（4）按回车键进救援模式

（5）Control-D ，选择1继续，ENTER键进入shell

（6）挂在根分区到当前活动目录，修复fstab文件，重启系统

单用户模式修改密码

操作系统版本

（1）进入grub菜单 按'e'进行修改

（2）输入grub菜单口令

（3）找到'linux'开头的行，在末尾添加 'rw init=/bin/bash console=tty0'；编辑完后，'ctrl+x'完成重启。

（4）查看文件系统

（5）mount查看根分区挂载情况（rw）；passwd 修改 用户密码(注意密码安全策略要求)；修改完后重启系统