新华三 H3C UIS 超融合基础设施项目实施全指南

一、项目概述与产品认知

1.1 UIS 核心架构

• UIS Manager 管理平台：统一 Web 控制台，提供集群监控、虚拟机生命周期管理、固件升级、存储池管理等能力。
• H3C CAS 虚拟化平台：基于 KVM 的 Hypervisor，为虚拟机提供运行环境。
• UIS Storage 分布式存储引擎：采用自研分布式存储，支持副本与纠删码冗余策略，通过多副本机制保障数据可靠性。

1.2 产品机型选择

二、前期规划与设计阶段

2.1 服务器角色规划

• 存储节点：提供数据存储服务，超融合场景下至少 2 个。
• 监控节点（MON）：维护集群全局状态，持有元数据信息。数量必须为 奇数（最小 3，最大 7），且可与存储节点复用。集群会根据存储节点数量自动调整监控节点数量，无需手动配置。

2.2 网络平面规划

• 管理网络、存储外网、存储内网建议分离，承载在不同物理网口上。
• 存储外网和存储内网属于重要网络平面，必须使用万兆网卡且必须做链路聚合。
• 若 HDD 数据盘不超过 72 块且 SSD 数据盘不超过 12 块，允许存储内外网复用；但 4U 高密机型、未来有大容量扩展需求、或存在混闪+全闪配置时，强制要求存储内外网分离。

2.3 典型组网方案

方案一：两节点方案（最小化部署）

• 一体机：存储网默认万兆，管理网必须与存储网进行网口复用；业务网默认千兆，可按需选配万兆。
• 外部监控节点：
• 瘦终端（推荐 C102V）：单千兆网口，管理网/存储内网/存储外网复用单口，需通过脚本 uis_cfg_thin.sh 配置存储网 IP。
• 虚拟机：至少 3 个网卡，管理网、存储内网、存储外网独立部署，存储网必须为万兆。

方案二：三节点及以上方案（标准部署）

2.4 IP 地址规划示例

三、硬件准备与上架阶段

3.1 到货验收

• 配置核对：对照装箱单检查 CPU 型号、内存容量、系统盘（通常为 480GB SATA SSD×2 做 RAID 1）、缓存盘（NVMe SSD）、数据盘（HDD/SSD）数量及容量、网卡端口速率。
• 外观检查：导轨、电源线、光纤、光模块完整性；运输损伤排查。
• 通电自检：通过 iLO 登录检查所有硬盘识别状态、网口链路、RAID 卡识别。

3.2 磁盘与 RAID 配置

• 系统盘：选取 2 块 SSD/HDD 做 RAID 1，作为 CAS 虚拟化平台安装盘。
• 数据盘：所有主存盘（HDD）必须以 JBOD/直通模式 或 单盘 RAID 0 方式使用，供分布式存储直接管理。
• 若经 RAID 卡连接，要求单盘 RAID 0 或双盘 RAID 1。
• 若经 HBA 卡连接，以直通方式使用。
• 缓存盘：NVMe SSD 缓存盘可直接使用；若为 SATA SSD，需以单盘 RAID 0 或双盘 RAID 1 方式使用。
• 本地盘限制：每节点支持的本地盘最多不超过两块，且仅支持 RAID 0 或 RAID 1；不支持配置热备盘。

3.3 关键 BIOS/固件设置

• 开启 CPU 虚拟化（Intel VT-x / AMD-V）。
• 关闭所有节点硬盘缓存（出厂默认已关闭，务必确认）。
• 设置 RAID 1 系统盘为第一启动项。
• 对照官方兼容性列表，将 BIOS、CPLD、iLO、RAID 卡固件升级到指定版本。

3.4 机柜上架

• 机架级反亲和：管理节点（或 MCNA 角色节点）分散在不同机柜或不同 PDU，避免单点故障。
• 电源冗余：A/B 双路 PDU 供电。
• 网线标识：业务口、存储口、管理口、iLO 口使用统一标签规范。

四、网络环境准备阶段

4.1 交换机配置

• 防环路：连接 UIS 一体机的交换机端口必须开启 STP/RSTP 等防环路功能，否则可能引起网络风暴。
• 链路聚合：存储外网和存储内网的聚合口必须配置为 LACP 动态聚合（若 UIS 侧选择动态链路聚合）或 静态聚合（若选择静态链路聚合）。
• 端口模式：聚合口设置为 Trunk 模式，放行对应 VLAN（管理 VLAN、业务 VLAN、存储 VLAN 等）。
• 负载分担：UIS 侧推荐使用"基本负载分担"（基于源 MAC 和 VLAN Tag），交换机侧需匹配对应聚合模式。

4.2 网络连通性预检

• 部署 PC 能同时访问 iLO 网络和管理网络。
• 各节点 iLO IP 与管理 IP 双向可达。
• 存储内网在各节点间二层互通（无需网关）。
• 若配置 VLAN，交换机端口已正确配置 Trunk 并允许对应 VLAN 通过。

五、软件部署与初始化阶段

5.1 登录 UIS 管理平台

5.2 网络规划配置

5.3 主机发现与网卡绑定

1. 选择主机：系统根据序列号和网卡 MAC 地址扫描并列出可加入集群的主机。
2. 配置网卡：为每台主机指定管理网、业务网、存储内网、存储外网使用的物理网口。
3. 统一密码：设置所有主机 root 用户的统一密码（最小 8 位，不能由单一字符类型组成）。

5.4 存储集群配置

• 配置方式：厚配置（创建时分配最大空间，不可超配）或精简配置（按需分配，允许超配）。硬盘池创建后不可修改，建议提前规划。
• 副本个数：2 副本或 3 副本。为保证数据安全性，建议使用 3 副本；使用 N 副本时，可用容量为裸容量的 1/N，且需预留 15% 空间用于故障恢复。
• 缓存大小（闪存加速场景）：最小 150GB，需满足 缓存分区大小 × HDD 数据盘数量 < SSD 缓存盘总容量。若后续可能扩容 HDD，需提前预留 SSD 缓存容量。缓存配置不支持在线修改。
• 缓存保护级别：一般（RAID 0 存缓存及元数据）或高级（RAID 1 方式，需特定型号主机支持）。
• 故障域：可选择"机架"或"主机"级别，建议按实际机架分布配置机架信息，增强故障隔离能力。

• 主机用途只能设置为"存储节点和监控节点"。
• 单台主机所选数据盘数量不能少于 3 块。
• 必须提前配置外部监控节点（瘦终端或虚拟机），且外部监控节点的 root 密码必须与主机密码保持一致。

5.5 完成初始化

六、业务迁移与割接阶段

6.1 迁移前准备

• 兼容性确认：对照《H3C 超融合产品软硬件兼容性列表》确认源操作系统版本、磁盘格式、文件系统类型在支持范围内。
• 目标资源预分配：在 UIS 侧提前创建目标 VM 规格、虚拟交换机、端口组、VLAN，确保与源环境网络一致。
• 存储预分配：按业务系统创建数据存储，推荐使用精简配置以提高利用率。

6.2 异构平台迁移（P2V/V2V）

1. 安装客户端：在源设备（物理机或源虚拟机）上安装 DSagent 迁移客户端。
2. 创建迁移任务：在 UIS Manager 中选择【云业务 / 异构平台迁移】→ 创建迁移任务。
3. 目标匹配：选择源设备和目标虚拟机，匹配磁盘（目标磁盘容量必须 ≥ 源磁盘）。
4. 任务配置：
• 迁移限速：网络较好时推荐默认 50MBps。
• 自动增量迁移周期：推荐默认 30 分钟。
• 迁移方式：精简迁移（仅复制有效数据块）或全盘迁移。
5. 执行迁移：首次全量迁移后，按周期自动执行增量迁移。
6. 结束任务：割接前停止源设备服务，手动结束任务（自动执行最后一次增量同步）。
7. 驱动配置：若迁移后蓝屏/黑屏或磁盘无法识别，需手动导入兼容驱动（导出硬件信息 → 制作驱动 ZIP → 导入管理平台）。

• 迁移过程会占用源设备网络带宽和计算性能，务必安排在非业务高峰期。
• 迁移后网卡 MAC 地址、硬盘盘符可能变化，若存在硬件绑定应用需提前调整。
• Linux 源机内核版本若低于 2.6.25，迁移后可能无法兼容 virtio，建议将目标虚拟机磁盘控制器类型改为 IDE 或 SATA。
• Windows 2012 因驱动和内核管理特性，建议目标虚拟机磁盘控制器选择 IDE。

6.3 VMware 虚拟机迁移（双模超融合/云彩虹）

• 在线迁移最后阶段会出现短暂业务中断（Ping 丢包 0~2 个）。
• 若虚拟机 IP 为静态地址，迁移后保持不变；若为 DHCP，则由新环境地址池分配。
• 迁移时禁止在 VMware 侧操作被迁移虚拟机，禁止通过控制台启动虚拟机。
• 不支持将 VMware 虚拟机迁移至 ARM 架构主机。

6.4 割接与回退

• 割接窗口：选择业务低峰期，提前通知业务方。
• 快速回退：割接前对关键 VM 创建快照；若验证失败，通过快照秒级回滚。
• 观察期：源环境保留 1~2 周，确认 UIS 侧稳定后再下线。

七、项目验收与持续运维

7.1 验收测试清单

7.2 日常运维要点

• 横向扩容：通过"主机发现"扫描新节点，配置网卡后添加到集群。若磁盘配置与现有节点不一致，需先新增硬盘池。
• 纯计算节点/纯存储节点：扩容时可开启"纯计算节点"或"纯存储节点"开关，实现算力与存力独立扩展。纯计算/纯存储节点不能作为双机热备管理的备节点。
• 两节点扩三节点：扩容后需手动修改数据池副本数从 2 改为 3，并等待数据平衡完成。

• 不支持缩容管理节点、仲裁节点。
• 缩容前确保集群健康度 100%，逐台操作，等待健康度恢复后再缩下一台。
• 缩容时须确保存储集群主机数量大于元数据副本数，且删除后节点池主机数 ≥ 副本数。
• 缩容会触发数据平衡导致性能降低，建议离线执行。

• 定期通过 UIS Manager 导出配置备份。
• 固件升级和分布式存储升级需遵循官方指导，避免跨版本混升。
• 建立 License 到期预警机制，及时续期避免功能受限。

八、常见陷阱与避坑指南

结语