admin 管理员组

文章数量: 887021


2024年3月6日发(作者:杰伦线上演唱会)

vsan 最佳实践

Vsan

最佳实践

需要考虑的主要因素: 物理服务器 系统引导

磁盘控制器

磁盘组

HDD

SDD

NIC

VSWITCH

VSAN 网络 存储策略

Vsan 与 HA 之间的要求

1. 物理服务器

Vsan 集群

最多支持 64 台主机

允许 n 个故障节点, HOST>=2n+1 ,如果设计了故障域,则需要 2n+1 个故障域 为了确保,在 n 个节点故障后仍然可以正常读写,则 HOST>=(2*FTT+1)+1 支持纠删码( vsan6.2 以后), raid 5 最少四台主机, raid6 最少 6 台

建议每台主机都是相同的存储配置

2. 系统引导

最好是双 sd 卡设备做引导, 同时将系统日志和跟踪重定向到永久存储中, 见 kb1033696 如果条件有限,也推荐用一块硬盘做引导,用直通模式,不推荐两块做 raid1

3. 磁盘控制器

首先要符合 vsan 的硬件兼容列表,品牌,型号,固件等 支持直通的一定要全直通,不支持的就全做 raid0 (不是最佳,维护略多) 队列深度,至少 256,尽量设置到最大

控制器缓存,禁用,如果不能禁用,就设置成

注意:千万不要混用直通和 raid

4. 磁盘组

每台服务器最多支持 5 个磁盘组(建议每台主机 2 个磁盘组) 可用容量 / 磁盘组 的算法

假设 vsan 有 8 个节点,要求 2 个节点磁盘全部不可用时, vsan 任然有空间可以恢 复,则磁盘组的使用率不能超过 75%

假设客户提出可用容量为 N,未来增长为P%则方案容量至少为

虑到磁盘格式化开销 1%和虚拟机快照需要的空间,方案容量因为

vsan 最佳实践

N*(1+P)/0.75,再考

N*(1+P)/0.7

100%读

裸容量 /磁盘组

1 / 3

2 副本,裸容量 =2* 可用容量

3 副本 裸容量 =3* 可用容量

磁盘书 /磁盘组(最多 7 个)

磁盘数 /磁盘组 =裸容量 /单盘裸容量

5. HDD 首先要符合 vsan 兼容性列表 推荐 sas 盘或者 nl-sas ,不推荐 sata 转速越快越好,不低于 7200 单个容量 1TB 以上 一个磁盘组 7 块最多,一个服务器 5 个磁盘组最多,所以一台服务器最多 35 块

6. SSD

要符合 vsan 兼容性列表 最好 pcle 或 nvme 接口 闪存容量应该最小为可用容量的 10%,越大越好,可以通过 VROps for vsan 查看是否

足够

混合模式每台服务器最多 5 个,全闪存应该是 5+35 个 混合模式 读缓存( 70%)和写缓存( 30%)

全闪存 写缓存100% (该模式下,缓存层的ssd只做写缓存,最多支持600G用于写 缓存)

6. NIC

Vsan 网络使用 10g ,其他 1g

推荐网口数量:

一对 vsan/vmotion

一对 业务

一对 管理

一对 NAS/ 备份

用于vsan的多网卡作用是高可用而非负载均衡,有一种例外,基于 IP哈希的策略。

LACP配置 在此策略下,vsan能够平衡网卡的负载, 要求使用以太通道或链路聚合协议

物理交换机,静态的以太通道仅受

7. Vswitch

配置VDS,任何版本的vsan都带vds功能

8. Vsan 网络

Vsan 6.5 以前的版本, mutlcast 必须打开,且使用企业级的交换机确保 mutlcast 性能

Vsan6.6 可以使用 unicast

vsan 最佳实践

9. 存储策略

Number of failures to tolerate 允许的故障数量 默认 1 最大 3

Vsan6.0 引入故障域的概念,使用故障域时, 为允许 n 次故障,需要创建 n+1 个对象副 本,并且需要 2n+1 个故障域。

FlashReadCacheReservation 闪存读取预留,不建议更改

NumberOfDiskStripesPerObject 条带宽度 建议默认保留为 1 ,最大为 12

VSS支持,而LACP仅受VDS支持

2 / 3

强制制备

决定在 vsan 资源不足上述存储策略时,是否依旧进行部署,建议禁用

ObjectSpaceReservation

指定虚拟机置备预留,默认值为 0 表示精简置备,最大 100 ,厚置备

10. Vsan/HA

HA 必须使用 vsan 网络进行通讯

HA 不使用 vsan 数据存储作为 数据存储信号检测 位置

11. 其他

Vsan 产生 10%cpu 开销 每台主机最少 32G 内存 安装和使用 vsan health service 使用最新稳定版 vsan

3 / 3


本文标签: 容量 使用 故障 磁盘 可用