esxi 做底层， Truenas 接管硬盘提供存储整合---用哪种方式好？

[siyiye]

esxi 做底层

truenas 虚拟机接管 12 块 HDD 硬盘提供存储整合（直通 HBA 卡给 truenas ，Rz2 ，作为一整个存储池） 构想 1：用 truenas 的 iSCSI 给 esxi 挂载为存储，然后作为硬盘插到群晖虚拟机中； 构想 2：用 NFS 共享直接在群晖虚拟里中挂载为共享文件

主要是想把存储层完全独立出来，让其他虚拟机能够使用

[jiaoguan1688]

pve 做底层更灵活

[DT27]

折腾好久，最后选择 unraid ，所有服务都使用 unraid 的共享文件夹。没有磁盘分区存储池等概念了。

[roswellian]

我的实现方法类似...ESXI 底层，然后虚拟 FreeBSD 和直通 HBA 做 ZFS 存储，最后 NFS share 出来给 ESXI 作为 datastore 。各个虚拟机跑在这个 datastore 上。跑了几年没啥问题。

[vopsoft]

我有疑问 为什么不用 vsan

[siyiye]

@roswellian 对的，我的大致就是这个思路。后续有需要也可以随时把存储部分分离出来（让硬件服务器接管导入 pool 即可）

[burgers]

@roswellian

@siyiye 我也打算这样做，可是意味着 esxi 下的 truenas 要作为第一启动的虚拟机，且谨慎关机。否则直接影响其余的虚拟机。

NFS share 出来给 ESXI 作为 datastore ，然后虚拟机跑在这上面，I/O 性能如何？

[roswellian]

@burgers 我是单建了个 vSwitch 给 NFS Share ，这个 vSwitch 开巨帧，性能还是不错的。至少我的应用范围内没啥影响。至于开机关机，在 ESXi 设置好开机启动顺序即可，还是很方便的。 这么搞还有个好处是，随时用 ZFS 进行快照，避免了 ESXi 下面虚拟机如果有直通设备无法快照的缺点。

[burgers]

不知道大哥实践得如何了，我用了方案 1.用 truenas 的 iSCSI 给 esxi 挂载为存储

然后 truenas 加到了 64g 内存，目前上了万兆网卡，保证虚拟机之间的传输高效。

目前在想，要不要直通 nvme 给 truenas 做缓存，因为 iSCSI 给到各个虚拟机，也存在有的虚拟机运行着 docker 和 bt 任务，担心 i/o 性能

[siyiye]

@burgers 因为手头多了一台机器，就直接用整台机器做了 truenas 了

[burgers]

@siyiye 整机做 truenas 然后共享存储给 esxi 吗