🧭 J4125 全闪 All-in-One 折腾笔记:ESXi + iStoreOS + 飞牛 + Debian + Windows Server

💡 前传:《ESXi 存储一夜消失:SATA 控制器直通引发的”血案”复盘》——建议先读,本文直接从事故修复后开始。

1. 硬件与总架构

1
2
3
4
5
6
7
8
9
10
11

flowchart LR
    subgraph ESXi["ESXi 8.0.2 @192.168.31.99"]
        VM1["① iStoreOS<br/>2C/1G · 软路由+AP<br/>直通: 3×I226 + AX210"]
        VM2["② 飞牛OS fnOS<br/>2C/5G · NAS<br/>直通: 希捷2T USB"]
        VM3["③ Debian 13<br/>1C/3G · Docker"]
        VM4["④ WinServer 2025<br/>2C/3G · RDP"]
    end
    MODEM[光猫] -. WAN直通 .-> VM1
    VM1 -. LAN直通 .-> SW[交换机/终端]
    SW --- MGMT[小米路由器<br/>管理网段 192.168.31.0/24]
    MGMT --- ESXi

网络设计原则:管理口与业务口分离。 vmnic0(管理)+ 所有 VM 的 e1000 虚拟网卡走 vSwitch0 → 小米路由器网段(192.168.31.x);vmnic1/2/3 物理直通给 OpenWrt 做未来的 WAN/LAN。这样无论路由 VM 怎么折腾,ESXi 管理口永不失联——血泪教训。

2. 镜像归档体系(重装自由的基础)

所有镜像统一归档,生成 SHA256SUMS.txt + README.md(版本、官方源、重装步骤)。核心纪律:

• 能下官方源绝不第三方;sysin 打包镜像仅 ESXi 本体(已装好的不再动)
• 大体积 ISO(WinServer 7.8G)只存 ESXi datastore1/iso/,本地不留
• 每次系统装好,顺手 auto-backup.sh 拉一份 state.tgz 到归档

1
2

# ESXi 侧 iso 目录
mkdir -p /vmfs/volumes/datastore1/iso

3. 虚拟机 ①:iStoreOS(OpenWrt 软路由 + WiFi AP)

3.1 镜像转换(img → vmdk)

iStoreOS 只发 raw img,ESXi 不能直接用,需转 streamOptimized VMDK:

1
2
3
4

# Windows 上(scoop install qemu)
curl -L -o istoreos.img.gz "https://fw.koolcenter.com/iStoreOS/x86_64/istoreos-24.10.8-2026073111-x86-64-squashfs-combined.img.gz"
gzip -dk istoreos.img.gz
qemu-img convert -f raw -O vmdk -o subformat=streamOptimized istoreos.img istoreos.vmdk

选 iStoreOS 而非官方 OpenWrt 的理由:中文生态 + 应用商店,而且 LAN 默认 DHCP 客户端模式——官方 OpenWrt 首启会在局域网广播 192.168.1.x 的野 DHCP,怼上家里现有网段就是事故。

3.2 建盘 + 注册 VM

1
2
3
4

scp istoreos.vmdk [email protected]:/vmfs/volumes/datastore1/OpenWrt/
ssh [email protected]
cd /vmfs/volumes/datastore1/OpenWrt
vmkfstools -i istoreos.vmdk -d thin OpenWrt.vmdk   # 克隆为 ESXi 原生精简盘

vmx 模板(踩坑后总结:BIOS 引导 + SATA 磁盘 + e1000 网卡,OpenWrt 全兼容):

1
2
3
4
5
6
7
8
9
10
11
12
13
14

displayName = "OpenWrt"
config.version = "8"
virtualHW.version = "21"
guestOS = "other6xlinux-64"
memSize = "1024"
numvcpus = "2"
firmware = "bios"
sata0.present = "TRUE"
sata0:0.present = "TRUE"
sata0:0.fileName = "OpenWrt.vmdk"
ethernet0.present = "TRUE"
ethernet0.virtualDev = "e1000"
ethernet0.networkName = "VM Network"
ethernet0.addressType = "generated"

1

vim-cmd solo/registervm /vmfs/volumes/datastore1/OpenWrt/OpenWrt.vmx OpenWrt

3.3 找 IP 的三种姿势(没有 VMware Tools 时)

1. esxcli network vm port list --world-id <wid> 拿到 VM 的 MAC
2. 全网段并 ping 一轮后 arp -a | grep <MAC> 反查 IP
3. 兜底:在 vSwitch0 上建临时 portgroup + vmk(如 192.168.100.2/24)直连 VM 的默认网段

3.4 初始配置(SSH)

iStoreOS 有个反直觉的坑:网页 LuCI 用默认密码 password 能进,SSH 用它却 Authentication failed(root 密码实际未设置,LuCI 有回退)。正确姿势:先在网页 系统→管理权→路由器密码 设置密码,SSH 才通。

1
2
3
4
5
6
7

# 固定管理 IP(DHCP 拿到的地址固化)
uci set network.lan.proto='static'
uci set network.lan.ipaddr='192.168.31.50'
uci set network.lan.netmask='255.255.255.0'
uci set network.lan.gateway='192.168.31.1'
uci add_list network.lan.dns='192.168.31.1'; uci add_list network.lan.dns='223.5.5.5'
uci commit network && /etc/init.d/network restart

无线驱动预装(iStoreOS 24.10 已内置全套 Intel 固件,只缺内核模块):

1
2
3

opkg update
opkg install kmod-iwlwifi iw
# AP 守护系统已带 hostapd-openssl;若装 wpad-basic-mbedtls 会和它冲突,无需理会

3.5 AX210 直通排障实录

AX210 走 M.2→Mini-PCIe 转接卡插入主板。现象:PCIe(WiFi)与 USB(蓝牙)双双无踪影,lspci/vmkchdev -l/usbarbitrator 日志三处确认为零。

诊断逻辑:

1
2
3
4
5

WiFi(PCIE)无 && 蓝牙(USB)无
  → 不是驱动/直通配置问题(那两层都到不了)
  → 卡在插槽里完全没被供电/响应
  → 排查方向:①接触不良重插 ②插槽只焊了 USB 没走 PCIe(廉价板常见,原设计给 4G 模块)
    ③转接卡与卡不兼容 ④需完全断电冷启动(PCIe 训练)

ESXi 侧知识:ESXi 没有任何 Wi-Fi 驱动,无线网卡永远不可能变成宿主机的 vmnic,唯一玩法是 PCI 直通给 VM。所以宿主机层面 lspci 能看到设备就算”成功”,剩下的交给 OpenWrt 的 iwlwifi。

3.6 开机自启

1
2

vim-cmd hostsvc/autostartmanager/enable_autostart true
vim-cmd hostsvc/autostartmanager/update_autostartentry <vmid> powerOn 30 1 powerOff 30 systemDefault

4. 虚拟机 ②:飞牛OS fnOS(NAS)

• 官方 ISO 直链藏在 fnnas.com/download 页面 JS 里(iso.liveupdate.fnnas.com/.../fnos_Mainland-PE_x86_1.2.0800_2778.iso)
• ⚠️ 2026 年起 CDN 全面鉴权:未登录时 curl/PowerShell/.NET/真实浏览器直访一律 403(TLS 指纹 + 账号态双重校验),必须在官网登录账号后才能下载
• VM:2C/5G/60G 精简盘,EFI + CD-ROM 挂 ISO,中文向导两分钟装完
• 2T 希捷走 USB 设备直通(见 §6)

5. 虚拟机 ③④:Debian 13 + Windows Server 2025

Debian(netinst,清华源):

1
2
3
4

guestOS = "debian12-64"      ; debian13 仍用此 guestOS 标识
bios.bootOrder = "cdrom,hdd"
ide1:0.deviceType = "cdrom-image"
ide1:0.fileName = "/vmfs/volumes/datastore1/iso/debian-13.7.0-amd64-netinst.iso"

Windows Server 2025 评估版直链获取(免填表):

1
2

https://go.microsoft.com/fwlink/?linkid=2345732   ← zh-CN ISO,7.84 GB
跟随 302 → aka.ms → software-static.download.prss.microsoft.com/...SERVER_EVAL_x64FRE_zh-cn.iso

评估版注意事项:10 天内联网激活评估许可(免费,不激活会自动关机),180 天到期可重装续命。

ESXi 侧下载大文件的三个坑

1. ESXi 没配 DNS → wget: bad address;esxcli network ip dns server add --server 223.5.5.5(小米路由器对 ESXi 的 DNS 查询不响应,别用 .1)
2. 解析出 IPv6 → ESXi 无公网 v6,握手挂起;本地解析 IPv4 写入 /etc/hosts 强制走 v4
3. busybox wget 的精简 TLS 握不上 Akamai → error getting response;ESXi 又没有 curl → 最终方案:本机下载 + 内网 scp(千兆 ~80MB/s,7.8G 约 2 分钟)

6. USB 硬盘直通给 NAS(保留数据的关键操作)

ESXi 默认扣留 USB 存储设备(usbarbitrator 服务,留给 VM 直通),数据存储里看不到是正常现象:

1
2
3
4
5
6

# 想把 USB 盘做成 ESXi 数据存储(不推荐,官方不支持 VMFS on USB):
/etc/init.d/usbarbitrator stop && chkconfig usbarbitrator off
esxcli storage core adapter rescan --all   # 出现 mpx.vmhbaXX 设备

# 想把 USB 盘直通给虚拟机(NAS 场景,推荐):保持 usbarbitrator 开启
# VM → 编辑设置 → 添加其他设备 → USB 设备 → 选希捷

热插拔教训:SATA/PCIe 设备不要带电插,USB 盘插入瞬间的 5V 冲击曾把这台小主机直接拉挂(机械盘启动电流 >2A)。要加盘,先关机。

7. 路由切换:爱快 → OpenWrt(可回退)

最后一步,物理动作 + 配置联动:

1
2
3
4

1. 光猫改桥接(找运营商),准备宽带 PPPoE 账号密码
2. 断电接线:光猫 → 主机 WAN 口(vmnic1);vmnic2 → 交换机/AP
3. OpenWrt 配 PPPoE 拨号 + DHCP + 防火墙;小米路由器改 AP 模式
4. 观察 1 周 → 爱快导出 OVF 归档 → 删除

回退方案:爱快 VM 与其 3 个网卡直通原封不动,网线插回爱快对应网口、光猫改回路由模式即可。

8. 避坑清单(按血泪程度排序)

9. 资源占用快照(部署完 4 VM 后)

1
2
3

vCPU: 2+2+1+2 = 7(4C 轻度超配,负载型 VM 不同时满载无碍)
内存: 1+5+3+3 = 12G(ESXi 自留 4G)
磁盘: OpenWrt 2.4G + fnOS 60G + Debian 60G + WinServer 80G ≈ 200G(datastore1 剩 ~150G)

本系列所有命令都在真机上验证过,排障时间线来自实际 vmkernel 日志。折腾快乐,数据无价,每天想一遍:今天的配置,重启后还能回来吗?