1. 项目缘起为什么要在ESXi里折腾USB硬盘直通如果你和我一样是个喜欢在家里鼓捣点“生产力”设备的玩家那么“All in One”服务器这个概念一定不陌生。一台性能尚可的迷你主机装上VMware ESXi这类企业级虚拟化平台就能在上面同时跑软路由、家庭媒体中心、下载机、智能家居中枢等多个虚拟机省电又省空间。在这个架构里黑群晖DSM往往是存储和媒体服务的核心。但问题来了群晖最核心的价值在于存储和数据管理。如果你只是简单地在ESXi里创建一个虚拟磁盘VMDK给黑群晖用那么所有数据实际上都存放在ESXi主机的某块物理硬盘上。这带来几个痛点第一性能瓶颈虚拟磁盘的读写要经过ESXi存储栈的转换尤其是大量小文件读写时开销不小第二数据迁移困难VMDK文件与ESXi主机深度绑定你想把这块“硬盘”单独拿出来插到别的机器上直接读取几乎不可能第三无法利用硬盘的高级功能比如S.M.A.R.T.健康监测、硬盘休眠等这些功能在虚拟磁盘层面是缺失的。于是一个更“硬核”的方案浮出水面将物理的USB硬盘通过ESXi的“直通”Passthrough功能直接交给黑群晖虚拟机管理。这意味着这块USB硬盘对于黑群晖来说就像直接插在了一台物理群晖的USB口上一样是它独占的、能识别为原生SATA或USB存储的设备。数据直接写在物理硬盘的扇区上性能损失最小迁移也方便——直接把硬盘拔下来插到任何能读取EXT4/BTRFS群晖常用文件系统的Linux电脑上都能挂载访问。这个需求在玩家社区里非常普遍但实操过程却布满了“暗礁”。从USB控制器的识别、直通配置到黑群晖系统内的驱动和挂载每一步都可能遇到兼容性问题。网上教程虽多但往往只讲通了某一条特定路径一旦你的硬件组合稍有不同就可能卡住。今天我就结合自己多次踩坑的经验把这个过程的完整链路、核心原理和避坑要点给你彻底讲透。2. 核心原理拆解ESXi的“直通”到底在做什么在动手之前我们必须先搞清楚“直通”的本质。这能帮你理解后续所有操作的内在逻辑遇到报错时也知道该往哪个方向排查。ESXi作为Type-1的裸机虚拟化平台它直接运行在物理硬件之上。当它启动后所有的硬件资源CPU、内存、硬盘控制器、USB控制器等首先都由ESXi这个“超级管理员”Hypervisor接管。默认情况下虚拟机VM使用的都是虚拟化后的设备比如虚拟网卡vmxnet3、虚拟SCSI控制器PVSCSI。这些虚拟设备由ESXi提供驱动并负责将虚拟机的IO请求“翻译”并转发给底层真实的物理设备。“直通”就是ESXi将这个“翻译权”下放的过程。它允许你将某个特定的物理PCIe设备比如一块独立显卡、一个SATA控制器扩展卡或者整个USB控制器从自己的管理列表中“隔离”出来然后直接将这个设备的“管理权”完整地、排他性地交给某个指定的虚拟机。一旦直通成功ESXi对这个设备就“视而不见”了它不再为其提供驱动或进行IO管理。而目标虚拟机则像在物理机上一样需要自己加载适合这个硬件的驱动程序来直接操控它。对于USB硬盘直通我们通常有两种路径选择USB控制器直通将主板上整个USB控制器一个PCIe设备直通给黑群晖。这样插在这个控制器所有USB口上的设备键盘、鼠标、U盘、硬盘盒都会直接被黑群晖识别。这是最彻底、兼容性最好的方式因为群晖系统内置了通用的USB存储驱动。USB设备直通又称USB透传只将某一个特定的USB设备比如你的移动硬盘盒直通给虚拟机。ESXi 6.7及以上版本通过USB Arbitrator服务支持此功能。这种方式更灵活但依赖ESXi能正确识别该USB设备的VID/PID且有时在虚拟机重启或设备重插时会出现问题。我们的目标主要是第一种USB控制器直通。因为对于作为NAS的黑群晖来说我们通常希望将整个硬盘盒甚至通过USB Hub连接的多个硬盘稳定地交付给它而不是单个临时设备。注意并非所有USB控制器都支持直通。这需要硬件本身支持IOMMUInput-Output Memory Management Unit输入输出内存管理单元。在Intel平台上这叫VT-d在AMD平台上叫AMD-Vi。你必须在主板BIOS中确认已开启此功能。3. 前期准备硬件与软件的兼容性自查清单盲目开始大概率会失败。请先花十分钟对照这份清单检查你的环境能避开80%的坑。3.1 硬件要求与检查点ESXi主机一台安装了ESXi 6.5及以上版本的物理机。本文以ESXi 7.0 U3为例但核心步骤通用。CPU与主板CPU和主板芯片组必须支持VT-d(Intel)或AMD-Vi。请进入BIOS/UEFI设置在Advanced-CPU Configuration或Advanced-System Agent Configuration等菜单下找到相关选项并启用。常见的选项名称为Intel VT-d或VT for Directed I/OAMD IOMMU同时确保Intel Virtualization Technology (VT-x)也已开启。USB控制器这是关键。你需要确定主板上哪些USB接口属于同一个控制器。一个简单的方法是将你的USB硬盘盒分别插入主机前后面板的不同USB口。在ESXi Web管理界面进入主机-管理-硬件-PCI设备观察列表的变化。每次插入后列表里可能会多出一个或多个“USB控制器”设备。记下它们的名称如Intel Corporation 8 Series USB xHCI HC。你的硬盘盒应该被某个控制器识别。目标就是直通这个控制器。USB硬盘盒与硬盘硬盘盒芯片尽量选择采用JMicron (智微)、ASMedia (祥硕)或Realtek主流芯片的硬盘盒。一些非常小众或古老的芯片如某些VIA芯片可能在ESXi或群晖中缺乏驱动。供电3.5英寸机械硬盘需要12V供电务必使用硬盘盒自带的外置电源适配器绝对不要依赖USB口的供电否则极易导致硬盘损坏或数据丢失。硬盘文件系统如果硬盘已有数据请注意。直通后硬盘将由黑群晖直接格式化。确保硬盘内无重要数据或已做好备份。3.2 软件与配置准备ESXi Shell访问你需要能通过SSH或直接在主控台按AltF1进入ESXi的命令行界面。在Web客户端中进入主机-操作-服务-启用SSH。黑群晖虚拟机已经创建好并可以正常启动的黑群晖DSM虚拟机建议使用DSM 6.2.3或DSM 7.1等常见稳定版本。虚拟机的其他配置如引导盘应已就绪。驱动知识黑群晖基于Linux本身对USB Mass StorageUAS和标准的USB Attached SCSI(UAS)驱动支持良好。但有些USB硬盘盒会使用USB Attached SCSI协议以获得更高性能这需要uas内核驱动。大多数常见芯片都能被自动识别。4. 实战步骤从识别到挂载的完整链路假设你的硬件已满足上述要求我们开始一步步操作。4.1 步骤一在ESXi中识别并启用USB控制器直通登录ESXi Web管理界面进入主机-管理-硬件-PCI设备。在列表中找到你的USB控制器。通常名称包含USB xHCIUSB 3.0及以上、USB EHCIUSB 2.0或芯片组厂商名如ASMedia。你可以通过插拔USB设备来辅助确认。找到目标控制器后点击切换按钮将其状态从已禁用更改为已启用。启用后ESXi会提示需要重启主机才能生效。这是正常且必须的步骤。重启ESXi主机。你可以在Web界面安排重启或通过命令reboot。重启后该控制器将从ESXi的可用设备列表中消失因为它已被隔离准备用于直通。4.2 步骤二将直通的USB控制器添加到黑群晖虚拟机编辑你的黑群晖虚拟机的设置。点击添加其他设备-PCI设备。在下拉列表中你应该能看到刚刚启用了直通的那个USB控制器。选择它并添加。一个至关重要的细节添加PCI设备后检查该设备的配置。确保预留所有客户机内存选项是勾选的。这个选项意味着在虚拟机开机时ESXi会为它锁定并预留全部配置的内存。这对于PCI直通设备的稳定工作是必须的否则可能导致虚拟机无法启动或设备访问错误。保存虚拟机的配置。4.3 步骤三启动黑群晖并识别硬盘启动黑群晖虚拟机并通过Synology的Web界面如http://[群晖IP]:5000登录。进入存储管理器-HDD/SSD。如果一切顺利你应该能看到除了原有的虚拟磁盘通常是引导盘和系统盘之外多出了一块或多块硬盘其型号就是你直通的USB硬盘。如果在这里看不到硬盘请按以下顺序排查检查黑群晖内核日志通过SSH登录黑群晖需在DSM控制面板中开启SSH服务执行命令dmesg | grep -i usb和lsusb。查看系统是否识别到了USB控制器和接入的存储设备。dmesg输出中如果有类似New USB device found, idVendorxxxx, idProductxxxx的信息说明设备已被系统识别。检查硬盘状态执行lsblk或fdisk -l命令查看是否有新的块设备如/dev/sdb,/dev/sdc。有时硬盘被识别为块设备但可能因为分区表问题未显示在存储管理器。驱动问题极少数情况下可能需要为黑群晖编译并加载特定的USB控制器内核驱动。这对于常见芯片Intel, ASMedia几乎不需要但如果你使用的是非常老的USB 3.0扩展卡比如Renesas芯片可能会遇到问题。这属于进阶问题需要寻找对应的驱动并手动安装。4.4 步骤四初始化与创建存储池在存储管理器中看到硬盘后剩下的操作就和物理群晖完全一样了点击存储池-新增-创建新存储池。选择你刚直通进来的物理硬盘。选择RAID类型单盘、SHR、RAID1等。对于单块USB硬盘通常选择Basic无数据保护。选择文件系统Btrfs或ext4。Btrfs提供了高级功能如快照但ext4更成熟稳定。对于外置USB硬盘我个人倾向于选择ext4兼容性更好。按照向导完成创建。之后你就可以在存储空间中创建共享文件夹开始使用了。5. 深度避坑指南那些教程里不会写的“暗礁”以上是理想路径。但现实往往骨感下面是我踩过或见过的典型问题及解决方案。5.1 坑一ESXi中找不到或无法启用USB控制器直通现象在PCI设备列表里根本看不到任何USB控制器或者看到但按钮是灰色的无法切换。根因与排查BIOS设置未开启这是最常见的原因。请再次进入BIOS确认VT-d/AMD-Vi已明确启用。有些主板在开启VT-x后VT-d是另一个独立选项。控制器被ESXi系统占用部分主板将某些USB控制器尤其是用于管理口或内部接口的标记为“必需”ESXi启动时必须占用。尝试将你的USB硬盘盒插到主机不同位置的USB口前后面板都试试看看对应的控制器是否会出现在可直通列表里。通常第三方芯片如ASMedia ASM1142的USB控制器比芯片组原生的更容易被允许直通。ESXi版本与硬件兼容性非常老或非常新的硬件可能与特定ESXi版本存在兼容性问题。可以尝试在社区搜索你的主板型号ESXi版本“USB passthrough”关键词。5.2 坑二添加PCI设备后黑群晖虚拟机无法启动现象启动虚拟机时任务进度条卡住最终报错失败。根因与排查内存未预留这是最高频的原因。务必检查虚拟机设置中为那个PCI设备勾选了预留所有客户机内存。如果没有ESXi无法为直通设备保证连续的内存空间DMA所需。PCI设备冲突极少数情况下直通的USB控制器可能与虚拟机内虚拟的其他设备如虚拟SATA控制器存在资源冲突。可以尝试调整虚拟机的PCI插槽编号在虚拟机设置的.vmx文件层面操作需关闭虚拟机后通过SSH修改但这属于高级操作。错误信息解读关注具体的错误代码。例如如果提示“Module ‘DevicePowerOn’ power on failed”通常就是内存预留或设备本身的问题。5.3 坑三黑群晖内能看到硬盘但无法初始化或频繁掉线现象硬盘时有时无或创建存储池时失败报错。根因与排查供电不足请再次检查3.5寸硬盘盒的外接电源是否牢固连接USB供电不稳是导致硬盘掉线、产生I/O错误甚至坏道的最主要原因。使用质量可靠的电源适配器和数据线。USB硬盘盒休眠冲突一些USB硬盘盒有自动休眠功能。当硬盘休眠后黑群晖尝试访问它可能无法及时唤醒导致超时错误。尝试在硬盘盒上寻找物理开关关闭休眠或者查阅硬盘盒手册。在黑群晖中可以通过计划任务定时运行hdparm -S 0 /dev/sdX需安装hdparm套件来禁用该硬盘的休眠但这不是所有USB设备都支持。文件系统或分区表残留如果这块硬盘之前在其他系统如Windows上使用过可能存在残留的分区或NTFS/ exFAT文件系统。黑群晖可能无法正确处理。建议在直通前先在另一台电脑上用磁盘管理工具或diskpart命令将其完全清空删除所有分区。USB 3.0干扰在某些硬件上USB 3.0信号可能对2.4GHz无线设备如Wi-Fi、蓝牙造成干扰也可能自身不稳定。如果遇到奇怪的问题可以尝试将硬盘盒连接到USB 2.0接口速度会下降但稳定性大增进行测试。5.4 坑四USB设备直通透传的稳定性问题如果你选择的是第二种路径USB设备透传可能会遇到设备“漂移”虚拟机重启后之前直通的USB设备找不到了需要重新在ESXi界面里添加。解决方案这通常是因为USB设备的VID(Vendor ID)和PID(Product ID)在ESXi中识别不稳定。可以尝试在ESXi Shell中通过lsusb命令找到设备的稳定总线地址然后通过编辑虚拟机.vmx配置文件使用usb.quirks参数进行固定。但总体而言USB控制器直通的稳定性远高于单个设备透传。6. 性能测试与优化建议直通成功后性能如何我们来做个小测试。通过黑群晖的File Station上传下载大文件同时通过SSH登录使用dd命令或iostat工具进行简单测试# 测试写入速度 (请将 /volume1 替换为你的USB存储挂载点) dd if/dev/zero of/volume1/testfile bs1M count1024 oflagdirect # 测试读取速度 dd if/volume1/testfile of/dev/null bs1M iflagdirect你会发现对于USB 3.0的机械硬盘持续读写速度能达到100-150 MB/s是正常的这已经基本跑满了机械硬盘的极限并且显著优于通过虚拟磁盘(VMDK)访问的性能因为后者会有额外的虚拟化开销。优化建议启用写入缓存在DSM的存储管理器-HDD/SSD- 选中你的USB硬盘 -状况信息-设置中可以启用写入缓存。这能提升小文件写入性能但风险是突然断电可能导致数据丢失。请确保你的USB硬盘盒和主机供电稳定或仅用于非关键数据。避免作为系统盘或套件安装盘虽然可以但不建议将直通的USB硬盘作为DSM系统或套件的安装位置。因为USB连接的稳定性理论上仍不如SATA。最好将其用作纯粹的媒体库、下载目录或备份目的地。定期检查S.M.A.R.T.幸运的是直通后黑群晖通常能读取到USB硬盘的S.M.A.R.T.信息。定期在存储管理器中检查硬盘健康状况防患于未然。7. 替代方案与场景思考USB直通并非唯一解在什么情况下你可能需要考虑其他方案场景追求极致性能与稳定性方案使用PCIe转SATA扩展卡并将整个SATA控制器直通给黑群晖。这是更专业、更稳定的做法性能无损且完全避免了USB协议可能带来的兼容性和稳定性问题。适合有多块硬盘组建RAID的场景。场景硬盘需要频繁在ESXi和其他物理机间插拔方案坚持使用ESXi虚拟磁盘VMDK。虽然性能有损失但VMDK文件作为一个整体备份和迁移通过vSphere Client导出非常方便。你可以创建一个大的VMDK文件放在ESXi存储中然后将其挂载给黑群晖。场景只是想临时读取一下USB移动硬盘里的数据方案无需直通。可以利用ESXi的Datastore功能。先将USB硬盘格式化为VMFS或FAT32/NTFS需安装ESXi驱动挂载到ESXi作为一个数据存储。然后通过ESXi的Web界面或SSH将文件复制到虚拟机目录中再在黑群晖内访问。这个过程比较绕仅适合偶尔的文件交换。折腾ESXi直通USB硬盘给黑群晖本质上是在家庭实验室环境下对“存储性能”、“数据可控性”和“硬件利用率”之间寻找一个平衡点。这个过程需要你对虚拟化底层和硬件交互有一定的理解。一旦打通你会获得一个近乎原生性能、数据完全自主的存储方案。我自己的媒体库就运行在一块直通的8TB USB硬盘上两年多来稳定无休。记住供电是生命线备份是铁律无论方案多么稳定重要数据的多重备份策略永远不能少。希望这篇超详细的指南能帮你少走弯路一次成功。
