linux安装freenas_FreeNAS踩坑记

• 遇事不决，重启大法。UI里的各种设置（MTU，DNS）不是即时生效的，要重启！

安装系统

• 设想是根据建议用2个16G Sandisk做freenas-boot盘，这样坏了1个启动盘也有另一个备上。最后也是这么操作的，但是中间有点曲折：
  • 一开始用了个远古64G ssd，心想可以把ssd的配置克隆到u盘当boot，结果发现我想多了；
  • U盘一开始拿了个金士顿32G 3.0的写HDD+做启动盘，结果死活认不出。网上说是ultraiso不行，要换rufus，选dd模式；
    • 说到rufus，FreeNAS-11.1-U7的ISO写入的时候是有弹出dd模式给选的，然而11.2没有。慎重起见最后装的是11.1版本，以后有空再升级好了；
    • 更新：rufus版本问题：rufus早期版本2.9.934导入iso后直接是“DD镜像”，这个版本的rufus实测可以直接写入最新版本的FreeNAS-11.3-U4.1。而3.x版本后rufus却没有dd模式可选
  • 然后试了好久还是不行，又找了个远古4G不知名的2.0 U盘，居然就成功了，Sandisk也是2.0的，估计跟H67主板原生不支持3.0有关系。远古大坑；
  • 由于中间2个Sandisk都做过启动盘失败，然后由于写入MBR模式，出现好几个隐藏盘、未知盘；解决方法是在不导入iso文件的情况下，在ultraiso里用hdd+空写一遍，才能变回正常U盘；
  • 由于不明原因，4G的U盘虽然能够正常boot，但进去Install界面点不了Install。结果发现要插2个Sandisk的时候就可以，反正可以过这bug就没管了。但复选2个Sandisk有一个failed，只能选一个，安装完成后再做raid1；
  • 做完做raid1，重启，有个告警提示没注意，重启没起来。原来是UI界面显示了raid1成功，2个U盘都online，但其实还没同步完，我日他大爷；
  • 参考了一哥们在命令行下一阵捣鼓未果。从头再来，慢慢等同步完，大功告成！

万兆网卡

• 万能的宝一家5钻店下了2个万兆网卡，一条线+2个模块，居然一次点亮。只是一开始传输速度不给力。后来参考了Jumbo Frame设置。万兆网卡的Jumbo MTU：
  • 在Windows侧网卡设置Jumbo Frame项填9014；
  • 在FreeNAS侧Interface下对应的网卡Option项设置mtu 9000；
  • 应该是Windows设置里计算了L2的包头，FreeNAS那边没算，产生的偏差。也可以用iperf测一下速度，Windows这里MTU改9000、9014、9028都测一下，选速度最大的那个MTU项；
  • 别在FreeNAS那边改，网卡的MTU配置不重启不生效！

存储设置

• 做存储的时候：
  • 卷的压缩就别开了，实测导了5T文件过去，开了默认的lz4情况下，顶多1.01x压缩率；
  • 关了还能提升小文件传输速度；
  • 说到写小文件是真的蠢，才10几KB/s，100GB要写一天；
    • 结果发现更蠢的是用everything监控了share的盘，勾了实时监控文件变化。关掉everything以后能100KB/s-10MB/s了；
  • raidz是不能新增一块硬盘扩容的，3个盘的raidz不能升级成4个盘的raidz，更不用说4个盘的raidz2，只能把数据拷贝出去，拆raidz，再组新raidz/z2；
  • 这个沙雕特性据说17年就fix了，等下一版就可以加硬盘扩容。一等等到19年了。

总结：如果不是硬件选型、软件版本都跟着别人的成功经验走，FreeNAS这东西真的是坑多慎入。

网卡过热导致死机

近来freenas总是死机，由于之前更新过扩展卡，一直在怀疑是扩展卡问题，换了2个牌子的扩展卡都无果。

• 万能的宝新买的10G网卡由于是被动散热，最近这天气开了空调都热得直接烫手；
• 给新网卡加风扇散热无效，应该是硬件未知bug导致freenas死机；
• 拔了这张新网卡，换回老网卡，稳定运行至今。我买新的干啥。。。
• 只是pcie网卡能导致freenas系统整个死机这件事出乎意料。