[服务器]HPEMicroServerGen10Plus更替Gen8遇到的一些事

转眼间14年买的Gen8快要七年整了。当年在校4人宿舍空缺了2人。趁此机会有空间摆在身边。在校陪伴了一年多做了很多事。说起来夜间闪讯断网全是靠它解决。配了R7000HPEMicroServerGen10Plus更替Gen8遇到的一些事还挺欢乐的。离校后安置在老家由于工作关系基本处于空闲状态。偶尔下下电影写点blog。本来一切安好。但是市电并不稳定。没有配后备电源的机子时不时断电重启。起初没有在意。感觉硬盘质量很好。好景不长。某一天外地远程时发现无响应。喊了家人重启还是无效只能先断电抽空看看。后来排查是机械硬盘smart完全无法读取。但没有彻底损坏硬盘进入一种低速状态。通过diskgen救回了大量静态数据。然而集中在mysql数据库的那片区域几乎完全无法读取。优先导出了能导出的其他数据。最后在多次折腾那些无法读取的数据时磁头可能彻底暴毙了。连原本还能读的数据区也只能十几KB的速度响应。看来是真的没办法了。巧的是硬盘刚好2年过保没几天。经历了这次灾难后Gen8就彻底闲置了1-2年。然后是18年底左右吧。升级了一些设备。刚好有空想起了闲置的Gen8。配了SSD和UPS后再启动。HPEMicroServerGen10Plus更替Gen8遇到的一些事还是装回了熟悉的winserver。不再折腾all in one而是能独立的尽量都分离出去基本只跑iis+php和文件服务器了。看着新出Gen10 AMD基本没啥新意觉得Gen8买的真值。随着时间推移来到2020年看到新出的Gen10 plus。一直很心水体积的改动和解决了1U电源的诟病。打算等个好价弄一台。说起来gen8当时国行3000整提的低配。到手就换了e3 1230加了一条8G内存总共10G。配硬盘算起来6000+了（要是没比赛的奖金这台机子买的可不会那么顺利)。这次入手的Gen10 plus也是低配换E 2236+32G的组合。算起来跟当年Gen8的价格也基本差不多了。没有太多新功能整体偏向提升和改进。而不是新增

碎碎念大致就这些吧。已经有大佬开箱过好几次了本次仅简单记录下换代碰到的一些事。不出意外的话可能是最后一次折腾家庭集中式服务器了。随着年龄上去。全部自己实现的乐趣会慢慢衰退。也许成品的群晖这些会更合适吧

开箱

德国C家直邮的。巧的是刚下单隔天德亚就有货了。错过了价格不错的高配。其实一开始并不打算买低配的

这个支付宝付款还有手续费。差不多3150左右到手将近20天

拆的时候发现和其他人开箱的包装稍微不一样

不是发泡绵。而是薄塑料。好在这个裸机重量比Gen8轻很多

附件很简单。一个外置电源还有侧边橡胶垫

180W。19V 9.23A。逛了圈淘宝。发现有个大功率的氮化镓。感兴趣的可以看看。由于我不打算上显卡。200W的话绝对够用。180W并不是绝对保险。有传言氮化镓衰减很快用不了几年。不知道是真是假

然后就是本体了

贴了包干燥剂。其实并不是很喜欢这个绿色的标志。值得注意的是Gen10 Plus正面居然是10G速率的USB3 GEN2口。少掉了GEN8前置的大蓝灯。硬盘坏了也没见变色过。去掉了更好

背面变化就是原来双口换成了4网口的intel i350。多了一个DP显示接口。全部换成了USB3.0 5G。而Gen8还有2个USB2.0的口。ilo管理口变成独立配件。不再集成。其实我觉得20年的款。上不了10G或5G。怎么的也上2个2.5G的网口那真的就完美了。4口千兆现在来说意义不大了。算是一大遗憾吧

然后是底部。不再是Gen8那样的吊牌而是直接贴纸。已经预装了橡胶脚垫。所以立起来可能并不是很美观。然而放机柜里的没啥区别就是了

打开顶盖可以看到PCIE处的空间非常紧凑。而上方的口并不能安装别的设备只是将ilo5控制口当成独立配件来选配。这个怎么说呢出发点很好。实际上缺点很明显就是这样设计后散热没法解决了

前置面板变成了掰开的方式。当然也提供了锁死开关。由于这个面板是一体的。你会发现如果有USB插在前置面板。将必须拔下USB设备才能卸下面板

拆下前面板后。可以看到中间一排螺丝。这是给硬盘安装留的。没了gen8的小扳手。HPEMicroServerGen10Plus更替Gen8遇到的一些事需要自己配螺丝刀。直插式的盘位

Gen10 plus只提供了4盘位。盘位具体编号中间有钢印图片可能不是很明显。纯螺丝固定可以说非常简陋了。而且没法改造减震

然后是内部。如你所见。Gen10 plus对空间压缩非常极致。几乎没有多余位置。所以连SSD位也没法加入。虽然HP隔离了一个风道出来。可实际上因为一条数据线效果非常差。因为风扇位根本就没有给紫色区域产生空气流动作用

从侧面可以看到。左侧紫色区域为什么几乎无气流就是因为这个pcie的设计位置影响了散热。没有完全隔出风道。好像只是设计用来固定的。然后后续我稍微试图优化散热但是失败了。如果是低配G5420版本。可以尝试将右侧前置进风口完全堵掉。那样会减轻左侧无风带的压力。我不清楚那些上显卡或者其他发热大的设备的人是否有很大影响

原配的8G内存。三星的。给到了机器最高的2666免去了更换的麻烦

然后这是新加的32G。买的是镁光的。但发过来是三星的。良心。说起来现在内存涨了好多。本来想直接上到64G的。等以后降了再换吧。目前8+32看着是够用了。如果能上128那用途就完全不一样了。这就是题外话了

不知道是拆机还是组装的。总之能过测。由于ECC内存测试非常麻烦。我只能用机器自带的测试功能检测

这是主板自带的功能。就算它合格了吧。因为gen8当时买的金士顿过测条子用了那么多年一点问题都没有

然后是intel XEON E 2236。你觉得这U看着是不是没问题。然而换U过程并不顺利可谓是本次买这机子最大的糟心事

装了半天系统。网页挂载iso真的巨慢。进系统习惯性的看看硬件。打开CPUZ。好像哪里不对。这怎么有个尾巴

挨打也是。这CPU已经涨了那么多。心疼高价买的居然还不是正式版。瞬间不高兴了。要知道现在2236价格已经非常离谱了。比我的i7 10700K都高的价格性价比可以说非常低是负的。然后联系了商家退货又找了一家。才发现现在芯片缺货好严重。ES都涨价前的正式版价格要高。这是万万没想到的

最终加到2250拿下。买的终于是正式版了。E2236之前可是才1800左右。这价格涨得就可怕。如果拿G5420置换那还是可以接受的

看看G5420涨价后的价格。换句话说机器省下的钱又花在CPU和内存上了。因为内存也涨了近400

细心的可能会发现。ES版的步进和修订居然跟我这块正式版一样。那是不是说明之前那个ES其实也能勉强凑合吧。还是正式版现在能改了。总觉得这正式版也用着不安心了

简单测下。直接翻倍gen8的e3 1230

一些尝试

ILO芯片温度其实gen8时期就很高。而给出的安全温度也很高能到105。这次由于PCIE空间问题ilo芯片贴着非常近。感觉要尝试优化一下。看看能不能降到60以下。避免过度积热。可实际上失败了

PCIE槽下方就是ILO5芯片。我测量了下发现空间非常充裕。于是打算加上散热片试试。ilo5芯片的规格大概17-18MM。而周围电阻都是低于芯片的所以买20-22MM的散热片都是不成问题的。高度取决于你的PCIE设备

最终选择了20*20MM的铜片散热。买了6MM跟4MM高的。插上M2转接卡后依然还有大量空间

店家送的是3M 9448A的胶。实际我用了3M 8810的白胶

这是装好后的效果。因为纯铜散热器真的好重。我很担心以后移动或者直立放置的时候忘记了这两片东西。高温会衰减粘性。会有脱落的风险。所以我在周围贴上了耐高温的绝缘胶布。你也可以认为我不信任8810的性能吧

买了2片。本来是打算装网卡的。可是施工难度比较高干脆找了附近差不多大的那个贴上去了

然而我发现。虽然装完铜片后能降到69度。但随着时间会慢慢升到73度。后保持。也就是说会比原来低3度。纯待机的情况下。这个升温过程从原来的十几分钟延长到几小时。当有负载的时候。就如上图显示。回到76左右。因为PCIE设备的热量没有风扇纯被动导致积热

最终结论就是。你可以加。但效果不会很好。除非装风扇或者大量增加面积。介于安全温度高达105。实际上如果你的PCIE设备不会导致ilo5芯片超过90基本上也没必要去担心。不去管它反而更好

看到网上只需短接就能启用ilo5以共享板载网卡方式工作。算是省下一点钱吧

Gen8 迁移 Gen10 Plus

Gen8关机了。这是最后啦。准备迁移盘位

Gen10 Plus开机。这之前还有一段小插曲。纯意外。可以跳过不看。并不好看

windows server 备份是服务器自带的一个组件。需要安装。这东西对系统迁移来说简直是神器。由于Gen8不支持UEFI引导。所以打算趁着这次机会重新部署一次系统。server2012暴毙了。换了2016。从2016直接升到2019一切都很顺利。本次迁移其实是旧2019HPEMicroServerGen10Plus更替Gen8遇到的一些事移到全新安装的2019和直接升级是不同的

关于server系统直升非常方便。保留一切数据和配置。几乎是无感升级。但不同机器迁移不一样。迁移过程中可能碰到兼容问题。于是保险起见只能完整备份。万一失败还有救

裸机恢复 备份整个系统盘即可

然而。意外又发生了。当时配的SSD是intel 545S。单纯当系统盘。在备份近36G数据后报错了。『数据错误(循环冗余检查)』。你倒是一开始就检查下好吗？？？

为了完整的裸机恢复我后续折腾了一个晚上才解决。顺带给smart主动报告了5个坏块

我先是用系统推荐的chkdsk /R 来检测。可实际上测试好几次。chkdsk都显示正常。再次尝试备份的时候却依然报错。后续没有办法只能进PE尝试chkdsk /R /F。依然无效

最烦的是。错误并没有指出哪些文件损坏也没有报告具体位置。想了想还是拿起老本行。diskgen扫一下哪里坏了吧

经过扫描。HPEMicroServerGen10Plus更替Gen8遇到的一些事确实出现好几处问题。感觉事情已经解决大半了。可实际上这是麻烦的开始

太久没用这个了。虽然显示了坏块。也报告了LBA地址。可实际上你根本不知道是这个块被哪些文件占用了。对于迁移的我来说。这肯定不能简单处理。于是先是根据柱面找磁盘数据对应位置。又是LBA地址查扇区

找了半天。还是不知道坏块是哪些文件。但我记得以前是有看过通过一些文件表定位的。却记不起那些关键词了。好在终于在网上找到方法。原来win系统自带有个命令可以通过群集号（簇）来定位文件。只需将LBA地址转换成群集号。win10是这么翻译的原本好像是簇

首先要得到系统盘分区C的磁盘信息。可以用下列命令

得到如下信息

然后得到 (每群集字节数/每扇区字节数)=4096/512=8

接着查看分区起始扇区

系统盘前面还有一个分区。所以起始分区要减去0分区。diskgen里面会帮你算好。所以你可以看到起始扇区就是1026048 【水印档了】

具体公式是 ( LBA地址-起始扇区偏移 ) / (每群集字节数/每扇区字节数) 即得到准确的错误扇区

例 (19394080-1026048)/(8)= 2296004 。然后通过下面的命令得到指向文件

由于过程较为曲折截图并不完整。这是其中一个问题文件。如果你直接输入2296004可能会发现系统报告不存在。不知道是不是损坏的问题还是什么。修复的时候我上下偏移了几个位置比如2296003和2296006可能会指向不同文件。最终你需要在diskgen里的『浏览文件』功能找到fsutil指向的路径。然后指向文件数据起始扇区来核对

举个例子。这里会跳转到需要核对的文件位置。确保计算得出的地址是没问题的。HPEMicroServerGen10Plus更替Gen8遇到的一些事然后你可以通过方向键来移动扇区。根据文件长度推算在范围内即可。然后奇怪的是我直接复制周围相邻报告的几个文件均无任何报错。复制后用diskgen的强制删除功能并重新copy回原位置。让原本地址释放。此时损坏扇区已经没有文件占用了。我放心的点击坏道修复成功修复了2块几乎连续的位置。当然所谓的修复就是填0破坏数据

前两块一个是长期不用的某个软件DLL文件。还有一个是win更新备份dat文件吧。然后最后一个是netbios.sysHPEMicroServerGen10Plus更替Gen8遇到的一些事这个文件。这坏块居然用刚才定位后删除的方法无法解决。多次尝试后我扩大了扇区范围。发现依然无效。怀疑之前修复的是不是方法不对。折腾无果后想到intel ssd不是有自带的一个管理工具吗。试试那个如何

确实。这个工具提供了完整的检测和修复功能。但当我点击检测的时候几秒钟就结束了。居然报告毫无问题？？然后diskgen跳转到问题扇区时依然报错。所以这东西到底有什么用？？？正失望时打算更新下这老旧的固件后卸载掉这无用的软件想想别的方式。最神奇的地方来了。更新固件后需要重启。它居然好了。diskgen扫不出坏道了。但当我用群集号跳转到问题地址的时候。diskgen依然报告损坏。所以看来坏块并没有实际被替换。而是仅仅扫不到了。so。我只知道前两块重新访问问题区域的时候是不报错的。而这个更新固件后重启到底是怎么解决的我并不清楚。至此终于可以完成备份流程了

最终因为迁移整出5个坏块。说起来这SSD一开始用就注意到了通电时间和同期一起插入的机械硬盘明显不一样刚好是另一块的一半。但不清楚是不是有类似休眠的功能还是server系统的问题或是旧固件的缺陷。总之这个24小时通电2年左右的TLC就这么CRC失败出现了5个损坏。具体是不是有其他文件隐性损坏就不得而知了。而且还是配ups没有一次突然断电的情况

这现象不就跟之前突然损坏的机械盘情况非常类似吗。只是这次没坏到关键位置。如果不是迁移需要全盘镜像读取一次。也许就这么隐而不发永远都发现不了。图便宜的民用TLC当服务器跑还是太勉强了啊

后续就很简单了。裸机恢复不适用本次迁移。而系统状态恢复因为文件损坏隐患打算也不用了。而是选择了最繁琐的方式。彻底重新部署。所以我在VM虚拟机里新建了一个server系统。先恢复到虚拟机里。这样当我将SSDHPEMicroServerGen10Plus更替Gen8遇到的一些事移到gen10 plus时就可以对照恢复了。过程较为漫长也很顺利就没啥好说的了。至此Gen8算是彻底退役了

对了。关于SSD安装。左边这种L型的是原先Gen8上用的。新机器不是完全不能用。由于侧边是SSD用的M3细螺纹。Gen10的M3.5螺丝拧不进去。所以不建议装上面2个盘位。倒是底部两个盘位是没问题的。甚至不用这种转接架也能直接使用。至于右边的这种价格偏贵兼容性最好吧

关于功耗和CPU的选择

其实Gen8一开始我用的是原装的那个45W散热器跑TDP70W的e3 1230。满载几分钟温度就爆了。实际上能撑多久并不清楚。后来看到有卖65W的高配原装散热器后是很多年后的事了。发现也是压不住的。风扇转速上去直接呼呼呼。但至少能满载稳定了。不会像之前那样存在过热风险

因此这次参考网上servethehome给出的评测发现他们标的E 2236裸平台功耗MAX 126W。觉得就像1230一样是最优选。于是又是一个坑

这是收集的一些性能参考

2倍的E3 1230性能。估计等效6核的10700。原本是打算高配2224直接加个内存就算了。由于最终买了低配。看着2224的4C4T。比1230还少4个线程就很不爽一开始是有打算2234的。但看着几百的差价就多2核最终还是一步到位2236决定。经E3 1230的65W压70W。本以为80W的2236应该问题不是很大才对。可实际上还是有很大隐患

这图模拟日常低功耗。微偏高的环境。比原GEN8的50-60W高了进10WHPEMicroServerGen10Plus更替Gen8遇到的一些事左右的功耗

这是模拟满载环境。令我没想到的是。满4盘位+PCIE 1*NVME。的输入功耗居然直接上到165-170W。输出没设备测不了。而且温度就不说了。一开始就没觉得能压住。几秒就到80。1分钟就90往上走了。跑了几分钟ilo里风扇转速已经很高了。但显示的温度一直不高。与系统里直接查看实时温度偏差有点大。从升温情况来看这9代志强好像也是硅脂不是钎焊。温度来看比当时45W压69W的情况要好一些。对我的使用环境来说。还在安全范围内

而后就是外置电源的功率问题了。一开始提到200W肯定够用的原因就在这里了。额定180W的被动散热电源。长期保持临界功率运行是很容易出问题的。此时我的硬盘还没有满负荷工作。比起CPU温度。电源的问题更大。保险起见我建议同样采用2236的用户禁掉超线程或者几个核心以免极端情况下过载烧掉电源,在满盘位的情况下一定要关注下功耗问题。别轻信一些网站的数据。总之这机子2224或2234就够了。稳定还安全。这代给人的感觉是算得真够死的

然而我始终觉得这机子准备上显卡当HTPC的用户真的不如其他方案。很可能只有G5420能安心用了。倒是这代体积控制是真的香

只缩减了电源和光驱位。体积却能减少那么多。除了散热变糟。整体是不错的

移回原本安置Gen8的位置。后面我立起来放置了。没有拍。当初买机柜是考虑防火+减噪。至于减噪效果并不好。机械硬盘的穿透声太强。还是无解。好了。本次迁移笔记就这么多了。相较于Gen8日常功耗提升10W。满载提升50W+。最后谈下这款机子的感受吧

电源外置后主风扇尺寸却变小了。有人说噪音明显降低。但我使用来看。硬盘位是直插的但不紧密。这点就很不适合摆在家里。共振会更严重。与其风扇声音变小了多少不是重点。而是机械硬盘的噪音比风扇要大。如果有负荷风扇转速上去后噪音基本没有区别。关于噪音的改善唯一值得高兴的就是1U电源风扇不见了

尺寸的压缩带来的是散热的劣化。尤其是PCIE的位置。由于没有具体测试过不太清楚发热大的设备温度会到什么程度。如果后期考虑5/10G网络+NVME共存的方案。不知道会不会有新的设备。目前能买到的这几个感觉还是太贵了。貌似发热也挺厉害的。原装散热器真的能压住高配满载的E2224吗。表示有些怀疑。整体散热比预期要差很多。连带把硬盘的工作温度也拉高了5度不等。可能和现在夏天气温上升也有些许关系

偶数盘位的缺点就是需要系统盘的环境不好解决。HPEMicroServerGen10Plus更替Gen8遇到的一些事要是主板能给个M2就完美了。其实侧边再加宽一下明明可以塞下一个ssd位置的。板载的USB2.0口对我来说毫无作用

前置的两个10G USB口是很神奇的东西。唯一可开发的地方了。但我发现居然不能用来引导系统。要进系统才能用。后置的4口没问题

ilo模块独立卖本来是挺好的。实际上还不如直接集成。浪费了一些PCIE的扩展空间。少个盘位就是很不爽

后置4口网卡I350有些遗憾。提供sfp+或者2.5g才是2020年该出的东西

相较于老物Gen8来说是全面的提升。这点是没话说的。而且从PCIE扩展性偏低来看。低配的G5420单纯当轻量级服务器完全是够用的甚至还能勉强改HTPC。总觉得这代为了体积牺牲了太多以至于上限很低。不如直接买成品NAS或自己搭建了。作为文件服务器前置可扩展性很大。PCIE转接外置sas扩展也可以。但是板载的4口千兆依然是最大的痛

还是稍微带下winserver的经验吧。字已经有些多了。目前核心服务是文件服务器。配IIS+PHP组的wordpress搭图片影音管理自嗨。外网IPV6直连。一个盘位被单独用来存监控。对文件的存储的安全性除了系统盘已经全换成refs。跑了2年多很稳（因为没必要检测错误。所以你可以认为坏了也不知道。哈哈。并没有开启完整性校验功能）。而后说下重复数据删除。这东西对H265编码的高压文件几乎完全无效果。对几十G的无压缩原盘有5-15%左右不等的效果。所以玩NAS存影音的话这东西还是没啥意义。hyperv早年组ALL IN ONE的时候玩过。巴不得把什么功能都塞进去。现在不整了。能独立的都独立才是王道。但由于兼容性太差换vm折腾过。要问为什么不跑esxi。如果当年是esxi。怕是连数据都不用救了它并不适合我（如同当年GEN8的开箱也是有写过的。放自己服务器里就这么永远没了）全直通也许会好一点。当初玩过几天后最终还是决定底层跑winserver。虚拟化目前已无需求。能直接跑win程序如vscode这些远程一下就很实用。除了文件同步涉及安全性不好实现。其余类似成品NAS的功能大部分都可以更好的折腾实现。其他各种成熟的方案win环境都有很好的选择

HPEMicroServerGen10Plus更替Gen8遇到的一些事