找回密码
 新注册用户
搜索
查看: 47934|回复: 243

[分享] 收到O版重磅捐助的4路opteron 6272准服务器,万分感谢!(刷WCG墙)

[复制链接]
发表于 2015-1-30 16:54:37 | 显示全部楼层 |阅读模式
本帖最后由 金鹏 于 2015-3-21 21:24 编辑

于1月26和27两日分别收到O版捐赠的四路opteron 6272准服务器各种组件,O版连快递费和保价费都给付了,万分感谢

年底忙,一直到下午才抽出点时间把包装拆了拍果照万分抱歉!

此核爆装置包含:
1 /四颗opteron 6272的服务器U
2/超微H8QGi+F四路主板
3/八组(十六根)芝奇F3-10666CL7D-4GBXH(合计16*2G内存)
4/四个猫头鹰NH-12DO/G34专用散热器,带8个12CM风扇


下步需要配个合适的4U/5U加长服务器机箱,估计需要改装才能把SWTX规格主板装进去,
再配个双8 EPS的850瓦+的电源(准备上PC单电源,其次考虑服务器双电源)
最终目的:插上8G+U盘跑tear大神的鸡血系统,继续SMP的CPU客户端,偶尔客串WCG竞赛小日子妥妥的
不辜负O版的大爱捐赠,把FAH/WCG进行到底


暂时先到这里,照例上一张果图,后续折腾会有大量无码图奉献

20150130_155305.jpg



==========================================


初步构思了一下机箱改造方案:准备淘宝上让人在定制4U/5U基础上改装
此加长机箱尺寸:650×430×176MM,主板固定螺丝位和高度都需要控制定做
不知道还有什么没考虑到的?兄弟们帮着看看有无问题,便于去和商家沟通

机箱后部.jpg




PC电源位内.jpg

PC电源位外.jpg
电源.JPG

猫头鹰NH-U12DO(带风扇高16.8cm).jpg
H8QG6 -F_SWTX (41.9x 33.0cm).jpg
==============================

联系了卖家,按照上面方案定做机箱必需50只起档,看来定制无法实现了
只好下单买回来自己折腾改造,练练手

机箱.JPG
===================================

5号中午快递把箱子送来了,忒大了,半人高
下午拆箱后感觉服务器箱子钢板是真心厚啊,虽没有标称的1.2MM,但感觉至少1.0MM的说

1.jpg


问题来了:

貌似最多支持到SSI EEB规格,对于SWTX和SSI MEB规格主板来说还是显得小了
最奇葩的是机箱上孔位没一个能对上超微H8QGi+F上的14个固定孔

2.jpg


还有就是主板和机箱底板之间的螺柱有1CM高,放上猫头鹰NH-12DO散热器后盖不上顶板,貌似差了3-4MM高度,
考虑更换普通PC机箱螺柱可以解决此问题(如果使用NH-U9DO A3也立马解决)
蛋疼的是完全没有风道,只能以乱治乱,考虑在顶盖上开洞装2个14CM风扇抽风辅助散热


3.jpg

还有两个问题很难解决:

1/就是板子一侧不是对齐,有高差,是造成没一个孔位对上的根源,照顾好它才能确定机箱底板新打最终孔位

5.jpg


2/就是因为上面的高差造成现在IO空位刚好有点卡住,所以确定底板新打空位也要考虑它


4.jpg

===============================================
要钻孔需要先研究机箱底板固定螺丝,很给力,还是想充分利用
感觉能拆下来重新插入新钻的孔内用环氧树脂粘结固定,
即牢靠又能降低机箱内主板安装高度
下图是机箱内侧螺丝位和螺柱






下图是与上图对应螺丝位和孔柱,位于机箱外侧背面
貌似六角底座固定在1.2MM板材中,感觉可以冲压取下来,
然后插入新钻的孔中,用环氧树脂粘结(没设备搞成原样固定于板材中)



=============================================================================================
===========================================2.25更新



由于主板左侧突出约1.1CM奇葩造型(见上图)

造成机箱原对应SSI EEB孔位的7个全部右移是造成没一个孔位对上的原因(见下图)




============================================
根据主板安放位置确定了13个固定主板孔位在机箱上的位置(上图)
只要使用3.5-4MM的钻头用手枪钻在上图红圈位置打出13个孔(打洞也是技术活)
就可以使用如下办法使用原机箱上的螺柱和螺母进行对穿固定
1/前期需要平放机箱,用小铁榔头选择仔细敲下螺母(为避免损坏螺母旋紧螺柱接受铁榔头的敲打,同一个螺柱完成13个螺母剥离工作)
从机箱底板上敲下的螺母见图














2/在电钻打出的孔位处使用螺柱和螺母旋紧即可作为主板固定支撑用,很牢靠,高度也比机箱原装低了2MM










3/只要电钻打孔准确,13个螺柱支撑就可依次搞定,主板固定问题即可解决

====================================================
至于电源固定只能在机箱前部硬盘笼处动脑筋了
拿掉下图中硬盘笼中一个横隔




如下图方向放入千瓦级电源,在剩余横隔板上固定
还需进行后续对应螺丝位打孔和对应拍热风口对横隔板进行切割





以上两个工作完成后电源即可如下图在机箱内工作,考验机箱散热啊


===========================================
====================================3月6更新

由于春节期间工人放假,找不到称手的工具,所以动手慢了,言归正传:
按照SWTX主板规格在机箱底板上确定了各个固定孔位,先用2MM的钻头打出小孔,
再次放上主板核对孔位准确否,有偏差的孔位需要适当调整矫正位置
然后再用4MM的钻头修正打出正式孔位,
最后用先前机箱底板上敲下的螺母和固定螺柱对穿旋紧固定
经主板比对基本上13个固定螺柱可以使用12个,仅一个靠近鼠标接口的螺柱偏差太大不能固定
基本上固定螺柱安装完毕可为主板提供牢靠固定了为了避免底板外固定螺丝刮擦或者被撞击,用铁质方管切割后作出四个底脚,
用4MM铝制铆钉卯牢固定,便于水平摆放









===================================
下面是对电源安装在硬盘笼处的改造:
对硬盘笼上拆下的横隔挡板进行切割,打孔与电源固定在一起,就可以通过上下6枚螺丝固定在硬盘笼上了






又在黑东买了2.5转3.5的硬盘转接架和90CM的SATA3硬盘线,
利用机箱随带硬盘固定固定架把贼船60G固态盘放在最右侧硬盘笼上




最后最机箱原放置电源处改造,打孔后装上9CM双滚珠风扇加强机箱散热,
下部空挡处用铝板结合铆钉固定,并留出电源线穿孔





至此机箱改造基本上完成,就等空了装上主板,插上16跟内存,
上上4颗6272后涂抹硅脂,在上好四个散热器,接各种线即可开机试车了





====================================================================
=======================================================3月10日更新

放上主板后发现I/O处毫无遮挡,于是用马口铁皮经4MM铆钉固定在机箱上,代替IO挡板







放上主板,固定了13个固定螺丝位,剩下一个不能上螺丝的就当支撑吧.
然后主板上分别接上24PIN 和2个8PIN EPS电源,再接上7针USB接头和SATA3连接线,
以及power开关/reset开关/alarm/nic3/nic2/nic1/hdd/power等led连接线.
接上后置三个风扇至主板上接口,接上前置7个热插拔风扇的2个D4接口电源,接上贼船SSD的电源和数据线
最后给每个U插上四通道4*4G内存,明天上U和散热器




=================================

顺便请教高手兄弟:
按照单数位正极,power开关/reset开关/alarm/nic3/nic2/nic1/hdd/power等led连接线顺序链接机箱线正确否?
下图为主板前置接口示意图



============================================================
==================================================3.11开机


今天总算把四个U涂抹上MX-4后逐一装上散热器,
由于机箱兼容问题,CPU4的散热器只能侧向单风扇,严重影响风道和散热
机箱内共有前置4个8025和三个1225热插拔高速风扇,后置2个8025和1个9025高速扇,
散热器上四个1225高速扇和3个1225低速扇,共计17个风扇,[em03]








用机箱顶盖盖在机箱上比较了一下,散热器热管顶端刚好高出2-3MM的高度,顶住了顶盖盖板
只好采用三角归位,一角翘起方式才能盖上锁住机箱顶盖,上面不压重物,水平摆放凑合了





怀着忐忑的心情按下了开机按钮,随后就是17个风扇像涡轮式的声音,办公室铁定没发放









自检了十几秒后终于看见开机界面了,但是只是识别到8根内存和1个U,这个郁闷
经请教LYNT兄弟说CPU2处的内存没插好引起,请问其他兄弟有什么不同高见么?








装好鸡血系统后,用TOP查看,的确只有1个的16C,
但是开机BIOS检测到4个SOCKET啊
请兄弟们帮着找出问题啊



=====================================================
=========================================3.12四路64CORE开算




开机自检像O版所说一样,的确检测到16根内存,但是容量只有32G,
我猜测是因为所用芝奇F3-10666CL7D-4GBXH为双面4G即(2×2G)
由于主板对此内存兼容性问题,因此只能识别出单面2G,造成内存16×2G=32G情况
还是因为兼容原因只支持到每个U双通道,或者不是8个node  count,而是应该16个?
请高手释疑
看下图BIOS识别详细内存容量






再说到4路16C问题,见下图,每个SOCKET都能检测到,
但是内核总数只有16,一种为只能使用到SOCKET 0的一个U,另一种是能使用到每个SOCKET的4个内核
总之不正常啊






至此应该排除了内存接触不良或者损坏的因素,先假设每个6272都是健康的,那么接下来重点就放在BIOS设置上了[em03]
在BIOS设置里打开了北桥设置处得IOMMU选项,打开了PNP选项处的即插即用







设置好后重启电脑,滴的一声过后看到了4SOCKET /8节点/64CORE画面,内牛满面啊






最后又打开了HPC选项,开算新bigadv下的大SMP包,跑8106大概TPF=8:20,换算成PPD相当于GTX960跑的CPU跑FAH烧纸吧
由于机箱前后的7个8025风扇达到了6500RPM,三个1225风扇也达到2000RPM,组成的正风压风道,涡轮飞起来的声音不绝于耳[em03]
加上四个老鹰散热器都上了12CM的1800RPM风扇,所以用手直接触摸最让人担心的横向吹风的那个贴边散热器只有微温的手感,应该把4颗6272都压制在50度以内的节奏



==============================================================================

3月19号格调了鸡血系统,装上了2008 R2 DC系统,直接跑WCG了[em02]


1.PNG


开始只能跑32C,感谢 @ManHo兄弟帮着修改了cc_config.xml 文件,才能跑满64C  

2.PNG


下载了tear大神最新的tpc-0.44-rc2,使用TurionPowerControl.exe -psmax 1 后全核64C锁睿频到2.4G
温度暴涨5度+




3.PNG
捕获.PNG



===================================
最后在此对此次折腾过程关键节点给予提示和指导及技术支持的 @Lynt  @ManHo兄弟表示衷心感谢[em02]







评分

参与人数 13基本分 +414 收起 理由
水鬼 + 6 很给力!
471795251 + 4 动手能力太牛了~
yimu35 + 5 辛苦了!
polone + 6 很给力!
lhw828 + 8 灰常好!中国队就靠你了!
CCCP0081 + 30 我擦 神器也
Lynt + 8 很给力!
zflowers + 15 菊花一紧
Schumacher + 14 很给力!
guihuo + 12 为毛我的还没到咧?
wpf999 + 200 恭喜金版,感谢OCW大叔
ONLY + 100 很好很强大!
543019556 + 6 很给力!

查看全部评分

回复

使用道具 举报

发表于 2015-1-30 16:57:32 | 显示全部楼层
回复

使用道具 举报

发表于 2015-1-30 17:09:34 | 显示全部楼层
OCW乃真慈善家也,功德无量!  同时恭喜金版获得顶级重型装备!
回复

使用道具 举报

发表于 2015-1-30 17:18:59 | 显示全部楼层
3213的核爆装备越来越多了,可喜可贺!
回复

使用道具 举报

发表于 2015-1-30 17:23:36 | 显示全部楼层
那梭内存……看谁不顺眼,砸S他。哇卡卡卡~
回复

使用道具 举报

发表于 2015-1-30 18:38:02 | 显示全部楼层
各种口水~~~
回复

使用道具 举报

发表于 2015-1-30 19:02:53 | 显示全部楼层
让我擦擦口水先
回复

使用道具 举报

发表于 2015-1-30 20:12:43 | 显示全部楼层
4个16核,真是疯狂
看看单线程的计算能力怎么样
回复

使用道具 举报

发表于 2015-1-30 20:46:16 | 显示全部楼层
刷wcg的超级武器啊~~
回复

使用道具 举报

发表于 2015-1-30 23:42:56 | 显示全部楼层
好东西好东西!
回复

使用道具 举报

发表于 2015-1-31 09:05:45 | 显示全部楼层
这电脑真强焊
回复

使用道具 举报

发表于 2015-1-31 09:07:37 | 显示全部楼层
太强了~~~~~~神装备
回复

使用道具 举报

发表于 2015-1-31 11:10:09 | 显示全部楼层
请自备柴油发电机
回复

使用道具 举报

发表于 2015-1-31 19:48:42 | 显示全部楼层
好想把玩把玩,还没玩过4P
回复

使用道具 举报

发表于 2015-1-31 20:47:50 | 显示全部楼层

今天我刚好44位………………在你头上
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 新注册用户

本版积分规则

论坛官方淘宝店开业啦~

Archiver|手机版|小黑屋|中国分布式计算总站 ( 沪ICP备05042587号 )

GMT+8, 2024-4-29 18:52

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表