Faltserver E5-2687W ES

A.Meier-PS3

Lötkolbengott/-göttin
Hab nun endlich mal Zeit gefunden einen kleinen Vorstellungsthread über meinen E5-Server zu machen. :)


Gleich mal das wichtigste vorweg > die Faltleistung: ;)
P8101 ~17:10min bei ~240kPPD
P8102 ~13:30min bei ~350kPPD
und das Ganze mit 345W Verbrauch :devil:

Faltleistung mit OC:
Hab einwenig an der OC-Schraube gedreht und der Server läuft mit 105MHz BCLK stabil was einen CPU-Takt von 3,25GHz (+150MHz) bei 350W ergibt.
P8101 ~16:20min bei ~263kPPD :devil:
P8102 ~13:03min bei ~368kPPD

Hardware:
CPU's: 2X E5-2687W ES (8/16, Grundtakt 3,0GHz, Falttakt 3,1GHz)
Mainboard: Asus Z9PE-D8 WS
RAM: Corsair Vengeance 8GB 1600MHz 8-8-8-24 (CMZ8GX3M4X1600C8R) > 4X 2GB
SSD/HDD: Samsung P830 128GB, Western Digital AV-GP 2TB
Grafikkarte: Asus GTS520 512MB passiv
Netzteil: Seasonic X-560
Gehäuse: SilverStone Raven SST-RV03B-W

Als OS ist Ubuntu 12.04 LTS 64bit zum Einsatz gekommen und mit dem V6 wird natürlich BigWU gefaltet. :devil:

Der Server ist nicht ganz ein 100%-Faltserver, da ein miniDLNA (DLNA/UPnP-Server) mitläuft > bietet sich bei einem 24/7-System gerade zu an. ;)
Sicher könnte man noch ein paar % mehr PPD herausholen in dem man ein anderes Ubuntu ala 10.10 verwendet und keinen miniDLNA mitlaufen lassen würde, aber für mich passt es so. :schief:


Aufbau:
Hier ein paar Bilder des ganzen Aufbaus:
Front.jpg Deckel.jpg DSC_0047.JPG DSC_0041.JPG DSC_0042.JPG

Beim Aufbau hatte ich zwei Knacknüsse:
1. Für die Kühlung kammen die beiden Wakü-Kühler (MagiCool MC-Block Copper Rev.2) aus dem Dell-Server zum Einsatz > da diese natürlich nie für den 2011-Sockel gedacht waren musste improvisiert werden:
DSC_0028.JPG
Sämtliches benötigtes Befestigungsmaterial gehört zum Lieferumfang der Kühler und es wurde nicht eine Schraube gekürzt. :daumen:
Einzige was man aufpassen muss, ist das man die langen Senkkopfschrauben nicht zuweit eindreht, da diese sonst am Mainbord anstehen. :ugly:

2. Bei diesem Gehäuse wird ja das NT quer zum Gehäuse eingebaut und intern mit einer Spezialanfertig von Netzstecker angeschlossen. DSC_0033.JPG
Leider hatte dieser Stecker einen Wackelkontakt. :(
Was tun? :huh: Alles nochmal auseinadernehmen, das Gehäuse einschicken und hoffen das irgendwan mal Ersatz kommt? > Nein danke. :daumen2:
Hab kurzerhand das Kabel ausgetausch: Da die handesüblichen Winkelsteckern zu hoch waren, hab ich einem Netzteilkabel den Stecker abgeschitten und mit einem Winkelstecker von Conrad bestückt. Stecker.png
Kleiner Nachteil des Ganzen ist das man das NT selber nicht mehr festschrauben kann weil sonst die Gehäuseseitenwand nicht mehr zu geht, aber mich stört es nicht.

Wie bereits erwänd werden die beiden 2687W ES von den MagiCool-Kühlern gekühlt und auch die restlichen Wakü-Komponeten des Dell-Server sind wieder alle am Start: Eheim 1046 230V, Dual-AGB und natürlich der MoRa 3.
Zwei kleine Änderungen sind den höheren TPD der 2687W ES gegenüber den ehemaligen E5645 geschuldet:
1. Alle 9 140mm-Lüfter des Mora hab ich an den Server angeschlossen.
2. Der Mora hat im Schreibtisch 4 zusätzliche Lüftungslöcher (Ø 102mm) bekommen. DSC_0023.JPG


Belüftung des Gehäuse:
2 180er (Boden) und 2 120er (Front) blasen frische Kühlluft ins Gehäuse und ein 120er (Deckel) saugt die warme Abluft ab.
Die "überschüssige" Frischluft entweicht durch Luftschlitze im Deckel und durch ein Lüftergitter an der Rückseite.


Temperatur:
Der Server und mein 1090T mit seinen beiden GTX460 teilen sich ja den Mora, folglich variert auch die Temperatur wen der 1090T läuft:
Server solo: 50-54°C, wärmster Kern 56°C
mit 1090T: 55-59°C, wärmster Kern 62°C


Fazit:
Ich bin mehr als zufrieden mit meinem E5-Server. :daumen:
Wo bekommt man sonst ~700PPD pro Watt (P8102 sogar über 1'000PPD/W). :D
Mit OC sind es ~750PPD pro Watt. :devil:


Ps.: Auf den Bildern sieht man das nur 4 RAM-Riegel installiert sind: leider war in einem der beiden 4er-Kits ein Riegel faul und warte nun auf den Ersatz-Kit.


Nachtrag 1:
miniDLNA:
Kaum zu glauben aber selbst beim Streamen verursacht der miniDLNA eine nicht erwähnenswerte Last > 1-2 Sekunden pro Frame. ;)


Nachtrag 2:
RAM:
Aus einem mir nicht ganz ersichtlichen Grund kriege ich den Server weder im Quad-Channel noch im Tripel-Channel stabil zum laufen und deshalb betreibe ich ihn im Dual-Channel, auch wen mir im Vergleich zum Quad-Channel rund 13kPPD verloren gehen.
 
Zuletzt bearbeitet:
Wie ich es auch schon mehrmals erwähnt habe, da hast du ein Endgeiles System aufgebaut und der Mut das mit ES CPU´s zu realisieren ist schon ein großes Lob wert:hail:

Sehr schöner Aufbau und schön zu sehen das diese "billig" Kühler die nur ein Kupfer Boden mit Mikrostruktur besitzen in der Lage sind solche EXTREM Cpu´s zu kühlen und das doch noch mit ansehnlichen Temps.

Hoffe er wird dir und Unseren Team lange viele Punkte bescheren und viel zur Forschung beitragen können:daumen:

p.s. Warum hast du eigentlich die kleinen lüfter extra noch auf die Spawa´s gesetzt? Reichen die beiden 180er im Boden nicht aus oder ist es nur zur Sicherheit?
 
p.s. Warum hast du eigentlich die kleinen lüfter extra noch auf die Spawa´s gesetzt? Reichen die beiden 180er im Boden nicht aus oder ist es nur zur Sicherheit?
Meiner Meinung nach werden die SpaWa's mit den 180er zu wenig gekühlt > allerspätestens nach 10s nimmt man die Finger mit Freude weg. :ugly:
Vor allem die SpaWa's des oberen E5 bekommen kaum was von der Kühlluft ab und deshalb geh ich mit den 3 60er auf Nummer sicher, da er mir schliesslich lange erhalten bleiben soll. ;)

Edit: Achja, die SpaWa-Kühler werden bei Belegung aller RAM-Bänke vom Luftstrom der 180er abgeschnitten > sprich werden nicht direkt angeströmt. :ugly:
 
Zuletzt bearbeitet:
Wird Zeit für ein Update hier, da seit letztem Herbst und dem verschmorten EPS-Stecker sich einiges geändert hat im Server :schief::

Hardware:
CPU's: 2X E5-2687W ES B0-Stepping (8/16, Grundtakt 3,0GHz)
Mainboard: Asus Z9PE-D8 WS
RAM: Mushkin Copperhead (996772) 7-8-7-20/1600MHz 4X2GB + Mushkin Redline (998691) 6-7-6-18/1600MHZ 4X2GB > total 16GB
SSD/HDD: Samsung P830 128GB, Intel Serie 330 20GB, OCZ Agility 3 120GB, Western Digital AV-GP 2TB
Grafikkarte: Asus R.O.G. GTX780 Poseidon
Netzteil: Seasonic X-750
Gehäuse: SilverStone Raven SST-RV03B-W


Wasserkühlung:
2X MagiCool MC-Block Copper Rev.2 für die Xeon's
GTX780 durch den Werkseitig verbauten Hybrid-Kühler
MORA 3 (9X140mm)
Dual-AGB
2x Eheim 1046 230V


IMG_20150715_230159915.jpg IMG_20150407_043022491.jpg


Betriebssysteme:
Als Falt-OS ist Ubuntu 14.04 LTS 64bit mit dem Kernel 3.2.0-67-generic im Einsatz.
Wenn er am falten ist, läuft nach wie vor ein DLNA/UPnP-Server mit > bietet sich bei einem 24/7-System gerade zu an.

Da ich mit den System auch Game, ist ein Win7 Ultima 64bit als Gaiming-OS installiert.


Faltleistung und Stromverbrauch ohne Optimierung:
Xeon 3,25GHz BigSMP 30 von 32 Threads > ~95kPPD
GTX780 1137MHz > ~195kPPD
Total ~290kPPD
Sämtliche Spannungen auf "Auto" > 590W


Faltleistung und Stromverbrauch mit Optimierungen:
Xeon 3,25GHz BigSMP 30 von 32 Threads > ~120kPPD
RAM 8-9-7-19 1T bei 1680MHz > das Plus von 25KPPD bei den Xeon's ist auf das Optimieren der RAM-Timings + erfolgreichen Hochrüsten auf Quad-Chanel zurückzuführen
GTX780 1159MHz > ~250kPPD (Core18)
Total ~370kPPD [emoji317]

Xeons Untervoltet 1.080V,
RAMs 1,65V,
GTX780 Spannungserhöhung auf 1,2V

Idle > ~130W
Falten > ~545W
Gamen > ~390W


Temperaturen:
Xeons 53-55°C (wärmster Kern max. 58°C)
GTX780 max. 56°C
 
Zuletzt bearbeitet:
Wird wieder mal Zeit für ein Update hier ;):


Hardware:
CPU's: 2X E5-2687W ES B0-Stepping (8/16, Grundtakt 3,0GHz)
Mainboard: Asus Z9PE-D8 WS
RAM: Mushkin Copperhead (996772) 7-8-7-20/1600MHz 4X2GB + Mushkin Redline (998691) 6-7-6-18/1600MHZ 4X2GB > total 16GB
SSD/HDD: Samsung P830 128GB, Intel Serie 330 20GB, OCZ Agility 3 120GB, Western Digital AV-GP 2TB
Grafikkarte 1: EVGA GTX Titan X SC
Grafikkarte 2: Gigabyte GTX 750 Ti Windforce OC-Edition
Netzteil: Seasonic X-750
Gehäuse: SilverStone Raven SST-RV03B-W


Wasserkühlung:
2X MagiCool MC-Block Copper Rev.2 für die Xeon's
Titan X durch Aquacomputer Kryographics vernickelt und aktiver Backplate
MORA 3 (9X140mm)
2x Eheim 1046 230V


Luftkühlung:
750 Ti durch Accelero L2+ Kühler

IMG_20151213_111612776_HDR[1].jpg IMG_20151213_111711310_HDR[1].jpg Titan X 3.jpg Titan X 4.jpg


Betriebssysteme:
Als Falt-OS ist Ubuntu 14.04 LTS 64bit mit dem Kernel 4.2.0-18-generic im Einsatz.
Wenn er am falten ist, läuft nach wie vor ein DLNA/UPnP-Server mit > bietet sich bei einem 24/7-System gerade zu an.

Da ich mit den System auch Game, ist ein Win7 Ultima 64bit als Gaiming-OS installiert.


Faltleistung:
Die Xeon's befeuern nur noch die beiden GPU's > wenn sie mitfalten würden, würden sie zwei Turbostufen weniger hochtakten und so die Titan X limitieren.
Titan X 1432MHz > ~720kPPD (590-968kPPD)
750 Ti 1386MHz > ~90kPPD (72-112kPPD)
Total ~810kPPD :D


Stromverbrauch:
Idle > ~135W
Falten > ~455W (420-490W)
Gamen > ~390W


Temperaturen:
Xeons 33-48°C
Titan X 33-37°C
750 Ti 55-62°C
 
Zuletzt bearbeitet:
Wird Zeit das Zen kommt :D
Mein 4460 schafft die 980ti bei 1450mhz nur 500-620k PPD
Limitierung ist echt was Böses
 
Wenn dein kleines Maschinchen am Falten ist, kannst getrost im Winter die Heizung auslassen :D
Für mich als nicht-Auskenner, was bedeutet kPPD ?
 
Wird wieder mal Zeit für ein Update hier da uns ja die 750 Ti verlassen hat und sich dadurch ein paar Umbauten ergeben haben :schief::


Hardware:
CPU's: 2X E5-2687W ES B0-Stepping (8/16, Grundtakt 3,0GHz)
Mainboard: Asus Z9PE-D8 WS
RAM: Mushkin Copperhead (996772) 7-8-7-20/1600MHz 4X2GB + Mushkin Redline (998691) 6-7-6-18/1600MHZ 4X2GB > total 16GB
SSD/HDD: Samsung P830 128GB, Intel Serie 330 20GB, OCZ Agility 3 120GB, Western Digital AV-GP 2TB
Grafikkarte 1: EVGA GTX Titan X SC
Grafikkarte 2: Asus Strix GTX 980 OC-Edition
Netzteil: be quit! Dark Power Pro 11 850W
Gehäuse: SilverStone Raven SST-RV03B-W

Titan X 980 2.jpg Titan X 980 1.jpg


Wasserkühlung:
2X MagiCool MC-Block Copper Rev.2 für die Xeon's
Titan X durch Aquacomputer Kryographics vernickelt und aktiver Backplate
GTX 980 durch EK-FC980 GTX Strix - Acetal+Nickel mit der Strix Backplate
MORA 3 (Vorderseite Noisblocker PK2 9X140mm, Rückseite Bitfenix Spectre 4X230mm) geregelt von einer Bitfenix Recon Lüftersteuerung
2x Eheim 1046 230V

Mora Bitfenix 1.jpg Mora Bitfenix 2.jpg


Betriebssysteme:

Als Falt-OS ist Ubuntu 14.04 LTS 64bit mit dem Kernel 4.2.0-18-generic im Einsatz.
Wenn er am falten ist, läuft nach wie vor ein DLNA/UPnP-Server mit > bietet sich bei einem 24/7-System gerade zu an.

Da ich mit den System auch Game, ist ein Win10 Pro 64bit als Gaiming-OS installiert.


Faltleistung:
Die Xeon's befeuern nur noch die beiden GPU's
Titan X 1429MHz > ~800kPPD (590-968kPPD)
980 1430MHz > ~400kPPD (320-520kPPD)
Total ~1,2MioPPD :D


Stromverbrauch:
Idle > ~150W
Falten > ~560W (520-590W)
Gamen > ~400W


Temperaturen:
Xeons 33-48°C
Titan X 37-39°C
980 38-42°C
 
darf ich mir den mal ausleihen? :ugly:



ach, meine 390X langt mir, da brauche ich nicht son Monster, welches sich am besten noch auf'm Tisch vor sich her langweilt
 
Bigadv gibt es nicht mehr.

Momentan versorgen sie nur die beiden GPUs mit Daten und gelegentlich aktivieren sie einem Neuling den Passkey.
 
Wird wieder mal Zeit für ein Update hier da ich ja die 980 durch ne zweite Titan X-M ersetzt habe :schief::


Hardware:
CPU's: 2X E5-2687W ES B0-Stepping (8/16, Grundtakt 3,0GHz)
Mainboard: Asus Z9PE-D8 WS
RAM: Mushkin Copperhead (996772) 7-8-7-20/1600MHz 4X2GB + Mushkin Redline (998691) 6-7-6-18/1600MHZ 4X2GB > total 16GB
SSD/HDD: Samsung P830 128GB, Intel Serie 330 20GB, OCZ Agility 3 120GB, Western Digital AV-GP 2TB
Grafikkarte 1: EVGA GTX Titan X SC
Grafikkarte 2: Asus Titan X
Netzteil: be quit! Dark Power Pro 11 850W
Gehäuse: SilverStone Raven SST-RV03B-W

2X Titan X.jpg 2X Titan X 2.jpg


Wasserkühlung:
2X MagiCool MC-Block Copper Rev.2 für die Xeon's
EVGA Titan X durch Aquacomputer Kryographics vernickelt und aktiver Backplate
Asus Titan X EWBK-Kühler + Backplate
MORA 3 (Vorderseite Noisblocker PK2 9X140mm, Rückseite Bitfenix Spectre 4X230mm) geregelt von einer Bitfenix Recon Lüftersteuerung
2x Eheim 1046 230V

Anhang anzeigen 911039 Anhang anzeigen 911040


Betriebssysteme:

Als Falt-OS ist Ubuntu 14.04 LTS 64bit mit dem Kernel 4.2.0-18-generic im Einsatz.
Wenn er am falten ist, läuft nach wie vor ein DLNA/UPnP-Server mit > bietet sich bei einem 24/7-System gerade zu an.

Da ich mit den System auch Game, ist ein Win10 Pro 64bit als Gaiming-OS installiert.


Faltleistung:
Die Xeon's befeuern nur noch die beiden GPU's
Aus Stromspargründen fahre ich nur den maximal Takt bei Defaultspannung bei den Titan X (Max-OC mit Spannungserhöhung wären es 720W)
EVGA Titan X SC 1390MHz > ~720kPPD (540-920kPPD)
Asus Titan X 1390MHz > ~720kPPD (540-920kPPD)
Total ~1,4MioPPD :D


Stromverbrauch:
Idle > ~150W
Falten > ~600W (540-630W)
Gamen > ~480W


Temperaturen:
Xeons 33-51°C
EVGA Titan X SC 38-41°C
Asus Titan X 42-47°C
 
Ich will ja nicht protzen, aber mit meiner 1080 und 980ti erreiche ich mehr Punkte. Die 980ti bringt ca 700k - 800k und die 1080 schafft 900k-1Mio. Zusammen liege ich da bei rund 1,6 Mio.
Was ich anders mache? Neueres Linux und warscheinlich auch andere Treiber. Ich empfehle dir dein Ubunut mal zu upgraden auf 16.4. LTS. Das hatte bei der 980ti auch spürbar mehr Punkte gebracht, das waren rund 100k.
Bei deinen Titanen dürfte das sicher noch mehr rauszuholen sein. Ich schätze mal das du mindestens 1,6-1,7 Mio schaffen kannst, wenn nicht sogar an der 2Mille-Marke kratzen kannst.

Mach mal ein Backup-Image und wage ein dist-upgrade, es wird sich sicher lohnen. ;)
Falls du noch den Original Ubuntu-Desktop nutze, empfehle ich dir da auch einen Wechsel auf z.B. XFCE oder was anderes wie KDE. Der Unity-Desktop verbraucht nicht grad wenig System-Resourcen.

Meine Falter momentan:

Screenshot 2017-01-24 09.40.35.png
 
Zuletzt bearbeitet:
@KillercornyX:
Ist mir schon klar das ich Richtung 2.Mio gehen könnte, aber wie foldinghomealone schon richtig erkannt hat schiebe ich so dem Stromverbrauch ein Riegel vor > 720W sind mir im 24/7-Betrieb einfach zu viel des Guten.

Alleine diese 120W mehr würden Ende Jahr 200€ mehr auf der Stromrechnung bedeuten und wenn ich richtig Richtung 2.Mio gehen will, müsste ich mit Mod-Bios arbeiten und dann bleibt es in keinem Fall bei den 120W Mehrverbrauch.
 
Zuletzt bearbeitet:
Zurück