10+ Teraflop systeem

[prestige93]

Hey mede tweakers,

naar aanleiding van een aanvraag op mijn werk hoop ik hier mensen met wat ervaring te vinden
hopelijk kan iemand mij hier helpen!

Wat wil je doen met je nieuwe systeem?
Ik plaats mijn vraag hier na een aanvraag van een klant, het systeem zal gebruikt worden voor het analyseren van beeld en het verschil tussen 2 beelden berekenen (helaas nog wat vaag, hoop meer info te kunnen krijgen op een later tijdstip)

Wat mag het systeem gaan kosten?
Budget van mijn klant ligt rond de 10.000 euro (inclusief BTW)

Zijn er componenten of randapparatuur die je al hebt en mee wil nemen naar je nieuwe systeem?
Geen

Wat denk je allemaal nodig te hebben?
Huidige eisen zijn, 12 cores CPU, 64GB Ram, 1TB PCI-e SSD, rest is niet belangrijk zolang de 10+ Teraflops maar gehaald worden

Heb je nog bepaalde (merk)voorkeuren?
Merk voorkeuren, Asus, Corsair, Nvidia, deze eisen gelden voor: moederbord, voeding en GPU rest mag alles zijn zolang het een A merk is.

Heb je nog bepaalde eisen/wensen?
zoals de titel zegt 10+Teraflops.

Ga je overklokken?
wanneer dit niet nodig is, nee

Wat verwacht je van ons?
Ik heb wat kennis van het hele verhaal, helaas te weinig om hier zeker van te zijn. ik hoop dat hier mensen te vinden zijn die hier meer van af weten en mij wat zekerheid en duidelijkheid kunnen bieden.

Lijstje
deze producten zijn ook gekozen in verband met de voorraden en levertijden

#	Product	Prijs	Subtotaal
1	Intel Core i7-5960X Tray	€ 1.143,-	€ 1.143,-
1	Asus X99-DELUXE/U3.1	€ 409,90	€ 409,90
2	Gigabyte GeForce GTX TITAN Z 12GB	€ 1.803,11	€ 3.606,22
1	Corsair Obsidian 750D - Airflow Edition	€ 0,-	€ 0,-
1	Noctua NH-D15	€ 87,-	€ 87,-
2	Corsair Vengeance LPX CMK32GX4M4A2400C14	€ 192,95	€ 385,90
1	Corsair HX1200i	€ 242,95	€ 242,95
1	Intel 750 SSD Half Height PCIe 3.0 x4 1,2TB	€ 1.099,-	€ 1.099,-
Bekijk collectie Importeer producten		Totaal	€ 6.973,97

Alvast bedankt!

[Bartske]

Kun je hier niet beter mee naar een professional ipv het op een forum samen te laten stellen? Je geeft aan zelf niet genoeg verstand van zaken te hebben, dus dan kan je ook geen ondersteuning geven.

[prestige93]

Bartske schreef op woensdag 25 november 2015 @ 12:49:
Kun je hier niet beter mee naar een professional ipv het op een forum samen te laten stellen? Je geeft aan zelf niet genoeg verstand van zaken te hebben, dus dan kan je ook geen ondersteuning geven.

in grote lijnen kan ik dit systeem wel samenstellen.
het probleem is natuurlijk altijd theorie vs praktijk.

wie weet zit hier wel iemand met kennis van dit onderwerp, proberen kan geen kwaad.

[armageddon_2k1]

prestige93 schreef op woensdag 25 november 2015 @ 12:46:

Wat wil je doen met je nieuwe systeem?
Ik plaats mijn vraag hier na een aanvraag van een klant, waar het systeem voor gebruikt gaat worden is momenteel nog wat onduidelijk

Ik snap dat het engineering-porno is om een systeem van 10k te mogen bouwen, maar als de toepassing niet duidelijk is is de kans op miskopen bijna 100%. Extreme performance ga je alleen halen als je componenten goed uitgezocht zijn voor de applicatie.

Daarnaast vind ik het vreemd dat een klant jou 10k toevertrouwd, terwijl je zelf duidelijk niet genoeg expertise hebt (anders zou je hier niet komen) en dus geen goede support kan leveren.

Laat het aan de professionals voor dit marktsegment over zodat je niet het risico loopt volledig de boot in te gaan. Er zijn al 2 indicatoren die alarmbellen af doen gaan namelijk: onduidelijke klanteneisen, onervaren toeleverancier.

wie weet zit hier wel iemand met kennis van dit onderwerp, proberen kan geen kwaad.

Met 'proberen' bedoel je hier hopelijk een papieren exercitie? Want eventjes 10k uitgeven om het eens te proberen is niet iets waar ik als klant blij van zou worden.

[ Voor 12% gewijzigd door armageddon_2k1 op 25-11-2015 12:54 ]

[croxz]

prestige93 schreef op woensdag 25 november 2015 @ 12:46:
[...]

Huidige eisen zijn, 12 cores CPU

De i7 in je lijst is een 8 cores CPU, voor 12+ cores moet je bij de Xeons zijn. De goedkoopste is de E5-2680.

[prestige93]

armageddon_2k1 schreef op woensdag 25 november 2015 @ 12:52:
[...]


Ik snap dat het engineering-porno is om een systeem van 10k te mogen bouwen, maar als de toepassing niet duidelijk is is de kans op miskopen bijna 100%. Extreme performance ga je alleen halen als je componenten goed uitgezocht zijn voor de applicatie.

Daarnaast vind ik het vreemd dat een klant jou 10k toevertrouwd, terwijl je zelf duidelijk niet genoeg expertise hebt (anders zou je hier niet komen) en dus geen goede support kan leveren.

Laat het aan de professionals voor dit marktsegment over zodat je niet het risico loopt volledig de boot in te gaan. Er zijn al 2 indicatoren die alarmbellen af doen gaan namelijk: onduidelijke klanteneisen, onervaren toeleverancier.

wat betreft hardware heb ik meer als genoeg kennis.
deze klant legt grotere bedragen bij ons als bedrijf neer dus daar zit het probleem ook niet.

ik hoopte dat hier mensen waren met ervaring in dit specifieke type systemen.
volgens mij is dat nog altijd het doel van forums als deze, het delen van kennis.

daarnaast mag je de alarmbellen direct wegstrepen, ik zit helaas met een tussenpersoon welke de vragen bij zijn klant stelt en deze met redelijke vertraging naar mij terug communiceert.

Proberen als in, de vraag hier stellen.

[prestige93]

croxz schreef op woensdag 25 november 2015 @ 12:57:
[...]

De i7 in je lijst is een 8 cores CPU, voor 12+ cores moet je bij de Xeons zijn. De goedkoopste is de E5-2680.

je hebt helemaal gelijk, ben momenteel aan het kijken naar een dual CPU opstelling met xeon v3's. CPU en Mobo gaan waarschijnlijk nog veranderen.

[NLBUURMAN]

volgens mij is dat op dit moment nog redelijk onhaalbaar; http://hardforum.com/showthread.php?t=1834880&page=2

bedenk wel dat GPU's zeer geschikt kunnen zijn voor berekeningen, de berekeningen niet altijd voor de GPU's, als je via GPU's de boel kan versnellen zou dit het een stuk mogelijker maken.

[prestige93]

NLBUURMAN schreef op woensdag 25 november 2015 @ 13:03:
volgens mij is dat op dit moment nog redelijk onhaalbaar; http://hardforum.com/showthread.php?t=1834880&page=2

bedenk wel dat GPU's zeer geschikt kunnen zijn voor berekeningen, de berekeningen niet altijd voor de GPU's, als je via GPU's de boel kan versnellen zou dit het een stuk mogelijker maken.

Inderdaad, toepassing lijkt te worden gebruikt voor satelliet beelden.
deze moeten verschillen gaan berekenen tussen oud en nieuw beeld.

blijft hier wat wazig helaas, ik ga het in ieder geval bij de TS toevoegen.

[Mr_gadget]

En wat als er een component stuk gaat? Heb je dan een reserve onderdeel op de plank liggen? Als je het systeem compleet koopt kan je er een service contract op afsluiten.

[nachtnet]

Ik zie (ook na wat google werk) niet hoe je met consumenten hardware (ook zelfbouw serverhardware) aan 10 Teraflops zou kunnen komen.
Kun je niet beter bij IBM, HP of Dell deze vraag parkeren?

En is eventueel de rekenkracht niet ergens bij een datacenter in te huren?

[ Voor 16% gewijzigd door nachtnet op 25-11-2015 13:08 ]

[prestige93]

nachtnet schreef op woensdag 25 november 2015 @ 13:07:
Ik zie (ook na wat google werk) niet hoe je met consumenten hardware (ook zelfbouw serverhardware) aan 10 Teraflops zou kunnen komen.
Kun je niet beter bij IBM, HP of Dell deze vraag parkeren?

Consumenten hardware welke nu in mijn lijst staat als het moederbord en de processor zullen worden vervangen door Supermicro hardware (redundant voeding, behuizing, moederbord)

exacte types volgen

[Fore!]

Waarom klop je eigenlijk niet aan bij bijv. Dell of HP voor dergelijk systeem?
Is (moet het ook maar geloven) uitvoerig getest dat het een stabiel systeem is.

Een passende carepack erbij en ze staan met een paar uur voor de deur met vervangende onderdelen.

Daarnaast is duidelijk hoe je het nu neerzet 10k overkill, waarschijnlijk komt er nog wel het redundant uitvoeren erbij kijken??

Het komt gewoon niet echt serieus over, zeker niet als je uit (zo lijkt het) de losse pols maar wat consumenten componenten bij elkaar sprokkelt zonder onderbouwing van de gekozen producten of verwachtingen van jouw klant.

[ChojinZ]

rieshjart schreef op woensdag 25 november 2015 @ 13:12:


Het komt gewoon niet echt serieus over, zeker niet als je uit (zo lijkt het) de losse pols maar wat consumenten componenten bij elkaar sprokkelt zonder onderbouwing van de gekozen producten of verwachtingen van jouw klant.

Zo ervaar ik het ook. Het lijkt erop of de componenten min of meer willekeurig gekozen zijn. Sommige keuzes snap ik ook niet. Waarom een Noctua koeler? Waarom geen ECC geheugen? 1200 watt voeding - is dat niet een beetje veel?

Daarnaast is de wens ook onduidelijk. Een 10 Teraflop systeem samenstellen is niet zo lastig. Een 10 teraflop systeem samenstellen die naadloos op je eisen aansluit is een ander verhaal.
En hoe zit het met garantie? Wat mag de downtime zijn van het systeem?

vragen, vragen, vragen...

[LopendeVogel]

ChojinZ schreef op woensdag 25 november 2015 @ 13:20:
[...]


Zo ervaar ik het ook. Het lijkt erop of de componenten min of meer willekeurig gekozen zijn. Sommige keuzes snap ik ook niet. Waarom een Noctua koeler? Waarom geen ECC geheugen? 1200 watt voeding - is dat niet een beetje veel?

Daarnaast is de wens ook onduidelijk. Een 10 Teraflop systeem samenstellen is niet zo lastig. Een 10 teraflop systeem samenstellen die naadloos op je eisen aansluit is een ander verhaal.
En hoe zit het met garantie? Wat mag de downtime zijn van het systeem?

vragen, vragen, vragen...

Maar het is toch leuk om een ultieme game computer samen te stellen? Misschien nog een case vol met verlichting en het plaatje is compleet.
Of het serieus te nemen is? Natuurlijk niet. Hiervoor moet je niet zelf gaan knutselen maar naar een bedrijf stappen die weet wat ze doen. Al ben je nog zo'n kenner, dit laat je over aan de pro's en niet via een bouw je systeem lijstje op tweakers.net

Maar wil je naar de 10+ teraflops dan ga je al richting servers toe en niet consumenten hardware. Jou volledige lijst zou ik aan 1 ding denken: iemand die veel geld wilt weggooien voor een dikke game bak, kan veel goedkoper en beter. Maar de build van jou is totaal niet gericht op teraflops maar op game performance. En daar gaat het ook fout denk ik, jij kan vast en zeker een leuk spelletjes computer maken maar dit gaat net een... tientallen stappen verder.

Indien je 10k te besteden hebt en er performance in de vorm van teraflops voor terug wilt dan stap je direct naar een bedrijf die zich daarin bezig houd. Spijt me, ik wil je niet aanvallen maar dit kan ontiegelijk fout aflopen indien ze jou 10k geven en jij komt met een game pc build.

1. Je zult de 10+ Teraflop niet bij elkaar krijgen vermoed ik met de onderdelen hier in de pricewatch
2. Je zult geen service erop hebben ( down time anyone?)
3. Stel jij gaat dit allemaal proberen te doen, het kan je baan kosten lijkt mij indien iemand jou 10k geeft en jij komt met een game pc aan ( ja ik weet het, je zoekt hier naar advies. Het advies heb je volgens mij al een paar keer gekregen: stap naar een fabrikant die weet wat ze doen. )

Men komt hier niet met dit advies om jou weg te schoppen, maar om jou oprecht te helpen.
Indien hier tweakers advies gaan geven in de vorm van een hardwarelijstje dan zijn deze tweakers fout bezig.
10k euro moet je goed besteden, met vertrouwen, service en garantie. En niet zomaar even bij azerty een cpu bestellen, bij afuture een dikke voeding en daar weer een gpu. Nee dat doe je bij iets als Dell, IBM of noem een big giant maar op.

Jij kan deze klant dus wel helpen, maar nogmaals: ga het niet zelf bouwen, laat dit over aan een genomineerd bedrijf op dit gebied. Dus zoek naar bedrijven die hier kennis en ervaring in hebben ( Dell, IBM en etc ) en zoek daar een leuke powerstation uit. Uiteraard eerst met hun contact leggen, want je zult op hun site niet een PC kunnen zoeken op basis van teraflops ( voor zover ik dat weet ), dat zal dus via e-mail of telefonische moeten.

[ Voor 53% gewijzigd door LopendeVogel op 25-11-2015 13:35 ]

[uname -r]

Allereerst is de klant betrouwbaar? En zijn de intenties met dit systeem wel legaal?
Het klinkt allemaal zo vaag.

Anywho
Belangrijk om te weten is welke software (framework) er gedraaid gaat worden.
Als de software niet geoptimaliseerd is voor multicore CPU toepassingen en/of GPGPU/CUDA dan heb je nada aan een 10K systeem, laat staan het systeem dat je daar hebt staan.

Bijvoorbeeld OpenCV toepassingen "kunnen" mogelijk omgezet worden voor CUDA of zelfs een CUDA array. Maar wederom, deze software moet daar specifiek voor worden aangepast.

Of werkt de software met bepaalde capture apparatuur/expansie kaarten die dit soort satelliet beelden offloaden?

Daarnaast, welk OS komt er op te staan?
Zijn specifieke drivers daar beschikbaar voor en zijn ze stabiel?
Mogelijk bestaan dergelijk systemen reeds?

En dan als alles duidelijk is. Kan je naar een leverancier zoeken voor een systeem. Bij voorkeur één die in die specifieke richting ervaring heeft. En een goede support kan bieden.