CAD Netwerk Opslag Hoe aan te pakken?

[HellStorm666]

Qua software en hardware gaat er hier het een en ander veranderen.
Één van de punten daarin is de opslag voor ons CAD pakket (Inventor).
Dit draait momenteel op een 1TB SSD op een Windows Share met een 1Gbit LAN.
En dit gaat dus naar een nieuwe opslag toe waardoor de CAD documenten (en eigenlijk alle documenten) op een SVN Vault methode gaan werken.
Voor de office opslag hebben we een 4x 3TB RAID5 setup (op LSI 3108 2GB).
Dit draait op een server welke met een 10Gbit DAC aan de USW48 switch zit.

We hebben 5 constructeurs en 1 jobserver. Daarnaast hebben we nog 17 Office gebruikers.
Samenstellingen waarmee de constructeurs werken variëren tussen de 50.000 items en de 200.000 items.
Op dit moment omvat het CAD deel 655GB en het office deel is 470GB.

Een aantal vragen die ik omtrent deze situatie heb.
1. Hoeveel nut heeft het om de Data-Store van de CAD opslag te voorzien van een 10Gbit NIC en deze te verbinden met een 10Gbit switch en met 10Gbit NIC's bij de constructeurs? (Workstations krijgen een NVMe SSD)
2. Heeft het nut om de Data-Store van de CAD opslag op een RAID1 SSD config te zetten, of is het draaien op een 4x 3TB RAID5 net zo snel? (waar ook de office documenten staan)
3. in geval van RAID1 SSD, SATA600 kiezen, of NVMe/PCIe?
4. (Moet) ik heel RAID laten gaan, en kiezen voor een ZFS NAS (op HDD of SSD of zelfs NVMe?)?

EDIT:
Nog een aantal feiten over bijvoorbeeld een tekening/samenstelling.
253MB
1322 files in de folder
1134 unike items
17264 items totaal

Hiervan worden er wel eens 3 tot 5 tegelijk van geopend in een grotere samenstelling.

[ Voor 12% gewijzigd door HellStorm666 op 13-12-2018 11:12 ]

[Endpoint]

Meten is weten. Trek je nu de 1Gb lijn dicht?

Zelf werken wij met solidworks PDM, deze werkt met een local view. De tekenaar werkt met dus met bestanden op de harde schijf. De PDM server zelf staat op SATA storage, maar nog geen klachten gehad qua traagheid.

Werk je met shared storage en een domein, of heb je alleen en nas draaien

[HellStorm666]

Endpoint schreef op donderdag 13 december 2018 @ 12:57:
Meten is weten. Trek je nu de 1Gb lijn dicht?

Zelf werken wij met solidworks PDM, deze werkt met een local view. De tekenaar werkt met dus met bestanden op de harde schijf. De PDM server zelf staat op SATA storage, maar nog geen klachten gehad qua traagheid.

Werk je met shared storage en een domein, of heb je alleen en nas draaien

Shared storage in een domein (CAD op SSD en S2008, Office docs op RAID5 HDD en S2016)
Copy van een map van 700MB vanaf de office schijf naar m'n SSD gaat met 40Mbit.
iso van 1GB op diezelfde locaties gaat met 500Mbit
Map van 700MB van de CAD share naar mn SSD schommeld tussen de 200Mbit en 500Mbit
iso van de CAD share naar mn SSD gaat met 880Mbit

Als ik echter vanuit Inventor een samenstelling open van 253MB doet ie er 122sec over (20Mbit ong) als ie op de share staat. En doet ie er 72sec over als ie op de SSD staat (35Mbit ong)

Met iperf3 haal ik 942Mbit van de File storage server (864 in reverse) en 944Mbit van de CAD storage server (882 in reverse)

[Endpoint]

Denk niet dat je het juiste shared storage voor je ziet. Heb je een losse storage, Netapp/HPE 3par of Dell emc?

Het traag openen in inventor zou best in je samenstelling kunnen liggen. Open taakbeheer tijdens het openen, dan zie je je bottleneck. Je geeft aan dat je samenstelling meer als 50k items bevat, misschien moeten jullie wat meer met subassemblys gaan werken dan

[HellStorm666]

Endpoint schreef op donderdag 13 december 2018 @ 16:54:
Denk niet dat je het juiste shared storage voor je ziet. Heb je een losse storage, Netapp/HPE 3par of Dell emc?

Het traag openen in inventor zou best in je samenstelling kunnen liggen. Open taakbeheer tijdens het openen, dan zie je je bottleneck. Je geeft aan dat je samenstelling meer als 50k items bevat, misschien moeten jullie wat meer met subassemblys gaan werken dan

Ik heb een server (Supermicro X10DRH-CT mobo) waar 4x 3TB in RAID5 draait op de LSI 3108 2GB.
Daar op draait (nu nog) S2016 welke die 8,4TB als Windows Share ter beschikking stelt aan de domain users.

De bottleneck in het openen met Inventor probeer ik al een behoorlijke tijd te vinden, maar dat wil niet echt lukken.
Taakbeheer (of bron controle) laat nergens een piek zien.
CPU is een procent of 5, mem heeft nog zat over, GPU heeft nog zat over. LAN gebruikt net 2Mbit.
Ook aan de server kant gebeurt er nagenoeg niets.
SQL staat ook een btj te nietsen.
Ook tests met een samenstelling van 253MB, 1134 unieke items en 17164 items totaal (uiteraard bestaat de samenstelling weer uit sub-samenstellingen) geven dit zelfde beeld.

Er lijkt nergens echt belasting te zitten. En toch schiet het niet op.
Mocht je tips hebben waar ik t kan zoeken, dan hoor ik die uiteraard graag.

Het huidige pakket is ProductStream Pro met NxtDim.
De opvolger werkt met een SVN Vault methode (dus idd eerst lokaal halen, dan aanpassen en weer retour sturen).

[Endpoint]

Ben geen held met cad pakketten, en hebben zelf solidworks.

Kan je een pack & go maken? Haal deze eens lokaal en probeer het dan nogmaals. Heb je een leverancier waar je support heb?

[maratropa]

@HellStorm666 is die belasting die je beschrijft op de client met inventor, wat voor workstations zijn dat, wat voor cpu?

Wat voor iops krijgt die ssd voor z'n kiezen tijdens het openen?
Of een bottleneck in SMB oid?

Als je naar een vault methode gaat dan vervalt de bottleneck van werken op de shared storage toch eigenlijk?

[Ernemmer]

Zou het niet een optie zijn om die 5 constructeurs ieders een 1TB SSD in hun systeem te geven en dan alle bestanden te synchroniseren met elkaar. Zo kunnen ze bestanden lokaal openen wat een heel stuk sneller gaat en toch heeft iedereen de beschikking over alle bestanden.

[ Voor 4% gewijzigd door Ernemmer op 13-12-2018 18:21 ]

[HellStorm666]

Endpoint schreef op donderdag 13 december 2018 @ 18:00:
Ben geen held met cad pakketten, en hebben zelf solidworks.

Kan je een pack & go maken? Haal deze eens lokaal en probeer het dan nogmaals. Heb je een leverancier waar je support heb?

Goede tip! Dit had ik al geprobeerd.

Hier de test resultaten.
Gaat dus om die samenstelling met subsamenstellingen.
Totaal 253MB op disk
1322 files op disk
1134 unieke items
17164 items totaal

Getest op 2 systemen.
Van RAID5 share naar systeem A openen = 153 sec
Van local SSD systeem A openen = 131 sec
Files kopieren van RAID5 share naar SSD van systeem A = 27 sec

Van RAID5 share naar systeem B openen = 122 sec
van local SSD systeem B openen = 72 sec
Files kopieren van RAID5 share naar SSD van systeem B = 29 sec

Specs van de systemen:
Systeem A in een Workstation van Dell type T7500 (Xeon E5645, 24GB DDR3, Samsung 840 EVO SSD). met Inventor 2015

Systeem B is een MSI GS73VR 7RF-213NL (i7 7700HQ, 16GB DDR4, NVMe drive) met Windows 10 pro en Inventor 2019 (pricewatch: MSI GS73VR 7RF-213NL (Stealth Pro 4K)

De leverancier waar we support hebben/hadden, CADAC, heeft het spul zo ingesteld.
Later zelf het spul nog omgezet naar SSD's om het sneller te krijgen.

maratropa schreef op donderdag 13 december 2018 @ 18:10:
@HellStorm666 is die belasting die je beschrijft op de client met inventor, wat voor workstations zijn dat, wat voor cpu?

Wat voor iops krijgt die ssd voor z'n kiezen tijdens het openen?
Of een bottleneck in SMB oid?

Als je naar een vault methode gaat dan vervalt de bottleneck van werken op de shared storage toch eigenlijk?

Die belasting is op zowel de DB server, als de Fileshare server als de client.

Ook met de test die ik hier boven beschreven hebt komt de belasting gewoon niet hoog.


Het idee nu is om een Asus HYPER M.2 X16 CARD te kopen.
Hier 2x een 2TB NVMe drive (server/business versie) in te steken in RAID1 en hier de CAD data op te zetten.
Deze kaart komt dan in onze huidige server welke naar ESXi geconverteerd gaat worden.

specs van die server:

#	Product	Prijs	Subtotaal
2	Intel Xeon E5-2620 v4 Boxed	€ 441,95	€ 883,90
1	Supermicro X10DRH-CT (Retail Pack)	€ 726,81	€ 726,81
7	HGST Deskstar NAS, 3TB	€ 189,90	€ 1.329,30
1	Supermicro SuperChassis 826BE1C-R920LPB	€ 1.006,36	€ 1.006,36
1	Qlogic QLE3442-CU-CK	€ 183,23	€ 183,23
1	Supermicro MCP-220-00043-0N	€ 9,08	€ 9,08
4	Samsung M393A2G40EB1-CRC	€ 185,51	€ 742,04
2	Crucial MX300 2,5" 525GB	€ 145,90	€ 291,80
1	Ewent EW7056 Zwart	€ 23,95	€ 23,95
Bekijk collectie Importeer producten		Totaal	€ 5.196,47

De SSD draaid in RAID1 als OS schijf en 4x 3TB in RAID5 als data opslag.

[MewBie]

Je bottleneck lijkt dus in het verwerken van de data door je werkstations te zitten.
Inventor is geloof ik puur single core, dus met betere single core performance valt er veel tijdswinst te halen.

[Endpoint]

Ik dacht ook dat solidworks single threaded was, maar toen ik voor een test een mega assembly opende, knalde hij wel over meerdere cores heen. Onze PDM server staat op SATA storage, denk niet dat nvme je problemen op gaat lossen.

Is er een reden waarom je op een station 2015 en op de andere 2019 hebt? Vaak gaat dat ook niet lekker samen op je svn.

Probeer anders eens blanco settings, en probeer het dan alsnog.

Eventueel kan je het ook naar .step zetten, en dan wil ik eventueel maandag ook wel eens een testje voor je draaien, wel in solidworks dan.

[Ernemmer]

Het probleem ligt zo te zien niet alleen aan je netwerk, aangezien openen vanaf local SSD ook lang duurt.
De XEON E5645 is dan ook wel een erg trage CPU, een 9700k is ruim 2,5x zo snel.
Passmark scores, single 1102 vs 2835 en bij multi is het 6484 vs 17375.
Het andere systeem is al sneller, maar nog steeds traag via het netwerk.

Ik zou echt eens serieus naar mijn eerder aangedragen optie gaan kijken, dat is gewoon de snelste manier en met maar 5 werkstations is het ook betaalbaar en eenvoudig te beheren.

[ Voor 34% gewijzigd door Ernemmer op 14-12-2018 17:18 ]

[HellStorm666]

De ene is nog 2015 omdat ProductStream niet met nieuwer overweg kan.

De workstations worden ook vervangen door nieuwere.
De andere is mn laptop, maar ben geen 3D engineer maar ICT en PLC programmeur.

Deze inventarisatie doe ik om te zorgen dat we voor de nieuwe server (en workstations) het juiste spul aan schaffen.
Die gaan allemaal met inventor 2019 werken en ProFile.

[Endpoint]

Ernemmer schreef op vrijdag 14 december 2018 @ 17:15:
Het probleem ligt zo te zien niet alleen aan je netwerk, aangezien openen vanaf local SSD ook lang duurt.
De XEON E5645 is dan ook wel een erg trage CPU, een 9700k is ruim 2,5x zo snel.
Passmark scores, single 1102 vs 2835 en bij multi is het 6484 vs 17375.
Het andere systeem is al sneller, maar nog steeds traag via het netwerk.

Ik zou echt eens serieus naar mijn eerder aangedragen optie gaan kijken, dat is gewoon de snelste manier en met maar 5 werkstations is het ook betaalbaar en eenvoudig te beheren.

En hoe zie je dat dan voor je, bestanden synchroniseren over 5 werkstations?

Ts geeft aan met een svn te gaan werken, hoe wil je met lokale bestanden/synchronisatie een version systeem op te gaan zetten?

Cad software is zo specifiek, ik zou daar een specialist naar je tekeningen laten kijken, kan zo een vinkje zijn die je ergens vergeten bent in je instellingen

[Ernemmer]

@Endpoint Zelf gebruik ik Dropbox om 3 werkstations te synchroniseren en ik kan tot een jaar terug voor een versie van een bestand.
Ook heb ik een tijdje samengewerkt met een team van een man of 100 en wij werkten allemaal samen via BOX, daarbij kan je ook bestanden lokaal zetten wat erg goed en snel werkte.

De TS zal denk ik liever een offline oplossing hebben en die zijn er volgens mij ook wel genoeg. Owncloud heeft volgens mij ook version control en document locking.

[ Voor 62% gewijzigd door Ernemmer op 14-12-2018 19:49 ]