Extreem trage linux installatie op p4 2,6 HT

[dmnq]

We draaien hier een aantal servers, allemaal voorzien van Fedora Core 1 i.c.m. Ensim Pro 3.7 (control panel pakket).

Er is 1 server bij die problemen veroorzaakt (dat doet hij al sinds hij in gebruik is genomen; toen draaide er Redhat 7.3 op met Ensim Pro 3.5).
De configuratie van deze server:

* Albatron PX865PE Pro
* Intel P4 2,6 Ghz 800FSB HT
* 2 x 512 MB DDR PC3200
* 2 x 80 GB Western Digital UDMA100 7200rpm 8MB cache
* 3Ware Escalade 7000 Parallel ATA Raid controller (RAID1)
* 3com 3c905 100 Mbit NIC

Het systeem is extreem traag bij elke willekeurige bewerking of commando.
Ter vergelijking; de installatie van de upgrade van Ensim Pro 3.5 naar Pro 3.7 duurde 3 tot 4 keer zo lang als op een P4 2,4 (533FSB).

Daarnaast is het hele gebruik gewoon langzaam. Alles reageert traag, zelfs een simpele 'ls' duurt lang.

Ik kan maar niet achterhalen waar de problemen zitten. Dit systeem draait nu al een behoorlijke tijd zo, maar het is niet echt prettig (understatement) werken.

Ik hoop dat 1 van jullie hier ervaring mee heeft of iig een oplossing weet? Alvast bedankt!

PS. Dit is de enige server met een Albatron moederbord. De overige servers zijn allen Asus en Intel (ServerWorks) moederborden.

[Jimbolino]

wat zijn de load averages?

het kan te maken hebben met een rotte hd (bad sectors)
of slechte nic, slechte drivers enz

Gewoon ff de verschillende onderdelen testen...

[dmnq]

Extra info;

Kernel: 2.4.20-20.7smp

[dmnq]

Jimbolino schreef op 10 april 2004 @ 14:14:
wat zijn de load averages?

het kan te maken hebben met een rotte hd (bad sectors)
of slechte nic, slechte drivers enz

Gewoon ff de verschillende onderdelen testen...

Het maakt niet uit of de load 0.1 of 1 is, de traagheid is hetzelfde.
Als ik een willekeurige andere machine pak met bijvoorbeeld een load van 4 (komt zelden voor), dan is die nog sneller in de omgang dan deze server.

[Wilke]

Geheugen getest met memtest?

Wat is de load? Zijn er processen die veel CPU-tijd gebruiken?

Draai eens een tijdje 'vmstat 1' en kijk of er veel geswapped wordt e.d...

[dmnq]

Wilke schreef op 10 april 2004 @ 14:15:
Geheugen getest met memtest?

Wat is de load? Zijn er processen die veel CPU-tijd gebruiken?

Draai eens een tijdje 'vmstat 1' en kijk of er veel geswapped wordt e.d...

memtest geeft geen fouten.

De load is op dit moment 0.80, dus dat valt mee. Het proces dat op dit moment de meeste tijd verbruikt heeft:

PID USER PRI NI SIZE RSS SHARE STAT %CPU %MEM TIME CPU COMMAND
1289 root 9 0 9884 200 56 S 8.2 0.0 2:57 0 MailScanner


Output van vmstat 1:

procs memory swap io system cpu
r b swpd free buff cache si so bi bo in cs us sy wa id
3 0 16492 427672 70188 280052 0 3 45 193 87 143 53 4 0 43
2 0 16492 427828 70240 280204 0 0 116 452 198 158 89 5 0 6
2 0 16492 427740 70320 280384 0 0 180 0 168 92 88 4 0 9
2 0 16492 427684 70432 280564 0 0 212 0 175 154 83 4 0 13
3 0 16492 427328 70484 280632 0 0 56 0 159 120 91 5 0 4
3 0 16492 426548 70508 280760 0 0 88 1280 163 129 90 6 0 4
2 0 16492 426424 70596 280924 0 0 188 0 172 112 85 2 0 13
2 0 16492 425980 70700 281088 0 0 204 0 175 150 85 2 0 12
3 0 16492 424696 70756 281156 0 0 60 0 159 117 95 4 0 0
2 0 16492 425932 70788 281256 0 0 88 1424 197 385 93 7 0 0
2 0 16492 425744 70888 281408 0 0 200 48 201 132 90 7 0 3
2 0 16492 425096 70892 281488 0 0 4 0 138 82 95 4 0 0
4 0 16492 424956 70964 281636 0 0 140 0 157 121 89 5 0 6
2 0 16492 419816 71024 281672 0 0 64 0 157 467 91 8 0 0

Totaal geen swapping dus.

[dmnq]

Ik heb ook alle tests van LTP (http://ltp.sf.net) gedraaid. Geen enkele fout.

Ik ben een beetje ten einde raad wat betreft deze server.

[TrailBlazer]

wat gebeurt er als je de hd in een vergelijkbare server klust

[dmnq]

Dat wordt lastig. Het is een productieserver.
Beide HD's hangen aan de 3ware raid controller.

[WHiZZi]

Wat is de performance van je HDD's en staat DMA aan?

Testen HDD:

code:

hdparm -tT /dev/hda

[Pwigle]

Hehe, de combinatie username, ensim pro, problemen met server en de mail de afgelopen tijd van VDX kreeg, deed bij mij al een belletje rinkelen
Leuk om anders dan via de mail te communiceren

Zelf denk ik ook dat het iets met je schijven, danwel raid controller te maken heeft. Dat zou een hoop verklaren. Check eens de drivers/modules van de raid kaart (vergelijk met andere machines en of er nieuwere zijn) en draai de hdparm. Wat zijn hier de resultaten van ?

Check dit, wellicht heb je er iets aan:
http://dwhughes.home.cern.ch/dwhughes/doc/3ware-servers.html (vooral bij Known 3ware issues)

En nog een quote van een andere site:
http://blizzard.rwic.und.edu/~nordlie/zeus/

It was also discovered that the Myrinet NIC in the master node was only running at a bus speed of 33MHz. Since the 64-bit PCI bus should run at 66MHz, this was a puzzle. We finally discovered that the 3Ware Escalade 7500 IDE RAID controller was only a 33MHz card, despite being of the 64-bit form factor. Some investigation revealed that the card was pulling the 64-bit PCI bus down to 33MHz, including the Myrinet NIC. The 3Ware board was moved to a 32-bit slot, where it could run at the slower speed without bothering any other peripherals. The Myrinet NIC is now the only card in the 64-bit PCI bus, and is running at 66MHz. Rerunning the Pallas benchmark revealed a noticable increase in bandwidth. See results here.

Daarnaast zie ik in de 3ware HCL:

Asus A7M266 AMD 761 Award 1004A PCI-33 Single
Asus A7M266-D AMD 762 Award 1004 64-bit PCI-66 Dual Athlon
Asus CUR-DLS ServerWorks ServerSet III LE Award 6 64-bit PCI-66 Dual P3
Asus CUV4X-DLS VIA 694XDP Award 6 PCI-33 P3
Asus P4B533 Intel 845E Asus 1014 PCI-33 P4
Asus P4C800-E Intel 875 Asus 1009 PCI-33 P4
Asus P4G8X Intel E7205 Asus 1003 PCI-33 P4
Asus P4S533 SiS 645DX Asus 1009 PCI-33 P4
Asus P4S8X SiS 648 Award 1003A PCI-33 P4
Asus P4T Intel 850 Award 1005 PCI-33 P4
Asus PR-DLS ServerWorks GCLE System Set Award 1003 64-bit PCI-X- 133 Dual Xeon
Asus SK8N Nvidia nForce3 Pro150 AMI 1002 beta 5 PCI-33 Opteron

En helemaal geen Albatron (PX865PE Pro)

Lees ook deze pagina (misschien al gedaan) voor veel handige tips en links:
http://www.3ware.com/supportfaq/support_faq.htm

Wellicht heb je er iets aan!
Grt een tevreden klant van vdx

[ Voor 74% gewijzigd door Pwigle op 11-04-2004 18:21 ]

[dmnq]

WHiZZi schreef op 10 april 2004 @ 19:39:
Wat is de performance van je HDD's en staat DMA aan?

Testen HDD:

code:

hdparm -tT /dev/hda

Ik heb hier de output van twee hdparm-tests;

1) op de server in kwestie:

Timing buffer-cache reads: 3156 MB in 2.00 seconds = 1578.00 MB/sec
Timing buffered disk reads: 104 MB in 3.02 seconds = 34.44 MB/sec

2) op een goed werkende server:

Timing buffer-cache reads: 1588 MB in 2.00 seconds = 794.00 MB/sec
Timing buffered disk reads: 150 MB in 3.00 seconds = 50.00 MB/sec


Beetje rare output... de "slechte" server doet het 2 keer beter dan de "goede" server.

[dmnq]

DaPoztMaster schreef op 11 april 2004 @ 17:56:
Hehe, de combinatie username, ensim pro, problemen met server en de mail de afgelopen tijd van VDX kreeg, deed bij mij al een belletje rinkelen
Leuk om anders dan via de mail te communiceren

Zelf denk ik ook dat het iets met je schijven, danwel raid controller te maken heeft. Dat zou een hoop verklaren. Check eens de drivers/modules van de raid kaart (vergelijk met andere machines en of er nieuwere zijn) en draai de hdparm. Wat zijn hier de resultaten van ?

Check dit, wellicht heb je er iets aan:
http://dwhughes.home.cern.ch/dwhughes/doc/3ware-servers.html (vooral bij Known 3ware issues)

En nog een quote van een andere site:
http://blizzard.rwic.und.edu/~nordlie/zeus/

[...]


Daarnaast zie ik in de 3ware HCL:

[...]

En helemaal geen Albatron (PX865PE Pro)

Lees ook deze pagina (misschien al gedaan) voor veel handige tips en links:
http://www.3ware.com/supportfaq/support_faq.htm

Wellicht heb je er iets aan!
Grt een tevreden klant van vdx

De drivers zijn op alle servers identiek. Dat heb ik al meerdere malen gecontroleerd.

[dmnq]

De 3Ware CLI geeft dit resultaat (lijkt me okay):

Controller 0
-------------
Driver: 1.02.00.032
Model: 7006-2
FW: FE7X 1.05.00.056
BIOS: BE7X 1.08.00.046
Monitor: ME7X 1.01.00.038
Serial #: F14801A3390850
PCB: Rev4
PCHIP: 1.30-66
ACHIP: 3.20

# of units: 1
Unit 0: RAID 1 74.53 GB (156299440 blocks): OK

# of ports: 2
Port 0: WDC WD800BB-00CAA1 WD-WMA8E8386484 74.53 GB (156301488 blocks): OK (unit 0)
Port 1: WDC WD800BB-00CAA1 WD-WMA8E8386874 74.53 GB (156301488 blocks): OK (unit 0)

en

Controller 0, Unit 0
---------------------
Status: OK
Unit Type: RAID 1
Stripe Size: N/A
Size: 74.53 GB (156299440 blocks)
# of subunits: 2

Subunit 0: CBOD: OK
Physical Port: 0
Logical Port: 0

Subunit 1: CBOD: OK
Physical Port: 1
Logical Port: 1

[ Voor 25% gewijzigd door dmnq op 14-04-2004 20:51 ]