[RAID] Dell Perc 5/i wordt niet (goed) geinitialiseerd?

[Bravo]

Na een week van alles uitproberen hoop ik dat jullie me een antwoord kunnen verschaffen.

Onlangs heb ik een Perc 5/i met BBU en kabels aangeschaft en deze gecombineerd met 2x WD Green 640 GB en 2x WD Blue 640 GB harde schijven. De boel aangesloten en geboot, in de BIOS van de RAIDkaart een RAID5 ingesteld over alle vier de schijven, laten builden, initialiseren en opnieuw laten opstarten. Tot zover geen problemen.

In Ubuntu 8.04.3 werd de kaart niet goed herkent

code:

kernel: [    5.531961] sd 6:2:1:0: [sde] Sector size 0 reported, assuming 512

het maakte niet uit welke opties in het BIOS geselecteerd waren (wel/geen bootdevice, boot error allowed). Ook met het gebruik van een nieuwere versie van Ubuntu (9.04) wordt de kaart niet (goed) herkend.

code:

 lspci: 03:0e.0 RAID bus controller: Dell PowerEdge Expandable RAID controller 5

dus de kaart wordt wel gezien...

Via google kom ik veel problemen met deze kaart tegen, maar ik kan er geneen vinden die gelijk is aan mijne

Helaas heb ik niet de mogelijkheid om een windows te installeren op deze machine en is er geen floppydrive aanwezig, waardoor zaken zoals flashen niet mogelijk zijn.
Wel heb ik vandaag de kaart even getest bij een vriend op een Gigabyte X58, maar hierbij werd zijn huidige (onboard) raid verknald en hebben we Windows niet eens kunnen zien.

Wie weet wat ik verkeerd doe?

O ja, systeemspecs zijn te vinden onder Systeem

[Q]

Waaruit maak je op dat je kaart niet goed wordt herkend?

Er is al een /dev/sde device, kun je dat niet gewoon formatteren?

[Bravo]

Q schreef op dinsdag 11 augustus 2009 @ 00:17:
Waaruit maak je op dat je kaart niet goed wordt herkend?

Er is al een /dev/sde device, kun je dat niet gewoon formatteren?

Het device heeft een sector size van 0, daar maakt de kernel dan maar 512B van. Formatteren hiervan is me nog niet gelukt, ik denk omdat de partitie te klein is.
opstartlog:

code:

Aug 10 23:15:43 Scarab kernel: [    5.522068] sd 6:2:1:0: [sde] Sector size 0 reported, assuming 512.
Aug 10 23:15:43 Scarab kernel: [    5.522072] sd 6:2:1:0: [sde] 1 512-byte hardware sectors: (512 B/512 B)
Aug 10 23:15:43 Scarab kernel: [    5.522119] sd 6:2:1:0: [sde] Write Protect is off
Aug 10 23:15:43 Scarab kernel: [    5.522121] sd 6:2:1:0: [sde] Mode Sense: 00 00 00 00
Aug 10 23:15:43 Scarab kernel: [    5.522156] sd 6:2:1:0: [sde] Asking for cache data failed
Aug 10 23:15:43 Scarab kernel: [    5.522159] sd 6:2:1:0: [sde] Assuming drive cache: write through
Aug 10 23:15:43 Scarab kernel: [    5.522272] sd 6:2:1:0: [sde] Sector size 0 reported, assuming 512.
Aug 10 23:15:43 Scarab kernel: [    5.522274] sd 6:2:1:0: [sde] 1 512-byte hardware sectors: (512 B/512 B)
Aug 10 23:15:43 Scarab kernel: [    5.522308] sd 6:2:1:0: [sde] Write Protect is off
Aug 10 23:15:43 Scarab kernel: [    5.522310] sd 6:2:1:0: [sde] Mode Sense: 00 00 00 00
Aug 10 23:15:43 Scarab kernel: [    5.522344] sd 6:2:1:0: [sde] Asking for cache data failed
Aug 10 23:15:43 Scarab kernel: [    5.522346] sd 6:2:1:0: [sde] Assuming drive cache: write through
Aug 10 23:15:43 Scarab kernel: [    5.522348]  sde:<6>usb 2-1: configuration #1 chosen from 1 choice

[Q]

Ik zou eerst eens testen met een nieuwere ubuntu of debian. Ruikt naar een driver issue, maar dat is nu nog niet zeker. Ik neem aan dat alles in het bios goed staat.

[maratropa]

Heb je de magische pci-E 5/6 afplak truuk geprobeerd? Die wil wel eens allerlei vage problemen fixen in relatie tot booten.

[Bravo]

Q schreef op dinsdag 11 augustus 2009 @ 00:17:
Waaruit maak je op dat je kaart niet goed wordt herkend?

Er is al een /dev/sde device, kun je dat niet gewoon formatteren?

Geprobeerd met cfdisk, deze eindigt met een foutmelding over een onbekende partitie en /dev/sde bestaat daarna niet meer.

Q schreef op dinsdag 11 augustus 2009 @ 12:55:
Ik zou eerst eens testen met een nieuwere ubuntu of debian. Ruikt naar een driver issue, maar dat is nu nog niet zeker. Ik neem aan dat alles in het bios goed staat.

Zoals gemeld in de TS heb ik al een upgrade gemaakt van 8.04.3 naar 9.04 (de meest recente stable release van Ubuntu). Qua drivers zou megaraid_sas gebruikt moeten worden, deze is ook aanwezig in mijn kernel (ook al op 8.04)
Qua biossettings staat alles volgens mij goed (boot device: yes, Halt on error:yes, RAID5 over 4 disks, initialised, no HotSpare)

maratropa schreef op dinsdag 11 augustus 2009 @ 12:59:
Heb je de magische pci-E 5/6 afplak truuk geprobeerd? Die wil wel eens allerlei vage problemen fixen in relatie tot booten.

Ik had het nog niet genoemd, maar dit had ik ook reeds geprobeerd, zonder resultaat. De afplaktruuk lijkt vooral te werken op intel chipsets waarbij er geen POST is met deze kaart geinstalleerd of andere bootproblemen. Bij mij lijkt de kaart goed te werken in deze fase, alleen niet in een OS.

Is het misschien de kaart zelf die niet helemaal goed is?

[FireDrunk]

De kaart kan natuurlijk altijd kapot zijn, maar om zo snel op te geven is natuurlijk niet handig...

Probeer sowieso eens met zo min mogelijk apparatuur te booten, dus ook in je bios ALLE andere apparaten uitzetten. Daarna even met bijvoorbeeld de alternate cd van Ubuntu proberen (zitten meer raid drivers in dacht ik)... Zelf ben ik meer fan van Debian of CentOS (Redhat based).

Kijk daar dan even of je kaart gezien word...

[Bravo]

thijs_cramer schreef op woensdag 12 augustus 2009 @ 09:07:
De kaart kan natuurlijk altijd kapot zijn, maar om zo snel op te geven is natuurlijk niet handig...

Probeer sowieso eens met zo min mogelijk apparatuur te booten, dus ook in je bios ALLE andere apparaten uitzetten. Daarna even met bijvoorbeeld de alternate cd van Ubuntu proberen (zitten meer raid drivers in dacht ik)... Zelf ben ik meer fan van Debian of CentOS (Redhat based).

Kijk daar dan even of je kaart gezien word...

Op dit moment heb ik een CentOS 5.2 cd geleend, deze ziet de RAIDkaart wel Dus probeer ik dit maar te installeren
De grote vraag is nu, waarom ziet CentOS hem wel en Ubuntu hem niet?

I'll keep you posted

edit: Kennelijk zijn er meerdere cd's nodig om CentOS te installeren, dus maar bezig met het downloaden van een complete dvd * Bravo zucht eens diep

[ Voor 9% gewijzigd door Bravo op 12-08-2009 16:12 . Reden: update ]

[Bravo]

Onder CentOS wordt de RAIDkaart herkent en is zichtbaar onder /dev/sde. Helaas kan ik er nog niets mee, zowel cfdisk, fdisk als gparted kunnen de hardeschijf van 1.8 TB niet goed formatteren. Alle drie zien ze een onbekende of lege partitie, maar kunnen niet de array formatteren naar ext3 of linux format systeem.

Wat doe ik nu weer verkeerd?

[Q]

Als je gewoon een mkfs.ext3 /dev/sde doet, gaat dat niet goed?

Ik weet dat je eigenlijk met partities hoort te werken, maar ik ben eigenwijs. Probeer het eens?

Probeer het begin van de disk eens te wipen met dd?

dd if=/dev/zero of=/dev/sde bs=1M count=100

[Bravo]

Q schreef op vrijdag 14 augustus 2009 @ 21:59:
Als je gewoon een mkfs.ext3 /dev/sde doet, gaat dat niet goed?

Ik weet dat je eigenlijk met partities hoort te werken, maar ik ben eigenwijs. Probeer het eens?

Tijdens het proces was mn server even niet te gebruiken en leek de boel te zijn vastgelopen, maar dit is de output:

code:

sudo /sbin/mkfs.ext3 /dev/sde
Password: 
mke2fs 1.39 (29-May-2006)
/dev/sde is entire device, not just one partition!
Proceed anyway? (y,n) y
Filesystem label=
OS type: Linux
Block size=4096 (log=2)
Fragment size=4096 (log=2)
234209280 inodes, 468418560 blocks
23420928 blocks (5.00%) reserved for the super user
First data block=0
Maximum filesystem blocks=4294967296
14295 block groups
32768 blocks per group, 32768 fragments per group
16384 inodes per group
Superblock backups stored on blocks: 
        32768, 98304, 163840, 229376, 294912, 819200, 884736, 1605632, 2654208, 
        4096000, 7962624, 11239424, 20480000, 23887872, 71663616, 78675968, 
        102400000, 214990848

Writing inode tables: done                            
ext2fs_mkdir: Attempt to read block from filesystem resulted in short read while creating root dir

maar als ik daarna de schijf wil mounten:

code:

$ sudo mount /dev/sde /media/raid5/
Password: 
mount: /dev/sde is not a valid block device

en als ik vervolgens dd wil uitvoeren;

code:

 $ sudo dd if=/dev/zero of=/dev/sde bs=1M count=100
dd: opening `/dev/sde': No such device or address

en cfdisk meldt weer het volgende:

code:

FATAL ERROR: Cannot open disk drive
press any key to exit cfdisk

[ Voor 13% gewijzigd door Bravo op 15-08-2009 15:16 . Reden: add more information ]

[FireDrunk]

/dev/sde?

ik verwacht meer iets in de trant van /dev/cciss/c0d0p1

/dev/<drivernaam>/<kaartnr><volumenummer><partitienummer>

Dat is het bij mijn HP Smart Array iig...

[Bravo]

thijs_cramer schreef op zaterdag 15 augustus 2009 @ 16:57:
/dev/sde?

ik verwacht meer iets in de trant van /dev/cciss/c0d0p1

/dev/<drivernaam>/<kaartnr><volumenummer><partitienummer>

Dat is het bij mijn HP Smart Array iig...

Uhm, zoiets kan ik bij mij niet vinden.
Uit wat ik kan vinden aan informaitie heeft CentOS 5.3 megaraid_sas drivers in de kernel die de kaart zouden moeten besturen, maar ik heb geen flauw idee hoe ik dit zou moeten nakijken of configureren

[Shuriken]

Even wat tips:
Met een bootable USB stick kan je ongetwijfeld wel firmware flashen. Moet je alleen even een DOS bootable stickje maken: http://www.bootdisk.com/pendrive.htm

Met het commando lsmod kan je zien welke modules geladen zijn.

[Microkid]

Ter info: er zijn problemen bekend met de Perc 5/i in sommige chipsets. Dan moet je pin 5 en 6 afplakken. Heeft te maken met de SMBUS. Ik moest dat ook doen i.c.m. mijn Intel mobo. Google even en je zal het wel vinden.

edit: zie hier: http://www.overclock.net/...c-5-i-raid-card-tips.html (eerste topic).
Weet niet of het bij jou van toepassing is, dat moet je zelf even proberen.

[ Voor 37% gewijzigd door Microkid op 16-08-2009 10:42 ]

[axis]

Enne, wat dacht je van de raid array gewoon wegknikkeren en opnieuw aanmaken? Een quick init is voldoende, en deze hele procedure neemt 1 minuutje in beslag..

[DukeBox]

En probeer het anders voor de zekerheid eens eerst met 2 identieke hdd's. Misschien door de verschillende timings van de blue en greens gaat er wat mis op de controller (zou niet mogen overigens).

[Q]

DukeBox schreef op zondag 16 augustus 2009 @ 11:05:
En probeer het anders voor de zekerheid eens eerst met 2 identieke hdd's. Misschien door de verschillende timings van de blue en greens gaat er wat mis op de controller (zou niet mogen overigens).

Check eventueel of de disks compatible zijn met de controller ?

[DukeBox]

^ er is geen HCL bekend voor de PERC controllers. Misschien wel op de LSI site maar die testen weer niet met de custom Dell OEM HDD firmwares..
Ik ben nog geen hdd's tegen gekomen die niet werkten met de PERC 5/6 series.

[Bravo]

Bedankt voor de tips allemaal, ik ben weer aan de slag gegaan.

code:

/sbin/lsmod | grep mega
megaraid_sas           72445  0 
scsi_mod              196569  5 scsi_dh,megaraid_sas,sg,libata,sd_mod

Ik begrijp hieruit dat de driver aanwezig, maar niet geactiveerd is? (en hoe moet ik hem dan activeren?)

Wat betreft de afplaktruuk, onder Ubuntu leverde dit geen verschil op en op het moment kost het nogal wat moeite om de kaart eruit te krijgen

Ik heb de VD verwijderd en weer opnieuw aangemaakt op de controller, ik zie geen verandering is CentOS.

edit:
net het programma lshw gedownload en geinstalleerd, deze komt met de volgende gegevens, kunnen jullie hier iets uit halen?

RAID bus controller
/0/100/2/0/e


product: PowerEdge Expandable RAID controller 5 [1028:15]
vendor: Dell [1028]
bus info: pci@0000:03:0e.0
version: 00
width: 32 bits
clock: 66MHz
capabilities:
storage,
Power Management,
Message Signalled Interrupts,
PCI-X,
bus mastering,
PCI capabilities listing,
extension ROM
configuration:
driver: megaraid_sas
latency: 64
mingnt: 128
resources:
irq: 193
memory: fddf0000-fddfffff(prefetchable)
memory: fdfc0000-fdfdffff
memory: fdff0000-fdff7fff(prefetchable)

[ Voor 37% gewijzigd door Bravo op 16-08-2009 14:13 ]

[DukeBox]

Probeer de kaart eens in een ander systeem met dezelfde hdd's..

[Bravo]

DukeBox schreef op zondag 16 augustus 2009 @ 17:25:
Probeer de kaart eens in een ander systeem met dezelfde hdd's..

Nou, ik heb de boel aan de gang , bedankt voor jullie vele tips en support.

Ik zal ook maar even voor de toekomstige lezers uitleggen wat, hoe en waarom:
De tijd tussen de laatste post en deze was voor mij overbrugbaar doordat ik simpelweg geen tijd over had naast mijn dagelijkse bezigheden (bestuur/studie/sport). Eergisteren heb ik een nieuw mobo besteld, vandaag geinstalleerd en het werkt nu als een zonnetje.

Reden waarom het in het vorige mobo niet werkte? De vorige gebruiker heeft opgebiecht dat er ooit een keer een stroomstootje doorheen is gegaan waardoor het onboard geluid vervormd geluid gaf. Dit was opgelost met een degelijke geluidskaart, geen enkel probleem. Maar blijkbaar is er toch meer stuk, hoewel videokaarten er zonder probleem op werken, maar Raidkaarten op de PCI-Express toch niet.

Anyway, weet wat de geschiedenis van je hardware. Dan hoef je niet zoveel moeite te doen om het werkend te krijgen

[_Dune_]

Bravo schreef op zondag 15 november 2009 @ 16:20:
[...]

Nou, ik heb de boel aan de gang , bedankt voor jullie vele tips en support.

Ik zal ook maar even voor de toekomstige lezers uitleggen wat, hoe en waarom:
De tijd tussen de laatste post en deze was voor mij overbrugbaar doordat ik simpelweg geen tijd over had naast mijn dagelijkse bezigheden (bestuur/studie/sport). Eergisteren heb ik een nieuw mobo besteld, vandaag geinstalleerd en het werkt nu als een zonnetje.

Reden waarom het in het vorige mobo niet werkte? De vorige gebruiker heeft opgebiecht dat er ooit een keer een stroomstootje doorheen is gegaan waardoor het onboard geluid vervormd geluid gaf. Dit was opgelost met een degelijke geluidskaart, geen enkel probleem. Maar blijkbaar is er toch meer stuk, hoewel videokaarten er zonder probleem op werken, maar Raidkaarten op de PCI-Express toch niet.

Anyway, weet wat de geschiedenis van je hardware. Dan hoef je niet zoveel moeite te doen om het werkend te krijgen

Welk moederbord heb je gekocht als ik vragen mag?

[Bravo]

_Dune_ schreef op zondag 15 november 2009 @ 16:56:
Welk moederbord heb je gekocht als ik vragen mag?

Ik ben van een Asus M2A-VM naar een Asus M3A76-CM gegaan, een kleine upgrade dus