Het grote DIY RAID NAS topic deel 3

woensdag 13 juli 2011 13:58

Is er trouwens nog een manier om dat rebuilden te versnellen?

Wat voor een snelheid geeft 'ie aan dan met

cat /proc/mdstat

?

Acties:

woensdag 13 juli 2011 14:02

Raid
Interne harde schijven
Zuinig
Diy
USB/Opslag-controllers
NAS

Turk schreef op woensdag 13 juli 2011 @ 13:50:
> dd if=/dev/zero of=/mnt/data/nulfile.dat bs=1m count=32000

Krijg niks terug.. Hoor de hardeschijven ook niet schrijven..

Probeer eens een hoofdletter M.

Even niets...

Acties:

woensdag 13 juli 2011 14:09

Nielson schreef op woensdag 13 juli 2011 @ 13:58:
[...]
Wat voor een snelheid geeft 'ie aan dan met
cat /proc/mdstat
?

momenteel 23750K/sec (schommelt een beetje)

Acties:

woensdag 13 juli 2011 14:11

Dat lijkt me toch niet echt slecht, zit je niet gewoon aan de limiet van je schijven?

Acties:

woensdag 13 juli 2011 14:41

Nielson schreef op woensdag 13 juli 2011 @ 14:09:
Dat lijkt me toch niet echt slecht, zit je niet gewoon aan de limiet van je schijven?

Ik vrees van wel.
Ik zal iets aan de limiet van mijn geduld moeten doen dus

Acties:

woensdag 13 juli 2011 14:57

Raid
Interne harde schijven
Zuinig
Diy
USB/Opslag-controllers
NAS

echo [infinite] > /etc/loggedinuser/patience

Even niets...

Acties:

Verwijderd

zijn er mensen die een DAS(direct attached storage) gebruiken. ik heb namelijk een 1TB externe schijf maar die is bijna vol(50gb over). ik zat dus echter te kijken naar een niet al te dure upgrade te kijken. na een tijdje gegoogled te hebben en in de pricewatch gezocht. ben ik uitgekomen bij de Sharkoon 5 bay raid box en de Lian Li EX-50. zijn er mensen hier die weleens een DAS gebruiken of eventueel ervaring hebben met zulke kastjes. jullie zullen je wel afvragen waarom ik een DAS wil en geen NAS. ten eerste de prijs en ten tweede heb ik het niet echt in het netwerk nodig. of zijn er alternatieve producten voor rond de 200€ zonder harde schijven?

woensdag 13 juli 2011 15:10

Acties:

woensdag 13 juli 2011 16:36

Raid
Interne harde schijven
Zuinig
Diy
USB/Opslag-controllers
NAS

Nadeel van DAS is vaak de backup / RAID functionaliteit. Grote voordeel van een NAS is dat je het ding over het netwerk kan backuppen naar een andere locatie. Dus ookal heb je je data niet op het netwerk nodig, kan het toch handig zijn om een NAS te kopen om zo goede backups te kunnen maken.

Ik meen me te herinneren dat Addonics een externe tower heeft die je met eSATA kunt aansluiten, maar die kost net zo veel als een gemiddelde NAS volgens mij

Externe boxen met > 2 disks zijn er amper omdat je met de verbinding/aansluiting zit...

Even niets...

Acties:

johiem

Hallo,

Al een tijdje ben ik bezig om een kleine DIY nas samen te stellen. Het lijkt mij dat dit namelijk meer mogelijkheden biedt dan een gekocht systeem.

Nu probeer ik dit zo low budget als mogelijk te maken. Onderdelen als moederbord, geheugen, etc kan ik allemaal wel goed vinden. Wat ik nou echt moeilijk vindt te vinden vindt is een goede behuizing.

Vereisten aan de behuizing zijn:
Aantal HD locaties: min 2.
Formaat moederbord: mini-itx
Voeding: niet te zwaar maar wel meegeleverd.
Formaat kast: zo klein mogelijk
Prijs: niet te duur

Mijn vraag was nou als jullie een idee hebben van een behuizing die hierbij.

Alvast bedankt.

woensdag 13 juli 2011 16:54

Acties:

KorneelB

johiem schreef op woensdag 13 juli 2011 @ 16:36:
Hallo,

Al een tijdje ben ik bezig om een kleine DIY nas samen te stellen. Het lijkt mij dat dit namelijk meer mogelijkheden biedt dan een gekocht systeem.

Nu probeer ik dit zo low budget als mogelijk te maken. Onderdelen als moederbord, geheugen, etc kan ik allemaal wel goed vinden. Wat ik nou echt moeilijk vindt te vinden vindt is een goede behuizing.

Vereisten aan de behuizing zijn:
Aantal HD locaties: min 2.
Formaat moederbord: mini-itx
Voeding: niet te zwaar maar wel meegeleverd.
Formaat kast: zo klein mogelijk
Prijs: niet te duur

Mijn vraag was nou als jullie een idee hebben van een behuizing die hierbij.

Alvast bedankt.

als ik jou was zou ik naar een synology of een qnap kijken.. biedt exact wat je zoekt

60 TB can not be enough

woensdag 13 juli 2011 19:49

Acties:

Verwijderd

johiem schreef op woensdag 13 juli 2011 @ 16:36:
Hallo,

Al een tijdje ben ik bezig om een kleine DIY nas samen te stellen.
Prijs: niet te duur

sloop hier het binnenwerk uit (of niet)

[ Voor 44% gewijzigd door Verwijderd op 13-07-2011 19:50 ]

woensdag 13 juli 2011 20:58

Acties:

johiem

Verwijderd schreef op woensdag 13 juli 2011 @ 19:49:
[...]

sloop hier het binnenwerk uit (of niet)

Dat is nog niet eens zon gek idee. Ik wil graag zelf een NAS maken als een leuk project.

Zou dit ook een form factor mini ITX zijn? lijkt mij namelijk wel.

In ieder geval bedankt voor de tip.

woensdag 13 juli 2011 21:51

Acties:

Full time prutser

johiem schreef op woensdag 13 juli 2011 @ 20:58:
[...]

Dat is nog niet eens zon gek idee. Ik wil graag zelf een NAS maken als een leuk project.

Zou dit ook een form factor mini ITX zijn? lijkt mij namelijk wel.

In ieder geval bedankt voor de tip.

Ga er maar vanuit dat er een goedkoop embedded boardje inzit met een arm-processor. Maar als het voldoet, voldoet het

woensdag 13 juli 2011 21:51

Acties:

Verwijderd

FireDrunk schreef op woensdag 13 juli 2011 @ 15:10:
Nadeel van DAS is vaak de backup / RAID functionaliteit. Grote voordeel van een NAS is dat je het ding over het netwerk kan backuppen naar een andere locatie. Dus ookal heb je je data niet op het netwerk nodig, kan het toch handig zijn om een NAS te kopen om zo goede backups te kunnen maken.

Ik meen me te herinneren dat Addonics een externe tower heeft die je met eSATA kunt aansluiten, maar die kost net zo veel als een gemiddelde NAS volgens mij
Externe boxen met > 2 disks zijn er amper omdat je met de verbinding/aansluiting zit...

die twee kastjes die ik had gevonden zijn met eSata of USB 3.0 wat snel genoeg is lijkt me.
back ups hoef ik geen rekening mee te houden. staan alleen wat films en muziek op en hetgene dat wel belangrijk is heb ik gebackupt in the cloud.

zijn er verder wat kleinere kastjes of barebones waar ik een vijftal schijven in kan doen. of is het veelal zelf configuraties maken en dan zelf alles gaan doen.

tevens zit ik ook met een punt hoe ga ik raid regelen. ik wil het liefst raid 5 maar heb geen verstand van linux. is windows server goed genoeg daarvoor?

EDIT: zie in de pricewatch de Lian Li PC-Q08B. lijkt me wel een mooi kastje om een nas in te bouwen

[ Voor 4% gewijzigd door Verwijderd op 13-07-2011 22:14 ]

woensdag 13 juli 2011 22:11

Acties:

woensdag 13 juli 2011 23:43

Ben zelf ook geen linux wonder maar mdadm staat goed beschreven hoe het werkt. Als je ubuntu neemt dan geeft google je meer dan voldoende info terug over hoe het moet en hoe het niet moet.

Acties:

donderdag 14 juli 2011 02:49

> dd if=/dev/zero of=/mnt/data/nulfile.dat bs=1M count=32000
32000+0 records in
32000+0 records out
33554432000 bytes transferred in 367.840031 secs (91220175 bytes/sec)

Na een paar reboots (RAID wou niet meewerken)

> dd if=/dev/zero of=/mnt/data/nulfile.dat bs=1M count=32000
32000+0 records in
32000+0 records out
33554432000 bytes transferred in 292.728295 secs (114626541 bytes/sec)

= ongeveer 111 MB..

[ Voor 41% gewijzigd door Turk op 14-07-2011 00:34 . Reden: toevoeging ]

Acties:

donderdag 14 juli 2011 10:44

Nou heb ik dus nog iets

Ik probeer al dagen SABnzb aan de praat te krijgen.
Verschillende tutorials etc. geprobeerd, maar kom er niet uit.

Nou vond ik op internet een .sh script (iets met bash command ofzo)..
Hier moest je dan een aantal waardes naar je eigen veranderen..

Hier een deel van het script:

#!/bin/sh
# author: Ray Matos
#date: Sept 2th 2010

python_version="2.6"

hostname="freenas"
dest="/usr/local/"
configuration="/mnt/data/sabnzbd"

Alleen wat ik na een tijdje krijg is:

No such file or directory: usr/local

Afbeeldingslocatie: http://www.rezpected.com/linux/filechooser.jpg

terwijl het originele script verwees naar /mnt/RAID5A1 heb ik dit veranderd omdat het bij mij dus /usr/local is.

Wat doe ik fout, en wil mij helpen?

Ook met umount -f /var word het problematisch..

Die command is trouwens van http://blog.rogee.nl/post...bedded-freenas-0-7-2-i386

Acties:

donderdag 14 juli 2011 10:46

Ik ken FreeNas niet echt, maar in die blogpost die je linkt zie ik dit staan:

2. Because we can’t install any additional packages on the FreeNAS embedded install, we are going to create some custom install directories on our harddrive.

Jij probeert nu te installeren in /usr/local wat volgens mij deel is van de FreeNas embedded install, zoals het daar genoemd wordt.

Het idee is dat je installatie directories maakt op de gemounte raidset, dus in /mnt/<naamraidset> en daar de installatie uitvoert.

Acties:

Verwijderd

Gisteren ben ik ook begonnen met experimenteren met m'n 3x2TB diskjes die binnen zijn gekomen. Ze draaien in RAID 5 met mdadm + lvm. Ik vind het alleen moeilijk om de cijfers te interpreteren:

Bonnie++:

code:

Version  1.96       ------Sequential Output------ --Sequential Input- --Random-
Concurrency   1     -Per Chr- --Block-- -Rewrite- -Per Chr- --Block-- --Seeks--
Machine        Size K/sec %CP K/sec %CP K/sec %CP K/sec %CP K/sec %CP  /sec %CP
Enterprise       2G   101  99 108145  73 61160  38   720  98 219860  48 538.0  28
Latency             81734us     123ms     222ms   25995us   66781us     108ms
Version  1.96       ------Sequential Create------ --------Random Create--------
Enterprise          -Create-- --Read--- -Delete-- -Create-- --Read--- -Delete--
              files  /sec %CP  /sec %CP  /sec %CP  /sec %CP  /sec %CP  /sec %CP
                 16 13022  74 +++++ +++ 20039  80 14488  80 +++++ +++ 15578  62
Latency               376us    1789us    2088us     365us      43us     509us

dd:

code:

neo@Enterprise:/storage/photo$ sudo dd if=/dev/zero of=test.file bs=1M count=1000
1000+0 records in
1000+0 records out
1048576000 bytes (1.0 GB) copied, 8.54745 s, 123 MB/s
neo@Enterprise:/storage/photo$

Specs:
Atom 330 dual core HT
1GB RAM
3x2TB Hitachi 5K3000
Stripe-cache-size 2048
Chunk-size 128

Is dit een beetje redelijk? Ik zag wel dat tijdens het bouwen van de array de cpu de beperkende factor was

donderdag 14 juli 2011 10:47

Acties:

donderdag 14 juli 2011 10:53

Raid
Interne harde schijven
Zuinig
Diy
USB/Opslag-controllers
NAS

Ligt het aan mij of is jouw strip size best groot?

Even niets...

Acties:

Full time prutser

Verwijderd schreef op donderdag 14 juli 2011 @ 10:46:
...

Kijk eens naar mijn topic... Met wat FireDrunk zegt, misschien heb je niet de juiste chunk/strip size te pakken.

In mijn topicje heb ik een benchmark script en een optimalisatie script staan. Ik heb met 4x 2TB het volgende:

code:

root@iServer:~# dd if=/dev/zero of=/pool/test.bin bs=1M count=32000
32000+0 records in
32000+0 records out
33554432000 bytes (34 GB) copied, 155.475 s, 216 MB/s
root@iServer:~# dd if=/pool/test.bin of=/dev/null bs=1M count=32000
32000+0 records in
32000+0 records out
33554432000 bytes (34 GB) copied, 90.7514 s, 370 MB/s
root@iServer:~#

Dit is met 4x Samsung HD204UI. Met 3 stuks zou je rond de 144 a 166MB/s kunnen halen denk ik.

donderdag 14 juli 2011 11:07

Acties:

donderdag 14 juli 2011 11:10

Is dat optimalisatiescript (voor read-ahead) veilig te draaien op een array waar al data op staat?

En nog een vraagje over de parameters, chunk_size is gewoon de chunk size van je mdadm array toch?
Waar wat is block_size? (of is de 4kB instelling daar altijd goed)?

Acties:

donderdag 14 juli 2011 11:17

Raid
Interne harde schijven
Zuinig
Diy
USB/Opslag-controllers
NAS

Ja, hier ook gedaan, werkt gewoon op live data.
Chunk is over je hele array, block is per disk inderdaad.

Even niets...

Acties:

donderdag 14 juli 2011 11:19

Ok, raid is nu aan het rebuilden (stap2, van 8 naar 10 disks), ik wacht wel even tot die rebuild klaar is.
Daarna zal ik dat scriptje ook eens draaien.

Overigens zie ik nu met blockdev --getra /dev/sdb dat de huidige waarde 256 is, veel lager dan wat het script zet als ik het zo snel zie.
Daar zou dus nog winst in kunnen zitten.

Acties:

donderdag 14 juli 2011 11:21

Raid
Interne harde schijven
Zuinig
Diy
USB/Opslag-controllers
NAS

Ik heb 40% snelheidswinst behaald op mijn RAID6 array

Even niets...

Acties:

donderdag 14 juli 2011 11:26

Nice

Ik lees wel dat het meer memory kost, heb je daar iets van gemerkt?
Mijn Ubuntu VM heeft nu maar 512MB memory assigned, misschien wat meer geven?

Acties:

Full time prutser

FireDrunk schreef op donderdag 14 juli 2011 @ 11:19:
Ik heb 40% snelheidswinst behaald op mijn RAID6 array

Op mijn RAID5 array:
Read: van 178 naar 370 MB/s (107,87% winst $_/-\o_$ )
Write: van 190 naar 216 MB/s (13,68% winst)

donderdag 14 juli 2011 11:36

Acties:

donderdag 14 juli 2011 11:48

Core temp 37°C

iMars schreef op donderdag 14 juli 2011 @ 11:26:
[...]

Op mijn RAID5 array:
Read: van 178 naar 370 MB/s (107,87% winst $_/-\o_$ )
Write: van 190 naar 216 MB/s (13,68% winst)

En wat heb je aangepast?

Ik ben spuit 1011, aangenaam!

Acties:

Full time prutser

Spoooky schreef op donderdag 14 juli 2011 @ 11:36:
[...]

En wat heb je aangepast?

Zie mijn eerdere post:

iMars schreef op donderdag 14 juli 2011 @ 10:53:
[...]

Kijk eens naar mijn topic... Met wat FireDrunk zegt, misschien heb je niet de juiste chunk/strip size te pakken.

In mijn topicje heb ik een benchmark script en een optimalisatie script staan. Ik heb met 4x 2TB het volgende:
code:
1
2
3
4
5
6
7
8
9
root@iServer:~# dd if=/dev/zero of=/pool/test.bin bs=1M count=32000
32000+0 records in
32000+0 records out
33554432000 bytes (34 GB) copied, 155.475 s, 216 MB/s
root@iServer:~# dd if=/pool/test.bin of=/dev/null bs=1M count=32000
32000+0 records in
32000+0 records out
33554432000 bytes (34 GB) copied, 90.7514 s, 370 MB/s
root@iServer:~#
Dit is met 4x Samsung HD204UI. Met 3 stuks zou je rond de 144 a 166MB/s kunnen halen denk ik.

Daarin staat volgende script:

code:

#!/bin/bash
###############################################################################
#  simple script to set some parameters to increase performance on a mdadm
# raid5 or raid6. Ajust the ## parameters ##-section to your system!
#
#  WARNING: depending on stripesize and the number of devices the array might
# use QUITE a lot of memory after optimization!
#
#  27may2010 by Alexander Peganz
###############################################################################


## parameters ##
MDDEV=md5               # e.g. md51 for /dev/md51
CHUNKSIZE=128           # in kb
BLOCKSIZE=4             # of file system in kb
NCQ=disable             # disable, enable. ath. else keeps current setting
NCQDEPTH=31             # 31 should work for almost anyone
FORCECHUNKSIZE=true     # force max sectors kb to chunk size > 512
DOTUNEFS=false          # run tune2fs, ONLY SET TO true IF YOU USE EXT[34]
RAIDLEVEL=raid5         # raid5, raid6


## code ##
# test for priviledges
if [ "$(whoami)" != 'root' ]
then
  echo $(date): Need to be root >> tuneraid.log ### path weggehaald
  exit 1
fi

# set number of parity devices
NUMPARITY=1
if [[ $RAIDLEVEL == "raid6" ]]
then
  NUMPARITY=2
fi

# get all devices
DEVSTR="`grep \"^$MDDEV : \" /proc/mdstat` eol"
while \
 [ -z "`expr match \"$DEVSTR\" '\(\<sd[a-z]\[[12]\?[0-9]\]\((S)\)\? \)'`" ] ### was (\<sd[a-z]1\[[12]\?[0-9]\]\((S)\)\? \)
do
  DEVSTR="`echo $DEVSTR|cut -f 2- -d \ `"
done

# get active devices list and spares list
DEVS=""
SPAREDEVS=""
while [ "$DEVSTR" != "eol" ]; do
  CURDEV="`echo $DEVSTR|cut -f -1 -d \ `"
  if [ -n "`expr match \"$CURDEV\" '\(\<sd[a-z]\[[12]\?[0-9]\]\((S)\)\)'`" ] ### was (\<sd[a-z]1\[[12]\?[0-9]\]\((S)\)\)
  then
    SPAREDEVS="$SPAREDEVS${CURDEV:2:1}"
  elif [ -n "`expr match \"$CURDEV\" '\(\<sd[a-z]\[[12]\?[0-9]\]\)'`" ] ### was (\<sd[a-z]1\[[12]\?[0-9]\]\)
  then
    DEVS="$DEVS${CURDEV:2:1}"
  fi
  DEVSTR="`echo $DEVSTR|cut -f 2- -d \ `"
done
NUMDEVS=${#DEVS}
NUMSPAREDEVS=${#SPAREDEVS}

# test if number of devices makes sense
if [ ${#DEVS} -lt $[1+$NUMPARITY] ]
then
  echo $(date): Need more devices >> tuneraid.log ### path weggehaald
  exit 1
fi

# set read ahead
RASIZE=$[$NUMDEVS*($NUMDEVS-$NUMPARITY)*2*$CHUNKSIZE]   # in 512b blocks
echo read ahead size per device: $RASIZE blocks \($[$RASIZE/2]kb\)
MDRASIZE=$[$RASIZE*$NUMDEVS]
echo read ahead size of array: $MDRASIZE blocks \($[$MDRASIZE/2]kb\)
blockdev --setra $RASIZE /dev/sd[$DEVS]
#blockdev --setra $RASIZE /dev/sd[$SPAREDEVS] ## uitgezet: heb geen sparedevs
blockdev --setra $MDRASIZE /dev/$MDDEV

# set stripe cache size
STRCACHESIZE=$[$RASIZE/8]                               # in pages per device
echo stripe cache size of devices: $STRCACHESIZE pages \($[$STRCACHESIZE*4]kb\)
echo $STRCACHESIZE > /sys/block/$MDDEV/md/stripe_cache_size

# set max sectors kb
DEVINDEX=0
MINMAXHWSECKB=$(cat /sys/block/sd${DEVS:0:1}/queue/max_hw_sectors_kb)
until [ $DEVINDEX -ge $NUMDEVS ]
do
  DEVLETTER=${DEVS:$DEVINDEX:1}
  MAXHWSECKB=$(cat /sys/block/sd$DEVLETTER/queue/max_hw_sectors_kb)
  if [ $MAXHWSECKB -lt $MINMAXHWSECKB ]
  then
    MINMAXHWSECKB=$MAXHWSECKB
  fi
  DEVINDEX=$[$DEVINDEX+1]
done
if [ $CHUNKSIZE -le $MINMAXHWSECKB ] &&
  ( [ $CHUNKSIZE -le 512 ] || [[ $FORCECHUNKSIZE == "true" ]] )
then
  echo setting max sectors kb to match chunk size
  DEVINDEX=0
  until [ $DEVINDEX -ge $NUMDEVS ]
  do
    DEVLETTER=${DEVS:$DEVINDEX:1}
    echo $CHUNKSIZE > /sys/block/sd$DEVLETTER/queue/max_sectors_kb
    DEVINDEX=$[$DEVINDEX+1]
  done
  DEVINDEX=0
  until [ $DEVINDEX -ge $NUMSPAREDEVS ]
  do
    DEVLETTER=${SPAREDEVS:$DEVINDEX:1}
    echo $CHUNKSIZE > /sys/block/sd$DEVLETTER/queue/max_sectors_kb
    DEVINDEX=$[$DEVINDEX+1]
  done
fi

# enable/disable NCQ
DEVINDEX=0
if [[ $NCQ == "enable" ]] || [[ $NCQ == "disable" ]]
then
  if [[ $NCQ == "disable" ]]
  then
    NCQDEPTH=1
  fi
  echo setting NCQ queue depth to $NCQDEPTH
  until [ $DEVINDEX -ge $NUMDEVS ]
  do
    DEVLETTER=${DEVS:$DEVINDEX:1}
    echo $NCQDEPTH > /sys/block/sd$DEVLETTER/device/queue_depth
    DEVINDEX=$[$DEVINDEX+1]
  done
  DEVINDEX=0
  until [ $DEVINDEX -ge $NUMSPAREDEVS ]
  do
    DEVLETTER=${SPAREDEVS:$DEVINDEX:1}
    echo $NCQDEPTH > /sys/block/sd$DEVLETTER/device/queue_depth
    DEVINDEX=$[$DEVINDEX+1]
  done
fi

# tune2fs
if [[ $DOTUNEFS == "true" ]]
then
  STRIDE=$[$CHUNKSIZE/$BLOCKSIZE]
  STRWIDTH=$[$CHUNKSIZE/$BLOCKSIZE*($NUMDEVS-$NUMPARITY)]
  echo setting stride to $STRIDE blocks \($CHUNKSIZEkb\)
  echo setting stripe-width to $STRWIDTH blocks \($[$STRWIDTH*$BLOCKSIZE]kb\)
  tune2fs -E stride=$STRIDE,stripe-width=$STRWIDTH /dev/$MDDEV
fi

# exit
echo $(date): Success >> tuneraid.log ### path weggehaald
exit 0

donderdag 14 juli 2011 13:30

Acties:

donderdag 14 juli 2011 13:32

Sleepie schreef op donderdag 14 juli 2011 @ 10:44:
Ik ken FreeNas niet echt, maar in die blogpost die je linkt zie ik dit staan:

[...]

Jij probeert nu te installeren in /usr/local wat volgens mij deel is van de FreeNas embedded install, zoals het daar genoemd wordt.

Het idee is dat je installatie directories maakt op de gemounte raidset, dus in /mnt/<naamraidset> en daar de installatie uitvoert.

Ik heb de Full Install van FreeNAS gedaan..
Dus zou ik de mappen die in usr en var staan aan moeten maken in mijn /mnt/data?

Acties:

donderdag 14 juli 2011 13:50

Raid
Interne harde schijven
Zuinig
Diy
USB/Opslag-controllers
NAS

De full install van FreeNAS 8.0 bestaat nog niet...

Even niets...

Acties:

donderdag 14 juli 2011 14:10

FireDrunk schreef op donderdag 14 juli 2011 @ 13:32:
De full install van FreeNAS 8.0 bestaat nog niet...

Weet ik.. daarom heb ik ook versie 0.7.2 Sabanda (revision 6694)

Acties:

donderdag 14 juli 2011 14:47

Raid
Interne harde schijven
Zuinig
Diy
USB/Opslag-controllers
NAS

Dat verhaal met dat je /mnt/ moet gebruiken is toch vooral voor FreeNAS 8? Onder 0.7 werkte het allemaal toch met PKG packages?

Even niets...

Acties:

donderdag 14 juli 2011 15:28

Ik gebruik zelf geen FreeNAS, maar ik las iets wat op mij overkwam als een soort 'system folders' waarin je niks kunt schrijven. Vandaar mijn post. Zoals ik het lees is het inderdaad de bedoeling dat je de installatie directories aan moet maken in /mnt/raid
Poging tot helpen, maar ik ben dus absoluut geen FreeNAS expert

Hier begint alles definitief vorm te krijgen.
De tweede rebuild na de mdadm grow van 8 naar 10 disks draait:


hans@WEGA:~$ cat /proc/mdstat
Personalities : [linear] [multipath] [raid0] [raid1] [raid6] [raid5] [raid4] [raid10]
md0 : active raid6 sdk[9] sdj[8] sdi[7] sdh[6] sdg[5] sdf[4] sde[3] sdd[2] sdb[0] sdc[1]
      8790824448 blocks super 1.2 level 6, 64k chunk, algorithm 2 [10/10] [UUUUUUUUUU]
      [==============>......]  reshape = 72.5% (1062388152/1465137408) finish=401.8min speed=16704K/sec

unused devices: <none>

Enige wat ik nog moet doen is mijn tweede SSD-tje aansluiten op de DawiControl, zodat de Linux VMs op een raid1 oplossing draaien. En dan nog het ledje van de DawiControl naar het front van mijn kast brengen, zodat ik failures ook daadwerkelijk kan zien

Na deze rebuild heb ik 12TB effectief (10 stuks pricewatch: Samsung EcoGreen F2 EG HD154UI, 1.5TB in raid6). Dat wordt dus foto's maken en een leuk stukje schrijven in het show-off topic!

_{Betekent ook dat ik binnenkort wat spullen te koop heb, waaronder een RocketRaid 2320 en twee Addonics 4-in-3 hotswap modules, als iemand hier interesse heeft staat mijn DM aan.}

[ Voor 8% gewijzigd door Sleepie op 14-07-2011 14:55 ]

Acties:

Jormungandr

Daarnet even de winkel binnengestapt en buiten gegaan met 3x Samsung 204UI en een 8087->SATA kabel voor men M1015. Dat scriptje komt net op tijd

.

donderdag 14 juli 2011 15:34

Acties:

Full time prutser

Jormungandr schreef op donderdag 14 juli 2011 @ 15:28:
Daarnet even de winkel binnengestapt en buiten gegaan met 3x Samsung 204UI en een 8087->SATA kabel voor men M1015. Dat scriptje komt net op tijd .

Ik had tot gisteren het hoogste bod van $62 op een M1015 (dacht koop er 1 voor de gein) Maar in de laatste 24 uur werdt er flink overheen geboden, en werdt het mij te duur om er in mee te gaan

Heb nu 4x 2TB in mijn DIY NAS en binnenkort 4x 2TB in mijn QNAP 459 Pro II

(had liever 8x 2TB in 1 case, mja ik kreeg de QNAP $_/-\o_$ ) Maar dat kan altijd nog hehehe

donderdag 14 juli 2011 15:36

Acties:

Jormungandr

Ik heb ook al meermaals staan bieden maar op het einde schieten die toch omhoog. Beste is gewoon regelmatig rondsnuffelen en hopen dat er eentje voor weinig op Buy Now! komt.

Langs de andere kant, heb zo wel "per ongeluk" eens een HP DL380 G3 gewonnen voor 90 incl shipping

.

donderdag 14 juli 2011 15:50

Acties:

Full time prutser

Jormungandr schreef op donderdag 14 juli 2011 @ 15:36:
Ik heb ook al meermaals staan bieden maar op het einde schieten die toch omhoog. Beste is gewoon regelmatig rondsnuffelen en hopen dat er eentje voor weinig op Buy Now! komt.

Langs de andere kant, heb zo wel "per ongeluk" eens een HP DL380 G3 gewonnen voor 90 incl shipping .

Ik heb er meestal een paar in de watch staan op m'n ipad. Mooi overzichtelijk en een notificatie als het bijna verloopt

donderdag 14 juli 2011 17:04

Acties:

Jormungandr

Hiernet Arch geinstalleerd en zonder raid controller boot hij meteen in arch. Met de controller in het PCIe slot wil de pc niet verder dan een oude grub (0.97) met 0K lower en upper ram. Het lijkt erop dat de controller er zich toch mee wil moeien ondanks dat de onboard sata drive eerste in de rij staat. ...

De live cd van Arch herkent de controller btw. Altijd leuk om te weten dat je geen modules in de kernel moet liggen bakken maar alles gewoon uit de doos werkt.

donderdag 14 juli 2011 17:24

Acties:

donderdag 14 juli 2011 18:29

Ik ben momenteel mijn raid5 array onder server 2008 aan het opbouwen met een HP P410 sas controller incl 3x1,5TB samsung F3 Disks.
En tijdens het opbouwen is schijf #2 er al 2 keer uit geklapt. Het gaat ook nooit in 1 keer goed.

De betreffende schijf krijgt dan opeens geen power meer waardoor de array denkt, hee schijfje kaduuk.

[ Voor 16% gewijzigd door Birdie_NL op 14-07-2011 17:24 ]

Acties:

donderdag 14 juli 2011 18:42

Rebuild is klaar, 10 disks in raid6 up and running.

Hoewel .... tijdens de rebuild is dit voorbij gekomen (uit dmesg):

[140186.794024] mptbase: ioc0: LogInfo(0x31080000): Originator={PL}, Code={SATA NCQ Fail All Commands After Error}, SubCode(0x0000) cb_idx mptscsih_io_done
[140186.794161] mptbase: ioc0: LogInfo(0x31080000): Originator={PL}, Code={SATA NCQ Fail All Commands After Error}, SubCode(0x0000) cb_idx mptscsih_io_done
[140186.794377] mptbase: ioc0: LogInfo(0x31080000): Originator={PL}, Code={SATA NCQ Fail All Commands After Error}, SubCode(0x0000) cb_idx mptscsih_io_done
[140186.794598] mptbase: ioc0: LogInfo(0x31080000): Originator={PL}, Code={SATA NCQ Fail All Commands After Error}, SubCode(0x0000) cb_idx mptscsih_io_done
[140186.794823] mptbase: ioc0: LogInfo(0x31080000): Originator={PL}, Code={SATA NCQ Fail All Commands After Error}, SubCode(0x0000) cb_idx mptscsih_io_done
[140186.795040] mptbase: ioc0: LogInfo(0x31080000): Originator={PL}, Code={SATA NCQ Fail All Commands After Error}, SubCode(0x0000) cb_idx mptscsih_io_done
[140186.795258] mptbase: ioc0: LogInfo(0x31080000): Originator={PL}, Code={SATA NCQ Fail All Commands After Error}, SubCode(0x0000) cb_idx mptscsih_io_done
[140186.795734] sd 3:0:3:0: [sdg] Unhandled sense code
[140186.795742] sd 3:0:3:0: [sdg]  Result: hostbyte=DID_OK driverbyte=DRIVER_SENSE
[140186.795755] sd 3:0:3:0: [sdg]  Sense Key : Medium Error [current]
[140186.795767] Info fld=0x162d402a
[140186.795770] sd 3:0:3:0: [sdg]  Add. Sense: Unrecovered read error
[140186.795782] sd 3:0:3:0: [sdg] CDB: Read(10): 28 00 16 2d 40 00 00 00 30 00
[140186.795802] end_request: I/O error, dev sdg, sector 372064298
[140187.192438] md/raid:md0: read error corrected (8 sectors at 372064296 on sdg)
[140214.279627] mptbase: ioc0: LogInfo(0x31080000): Originator={PL}, Code={SATA NCQ Fail All Commands After Error}, SubCode(0x0000) cb_idx mptscsih_io_done
[140214.279814] mptbase: ioc0: LogInfo(0x31080000): Originator={PL}, Code={SATA NCQ Fail All Commands After Error}, SubCode(0x0000) cb_idx mptscsih_io_done
[140214.280024] mptbase: ioc0: LogInfo(0x31080000): Originator={PL}, Code={SATA NCQ Fail All Commands After Error}, SubCode(0x0000) cb_idx mptscsih_io_done
[140214.280253] mptbase: ioc0: LogInfo(0x31080000): Originator={PL}, Code={SATA NCQ Fail All Commands After Error}, SubCode(0x0000) cb_idx mptscsih_io_done
[140214.280476] mptbase: ioc0: LogInfo(0x31080000): Originator={PL}, Code={SATA NCQ Fail All Commands After Error}, SubCode(0x0000) cb_idx mptscsih_io_done
[140214.280693] mptbase: ioc0: LogInfo(0x31080000): Originator={PL}, Code={SATA NCQ Fail All Commands After Error}, SubCode(0x0000) cb_idx mptscsih_io_done
[140214.280943] mptbase: ioc0: LogInfo(0x31080000): Originator={PL}, Code={SATA NCQ Fail All Commands After Error}, SubCode(0x0000) cb_idx mptscsih_io_done
[140214.281415] sd 3:0:3:0: [sdg] Unhandled sense code
[140214.281419] sd 3:0:3:0: [sdg]  Result: hostbyte=DID_OK driverbyte=DRIVER_SENSE
[140214.281425] sd 3:0:3:0: [sdg]  Sense Key : Medium Error [current]
[140214.281431] Info fld=0x16379dc9
[140214.281434] sd 3:0:3:0: [sdg]  Add. Sense: Unrecovered read error
[140214.281445] sd 3:0:3:0: [sdg] CDB: Read(10): 28 00 16 37 9d b0 00 00 50 00
[140214.281457] end_request: I/O error, dev sdg, sector 372743625
[140214.347205] md/raid:md0: read error corrected (8 sectors at 372743624 on sdg)
[140214.347233] md/raid:md0: read error corrected (8 sectors at 372743632 on sdg)
[140214.347238] md/raid:md0: read error corrected (8 sectors at 372743640 on sdg)
[140214.347242] md/raid:md0: read error corrected (8 sectors at 372743648 on sdg)
[140214.347247] md/raid:md0: read error corrected (8 sectors at 372743656 on sdg)
[140214.347251] md/raid:md0: read error corrected (8 sectors at 372743664 on sdg)
[140214.347255] md/raid:md0: read error corrected (8 sectors at 372743672 on sdg)

Lijkt op een aantal bad-sectors op /dev/sdg
Moet ik me hier zorgen om maken en deze disk gewoon RMA sturen (lijkt me van wel)?

Acties:

donderdag 14 juli 2011 18:43

brndst schreef op donderdag 14 juli 2011 @ 17:24:
Ik ben momenteel mijn raid5 array onder server 2008 aan het opbouwen met een HP P410 sas controller incl 3x1,5TB samsung F3 Disks.
En tijdens het opbouwen is schijf #2 er al 2 keer uit geklapt. Het gaat ook nooit in 1 keer goed.
De betreffende schijf krijgt dan opeens geen power meer waardoor de array denkt, hee schijfje kaduuk.

Heb je alle 3 de schijven gecontrolleerd op bad sectors met een full scan. En anders word het spelen met CCTL/TLER. Deze zal je dan bij iedere cold boot weer aan moeten zetten. Zelf maak ik gebruik van 4 hitachi schijven 7k1000 serie. Deze staan in een hardware raid5. zonder TLER kan de schijf dus uit de raid array klappen. Quindor heeft een paar pagina's terug een stuk hier over geschreven. Tevens staat op storagereview een goed artikel hier over.

Dat is dus het nadeel van desktop schijven met hardware raid controllers.

Acties:

DJ-Visto

Aye aye, sir!

Dames

Ik heb nu mijn 8*2TB RAID5 werkend, hardware raid. Nu moet ik keuze's maken tussen welke strip size? Heb hem nu laten transferen naar 256KB? Is dat een goeie keus of weet iemand of ik hoger of lager moet gaan?

En het bevat data zoals: films/muziek/documenten etc

Oh en ik heb dan ook nog 3*1TB RAID5 MDADM, met nu 64k strip/chunk size.

Is dit een goeie keus? Op deze RAID5 draaien al mijn vms.

[ Voor 30% gewijzigd door DJ-Visto op 14-07-2011 18:45 ]

donderdag 14 juli 2011 18:50

Acties:

donderdag 14 juli 2011 20:54

whocarez schreef op donderdag 14 juli 2011 @ 18:42:
[...]

Heb je alle 3 de schijven gecontrolleerd op bad sectors met een full scan. En anders word het spelen met CCTL/TLER. Deze zal je dan bij iedere cold boot weer aan moeten zetten. Zelf maak ik gebruik van 4 hitachi schijven 7k1000 serie. Deze staan in een hardware raid5. zonder TLER kan de schijf dus uit de raid array klappen. Quindor heeft een paar pagina's terug een stuk hier over geschreven. Tevens staat op storagereview een goed artikel hier over.

Dat is dus het nadeel van desktop schijven met hardware raid controllers.

Schijven zijn niet gecontrolleerd nee,Het gaat om de 1,5TB Samsung HD155UI schijven. Ik zal het artikel doornemen en kijken of ik er wat wijzer uit word. Het is wel zo dat ik eerst de WD20EARS 2TB schijven gekocht had. Deze heb ik meteen maar weer van de hand gedaan want dat scheen echt een no-go te zijn voor hardware-raid.

Als ik het goed had(99%) bleken dit type schijven WEL geschikt te zijn voor een hardwarematige raid5 setup zonde je zorgen te hoeven maken voor tler/cctl of andere toestanden.

@DJ-Visto, hier ben ik ook wel benieuwd naar want ik heb de strip size nu ook op 256kb staan.

[ Voor 4% gewijzigd door Birdie_NL op 14-07-2011 18:52 ]

Acties:

donderdag 14 juli 2011 21:38

brndst schreef op donderdag 14 juli 2011 @ 17:24:
Ik ben momenteel mijn raid5 array onder server 2008 aan het opbouwen met een HP P410 sas controller incl 3x1,5TB samsung F3 Disks.
En tijdens het opbouwen is schijf #2 er al 2 keer uit geklapt. Het gaat ook nooit in 1 keer goed.
De betreffende schijf krijgt dan opeens geen power meer waardoor de array denkt, hee schijfje kaduuk.

Nou probleem gevonden, de betreffende schijf heeft een aantal bad sectors. moet ik WEER wachten

maar goed, nu kan ik wel even op me gemak de andere disks van een controle voorzien.

Acties:

donderdag 14 juli 2011 22:30

whocarez schreef op donderdag 14 juli 2011 @ 21:11:
[...]

Balen zeg. Direct om laten ruilen die handel. Zelf heb ik altijd goede ervaring gehad met Hitachi. Dingen hebben me eigenlijk nooit in de steek gelaten

Komt helemaal goed!

Alleen eerlijk gezegd heb ik een andere mening over de schijven van Hitachi maar ik kan me indenken dat de keuze en ervaring voor een ieder verschillend is.

Acties:

Verwijderd

johiem schreef op woensdag 13 juli 2011 @ 20:58:
[...]

Dat is nog niet eens zon gek idee. Ik wil graag zelf een NAS maken als een leuk project.

Zou dit ook een form factor mini ITX zijn? lijkt mij namelijk wel.

In ieder geval bedankt voor de tip.

dit is ook wel een bijzondere itx case .. (2 rechterhanden vereist)

vrijdag 15 juli 2011 10:20

Acties:

OMX2000

By any means necessary...

Hoe hebben jullie je device gemount via xfs? Welke opties hebben jullie gebruikt?

Als ik de optie errors=remount-ro gebruik krijg ik steeds de foutmelding : " XFS: unknown mount option [errors]"

Moet ik nog een kernel module laden, of ondersteund XFS het echt niet. Hetzelfde geldt voor de optie [acl].

Dè developers podcast in je moerstaal : CodeKlets Podcast

vrijdag 15 juli 2011 11:03

Acties:

vrijdag 15 juli 2011 11:08

Hoe start je eigenlijk een programma in Linux met commando?

Want ik lees op internet:

/usr/bin/sudo -u sabuser -H /usr/local/src/SABnzbd/SABnzbd.py -d -f /root/.sabnzbd/sabnzbd.ini

dan krijg ik: /usr/bin/sudo: Command not found..

Acties:

CurlyMo

Turk schreef op vrijdag 15 juli 2011 @ 11:03:
Hoe start je eigenlijk een programma in Linux met commando?

Want ik lees op internet:

/usr/bin/sudo -u sabuser -H /usr/local/src/SABnzbd/SABnzbd.py -d -f /root/.sabnzbd/sabnzbd.ini

dan krijg ik: /usr/bin/sudo: Command not found..

Waarschijnlijk hoef je niet eens een pad op te geven. Dus gewoon sudo -u ....
Anders is het waarschijnlijk /usr/sbin/sudo
Anders kan je altijd nog even zoeken naar sudo:

find / -name sudo

Sinds de 2 dagen regel reageer ik hier niet meer

vrijdag 15 juli 2011 11:51

Acties:

vrijdag 15 juli 2011 12:09

CurlyMo schreef op vrijdag 15 juli 2011 @ 11:08:
[...]

Waarschijnlijk hoef je niet eens een pad op te geven. Dus gewoon sudo -u ....
Anders is het waarschijnlijk /usr/sbin/sudo
Anders kan je altijd nog even zoeken naar sudo:

find / -name sudo

> find / -name sudo
find: /root: Permission denied
find: /var/log/samba/cores: Permission denied
find: /var/db/nut: Permission denied
find: /mnt/data/.recycle/ftp: Permission denied
find: /mnt/data/uPnP/database/iTunes: Permission denied

Snap er niks meer van.. Iemand die me via PB ofzo wil helpen? Want bij iedereen lukt het, alleen ik krijg het niet voor elkaar

Acties:

vrijdag 15 juli 2011 12:10

Welke linux draai je dan?

Acties:

vrijdag 15 juli 2011 12:13

Versie 0.7.2 Sabanda (revisie 6694)
OS versie FreeBSD 7.3-RELEASE-p6 (revision 199506)

Acties:

vrijdag 15 juli 2011 12:15

Heeft er iemand nog iets zinnigs te zeggen over mijn dmesg output een stukje hierboven?

Ik heb nog een smartctl test gedaan met:

smartctl -t select,372743000-373744000

en deze geeft geen errors

Moet ik de bewuste disk nu wel of niet als RMA beschouwen?

Acties:

vrijdag 15 juli 2011 12:20

Turk schreef op vrijdag 15 juli 2011 @ 12:10:
Versie 0.7.2 Sabanda (revisie 6694)
OS versie FreeBSD 7.3-RELEASE-p6 (revision 199506)

Da's geen linux, dat is een bsd variant. Volg je wel de juiste guide?

Acties:

vrijdag 15 juli 2011 12:48

Ik volg ze allemaal voor FreeNAS 0.7
Alleen ik doe iets fout, alleen heb ik er niet genoeg ervaring mee om te weten wát ik fout doe..

Ben er al ongeveer 5 dagen mee bezig, maar weer míj lukt het niet..
Ik krijg trouwens via putty geen volledige toegang (geen idee hoe ik mezelf als root moet maken)

Of ik zou even het scherm en toetsenbord moeten aansluiten op de NAS, dat is geen probleem..

Als het maar lukt

Acties:

vrijdag 15 juli 2011 12:53

Raid
Interne harde schijven
Zuinig
Diy
USB/Opslag-controllers
NAS

su -

sudo -s

sudo su -

Probeer wat

[ Voor 87% gewijzigd door FireDrunk op 15-07-2011 12:48 ]

Even niets...

Acties:

vrijdag 15 juli 2011 13:45

FireDrunk schreef op vrijdag 15 juli 2011 @ 12:48:
su -
sudo -s
sudo su -
Probeer wat

Haha thanks, het was su - en daarna vraagt ie wachtwoord..

Maar nu wil ik dus nog SABnzbd installeren

Acties:

dutch_warrior

Mafketel schreef op maandag 11 juli 2011 @ 09:30:
[...]
2 dingetjes , als je een schijf wil vervangen terwijl je server aanstaat vergeet dan niet een kabel arm mee te ontwerpen in de diepte de je beschikbaar hebt in je rack.

Kijk daar had ik niet aan gedacht terwijl ik een tijd geleden al wel twee kabelarmen van hp servers had geregeld.

Over de koeling, je schijven hebben wel een luchtstroom maar deze kan daarna nergens heen behalve door de voeding.
Je moet eigenlijk net zo'n groot gat als je fan's hebt aan de achterkan maken .... wat dus niet kan ... maar je kunt wel de gehele achterkant van roosters/gaatjes voorzien inclusief de niet gebruikte slotplaten van de pci-e kaarten.

Klopt, dit was nog niet uitgewerkt maar front en rear moeten inderdaad van geperforeerde plaat worden gemaakt, eigenlijk zoals de G5 macs.

Voor je cpu zou ik niet direct een toren nemen, maar in een optimale wereld een koeler met heatpipes waarbij de eigenlijke radiator geplaatst wordt op het stuk boven de atx afdekplaat. Nu is dit een utopie waarschijnlijk, dus next best thing is een tower met aan de achterkant een luchtgeleider naar de achterkant van de behuizing. Eventueel kun je dan nog een cpu fan plaatsen maar als je het goed ontwerpt is dat niet nodig.

Met tower bedoelde ik zoiets als scythe ninja, het koellichaam van deze koeler staat dan precies in de airflow, dat is toch hetzelfde als wij jij bedoelt of mis ik nu iets?

Ik ben gisteren nog even bezig geweest met het ontwerp en het chassis wordt 85 centimeter diep inclusief kabelboom, de kabels hebben echter ook nog ruimte nodig en om dit allemaal passend te maken zou het front bijna vast voor de glazen deur van het serverrack komen, niet echt optimaal dus.
Daar komt nog bij dat ik eigenlijk ook een mogelijkheid wil houden om de unit af en toe te vervoeren en daarvoor is een erg diepe rackmount case niet geweldig.
Na het zien van de cube van Freak1 ben ik ook even aan de slag gegaan met een cube en ik denk dat ik daarmee mijn wensen beter kan realiseren.
-Ruimte voor minimaal 40 schijven
-E-ATX mobo liefst met 10slots pci bracket. (lastig in rackmount ontwerp)
-Dual Power Supply (lastig in rackmount case vanwege andere wensen)
-Eenvoudig toegang tot de schijven
-Enigszins verplaatsbaar (hmm tja zwaar en langwerpig)
-Airflow schijven en hardware gescheiden (lastig met norco backplanes in 5u ontwerp)

Ik zal morgen wel even een plaatje van beide ontwerpen posten,

vrijdag 15 juli 2011 15:09

Acties:

vrijdag 15 juli 2011 15:26

Core temp 37°C

Vanavond 4x hitachi 5k3000 schijven van 2TB ophalen en komende zondag maar eens gaan installeren (ubuntu 10.04 LTS) , configgen en benchen.

Ik ben spuit 1011, aangenaam!

Acties:

OMX2000

By any means necessary...

Spoooky schreef op vrijdag 15 juli 2011 @ 15:09:
Vanavond 4x hitachi 5k3000 schijven van 2TB ophalen en komende zondag maar eens gaan installeren (ubuntu 10.04 LTS) , configgen en benchen.

ik ben nieuwsgierig. Ik heb vandaag mijn 4x 2TB Samsung F4 NAS online gekregen. Geen speciale dingen gedaan, maar hij loopt lekker. Nog niet echt aan het benchen geweest.

Dè developers podcast in je moerstaal : CodeKlets Podcast

vrijdag 15 juli 2011 16:37

Acties:

vrijdag 15 juli 2011 16:54

Help!

Specs:
Moederbord: Asus Rampage III Extreme
Procssor: Intel I7-930 @3.8 GHZ
Geheugen: Mushkin 12GB (3x4GB) DDR3 PC3-12800 7-9-8-24 Redline
Voeding: CoolerMaster True Power M850 (850 Watt)
Videokaart: Asus EAH5870/2DIS/1GD5/A
HDD: 6 maal Seagate Barracuda Green 5900.3, 2TB in Raid 5 en 1 samsung 1TB als boot
RAIDcontroller: Die van het moederbord zelf (Intel ICH10R controller 6 xSATA 3.0 Gb/s ports)
De 6 HDD van seagate worden gekoeld door SilentMaxx HD-Silenser
Externe HDD: ICY-Box met e-Sata aansluiting en Western Digital Caviar GreenPower WD20EARS ingebouwd.

Het is ook wel handig om erbij te vermelden welke OS :-)
OS: Windows 7 Ultimate SP1 64-bit versie (NL)

Ik heb het volgende probleem:
Ik heb tot 3 keer toe mijn HDD is raid 5 opnieuw moeten aanmaken omdat er tijdens het initialeseren iets fout ging. Heb alle kabels nagekeken en opnieuw aangesloten toen ging het wel goed. Maar het initialeseren duurt wel 92+ uur. dus mijn pc heeft dan ook zolang aan gestaanom het initialiseren af te ronden. Toen het eindelijk gelukt was kon ik schrijfsnelheden van 600+ MB/s halen, echter als ik ISO van Blu-Ray films van mijn externe disk ga over kopieeren haal ik in mijn oude situatie minimaal 100 MB/s middels een e-SATA aansluiting en nu begint het kopieeren met 100 MB/s maar loopt snel terug tot rond de 15 MB/s en dat geldt ook voor het kopieren van mijn interne HDD naar de RAID 5. Systeem vindt ik zelf een beetje instabiel. Ik heb net mijn pc opnieuw opgestart omdat deze niet reageerde gaf mijn bios aan dat 1 van de HDD is Raid 5 in storing staat. in Intel Matrix Storage Console heb ik de HDD op normaal gezet en nu begint met (opnieuw samenstellen van mijn RAID 5 met nog 92+ uuur te gaan wat kan ik hier aan doen en wat raden jullie me aan?

CPU gebruik staat op 0 a 1 procent en geheugen 1.65 GB van de 12 GB.

Afbeeldingslocatie: http://fotopocket.nl/fpimages/2011/07/15/bfb3ea380772de9517774af7e6883688/Raid%255.JPG

Ik hoop snel op goede Tips

[ Voor 5% gewijzigd door NTB_Appie op 15-07-2011 17:21 ]

Acties:

vrijdag 15 juli 2011 17:14

Core temp 37°C

OMX2000 schreef op vrijdag 15 juli 2011 @ 15:26:
[...]

ik ben nieuwsgierig. Ik heb vandaag mijn 4x 2TB Samsung F4 NAS online gekregen. Geen speciale dingen gedaan, maar hij loopt lekker. Nog niet echt aan het benchen geweest.

Ook Ubuntu 10.04 met MDADM?

Ik ben spuit 1011, aangenaam!

Acties:

Staatslot

@NTB_Appie als je tijdens het opbouwen al diverse problemen krijgt en de disk er nu blijkbaar ook een keer uit is geklapt moet je misschien eerst eens kijken of je disks wel echt goed zijn.. Kun je geen gedetailleerde foutmeldingen boven water krijgen en de disk die die fouten veroorzaakt goed scannen op slechte sectoren?

vrijdag 15 juli 2011 17:20

Acties:

vrijdag 15 juli 2011 17:36

Staatslot schreef op vrijdag 15 juli 2011 @ 17:14:
@NTB_Appie als je tijdens het opbouwen al diverse problemen krijgt en de disk er nu blijkbaar ook een keer uit is geklapt moet je misschien eerst eens kijken of je disks wel echt goed zijn.. Kun je geen gedetailleerde foutmeldingen boven water krijgen en de disk die die fouten veroorzaakt goed scannen op slechte sectoren?

Heb ik ook gedaan het bleek niet om dezelfde disk te gaan, omdat deze een andere serienummer heeft en die disk die in het begin fout ging heb ik helemaal nagekeken op bad sectors en fouten automatsich corigeren maar systeem heeft niet gevonden.Mijn gevoel zegt dat het aan het bordje ligt.

[ Voor 3% gewijzigd door NTB_Appie op 15-07-2011 17:22 ]

Acties:

vrijdag 15 juli 2011 17:42

NTB_Appie schreef op vrijdag 15 juli 2011 @ 17:20:
[...]

Heb ik ook gedaan het bleek niet om dezelfde disk te gaan, omdat deze een andere serienummer heeft en die disk die in het begin fout ging heb ik helemaal nagekeken op bad sectors en fouten automatsich corigeren maar systeem heeft niet gevonden.Mijn gevoel zegt dat het aan het bordje ligt.

Wat geeft een full surface scan van al je schijven aan het kan natuurlijk zo zijn dat je een aantal rotte drives hebt. Neem aan dat het om een software matige raid gaat?

Acties:

vrijdag 15 juli 2011 18:10

whocarez schreef op vrijdag 15 juli 2011 @ 17:36:
[...]

Wat geeft een full surface scan van al je schijven aan het kan natuurlijk zo zijn dat je een aantal rotte drives hebt. Neem aan dat het om een software matige raid gaat?

ik heb in de bios RAID gezet en daarne tijdens het opstarten (met CTRL + i) de 6 schijven aangemaakt in Raid 5. Is dit de juiste manier of heb je ook andere manieren wat meer performance geeft?

Acties:

vrijdag 15 juli 2011 18:14

NTB_Appie schreef op vrijdag 15 juli 2011 @ 17:42:
[...]

ik heb in de bios RAID gezet en daarne tijdens het opstarten (met CTRL + i) de 6 schijven aangemaakt in Raid 5. Is dit de juiste manier of heb je ook andere manieren wat meer performance geeft?

Tuurlijk kan het sneller met een hardware matige raid oplossing.

Maar wat geeft een full surface scan van de drives aan? Daarnaast is het ook wel handig om te weten welke driver versie je gebruikt.

http://communities.intel.com/thread/20215 ?

[ Voor 4% gewijzigd door whocarez op 15-07-2011 18:15 ]

Acties:

Verwijderd

wazig, ik hoor m'n harde schijven als een idioot ratelen, ik zie met iotop geen activiteit en zodra ik wat disk activiteit op de array veroorzaak houd het ratelen heel even op

edit: zelfs tijdens een reboot ratelen ze / 1 er?

Kut, het is er 1. Hoop toch niet dat tie dood gaat, ding is net nieuw

Zodra hij stroom krijgt begint 'ie als een gek te ratelen... zelfs zonder sata kabel

[ Voor 38% gewijzigd door Verwijderd op 15-07-2011 18:39 ]

vrijdag 15 juli 2011 19:04

Acties:

vrijdag 15 juli 2011 19:16

Verwijderd schreef op vrijdag 15 juli 2011 @ 18:14:
wazig, ik hoor m'n harde schijven als een idioot ratelen, ik zie met iotop geen activiteit en zodra ik wat disk activiteit op de array veroorzaak houd het ratelen heel even op edit: zelfs tijdens een reboot ratelen ze / 1 er?

Kut, het is er 1. Hoop toch niet dat tie dood gaat, ding is net nieuw Zodra hij stroom krijgt begint 'ie als een gek te ratelen... zelfs zonder sata kabel

Haal hem voor de zekerheid even uit de array en test hem volledig in een andere pc.

Acties:

Verwijderd

Zodra ik het ding stroom geeft begint 'ie al te ratelen... Ik heb Redcoon maar gemaild hoe ze omgaan met een DOA van een disk..

vrijdag 15 juli 2011 20:04

Acties:

vrijdag 15 juli 2011 20:29

whocarez schreef op vrijdag 15 juli 2011 @ 18:10:
[...]

Tuurlijk kan het sneller met een hardware matige raid oplossing.

Maar wat geeft een full surface scan van de drives aan? Daarnaast is het ook wel handig om te weten welke driver versie je gebruikt.

http://communities.intel.com/thread/20215 ?

Hoe kan ik zo een full surface scan draaien?

Acties:

vrijdag 15 juli 2011 20:33

NTB_Appie schreef op vrijdag 15 juli 2011 @ 20:04:
[...]

Hoe kan ik zo een full surface scan draaien?

Als ik het me goed herrinner kan met seatools van seagate.

Acties:

Full time prutser

Verwijderd schreef op vrijdag 15 juli 2011 @ 19:16:
Zodra ik het ding stroom geeft begint 'ie al te ratelen... Ik heb Redcoon maar gemaild hoe ze omgaan met een DOA van een disk..

Dat klinkt inderdaad niet goed. Voor mij sowieso een reden om mijn schijven gewoon in een winkel te kopen. Kan ik fysiek even langs gaan als er wat mis is.

vrijdag 15 juli 2011 20:40

Acties:

vrijdag 15 juli 2011 21:46

whocarez schreef op vrijdag 15 juli 2011 @ 20:29:
[...]

Als ik het me goed herrinner kan met seatools van seagate.

Bedankt, zodra ik weer thuis ben zal ik de tool downloaden en draaien.
resultaat zal ik dan hier posten

Bedankt voor de moeite en een fijne avond!

[ Voor 30% gewijzigd door NTB_Appie op 15-07-2011 20:41 ]

Acties:

Verwijderd

iMars schreef op vrijdag 15 juli 2011 @ 20:33:
[...]

Dat klinkt inderdaad niet goed. Voor mij sowieso een reden om mijn schijven gewoon in een winkel te kopen. Kan ik fysiek even langs gaan als er wat mis is.

Ze komen langs en halen het op, prima

vrijdag 15 juli 2011 22:11

Acties:

vrijdag 15 juli 2011 22:20

Verwijderd schreef op vrijdag 15 juli 2011 @ 21:46:
[...]

Ze komen langs en halen het op, prima

geen verkeerde service dan als ze ze op komen halen

Acties:

Full time prutser

Verwijderd schreef op vrijdag 15 juli 2011 @ 21:46:
[...]

Ze komen langs en halen het op, prima

Zeker geen verkeerde service, maar alternate zit 5 minuten bij mij vandaan en vind het fijner om bij een winkel langs te gaan

vrijdag 15 juli 2011 22:29

Acties:

TrailBlazer

Karnemelk FTW

Hoe bieden jullie de storage aan aan de andere pc's in jullie netwerk? iSCSI, nfs, cifs en hoe configureer je dat? Afgelopen dagen bezig geweest samba te configureren en dat lijkt prima te werken maar hoe doen jullie het?

vrijdag 15 juli 2011 22:32

Acties:

Zware Unit

Iemand ervaring met de LSI Logic SAS 9201-16i of een soort gelijke controller? Ik gebruik momenteel de Areca ARC-1280ML, maar deze ondersteund de power functies van mijn WD10EADS schijven niet. Gebruik de RAID functionaliteit van de Areca toch niet, aangezien ik ben overgeschakeld naar ZFS RAIDZ2.

... all gonna wonder how you ever thought you could live so large and leave so little for the rest of us...

vrijdag 15 juli 2011 22:43

Acties:

DJ-Promo

TrailBlazer schreef op vrijdag 15 juli 2011 @ 22:29:
Hoe bieden jullie de storage aan aan de andere pc's in jullie netwerk? iSCSI, nfs, cifs en hoe configureer je dat? Afgelopen dagen bezig geweest samba te configureren en dat lijkt prima te werken maar hoe doen jullie het?

Ik gebruik NFS om met mijn laptop en desktop de NAS te kunnen benaderen.
De config file op de NAS steld niks voor het mounten op de client is wel belangrijk en daar heb ik veel snelheids winst mee gemaakt.
Samba heb ik gebruikt toen ik nog met een Windows machine erop wilde maar dat is nu verleden tijd en NFS bevalt mij beter.

vrijdag 15 juli 2011 23:25

Acties:

Full time prutser

DJ-Promo schreef op vrijdag 15 juli 2011 @ 22:43:
[...]

Ik gebruik NFS om met mijn laptop en desktop de NAS te kunnen benaderen.
De config file op de NAS steld niks voor het mounten op de client is wel belangrijk en daar heb ik veel snelheids winst mee gemaakt.
Samba heb ik gebruikt toen ik nog met een Windows machine erop wilde maar dat is nu verleden tijd en NFS bevalt mij beter.

hier ook... NFS & Samba... + AFP Voor mijn TimeMachine

vrijdag 15 juli 2011 23:25

Acties:

zaterdag 16 juli 2011 00:13

TrailBlazer schreef op vrijdag 15 juli 2011 @ 22:29:
Hoe bieden jullie de storage aan aan de andere pc's in jullie netwerk? iSCSI, nfs, cifs en hoe configureer je dat? Afgelopen dagen bezig geweest samba te configureren en dat lijkt prima te werken maar hoe doen jullie het?

Ik bied een NFS-share exclusief aan aan de ESXi host, daar staan een deel van mijn VMs op.

Verder heb ik mijn data-share nu zo geconfigureerd dat die zowel via Samba als via NFS te benaderen is.
Onder Windows gebruik ik Samba en onder Linux gebruik ik NFS.

De reden hiervoor is dat om een of andere reden shares die ik via Samba (CIFS) mount in Ubuntu niet vooruit te branden zijn qua transfer speeds.
Waar ik makkelijk 100MB/sec haal met Samba in Windows, is dit in Ubuntu maar zo'n 20MB/sec. NFS in Linux daarentegen haalt ook weer makkelijk de 100MB/sec.

En nog een update van mijn ESXi project:
Ik was vanavond een VM aan het inrichten en vreemd genoeg had de disk daarvan (in de VM dus, toen die eenmaal draaide) een aantal bad sectors. Aangezien het maar test-spul was, dacht ik de VM even te verwijderen (die VM staat dus op de bovengenoemde NFS share).

En toen ging het mis......
vSphere bleef bij dat verwijderen heel lang hangen op 95%. In de logs op mijn Ubuntu zal ik verschillende meldingen over fouten in NFS. Uiteindelijk dan maar de ESXi host een reboot gegeven.
Bij opstarten van de Linux VM meteen meldingen dat /dev/md0 niet gemount kon worden.
Eindresultaat is dat ik (gelukkig) niks kwijt ben, maar de raidset is opnieuw aan het rebuilden.

Ik vraag me af of het iets te maken heeft/kan hebben met de eerder hier gemelde foutmeldingen van een van mijn disks

_{Sorry voor het lange verhaal, maar ik heb mijn frustraties intussen mooi van me af getypt}

Acties:

zaterdag 16 juli 2011 00:13

95% hangen in esx is vaak dat het storage systeem. Traag problemen of snapshots die uit de klauwen zijn gelopen.
Ik zou er in ieder geval niet raar van staan kijken als het storage gerelateerd is.

Acties:

Verwijderd

TrailBlazer schreef op vrijdag 15 juli 2011 @ 22:29:
Hoe bieden jullie de storage aan aan de andere pc's in jullie netwerk? iSCSI, nfs, cifs en hoe configureer je dat? Afgelopen dagen bezig geweest samba te configureren en dat lijkt prima te werken maar hoe doen jullie het?

Windows: smb
Linuxachtigen: nfs

Gisteren heb ik ook geprobeerd om de nfsclient van Windows 7 te gebruiken, maar dat was een drama, hing het hele systeem op. Verder wil ik nog gaan klooien met booten vanaf iscsi, iig voor de media centers en misschien ook voor de desktop.

Grootste nadeel van samba is het hoge cpu gebruik; op die atom zorgt dat ervoor dat de snelheden wat lager liggen.

[ Voor 8% gewijzigd door Verwijderd op 16-07-2011 00:14 ]

zaterdag 16 juli 2011 01:10

Acties:

OMX2000

By any means necessary...

Spoooky schreef op vrijdag 15 juli 2011 @ 16:54:
[...]

Ook Ubuntu 10.04 met MDADM?

Misschien link, maar ik ben toch voor Ubuntu 11.04 gegaan. Eigenlijk niet echt nodig, maar meer omdat ik hoop dat ze weer wat extra performance uit raid en xfs weten te trekken met nieuwere kernel en zo.

Dè developers podcast in je moerstaal : CodeKlets Podcast

zaterdag 16 juli 2011 01:46

Acties:

zaterdag 16 juli 2011 07:55

whocarez schreef op zaterdag 16 juli 2011 @ 00:13:
95% hangen in esx is vaak dat het storage systeem. Traag problemen of snapshots die uit de klauwen zijn gelopen.
Ik zou er in ieder geval niet raar van staan kijken als het storage gerelateerd is.

Het zal ongetwijfeld storage gerelateerd zijn, aangezien de na de reboot de mdadm raid-array waar de bewuste VM opstond (nou ja, de VM hard disk dan toch) meteen ging rebuilden.

Combineer dat met de eerder 'vage' meldingen van een van mijn disks (zie hierboven ergens) en het kan haast niet anders.

Probleem is nu: Wat is precies het probleem, aangezien de eerste tests met smartctl geen problemen op die disk weergeven

* Sleepie gaat nu lekker slapen en gaat morgen wel verder met testen/troubleshooten als de raid gerebuild is

Acties:

zaterdag 16 juli 2011 10:23

Core temp 37°C

whocarez schreef op zaterdag 16 juli 2011 @ 00:16:
[...]

toch maar hds genomen en geen samsung?

Ja, waren goed te betalen en op voorraad. "Helaas" vandaag veel leuke dingen gepland, dus geen tijd om te klooien.. Dat komt morgen dus. Binnenkort even nieuwe accu's fixen voor mijn UPS en daarna kan hij "in produktie".

Ik ben spuit 1011, aangenaam!

Acties:

Nextron

Ik weet dat ik niets weet

Dat zou wel een welkome aanvulling op MDADM zijn, een soort fail-safe. Wanneer een disk eruit klapt dat de hele array offline gehaald wordt en clean blijft. Dan zou je na het verhelpen van het probleem niet hoeven te rebuilden.

Hoe meer ik weet,
hoe meer ik weet,
dat ik niets weet.

zaterdag 16 juli 2011 11:42

Acties:

zaterdag 16 juli 2011 11:43

Ik heb zo te zien toch echt problemen met 1 van mijn disks, degene die al eerder verdacht was.
smartctl short test geeft het volgende:

SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
# 1  Short offline       Completed: read failure       20%       466         372738513
# 2  Selective offline   Completed without error       00%       443

Gevalletje RMA dus.

Acties:

TrailBlazer

Karnemelk FTW

Verwijderd schreef op zaterdag 16 juli 2011 @ 00:13:
[...]

Windows: smb
Linuxachtigen: nfs

Gisteren heb ik ook geprobeerd om de nfsclient van Windows 7 te gebruiken, maar dat was een drama, hing het hele systeem op. Verder wil ik nog gaan klooien met booten vanaf iscsi, iig voor de media centers en misschien ook voor de desktop.

Grootste nadeel van samba is het hoge cpu gebruik; op die atom zorgt dat ervoor dat de snelheden wat lager liggen.

boote via iSCSI lijkt me ook wel handig. Iemand daar een goede nic voor.

zaterdag 16 juli 2011 12:29

Acties:

Verwijderd

Ik wil het met gpxe gaan proberen

zaterdag 16 juli 2011 15:28

Acties:

Zware Unit

Net mijn 2GB module vervangen door 4 van 2GB. Van 2 naar 8GB ivm ZFS.

2GB geheugen benchmark
%dd if=/dev/zero of=/mnt/storage/nulfile.dat bs=1m count=32000
32000+0 records in
32000+0 records out
33554432000 bytes transferred in 148.955692 secs (225264517 bytes/sec)

8GB geheugen benchmark
%dd if=/dev/zero of=/mnt/storage/nulfile.dat bs=1m count=32000
32000+0 records in
32000+0 records out
33554432000 bytes transferred in 66.548211 secs (504212381 bytes/sec)

ZFS RAIDZ2 prestaties zijn dus VEEL beter. Van 215MB per seconde naar 481MB per seconde. Niet dat ik er veel van ga merken, maar het is toch lekker

... all gonna wonder how you ever thought you could live so large and leave so little for the rest of us...

zaterdag 16 juli 2011 16:04

Acties: