Dell PERC5/i SAS RAID Controller

[jax7480]

Τελικα ο δισκος εσκασε (σταματησε να στροφαρει) και πηγε για αλλαγη.

Κατι ηξερε ο controller που το ελεγε.

Ειμαι σε φαση rebuild για την ωρα.

5 ωρες για rebuild 3.5ΤΒ ειναι νορμαλ?

[Jaco]

5 ώρες είναι πολύ γρήγορα...

ο areca θα ήθελε 2 μέρες και μετά 1 μέρα αναρρωτική...

[nightElf]

Καλησπέρα. Πριν 2 μέρες έβαλα έναν perc 5i και εγώ αλλά για jbod. Έχω όμως ένα πρόβλημα: έχω vista στο μηχάνημα και όταν κάνω αντιγραφή στους δίσκους του έχω max write 20,1 mb, ενώ read 100. Τι μπορεί να φταίει?

[Jaco]

drivers...?

[nightElf]

drivers...?

των vista... υπάρχουν άλλοι?

Έγινε επεξεργασία Σεπτέμβριος 28, 2010 από nightElf

[Jaco]

Πρέπει να έχει βγάλει και η dell... σε xp πάντως της dell είχα βάλει...

[Blinky]

Ειχα γραψει παραπανω ενα κειμενακι για το reconstruction, αλλα δε μπορουσα τοτε να προχωρησω το wizard γιατι δεν ημουνα σε φαση που να προσθετω δισκο. Επειδη ομως προχτες εβαλα τον 8ο δισκο στο raid5 μου, προνοησα και πηρα μερικα screenshots της διαδικασιας οποτε μπορω να τα βαλω εδω τωρα για να υπαρχει μεγαλυτερη ακριβεια και ευκολια.

Δε θα μπω σε λεπτομερειες αφου υπαρχουν στο προηγουμενο post, απλα θα βαλω τα screenshots και 1-2 κουβεντες για το τι γινεται στο καθενα.

Στη συγκεκριμενη περιπτωση ειχα ενα raid 5 array με 7x1.5tb Seagate 7200.11 7200rpm και προσεθεσα αλλον εναν οποτε γινανε 8, το μεγιστο του perc.

Ξεκιναμε λοιπον.

ΠΡΩΤΟΥ ΚΑΝ ΞΕΚΙΝΗΣΩ, ΘΑ ΠΩ ΟΤΙ ΟΠΟΙΟΣ ΤΟ ΠΕΡΑΣΕΙ ΣΤΑ ΓΡΗΓΟΡΑ, ΑΣ ΔΩΣΕΙ ΤΟΥΛΑΧΙΣΤΟΝ ΠΡΟΣΟΧΗ ΣΤΟ ΒΗΜΑ 9! ΕΙΝΑΙ ΠΑΑΑΑΡΑ ΠΟΛΥ ΣΗΜΑΝΤΙΚΟ ΚΑΙ ΕΝΑ ΛΑΘΟς ΕΚΕΙ ΜΠΟΡΕΙ ΝΑ ΑΠΟΒΕΙ ΚΑΤΑΣΤΡΟΦΙΚΟ!!!!

1) Εδω βλεπουμε τα Properties του εικονικου δισκου πριν το reconstruction. Capacity 8.18tb και μου εχουν μεινει μονο 3.32gb ελευθερα...

2)Και εδω ο εικονικος δισκος στο disk management των windows7 :

3)Ανοιγουμε το Megaraid storage manager, κανουμε Login και βλεπουμε εδω, στο Physical tab οτι ειναι 8 δισκοι συνδεμενοι, απο 0-7 και η BBU.

4)Παταμε στο logical tab, Και εδω βλεπουμε το υπαρχον array που χρησιμοποιει μονο τους 0-6 δισκους, και κανουμε δεξι click στο virtual disk 0 και απο το menu επιλεγουμε Advanced Operations -> Rexonstruction Wizard.

5)Μας προειδοποιει οτι καλυτερα να κανουμξε backup πριν ξεκινησουμε, τσεκαρουμε το confirm και παταμε Yes.

6)Εδω επιλεγουμε το "Add Drive" και παταμε Next.

7)Μας βγαζει μια λιστα με τα διαθεσιμα drives μπου μπορουμε να προσθεσουμε, επιλεγουμε το δισκο μας και παταμε Add. Εδω, θα μπορουσαμε να προσθεσουμξε και πανω απο εναν δισκους. Ας πουμε στο παρελθον εχω κανει reconstruction απο 3 σε 5 δισκους απευθειας, δεν ειναι αναγκη αν γινει σε 2 βηματα, απλα θα τους κανατε add και τους 2...

8)Βλεπουμε το αποτελεσμα με το δισκο μας απο κατω, και παταμε Next.

9)Εδω επιλεγουμε την κατασταση του τελικου raid που θα δημιουργηθει. Ειναι το σημειο στο οποιο αν το επιθυμουμε μπορουμε και να αλλαξουμε raid level (εφοσον ειναι εφικτο). ΠΡΟΣΟΧΗ!!! Η προεπιλεγμενη επιλογη ειναι ΠΑΝΤΑ raid0 ανεξαρτητα αν το αρχικο μας raid ηταν 5....ΔΕΝ πρεπει να ξεχασουμε να το αλλαξουμε σε 5 γιατι αλλιως την κατσαμε, θα προκυψει ενα τεραστιο raid0 απο το οποιο μαλλον δε θα μπορουμε να γυρισουμε σε raid5 χωρις να προσθεσουμε και αλλον δισκο! ΕΙΝΑΙ ΜΕΓΑΛΗ ΒΛΑΚΕΙΑ ΤΟΥ MEGARAID STORAGE MANAGER ΑΥΤΟ ΚΑΙ ΠΡΕΠΕΙ ΟΠΩΣΔΗΠΟΤΕ ΝΑ ΕΠΙΛΕΞΟΥΜΕ RAID5 ΑΛΛΙΩΣ ΑΜΑ ΑΡΧΙΣΕΙ ΤΟ RECONSTRUCTION ΤΗ ΒΑΨΑΜΕ, ΔΕΝ ΥΠΑΡΧΕΙ ΓΥΡΙΣΜΟΣ!!!

10)Το κανουμε λοιπον raid5 και παταμε Finish.

11)Μας προειδοποιει λοιπον οτι η διαδικασια που θα ξεκινησει δεν μπορει να διακοπει, παταμε Yes και ξεκιναει...

12)Εδω βλεπουμε το Progress του reconstruction....ετοιμαστειτε για μερες αναμονης, εμενα πηρε κατιτις λιγοτερο απο 4 μερες, μαζι με το initialization που κανει οταν τελειωσει.

13)Αφου τελειωσει, παμε στο disk management παλι, κανουμε ενα refresh (F5) και εμφανιζεται ο εξτρα χωρος στο δισκο μας σαν unallocated space!

14)Αρκει λοιπον να κανουμε extend το partition για να συμπεριλαβει και τον νεο χωρο....κανουμε δεξι click -> Extend Partition, κανουμε add ολο το διαθεσιμο χωρο και παταμε next.

15)Να το αποτελεσμα, πλεον εχουμε ενα δισκο με 1 partition των 9777gb.

16)Παμε παλι και στο My Computer στα Properties του δισκου μας για να επιβεβαιωσουμε τη νεα χωρητικοτητα, και οντως βλεπουμε πλεον 9.54tb χωρητικοτητα με 1.36tb free, αυτα που μολις προσθεσαμε δηλαδη!

Εχουμε τελειωσει πλεον. Ετσι για την ιστορια, παραθετω απλα και ενα συγκριτικο bench του read, πριν και μετα:

Και τελος ενα Full read test του τελικου δισκου για μεγαλυτερη ακριβεια:

Έγινε επεξεργασία Σεπτέμβριος 29, 2010 από Blinky

[apotsi]

Πολύ καλός ο οδηγός σου και οι πληροφορίες σου, Blinky.

Εμένα μπορεί κάποιος να μου πεί γιατί σε RAID5 με 4 x 1TB Samsung F1 έχω πάρα πολύ χαμηλές τεχύτητες;

Παραθέτω screenshots από την μέτρηση, καθώς και από τις ρυθμίσεις του Perc και του VD.

Drivers "φοράει" της Dell τους 64bit-ους (2.24.0.64), μιάς και το λειτουργικό είναι Windows 7 64bit. To Windows Search service το έχω απενεργοποιημένο, και την ώρα του bench, είχα κλείσει AV και περιττά προγράμματα.

Καμιά ιδέα;

[apotsi]

...και μην φανταστείτε ότι και το RAID0 μου είναι γρήγορο (2x Seagate ST3320813AS). Και αυτό τα ίδια σκ@τά.

[nightElf]

Πρέπει να έχει βγάλει και η dell... σε xp πάντως της dell είχα βάλει...

Και τι ταχύτητες έπιανες? Γιατί δε γίνεται να γράφει ο σκληρός με 20,1 και να διαβάζει με 100. Σκέφτομαι να βάλω windows 7 32bit για να γλιτώσω...

[Jaco]

Σε raid0 ~ 300/300 (r/w) και raid5 ~220/220 με 3xWD6400AAKS...

Α, ξέχασα, επίσης έχω και την BBU συνδεδεμένη και το write-back ενεργοποιημένο, το οποίο κάνει πολύ μεγάλη διαφορά... χωρίς την bbu εκτός του ότι πέφτει το write (που είναι λογικό), για κάποιο λόγο πέφτει και το read... οπότε μπορεί να είναι και αυτό το πρόβλημά σου...

Αν δεν έχετε BBU πάρτε μια από ebay, δεν ξέρω τι τιμή έχουν τώρα, αλλά δε νοείται perc χωρίς αυτήν...

Έγινε επεξεργασία Σεπτέμβριος 29, 2010 από Jaco

[apotsi]

Αυτές οι ταχύτητες είναι ΜΕ BBU

[Jaco]

Επειδή από 7, εγώ δεν... ρωτήστε τον blinky τι drivers φοράει...

[apotsi]

ναι αυτο εννοουσα οτι το πρακτικο cap ειναι πιο κατω, τωρα αν οφειλεται στον intel ή αλλου δε ξερω, αλλα ας πουμε στο read performance δε βλεπω γιατι θα ειναι προβλημα ο επεξεργαστης....δεν ζοριζεται καθολου εκει, στο write ειναι που τον ξεσκιζεις οσο πιο πολλους δισκους βαζεις.

Εχω αρχειο παντως με μετρησεις και με 5 και με 6 και τωρα με 7 δισκους και ανεβαινω σταθερα με καθε προσθηκη δισκου στο read, οπως ειναι φυσιολογικο.

Απλα οι μετρησεις με 5 και 6 δισκους γινανε με hdtune 3.5 που δεν εβλεπε πανω απο 2199gb partition αρα ειναι στο αρχικο και γρηγοροτερο κομματι των δισκων. Οποτε δνε ειναι συγκρισιμες με την παραπανω μετρηση (στο average read τουλαχιστον.....το max μπορεις να το συγκριν0εις).

Για να εξομοιωσω καπως τη μετρηση του hdtune 3.5 με το 4, εβαλα και στο τελος μια μετρηση με 7 δισκους και shortstroking 2199gb...οποτε αυτη ειναι συγκρισιμη με τις 2 μετρησεις των 5 και 6 δισκων...

Raid5 - 5 Disks :

Raid5 - 6 Disks :

Raid5 - 7 Disks :

Οπως βλεπεις υπαρχει μια σταθερη αυξηση περιπου 100mb/s με καθε προσθηκη δισκου...

Και τί drivers φοράς βρε blinky ??? Τί ***** έχω κάνεις εγώ λάθος; Απ' ότι είδα από τα screenshots του οδηγού σου, τις ίδιες ρυθμίσεις έχουμε στα VD.

Τί configuration έχεις στο PC σου; Μπορεί να παίζει ρόλο που ο controller είναι στην δεύτερη PCI Express και στην πρώτη η κάρτα γραφικών; Η μητρική μου είναι ASUS P5Q PRO TURBO και απ' ότι έχω δεί έχει ρίξει την κάρτα γραφικών στο x8 μόλις έβαλα μέσα τον Perc5, αλλά δεν νομίζω ότι υπάρχει κάποιο πρόβλημα εκεί.

[Blinky]

Εχω και εγω windows 7 64bit οποτε δεν ειναι εκει το προβλημα σου. Drivers δεν εχω τιποτα περιεργο, αυτους που βγαζει το windows update μετα απο format...

Ειχα μια υποψια και το επιβεβαιωσα, οποτε ξερω που ειναι το θεμα σου. Στο HDtune τρεχεις με το default block size που ειναι 64kb. Καν' το 8mb και θα απογειωθεις...

Δεν εχει νοημα το 64kb για αποθηκη....εγω ειμαι γεματος bluray ISOs που ειναι μερικα Gb το καθενα...

Στα settings του HDtune, βαλε block size 8mb, και πηγαινε την μπαρα τερμα στο Accurate. Αποκει και περα μεινε στο partial test για να κερδισεις χρονο, οπως ειδες και απο το δικο μου, το partial με το full εχουν ελαχιστη διαφορα, ουσιαστικα απλα ειναι πιο ομαλη η καμπυλη στο full αλλα πηρε και μερικες ωρες για να γινει...

[sdim]

Στις ρυθμίσεις των δίσκων σιγουρευτείτε ότι το "Turn off windows write-cache buffer flushing on the device" είναι τσεκαρισμένο, και αν έχει από κάτω και άλλο κουτάκι τσεκάρετέ το και αυτό (SOS: Να έχετε BBU για να μην πάθετε ζημιά!).

Στο δικό μου σύστημα με 4x1TB Seagate 7200.12 από τα 120MB/sec ανέβηκε στα 400 σχεδόν με αυτή την ρύθμιση.

Y.G. Ανταλλάζω έναν ή περισσότερους δίσκους με μεγαλύτερους και συζητάμε την διαφορά.

[apotsi]

Στις ρυθμίσεις των δίσκων σιγουρευτείτε ότι το "Turn off windows write-cache buffer flushing on the device" είναι τσεκαρισμένο, και αν έχει από κάτω και άλλο κουτάκι τσεκάρετέ το και αυτό (SOS: Να έχετε BBU για να μην πάθετε ζημιά!).

Στο δικό μου σύστημα με 4x1TB Seagate 7200.12 από τα 120MB/sec ανέβηκε στα 400 σχεδόν με αυτή την ρύθμιση.

Y.G. Ανταλλάζω έναν ή περισσότερους δίσκους με μεγαλύτερους και συζητάμε την διαφορά.

Αν μιλάς για τα Windows για το device manager, εμένα δεν με αφήνει να την πειράξω αυτή τη ρύθμιση.

[Blinky]

Ουτε εμενα με αφηνει....αλλα δε μου ειπες Apotsi, με αυτο που σου ειπα παραπανω δε φτιαξανε τα νουμερακια σου? Ειμαι σιγουρος οτι ηταν το block size...

[apotsi]

Έφτιαξαν αρκετά, αλλά όχι στα επίπεδά σας. Δεν ξέρω μήπως έχω κάνει καμιά λαλακία με το stripe size. Μήπως έπρεπε να το φτιάξω με μεγαλύτερο από 128Κβ ?

[Blinky]

βαλε ενα screenshot να σου πω αν ειναι λογικα τα νουμερα σου πλεον. Υπολογιζω παντως οτι με 4x samsung F1 raid5 πρεπει να εισαι γυρω στα 280-300mb/s average read.

Και εγω με 128 stripe size ειμαι, με το dell firmware δεν παει παραπανω, αμα τον κανεις LSI παει και 256 σιγουρα, ισως και 512...