ctserver.org

Hallo,

ich habe gerade feststellen müssen das ein resync eines großen RAID1 mein gesamtes System lahmlegt.

Bei kleineren RAID1 Größen kann ich während des resync weiterarbeiten, bei einem 700GB großem Raid1 funktioniert nicht mal mehr ein login oder irgend einen Befehl auf einer vorhandenen Konsole abzusetzen.

Ich bin es eigentlich gewöhnt bis auf geringen Performanceeinbussen nicht viel von einem resync zu merken. Allerdings auch auf anderen Systemen als Linux...

Ist das wirklich normal das mdadm das gesamte System lahmlegt? Oder kann ich das irgendwie beeinflussen?


Danke!

Nö resync läuft bei mir auch im Hintergrund.

Platte online abziehen und wieder ranstecken geht sogar ohne was zu merken.

Platten richtig angebunden ?? bzw an was für einem Controller ??

Also abziehen geht bei mir auch ohne das ich was davon merke.
Allerdings dauert es sehr lange bis mir ein /proc/mdstat anzeigt das das Raid nicht mehr gespiegelt wird. Kann ich das irgendwie anders überwachen?

Beim wiederanstecken merke ich auch nichts. Allerdings wird das Raid auch nicht automatisch wieder hergestellt:

Every 2,0s: cat /proc/mdstat Thu Dec 25 20:16:22 2008

Personalities : [raid1]
md2 : active raid1 sdb2[1]
96320 blocks [2/1] [_U]

md6 : active (auto-read-only) raid1 sda6[0] sdb6[1]
97659008 blocks [2/2] [UU]

md7 : active raid1 sdb7[1]
837990464 blocks [2/1] [_U]

md5 : active (auto-read-only) raid1 sda5[0] sdb5[1]
1951744 blocks [2/2] [UU]

md3 : active raid1 sdb3[1]
14651200 blocks [2/1] [_U]


... was habe ich noch nicht gelesen/mitbekommen? Wie sag ich dem Raid das es mal bitte nachsehen soll ob alle Platten wieder da sind und ob ein sync nötig ist?


Danke!

Platten sind io. "Controller" ist der onboard von einem geforce 520 Chipsatz. Übertragungsraten sind ok, Fehlermeldungen gibts auch keine.
smartmon findet auch nichts.

Ich habe keine Möglichkeit gefunden das mdadm automatisch alle paar Minuten das Raid checkt und notfalls repariert. GIbt es sowas?

mdadm --re-add funktioniert soweit zum Raid wieder herstellen, aber die sync Probleme bleiben. Interessant finde ich die Aussagen aus /proc/mdstat:

md7 : active raid1 sdb7[2] sda7[0]
837990464 blocks [2/1] [U_]
[>....................] recovery = 0.2% (1926400/837990464) finish=180.8min speed=77056K/sec

... bei der angegebenen Geschwindigkeit sollte er doch eigentlich in WESENTLICH geringerer Zeit als 3h fertig sein...

Also automatisch wird bei mir auch nicht reagiert weil das nicht Sinn der Sache ist.

Bei nem Hardwareausfall läuft der Server weiter und die Netzwerküberwachungssoft schickt ne Mail raus.

Dann wird nachgeschaut was das Problem ist / war neue Platte rein ( oder alte ) ud über nen PHP Webinterface das Rebuild gestartet.

Während dessen läuft die Platte aber bzw das Rebuild im Hintergrund ohne Probleme.

Biste Live vorm System oder übers Netzwerk ??

Naja, über Sinn und Unsinn kann man da streiten.
Ein automatisches rebuild hat auch positive Seiten, aber das lässt sich ja notfalls per Script automatisieren.

Egal ob direkt vor der Konsole oder übers Netzwerk:
Ein arbeiten beim rebuild einer 800GB Partition ist einfach nicht möglich.

Ob in ein Logfile fehlermeldungen geschrieben werden muss ich morgen mal überprüfen wenn ich wieder Zugriff aufs System habe.

Auf der Konsole gibts Meldunge in der Form:
Info: Task <diverse Tasks: PID> blocked for more than 120 sec.
echo 0 > /proc/sys/kernel/hung_task_timeout_secs disables this message.

Das klingt mir aber doch sehr dass da nen Fehler ist .

Was sind dass den für Platten ??? Satat ??? Angebunden per AHCI ??

SATA, Bios Option "NO-RAID"

Alternativen: RAID, AHCI

Per AHCI werden die Platten gar nicht erkannt, RAID macht keinen Sinn.

Dann wirds per IDE Emulation eingebunden... Schlechteste Wahl.

AHCI nimmt er nicht... auch die aktuelle Debian Netinstall nicht ??

Weil ansonsten werden keine S-ATA Features unterstützt wie NCQ und HotSwap.

Edit: Schau mal ob er per AHCI die Platten findet wenn du mit nem Kerneloption pci=nomsi startest

Das das nicht gerade optimal ist, ist mir auch klar.
Aber besser suboptimale Festplatten als gar keine Platten...

Ich habe testweise mal schnell Lenny installiert:
Platten werden immer noch nicht im AHCI erkennt, ein resync dauert immer noch ewig, ABER es gibt keine Fehlermeldungen und ich kann weiterarbeiten...

Anderes spannendes Phänomen:
Mit vt-vdr+Backport Kernel werden die Raids sofort als inkonsistent eingetragen sobald ich die Platte abziehe. Unter Lenny erkennt er zwar auch, das die zweite Platte nicht mehr vorhanden ist, aber die Raids stehen weiter auf sync.
Ein mdadm -d sieht ungefähr so aus
[...]
sync /dev/sda7
sync
-> Also auch ganz ohne Platte steht dort sync. Wenn ich händisch mit mdadm --fail eingreife wird das ganze korrekt als defect angezeigt...

Ohne AHCI funzt Hot Swap nicht. Also benutze es bitte auch nicht

Wie gesagt pci=nomsi habe ich beim suchen nach Nforce und AHCI gefunden als Tip...

http://forums.debian.net/viewtopic.php? ... 0388b251fa

Also bei der Installation einmal nen Parameter hintendran hängen und schauen obs dann ggf mit AHCI läuft

... das ist wieder mal ein Punkt "ohne AHCI SOLLTE Hot Swap nicht funktionieren".
-> Spannend ist halt das es mit dem ct-server+Backport Kernel trotzdem funktioniert hat.

Anyway:
Auch mit pci=nomsi funktioniert(e) es nicht.
Erst ein Bios Update UND pci=nomsi führt dazu das jetzt das System mit AHCI läuft.

Das Problem mit dem nicht arbeiten können hatte sich ja mit Lenny schon erledigt.
Insofern ist das ursprüngliche Problem erstmal gelöst.

Das doch schön zu hören.

Dann kannste mitm AHCI Modus nun deine Platten ja ordentlich ansprechen.

Btw wwas heißt HotSwap hat funktioniert. Wenn die Teile als IDE Treiber geladen wurden hat der IDE Modus gar keinen HotSwapbefehl.

Aber schön zu hören dass es nun läuft.

"Hotswap" funktioniert, heisst:

Platte ab:
sfdisk -d /dev/sdb bringt Fehlermeldungen da Platte nicht da
Platte dran:
sfdisk -d /dev/sdb zeigt Platte korrekt an
mdadm --re-add mit Devices auf /dev/sdb funktioniert.

-> Frag mich nicht warum. Bios stand definitiv NICHT auf AHCI

Nee

Beim Hotswap wird die Platte ordentlich abgemeldet und ist nicht nur nicht da.

Wenn könntest du im Log schauen.

Bei mir kommen da nen paar Abmeldezeilen

Dein "HotSwap" lief schon mit nem uralten IDE Kontroller den ich hier rumflitzen habe. Nur die Stenkonsistenz ist nicht sehr gut