Rätselhafte Serverabstürze

Bitte loggen sie sich ein oder registrieren sie sich.

Einloggen mit Benutzername, Passwort und Sitzungslänge
Erweiterte Suche  

Autor Thema: Rätselhafte Serverabstürze  (Gelesen 2966 mal)

0 Mitglieder und 1 Gast betrachten dieses Thema.

soma

  • Grünschnabel
  • *
  • Offline Offline
  • Beiträge: 5
Rätselhafte Serverabstürze
« am: 19.April 2011, 23:06:52 »

Server: Filer M Giga 2011
Problem: Server läuft einige Stunden, wird aktiv genutzt (rsync von mehreren 100GB auf den Server, Download des Geocities-Torrents (650GB), teilweise konstant >20MB/s Traffic), friert dann vollständig ein (kein Netzwerk und keine ping-Replies mehr, keine neuen Einträge in den Logs) und muss über das Kundencenter resettet werden (Softreset).
Reproduzierbar: Durch intensive Nutzung, Laden größerer Datenmengen in den Cache. Passiert unabhängig davon, welche Partition gerade stark belastet wird, ebenfalls unabhängig davon, ob rtorrent läuft.
Setup: Relativ frisch installiertes Debian Squeeze, Upgrade von der Lenny-Standardinstallation. Die Rootpartition nimmt ~70GB auf sda1 ein, auf /dev/sd{a,b,c,d} befindet sich ein RAID5 (xfs, 5.3T).

Die Logs deuten darauf hin, dass die Abstürze mit Arbeitsspeichermangel beim Caching zusammenhängen, ob eine swap-Partition gemountet ist oder nicht, spielt aber keine Rolle. Anbei kern.log eines Durchlaufs, messages und syslog zeigen großteils das Gleiche. Überhitzung ist wahrscheinlich nicht das Problem (mit sensors(1) gemessen).
Gespeichert


timo

  • Gast
Re: Rätselhafte Serverabstürze
« Antwort #1 am: 21.April 2011, 09:53:50 »

Hallo,

wichtig wäre auch die Ausgabe von   free -m , das sieht sehr danach aus, das durch die Dateioperationen der Speicher aufgebraucht wird und durch einen Bug oder andere Optionen nicht korrekt freigeben wird. Dies führt dann zu einer OutOfMemory Situation.

Durch   ps aux sollten Sie den Speicherverbrauch der jeweiligen Prozesse sehen. (Spalte %MEM )

Dies sollte etwas mehr Informationen liefern.

Timo,
Gespeichert

soma

  • Grünschnabel
  • *
  • Offline Offline
  • Beiträge: 5
Re: Rätselhafte Serverabstürze
« Antwort #2 am: 21.April 2011, 22:02:17 »

Logs anbei. Dieses Mal Absturz, nachdem ich ~45GB zu Testzwecken angelegter Dateien löschte (Es lief durch, aber danach war der Server weg. Rtorrent lief parallel).
Werde es mal mit einem anderen Dateisystem versuchen (wenn auch unwahrscheinlich).
Gespeichert

soma

  • Grünschnabel
  • *
  • Offline Offline
  • Beiträge: 5
Re: Rätselhafte Serverabstürze
« Antwort #3 am: 08.Mai 2011, 04:07:28 »

Okay,war anscheinend wirklich ein Problem mit XFS. Vollen RAM+RAID5+Hohe IO-Last mochte der Treiber wohl nicht. Habe es umgestellt, sodass eine Platte für Schreibintensives zuständig ist und die restlichen drei wieder ein RAID5 bilden (beides jfs). Läuft seitdem problemlos.
Gespeichert

soma

  • Grünschnabel
  • *
  • Offline Offline
  • Beiträge: 5
Re: Rätselhafte Serverabstürze
« Antwort #4 am: 18.Juli 2011, 02:17:43 »

Konnte das gleiche Problem jetzt mit jfs ohne RAID nachvollziehen. 20MB/s hereinkommender Netzwerkverkehr mit weitgehend zufälligen Schreibzugriffen scheinen der Maschine nicht gut zu bekommen (wieder mehrfache reproduzierbare Abstürze). Hat der Plattencontroller evtl. Probleme?
« Letzte Änderung: 18.Juli 2011, 02:20:18 von soma »
Gespeichert

timo

  • Gast
Re: Rätselhafte Serverabstürze
« Antwort #5 am: 18.Juli 2011, 12:02:59 »

Hallo,

meistens ist es in derartigen Fällen nicht mit Problemen der Hardware zu begründen, sondern mit Fehlern im Kernel / in den entsprechenden Modulen (FileSystemtreiber, Hardwaretreiber o.ä.).

XFS hat bekannte Schwachstellen, welche bei bestimmten Situationen dieses Verhalten hervorrufen können.

Timo,
Gespeichert

uname

  • Gast
Re: Rätselhafte Serverabstürze
« Antwort #6 am: 18.Juli 2011, 14:05:29 »

Ich empfehle dir entsprechend mal im Debianforum ( http://www.debianforum.de ) nachzufragen.
Gespeichert
 

Seite erstellt in 0.099 Sekunden mit 22 Abfragen.