„Die Platte ist voll, ich habe die große Logdatei schon gelöscht – aber es ist kein Byte frei geworden.“ Ein Klassiker. Die Datei ist aus dem Verzeichnis verschwunden, ihr Inhalt belegt aber weiter Platz.
Warum gelöschte Dateien weiter Platz belegen
Unter Linux entfernt rm nur den Verzeichniseintrag, also den Namen. Die Daten selbst gibt das Dateisystem erst frei, wenn kein Name mehr auf die Datei verweist und kein Prozess sie mehr geöffnet hat.
Hält ein Dienst eine Datei offen – typischerweise ein Webserver, eine Datenbank oder eine Anwendung mit ihrer Logdatei –, bleibt der Platz belegt. Der Prozess schreibt oft sogar weiter hinein. Die Datei ist nur nicht mehr über einen Pfad erreichbar.
Das erklärt den Widerspruch zwischen zwei Werkzeugen: df fragt das Dateisystem nach dem belegten Platz und zählt die Datei mit. du geht die Verzeichnisse durch und findet sie nicht mehr.
Gelöschte, noch geöffnete Dateien finden
Zuerst den Unterschied bestätigen:
df -h /var
du -xsh /var
Liegen die Werte weit auseinander, zeigt lsof die Kandidaten. Die Option +L1 listet geöffnete Dateien mit weniger als einem Link, also bereits gelöschte:
sudo lsof -nP +L1
In der Ausgabe sind vor allem die Spalten COMMAND, PID, FD, SIZE/OFF und der Pfad mit dem Zusatz (deleted) interessant. Auf ein Dateisystem einschränken lässt es sich, indem man den Mountpoint anhängt:
sudo lsof -nP +L1 /var
Ist lsof nicht installiert, hilft ein Blick in /proc:
sudo find /proc/[0-9]*/fd -lname '*(deleted)' -printf '%p -> %l\n' 2>/dev/null
Den Platz wieder freigeben
Dienst neu laden oder neu starten. Meist der sauberste Weg. Viele Dienste öffnen ihre Logdateien beim Reload neu, zum Beispiel:
sudo systemctl reload nginx
sudo systemctl restart dienstname
Ein Reload reicht nur, wenn der Dienst dabei seine Logs neu öffnet. Sonst ist ein Neustart nötig – bei produktiven Systemen also mit Bedacht und zu einem passenden Zeitpunkt.
Datei über /proc leeren. Wenn ein Neustart gerade nicht möglich ist, lässt sich die gelöschte Datei über den Dateideskriptor auf null Bytes kürzen. PID und FD-Nummer stammen aus der lsof-Ausgabe (bei FD z. B. 4w die Zahl 4):
sudo sh -c ': > /proc/1234/fd/4'
Das ist ein Notbehelf: Der Inhalt ist danach weg, und man sollte sicher sein, dass es sich wirklich um eine verzichtbare Logdatei handelt.
Warum es überhaupt passiert
- Manuelles Löschen einer laufenden Logdatei mit
rm. Besser: die Datei leeren statt löschen, etwa mittruncate -s 0 datei.log. - Logrotation ohne Neuöffnen. logrotate benennt die Datei um oder löscht alte Rotationen, aber der Dienst schreibt weiter in die alte. Abhilfe: im
postrotate-Block den Dienst neu laden oder für Dienste, die das nicht können,copytruncateverwenden. - Hängende oder vergessene Prozesse, etwa ein alter Worker, der nie beendet wurde.
Nicht jede Abweichung zwischen df und du hat diese Ursache. Weitere Kandidaten: Dateien, die unter einem später darübergelegten Mountpoint liegen, und bei ext4 die für root reservierten Blöcke. Und wenn df -h Platz zeigt, aber trotzdem nichts geschrieben werden kann, lohnt ein Blick auf df -i – dann sind die Inodes voll.
So prüfen
df -hunddu -xshfür dasselbe Dateisystem verglichen?lsof -nP +L1ausgeführt und Prozesse mit(deleted)gefunden?- Betroffenen Dienst neu geladen oder neu gestartet, danach
df -herneut geprüft? - logrotate-Konfiguration für den Dienst kontrolliert (
postrotateodercopytruncate)? - Inodes mit
df -iund Mountpoints ausgeschlossen? - Monitoring für den Füllstand eingerichtet?
Eine volle Platte ist oft nur das Symptom. Die Ursache ist häufig ein Log, das niemand rotiert – und damit ein schönes Beispiel dafür, warum sich der zweite Blick lohnt.