Gibt es eine Möglichkeit abzuschätzen, wie viel Speicherplatz eine Datei oder ein Verzeichnis einer bestimmten Größe nach der Komprimierung mit Tar und Bzip2 einnimmt?

Question

Aufgrund eines bevorstehenden Distributionswechsels möchte ich mein Home-Verzeichnis sichern. Allerdings ist mein Home-Verzeichnis 29 Gigabyte groß. Ich möchte wissen, wie viel Platz es nach der Komprimierung mit einnehmen würde tar cvjf home.tar /home. Gibt es eine Möglichkeit, mit der ich die Größe nach der Komprimierung ermitteln kann?

Answer 1

Das Tool wird tar(mit bzip2impliziter Beteiligung, da Sie es verwenden) an (ein Standardtool (POSIX) zum Zählen von Bytes) jweitergeleitet . Der folgende Befehl gibt die Größe in Bytes aus:wc

tar cj /home | wc -c

Der Befehl erledigt tatsächlich (und ich zitiere hier eine andere Antwort) „die gesamte Arbeit des Komprimierungsprogramms, ohne das endgültige Archiv zu schreiben, was Zeitverschwendung wäre“; aber wenn Sie es wirklich wissen wollen, dann ist dies der einzig sichere Weg.

---

Sie können den Gesamtansatz folgendermaßen verbessern:

tar cj /home | tee home.tbz2 | wc -c

• Wenn Sie Glück haben und der Ihnen zur Verfügung stehende Speicherplatz home.tbz2ausreicht, wird kein Fehler angezeigt teeund die Datei hat am Ende die gleiche Größe wie die wc -cgemeldete.
• Andernfalls teewird gemeldet no space left, aber es wird weiterhin in die Standardausgabe geschrieben. wc -cwird Ihnen sagen, wie groß die Datei wäre. Die eigentliche (unvollständige) Datei wird kleiner sein und Sie sollten sie anschließend löschen.

Bei der Verwendung tarvon vkann es sein, dass Ihnen eine no space leftNachricht entgeht. Sie können dennoch feststellen, was passiert ist, indem Sie die Ausgabe, die Sie von erhalten haben, wc -cmit der tatsächlichen Größe von vergleichen home.tbz2. In Bash können Sie den Beendigungsstatus von teemit abrufen ${PIPESTATUS[1]}.

Answer 2

Leider nein. Die einzige Möglichkeit, die Größe eines komprimierten Archivs zu ermitteln, besteht darin, das komprimierte Archiv zu erstellen. Es gibt kein Tool, das dies tun könnte, da das Tool die gesamte Arbeit des Komprimierungsprogramms übernehmen würde, ohne das endgültige Archiv zu schreiben, was Zeitverschwendung wäre.

Vielleicht sollten Sie Ihre Daten in überschaubare Teile aufteilen und mehrere Archive erstellen. Auf diese Weise können Sie die große Zeit, die zum Archivieren von 29 GB benötigt wird, in kleinere Abschnitte aufteilen.

Answer 3

Es ist nicht möglich, mit Sicherheit zu wissen, auf welche Größe Daten komprimiert werden, ohne sie tatsächlich zu komprimieren. Sie können eine fundierte Schätzung basierend auf dem Inhalt Ihres Home-Verzeichnisses vornehmen. Mir sind keine Tools bekannt, die dies automatisch erledigen, aber es ist kein schwieriger Vorgang.

Viele moderne Dateiformate sind bereits komprimiert, d. h. eine erneute Komprimierung bringt wenig bis gar keinen (oder negativen) Nutzen. Bei diesem Datentyp ist es besser, die Komprimierung zu überspringen und die Daten einfach so zu kopieren oder zu archivieren, wie sie sind. Beispiele hierfür wären komprimierte Videos (mp4, webm, mov usw.), komprimierte Bilder (jpeg, png usw.), vorhandene Archive (zip, rar, gz, bz2 usw.) und mehr.

Textdateien lassen sich im Allgemeinen recht gut komprimieren, insbesondere wenn viele wiederholte Daten vorhanden sind (z. B. Protokolldateien). Sie können versuchen, eine Teilmenge von Dateien zu testen, um zu sehen, wie sie komprimiert werden, und dies als Schätzung verwenden oder etwa 50 % als grobe Schätzung verwenden.

Prüfen Sie abschließend, welcher Anteil Ihrer Daten aus welchen Typen besteht, und multiplizieren Sie diesen Wert mit Ihrem geschätzten Prozentsatz, um eine Schätzung Ihrer endgültigen Größe zu erhalten. Wenn beispielsweise 20 GB Ihrer Daten komprimierte Daten und 9 GB Textdateien sind, liegt Ihre endgültige komprimierte Datengröße wahrscheinlich zwischen 21 GB und 25 GB.