Preguntas etiquetadas con gzip

¿Es posible comprimir un archivo muy grande (~ 30 GB) usando gzip? Si es así, ¿qué comandos, interruptores y opciones debo usar? ¿O hay otro programa (preferiblemente uno comúnmente disponible en las distribuciones de Ubuntu) que pueda usar para comprimir / comprimir archivos muy grandes? ¿Tienes alguna experiencia con esto?

17 filesystems  files  compression  gzip 

Estoy tratando de hacer un recuento de registros en un archivo gzip de 7,6 GB. Encontré algunos enfoques usando el zcatcomando. $ zcat T.csv.gz | wc -l 423668947 Esto funciona, pero lleva demasiado tiempo (más de 10 minutos para obtener el recuento). Intenté algunos enfoques más como $ sed -n …

16 shell  gzip 

¿Es posible acelerar el gzipproceso? Estoy usando mysqldump "$database_name" | gzip > $BACKUP_DIR/$database_name.sql.gz para hacer una copia de seguridad de una base de datos en un directorio $BACKUP_DIR,. la página del manual dice: - # --fast --best Regula la velocidad de compresión usando el dígito especificado #, donde -1 o …

15 backup  compression  gzip 

Suponga que tengo un gzip comprimido tar-ball compressedArchive.tgz (+100 archivos, totalizando + 5gb). ¿Cuál sería la forma más rápida de eliminar todas las entradas que coincidan con un patrón de nombre de archivo dado, por ejemplo, el prefijo * .jpg y luego almacenar los restos en un gzip: ed tar-ball …

14 tar  gzip 

Me gustaría crear un archivo comprimido que conserve el nombre del archivo original. Por ejemplo, gzipping "example.txt" debería generar un archivo comprimido denominado "example.txt" en lugar de "example.txt.gz". ¿Es posible hacer esto elegantemente con un comando (sin hacer un posterior mv)?

14 gzip 

Cuando lo hago: # gzip -c foo > foo1.gz # gzip < foo > foo2.gz ¿Por qué foo2.gztermina siendo más pequeño en tamaño que foo1.gz?

13 gzip 

Necesito crear un tarball de un directorio dado. Sin embargo, necesito asegurarme de que también se incluyan archivos ocultos (como los que comienzan con .). ¿El siguiente comando tomará automáticamente en cuenta los archivos ocultos? tar -cvzf packed.tar.gz mydir Si no, ¿cómo puedo asegurarme de incluir archivos ocultos?

13 directory  tar  gzip 

¿Cómo puedo verificar la validez de un archivo gz? No tengo el hash del archivo, lo estoy usando gzip -tpero no devuelve ningún resultado. Gracias

13 gzip 

Estoy usando wget para descargar una página html estática. El validador W3C me dice que la página está codificada en UTF-8. Sin embargo, cuando atrapo el archivo después de la descarga, obtengo un montón de tonterías binarias. ¿Estoy en Ubuntu y pensé que la codificación predeterminada era UTF-8? Eso es …

12 wget  character-encoding  gzip  http 

Estoy usando rsync para hacer una copia de seguridad de un repositorio que contiene muchos archivos gz, incluidos muchos nuevos cada día. La copia de seguridad de rsync avanza más lentamente de lo debido porque estos archivos gz no están construidos con la opción --rsyncable de gzip (que hace que …

12 rsync  gzip 

Ejecuto comandos: tar -cf myArchive.tar myDirectory/ gzip myArchive.tar luego copio el archivo en muchos medios poco confiables y luego lo descomprimo usando: tar -xzf myArchive.tar.gz El hecho de que comprima la bola de alquitrán, ¿garantizará de alguna manera la integridad, o al menos un CRC del contenido desempaquetado?

12 tar  gzip  checksum  integrity 

Es gzipatómico? ¿Qué sucede si detengo el gzipproceso mientras está comprimiendo un archivo? Si no es atómico, y si ya presioné Ctrl + C en un gzip *.txtproceso, ¿cómo puedo reanudarlo de manera segura? (No solo tengo curiosidad sobre cómo reanudar, sino también sobre si gzipespecíficamente es atómico).

11 command-line  gzip 

De repente necesité recuperar un tar.gzarchivo antiguo , pero tan pronto como lo ejecuto: tar -zxvf filename.tar.gz Entiendo esto: gzip: stdin: invalid compressed data--format violated tar: Child returned status 1 tar: Error is not recoverable: exiting now

11 tar  data-recovery  gzip  corruption 

Tengo que crear un archivo con el comando gzip (no tar, es necesario) y el archivo debe contener archivos de otro directorio, por ejemplo, / etc. Traté de usar el comando gzip myetc.gz /etc Pero no funcionó.

11 gzip  archive 

Estoy tratando de ahorrar espacio mientras hago una copia de seguridad "tonta" simplemente volcando datos en un archivo de texto. Mi script de respaldo se ejecuta a diario y tiene este aspecto: Cree un directorio con el nombre de la fecha de la copia de seguridad. Volcar algunos datos en …

11 gzip  file-comparison