¿Cuáles son las mejores opciones para usar al comprimir archivos con 7 Zip?

A menudo tengo que recopilar archivos de registro y subirlos a un servidor central (propiedad de otra empresa). El servidor central tiene un límite de tamaño del archivo, por lo que estoy tratando de crear el archivo más pequeño posible que todavía esté en formato zip.

¿Cuál es la mejor configuración para usar al comprimir un archivo de texto a un formato zip cuando mi única necesidad es un tamaño de archivo pequeño?

He hecho la compresión ultra obvia y elegida, y he notado que LZMA hace un mejor trabajo que desinflar, pero hay demasiadas otras opciones de opciones para que pueda probarlas todas.

Para crear el archivo ZIP estándar más pequeño que 7-Zip puede crear, intente:

7z a -mm=Deflate -mfb=258 -mpass=15 -r foo.zip C:\Path\To\Files\*

^{Fuente: ¿Cómo puedo lograr la mejor compresión ZIP estándar?}

De lo contrario, si no le importa el estándar ZIP, use la siguiente configuración ultra:

7z a -t7z -m0=lzma -mx=9 -mfb=64 -md=32m -ms=on archive.7z dir1

Que son:

-t7z   7z archive

-m0=lzma
       lzma method

-mx=9  level of compression = 9 (Ultra)

-mfb=64
       number of fast bytes for LZMA = 64
-md=32m
       dictionary size = 32 megabytes

-ms=on solid archive = on

Si puede usar el formato .7z en lugar de solo .zip, simplemente usaría PPMD con las siguientes opciones y dejaría todo lo demás según lo establecido por el Nivel de compresión:

• Formato de archivo: 7z
• Método de compresión: PPMD
• Nivel de Compresión: Ultra

Comprimo regularmente registros de servidor / texto (60 MB +) usando estas opciones y generalmente salen al 1-2% del tamaño original.

Comparo para db.fdb 1,2 GB (1236598784 B) en el servidor Ubuntu 14.04.03 con p7zip [64] 9.20 en VM:

1. 7z a -mx=9 1.7z db.fdb
2. 7z a -t7z -m0=lzma -mx=9 -mfb=64 -md=32m -ms=on 2.7z db.fdb
3. 7z a -t7z -m0=lzma -mx=9 -mfb=258 -md=32m -ms=on 3.7z db.fdb
4. 7z a -t7z -m0=lzma -mx=9 -mfb=258 -md=32m -ms=on -pass=15 4.7z db.fdb
5. 7z a -mx=9 -mmt=on 5.7z db.fdb
6. 7z a -t7z -m0=lzma -mx=9 -mfb=258 -md=32m -ms=on -mmt=on 6.7z db.fdb

y tener ese resultado:

1.7z 96 MB (100108731 B) with 6' 25"
2.7z 95 MB ( 99520375 B) with 5' 18"
3.7z 93 MB ( 97512311 B) with 9' 19"
4.7z 93 MB ( 97512345 B) with 9' 40"
5.7z 96 MB (100108731 B) with 5' 26"
6.7z 93 MB ( 97512311 B) with 9' 09"

Creo que el segundo método funciona bien = (casi) la mejor compresión con el mejor tiempo. Pero para una mejor "vista" y fácil de recordar es el primer método, con archivos pequeños y sin punto de compresión máxima. Entre el método 2 y 3 no obtenemos 7z más pequeños, pero pagamos casi dos veces más por la compresión. Cualquiera decida con los suyos.

Después de mucha experimentación, profundizando en la documentación detallada de 7zip y leyendo parte del código fuente de 7z con respecto a los parámetros avanzados de LZMA2, aquí hay un mejor método a continuación. Redujo algunos archivos de prueba del mundo real de 1 GB más de 2 a 4 veces mejor que las soluciones aceptadas anteriormente publicadas aquí o incluso en la página de manual de 7z.

7z a -t7z -mx=9 -mfb=273 -ms -md=31 -myx=9 -mtm=- -mmt -mmtf -md=1536m -mmf=bt3 -mmc=10000 -mpb=0 -mlc=0 archive.7z inputfileordir

Aquí se supone la compresión LZMA2, pero es posible que pueda obtener un rendimiento aún mejor en 7zip al pasar opciones avanzadas de LZMA2 como -m0=LZMA2:27, o -m0=LZMA2:d25, o una serie de parámetros como

-m0=BCJ2 -m1=LZMA:d25 -m2=LZMA:d19 -m3=LZMA:d19 -mb0:1

Tales parámetros no parecían respetados por las versiones 7z que probé, pero es posible que desee explorar más a fondo o parchear el código 7z para analizarlos correctamente. O tal vez se supone que funciona y simplemente se rompe en las compilaciones que se probaron.

Establezca el campo "dividir en volumen, bytes" en el tamaño de archivo máximo permitido del servidor (en bytes, creo, aunque parece que acepta abreviaturas comunes como "KB" y "MB"). Si el archivo zip excede ese tamaño, 7-zip lo dividirá en múltiples archivos automáticamente, como Integration_serviceLog.zip.001 , Integration_serviceLog.zip.002 , etc. disquetes.) Necesitará que todos los archivos estén presentes para descomprimirlos. Úselo en lugar de preocuparse por la mejor configuración de compresión absoluta para un conjunto particular de archivos, porque lo que es mejor para un archivo puede ser diferente para otro archivo, y no desea tener que pasar por esto cada vez que lo necesite. copiar registros.