Compresión: tar.gz vs tar.bz2 - Userlinux.net

Es una pena que no me haya dado por medir el tiempo de generación del tar.gz pero no pienso repetirlo. Hace unos días ha tocado hacer una compresión de un archivo de 51Gb. de texto plano y -como siempre- he tirado de tar.gz sin siquiera pensar en otras alternativas. 5.1Gb…

Compresión: tar.gz vs tar.bz2

r0sk 18.Dec.2009 4 Comentarios 585 Lecturas
Es una pena que no me haya dado por medir el tiempo de generación del tar.gz pero no pienso repetirlo. Hace unos días ha tocado hacer una compresión de un archivo de 51Gb. de texto plano y -como siempre- he tirado de tar.gz sin siquiera pensar en otras alternativas. 5.1Gb clavados.

La duda ha venido días más tarde cuando, al no ubicar bien el comprimido, un rsync se lo ha llevado por delante (descanse en paz). Tenía que repetir la tarea así que me he puesto el mono de trabajo y he intentado mejorar los números:

# ls -lash access.log*
51G -rw-r--r-- 1 root root 51G nov 26 18:50 access.log.1
# time tar -c access.log.1 | bzip2 > access.log.tar.bz2
real    455m52.499s
user    441m41.704s
sys     2m19.301s
Le ha llevado lo suyo, 7 horas y media aproximadamente... veamos el resultado:
# ls -lash access.log*
 51G -rw-r--r-- 1 root root  51G nov 26 18:50 access.log.1
2,6G -rw-r--r-- 1 root root 2,6G dic 18 01:30 access.log.tar.bz2
No está nada mal, de 51Gb. que tiene el archivo original pasamos a 5.1Gb. con el tar.gz y a 2.6Gb. del tar.bz2. ¿Merece la pena?, imagino que -como todo- depende de varios factores críticos entre los que se encuentra la paciencia humana.
Categorías: sistemas

Comentarios


gravatar
18.Dec.2009
Te recomiendo ojear: http://www.advogato.org/person/badger/diary/80.html

Las conclusiones son bastante "luminosas" ;)

gravatar
18.Dec.2009
bz2 devora CPU, comprime más pero como tengas algo más que necesite CPU, olvídate...

gravatar
NeoZero
18.Dec.2009
Yo lo hago directamente con la opción \'j\' de tar:

tar cvjf access.log.1.tar.bz2 access.log.1

¡Saludos!

gravatar
28.Dec.2009
¿Y no es mejor rotar y/o comprimir los logs? :P

Yo uso bz2 para los backups de MySQL y aunque debora mucha CPU y tarda mucho más que gz, merece la pena porque comprime muco más.

Escribe un comentario

Nick
Email
URL

Buscar

Cargando...

Categorías

Últimos comentarios

  • BartlettLilly20
  • r0sk
  • coder
  • argordmel
  • uveic
  • MarcosBL
  • quemada
  • alexander
  • Hakky111
  • tramel
  • hoyadas
  • hoyadas
  • hoyadas
  • Anubys
  • Arturo

Tagcloud

lugo freebsd seguridad futbol iphone mysql champions userlinux alemania_2006 copa bsd cakephp rfilms deportes meme blogs conciertos bake debian macosx apple humor programación música games 2008 beers tip lucux cake sysadmin ssh ibook films cumpleaños bash league barça soccer mundial frases opinion felicidades hack php juegos cms personal 2007 ubuntu ds mac sidenotes openbsd linux blogsfera rsidenotes blog nintendo san_froilan

Archivo

Social

Twitter

Enlaces

Enlaces de interés