pongo un ejemplito y le puse al makefile que borre el link en el clean, poruqe si le mandaba a compilar con el link creado me chillaba

 Agrego manejo de flags en el header, en total se puden usar hasta 8 flahs. 2 usadas
 actualmente y 6 RESERVED

Test de Calgary sobre JACU vs GZIP vs BZIP2 done, me falta el pic en mi maquina que tarda un huevo y ahora lo dejo procesando para luego completar el tiempo de JACU

Se mejora la salida para que sea más simple el tiempo.

 Agrego Descomprimir con diccionario. POR AHORA SE NECESITA PASAR -r AL DESCOMPRIMIR SI SE COMPRIMIO
 CON -r PARA QUE JACU SEPA!! ... AHORA ME PONGO A METER EL FLAGS EN EL FILE!

Se agrega script para hacer pruebas con gzip y bzip (uso: ./test_calgary_zip.sh [gzip|bzip]).

Muevo calgary tests a la barra. Mejoro el script para pruebas.

un poco mas extenso el mtf

Hago que se genere el symlink de jacu a grupo11 en el make all :)

Se agrega el huffman dinamico de inet probado para comparar con el nuestro.

 Fixed

aporto un poco al informe, cuando se me ocurra algo mas lo meto

 Agrego el Mitico y Enigmatico Word Scaping al block sorting. Para usarlo usar parametro -r (Richard Dictionary :-D, ya me habian robado el -d) !

 PD : Puede fallar ;-)

Resuelvo conflicto en informe y subo una actualización mínima. Let the tests begin

Se mejora un poco la explicación y justificación del Zero Grouping.

Se completa descripción de ZG y se hacen correcciones varias.

Otro update del informe, Especificacion de Huffman a medio camino

Avanzo un poco más del informe

Primer approach del informe, peguenle un vistazo rapido al menos para ver como esta estructurado, y feedback me

Agrego utilidad wordstat.

Documento Huffman para Doxy

 Agrego suit de test. Solo ejecutar test_calgary.sh dentro del dir y el laburo
 lo hace todo el script.

Zero Leaks

Mini emprolijamiento.

 Fixed leak en MTF

Abro el archivo fuente de una compresion antes de inicializar el huffman para evitar abrir el temporal y que quede en el limbo, plus inicializar todo el huffman al dope

Controlo que exista el file, por ahora solo devuelvo -1 y la aplicacion no hace nada pero no informa nada tampoco

Se taponan un par de memory leaks.

Bugfix. Ya anda bien el fsize() y vfsize().

Hack feo para que no se cuelgue en el fopen de fsize() con archivos multivolumen (opcion -t).

 Se mueve la lectura del bloque a BS, que ahora le voy a meter una optimizacion para
 textos a ver que pasa.

Se usa el vfsize() y se renombra get_file_size() por fsize() por consistencia.

Se agrega vfsize() para obtener el tamaño de un archivo multivolumen.

 simple bugfix

 Un poco de orden al jacu

Fclose fix

Bufix PUTO PUTO PUTO X2 de ZG descubierto por allmighty luca. Killed the god damn thing. Rich ya podes darle tranca

el _z estaba alocando mas memoria de la que necesitaba, pero creo que eso no producia errores

Subo para que ayuden a descular el porque me detona el ZG. Hay un par de printfs y demas que despues vueltan asi como algunas llaves que vuelan, sepan disculpar el sloppyness del debugging..

Ignoro ejecutables en el svn st.

Bugfixes y nueva funciónp para terminar de agrupar bien.

Cambio sugerido por nico.

Intento de poner a andar el ZG.

Se quita repeticion de pagesize en cada bloque comprimido, grabandose una sola vez como header comprimido por huffman.

 COMMIT 800 !!!

 Lo robo?

 Mas limpio que nunca

 Limpio de basura todo el codigo

 VIOLA !!!! ... ahora si anda !!!
 Eran los putos bits nomas !!

 Algunos bugfixes que daba problema con el signo y conversion de char a unsigned int (por el tema
 de como se completan los bits al estirar el numero!!)

Ahora si, me habia olvidado de hacer el Decoder de Jacu chunkeable y sin archivo temporal. Done and tested for good

Se quita el archivo temporal del jacu.c y se modifica para usar Huffman por Chunks. Se lo prueba con test_es respecto del compresor con archivo temporal con MD5SUM para comprobar que quedo andando bien. Las pruebas se realizaron con y sin zerogrouping

Listo Huffman Canonico, con dos nuevos parametros s y m se permite grabar una tabla luego de una compresion (-s = save) y tambien se permite cargar una tabla/modelo antes de encodear y utilizarla, salteando el scan por supuesto (-m modelfile = carga una tabla de freq de disco). Todo esto, tanto para huff por archivo o por chunk, same deal por lo que ya esta listo para usar en el TP

Mejor manejo de memoria, still debe haber sus buenos holes en un rato lo reviso con valgrind

Modifico el main del Jacu para que compile con la nueva API de Huffman por lo que puedan hacer svn up tranquilos. No obstante, dado que estoy muy cansado, sigue usando el archivo temporal y a huffman por file, pero ya esta implementado huffman by chunks que en cuanto este un poco mas depurado jacu en si, lo metemos.

Listo en teoria Huffman Compresor/Descompresor ByFile y Bychunk. Maniana detallo un poco el API y si tengo pilas ahora lo acoplo en JACU, sino tomorrow porque no doy mas. Vamo que llegamos al viernes..

Another safe upload..

Safe upload, minimo cambio de nuevo al API, still working on decompression per chunk

 cosas y mas cosas de prueba

Huffman con capacidad de comprimir chunks y presentando nueva API. El descompresor por chunks no esta implementado aun, do not try at home

Se pasan mensajes de debug a stderr.

 Bugfixes, saco algunos prints ... algunos md5 no me dan bien :-/

Borro .o en subdirectorios en el make clean.

copio el z para que no se tenga que procesar todo el choclo de nuevo

 DESCOMPRIME !!!!!!!!!!!!!!!!!!

 BUGFIX al MTF. Se estaba guardando el Z final y no el inicial y eso hacia cagadas.

 De todos modos me falta algo porque el archivo final contiene basura al descomprimir (tal
 vez mi bs_restore ?)

 Bugfixes y mas cosas a la pantalla

 algunos () para que se note mejor los caracteres que no se imprimen.

 Subo esto que tira mucha fruta, pero ayuda a visualizar las cosas

 mas cosas

 BUGFIX : se estaba guardando mal el pagesize

Cambio flag "p" por "q" para cambiar el nivel de compresion con valores predefinidos (de tamaño de página): 0..9 (1K..512K). Por default es 5 (32K).

 retorques

 "completo" descompresor ... se pierde todos los datos :-/

 leak

 * Agrego al MTF 2 parametros para recuperar el Z y Z_len a fin de meterlos en el archivo.

Se cambia por un nombre mas representativo.

Se cambia por un nombre mas representativo.

 idem anterior

 Para que quede mas prolijo

 fixed

 fixed

Me esta tirando un segmentation fault en el free(salida), si alguien lo puede ver... :-/

Hago que imprima bpb al terminar :)

Bugfix. Habían muchos int* que debían ser char*, por favor fijense si estoy errado, pero al menos ahora no tira el segmentation fault.

Agrego opción para incluir ZG en jacu (sólo en la compresión, por ahora).

Para que no ponga warning.

Se completa el decoder de ZG.

 Agrego descompresor. No funciona porque me esta faltando el vector "pos" del MTF que no estoy
 seguro de donde sacarlo, hay que ver donde lo guardamos en el archivo (delante de cada bloque ?)

Se implementa zerogrouping sin uso de buffer (caracter a caracter). Esto mejora
la eficacia porque si el buffer partía una serie de ceros, la serie ocupaba 4
bytes (2 en el primer buffer y 2 en el segundo) en vez de 2.

 Algunas mejoras, comentarios y arreglos

Primera versión del ZG, todavía no está el "decoder".

primera implementacion del decoder mtf, diganme si hace falta devolver algun otro valor util

 * Mejor guardo el k al principio y tambien guardo el tamaño del bloque (sera necesario hacer esto?)
 porque hay veces que no tengo un bloque completo, y para recuperar me pa' que lo voy a necesitar.

 * Guardo el k en el array de salida del BS para que el MTF lo tenga en cuenta.

Makefiles actualizados (nada importante).

Bugfix. vfread() ya anda bien.

pongo un char* en lugar de un int, no se quien lo cambio... en todo caso cambienlo de nuevo

 Agrego un paper sobre tecnicas para preprocesar antes del BS.

Agrego -p para setear el tamaño de página del BS.