]> git.llucax.com Git - z.facultad/75.06/emufs.git/blobdiff - emufs/tipo2.c
Comienzo a usar INDICE General, subo para poder hacer un rename de archivos
[z.facultad/75.06/emufs.git] / emufs / tipo2.c
index e640cf69d89a1f88edffab104c74782593b8691b..e5b26320836ddc904ebc56c4a457e66e482c90c1 100644 (file)
 #include "idx.h"
 #include "fsc.h"
 #include "did.h"
+#include "error.h"
+#include "common.h"
+#include <unistd.h>
+#include <stdio.h>
+#include <string.h>
 
 /* Asigna los punteros a las funciones apropiadas para el Tipo2 */
 int emufs_tipo2_inicializar(EMUFS* efs)
 {
        efs->grabar_registro = emufs_tipo2_grabar_registro;           
-    efs->borrar_registro = emufs_tipo2_borrar_registro;
+       efs->borrar_registro = emufs_tipo2_borrar_registro;
        efs->leer_registro = emufs_tipo2_leer_registro;
+       efs->leer_registro_raw = emufs_tipo2_leer_registro_raw;
        efs->modificar_registro = emufs_tipo2_modificar_registro;
        efs->leer_estadisticas = emufs_tipo2_leer_estadisticas;
+       efs->compactar = emufs_tipo2_compactar;
        
        return 0;
 }
 
 /* Lee y devuelve un registro de un archivo del Tipo 2. */
-void *emufs_tipo2_leer_registro(EMUFS* efs, EMUFS_REG_ID id_reg, EMUFS_REG_SIZE* reg_size, int *err)
+void *emufs_tipo2_leer_registro(EMUFS* efs, CLAVE clave, EMUFS_REG_SIZE* reg_size, int *err)
 {
        FILE* f_data;
        char *registro; /* registro a leer */
        char  name_f[255];      
        EMUFS_OFFSET reg_offset; /* offset donde se encuentra el registro */
-       
+       EMUFS_REG_ID id_reg;
+       INDICE_DATO dato;
+
        strcpy(name_f,efs->nombre);
        strcat(name_f,".dat");
 
        /* Obtenemos la posicion del registro en el .dat */
-       reg_offset = emufs_idx_buscar_registro(efs, id_reg);
+       /*si existe, lo busco en el archivo de bloques*/
+       /* TODO VER COMO SACAR EL ERROR!=1 por otra cosa!! XXX */
+       if ((efs->indices != NULL) && (*err != 1)) {
+               /* TODO : Verificar donde esta el indice primario */
+               dato = efs->indices->existe_entrada(efs->indices, clave);
+               reg_offset = dato.bloque;
+               id_reg = dato.id;
+       } else {
+               id_reg = clave.i_clave;
+               reg_offset = emufs_idx_buscar_registro(efs, id_reg);
+               (*err) = 0;
+       }
        if (reg_offset == EMUFS_NOT_FOUND) {
-               /* TODO Manejo de errores */
                PERR("Registro no encontrado");
                *err = EMUFS_NOT_FOUND;
                return NULL;
@@ -77,10 +96,10 @@ void *emufs_tipo2_leer_registro(EMUFS* efs, EMUFS_REG_ID id_reg, EMUFS_REG_SIZE*
        /* Levantamos el registro */
        if ((f_data = fopen(name_f, "rb")) == NULL) {
                PERR("No se puede abrir archivo");
-               *err = 4; /* EMUFS_ERROR_CANT_OPEN_FILE */
-               return NULL; /* FIXME ERROR */
+               *err = EMUFS_ERROR_CANT_OPEN_FILE;
+               return NULL;
        }
-       fseek(f_data,reg_offset+sizeof(EMUFS_REG_ID),0);
+       fseek(f_data,reg_offset+sizeof(EMUFS_REG_ID),SEEK_SET);
        fread(reg_size,sizeof(EMUFS_REG_SIZE),1,f_data);
        registro = (char*)malloc(*reg_size);
        fread(registro,*reg_size,1,f_data);
@@ -92,6 +111,7 @@ void *emufs_tipo2_leer_registro(EMUFS* efs, EMUFS_REG_ID id_reg, EMUFS_REG_SIZE*
 /* Grabar un registro en un archivo del Tipo 2. */
 EMUFS_REG_ID emufs_tipo2_grabar_registro(EMUFS *efs, void *ptr, EMUFS_REG_SIZE reg_size, int* err)
 {
+       INDICE_DATO idx_data;
        EMUFS_REG_ID id_reg;
        EMUFS_FREE freespace;
        EMUFS_OFFSET wrt_offset,reg_offset;
@@ -103,19 +123,21 @@ EMUFS_REG_ID emufs_tipo2_grabar_registro(EMUFS *efs, void *ptr, EMUFS_REG_SIZE r
        strcpy(name_f,efs->nombre);
        strcat(name_f,".dat");
        
-       if ( (f_data = fopen(name_f,"r+"))==NULL ) return -1; /*ERROR*/
+       if ( (f_data = fopen(name_f,"r+"))==NULL ) {
+               PERR("ERROR AL ABRIR EL ARCHIVO");
+               return -1; /*ERROR*/
+       }
        
        /* Obtengo un offset en donde iniciar la escritura de mi registro */
        /* de manera segura (habra espacio suficiente) */
        fisic_size = sizeof(EMUFS_REG_ID)+sizeof(EMUFS_REG_SIZE)+reg_size;
        wrt_offset = emufs_fsc_buscar_lugar(efs,fisic_size,&freespace);
-       /*printf("tipo2.c >> Recording Reg > Searching FSC: Offset = %lu FSpace: %lu\n", n_WrtOffset, n_FreeSpace);*/
        
        /* Si no encontre un gap, entonces escribo el registro al final */
        if (wrt_offset == -1) {                
                
                /* Obtengo un ID libre para el registro y luego grabo a disco */
-        id_reg = emufs_idx_get_new_id(efs, err);
+               id_reg = emufs_idx_get_new_id(efs, err);
                fseek(f_data, 0, SEEK_END);
                reg_offset = ftell(f_data);
 
@@ -131,11 +153,11 @@ EMUFS_REG_ID emufs_tipo2_grabar_registro(EMUFS *efs, void *ptr, EMUFS_REG_SIZE r
        } else {
                
                /* Obtengo un ID libre para el registro y luego grabo en disco */
-        id_reg = emufs_idx_get_new_id(efs, err);
+               id_reg = emufs_idx_get_new_id(efs, err);
                reg_offset = wrt_offset;
                fseek(f_data,reg_offset,0);
                
-        /* Escribo [RegId]|[RegSize]|[RegData] */
+    /* Escribo [RegId]|[RegSize]|[RegData] */
                fwrite(&id_reg,sizeof(EMUFS_REG_ID),1,f_data);
                fwrite(&reg_size,sizeof(EMUFS_REG_SIZE),1,f_data);
                fwrite(ptr,reg_size,1,f_data);
@@ -151,21 +173,34 @@ EMUFS_REG_ID emufs_tipo2_grabar_registro(EMUFS *efs, void *ptr, EMUFS_REG_SIZE r
                
        /* Finalmente, actualizamos el indice de registros (offsets) */
        emufs_idx_agregar(efs,id_reg,reg_offset);
-               
+       idx_data.id = id_reg;
+       idx_data.bloque = reg_offset;
+       emufs_indice_agregar(efs->indices, (char *)ptr, idx_data);
+
        return id_reg;
 }
 
 /* Borra un registro determinado y actualiza los archivos de Posicion Relativa (Indice-Offset) y el de Gaps */
-int emufs_tipo2_borrar_registro(EMUFS *efs, EMUFS_REG_ID id_reg)
+int emufs_tipo2_borrar_registro(EMUFS *efs, CLAVE k)
 {      
        EMUFS_OFFSET reg_offset,reg_size;
-        
-       /* Obtenemos el offset donde arranca el registro */
-       if ((reg_offset = emufs_idx_buscar_registro(efs,id_reg)) == EMUFS_NOT_FOUND) {
-               /* TODO Manejo de errores */
-               PERR("Registro no encontrado");
+       EMUFS_REG_ID id_reg;
+       INDICE_DATO dato; 
+
+       if (efs->indices != NULL) {
+               dato = efs->indices->existe_entrada(efs->indices, k);
+               id_reg = dato.id;
+               reg_offset = dato.bloque;
+       } else {
+               /* Obtenemos el offset donde arranca el registro */
+               id_reg = k.i_clave;
+               if ((reg_offset = emufs_idx_buscar_registro(efs,id_reg)) == EMUFS_NOT_FOUND) {
+                       PERR("Registro no encontrado");
                return EMUFS_NOT_FOUND;
+               }
        }
+
+       if (id_reg == -1) return EMUFS_NOT_FOUND;
        
        /* Obtenemos el Size del Registro en cuestion y hacemos un dummyfill*/
        emufs_tipo2_get_regsize(efs,reg_offset,&reg_size);      
@@ -206,23 +241,21 @@ int emufs_tipo2_get_regsize(EMUFS *efs, EMUFS_OFFSET reg_pos, EMUFS_REG_SIZE *re
 /* Pisa con basura lo que es hasta el momento un reg en el disco para indicar su borrado (Debug Purposes Only) */
 int emufs_tipo2_dummyfill(EMUFS *efs, EMUFS_OFFSET reg_pos, EMUFS_REG_SIZE amount)
 {
-    FILE *f_data;
+       FILE *f_data;
        char name_f[255];
-    char *dummyfill;
-       char *ptr_cur;
-       unsigned long fill_size,byte_count;
+       char *dummyfill;
+       unsigned long fill_size;
        
-    /* Armamos el filename del archivo de datos */
-       strcpy(name_f,efs->nombre);
+       /* Armamos el filename del archivo de datos */
+       strcpy(name_f,efs->nombre);
        strcat(name_f,".dat");
 
-    if ((f_data = fopen(name_f,"r+")) == NULL) return -1; /* ERROR */
+       if ((f_data = fopen(name_f,"rb+")) == NULL) return -1; /* ERROR */
        
        /* Preparo el garbage y se lo tiro encima */
        fill_size = amount+sizeof(EMUFS_REG_ID)+sizeof(EMUFS_REG_SIZE);
        dummyfill = (char*)malloc(fill_size);
-       ptr_cur = dummyfill;
-       for (byte_count = 0; byte_count < fill_size; ++byte_count) memcpy(ptr_cur+byte_count,"#",1);
+       memset(dummyfill, 0, fill_size);
        fseek(f_data,reg_pos,SEEK_SET);
        fwrite(dummyfill,fill_size,1,f_data);
        fclose(f_data);
@@ -232,44 +265,260 @@ int emufs_tipo2_dummyfill(EMUFS *efs, EMUFS_OFFSET reg_pos, EMUFS_REG_SIZE amoun
 }
 
 /* Realiza la actualizacin de un registro ya existente */
-EMUFS_REG_ID emufs_tipo2_modificar_registro(EMUFS *emu, EMUFS_REG_ID id, void *data, EMUFS_REG_SIZE size, int *error)
+EMUFS_REG_ID emufs_tipo2_modificar_registro(EMUFS *efs, CLAVE k, void *data, EMUFS_REG_SIZE size, int *error)
 {
-       emufs_tipo2_borrar_registro(emu, id);
-       return emufs_tipo2_grabar_registro(emu, data, size, error);
+       emufs_tipo2_borrar_registro(efs, k);
+       return emufs_tipo2_grabar_registro(efs, data, size, error);
 }
 
 /* Recompila y devuelve ciertas estadisticas del archivo indicado */
-EMUFS_Estadisticas emufs_tipo2_leer_estadisticas(EMUFS *emu)
+EMUFS_Estadisticas emufs_tipo2_leer_estadisticas(EMUFS *efs)
 {
-    EMUFS_Estadisticas stats; 
+    EMUFS_Estadisticas stats;
+       EMUFS_REG_ID *tmp;
+       int err = 0, err1 = 0, err2 = 0, err3 = 0;
        char name_f[255];
-       FILE *file;
-
-       strcpy(name_f,emu->nombre);
-       strcat(name_f,".dat");
        
        /* Inicializo las stats por si hay error somewhere */
        stats.tam_archivo = 0;
-       stats.tam_archivo_bytes = 0;
-       stats.info_control = 0;
+       stats.tam_archivos_aux = 0;
+       stats.tam_info_control_dat = 0;
        stats.media_fs = 0;
        stats.total_fs = 0;
        stats.max_fs = 0;
        stats.min_fs = 0;
        stats.cant_bloques = 0;
+       stats.cant_registros = 0;       
+       
+       /* Obtengo el tamaño del .dat */
+       strcpy(name_f,efs->nombre);
+       strcat(name_f,".dat");
+       stats.tam_archivo = emufs_common_get_file_size(name_f,&err);    
+       if (err) {
+               PERR("no se pudo obtener el tamaño del archivo");
+               return stats;
+       }       
        
        /* Obtengo las stats de FSC */
-       stats.total_fs = emufs_fsc_get_total_fs(emu);
-       stats.media_fs = emufs_fsc_get_media_fs(emu);
-       emufs_fsc_get_max_min_fs(emu,&stats.min_fs,&stats.max_fs);
+       stats.total_fs = emufs_fsc_get_total_fs(efs);
+       stats.media_fs = emufs_fsc_get_media_fs(efs);
+       emufs_fsc_get_max_min_fs(efs,&stats.min_fs,&stats.max_fs);
+       
+       /* Cant registros */
+       tmp = emufs_idx_get(efs,&stats.cant_registros);
+       if (tmp) free(tmp);
+       
+       /* Cantidad de bytes de info de control del .dat */
+       stats.tam_info_control_dat = (sizeof(EMUFS_REG_ID) + sizeof(EMUFS_REG_SIZE)) * stats.cant_registros + sizeof(EMUFS_Tipo);
+       
+       /* Cantidad de bytes en info de control archivos auxiliares */
+       stats.tam_archivos_aux = emufs_idx_get_file_size(efs,&err1) + emufs_fsc_get_file_size(efs,&err2) + emufs_did_get_file_size(efs,&err3);
+       if (err1 || err2 || err3) {
+               PERR("Hubo problemas en lectura de filesize archivos auxiliares");
+               return stats;
+       }       
+               
+       return(stats);  
+}
+
+/* Compacta el archivo eliminando espacios libres, alineando a izquierda */
+void emufs_tipo2_compactar(EMUFS *efs)
+{
+       char name_fdat[255],name_ffsc[255];
+       FILE *datfile;
+       FILE *fscfile;
+       EMUFS_FSC reg1,reg2;
+       unsigned long cant_gaps = 0,mustmove_bytes = 0,source = 0,
+                                 destination = 0,datsize = 0,totalfsc = 0;
+               
+       strcpy(name_fdat,efs->nombre);
+       strcpy(name_ffsc,efs->nombre);
+       strcat(name_fdat,".dat");
+       strcat(name_ffsc,EMUFS_FSC_EXT);
        
-       /* Faltan stats pero como cambia el API Idx, espero... */
-       if ( (file = fopen(name_f,"ab")) == NULL){
+       /* Obtengo el tamanio del .dat */
+       if ( (datfile = fopen(name_fdat,"rb+")) == NULL){
                        PERR("No se pudo abrir el archivo");
-                       return stats;   
+                       return;
        }
-       stats.tam_archivo_bytes = ftell(file);
-       fclose(file);
+       fseek(datfile,0,SEEK_END);
+       datsize = ftell(datfile);
        
-       return(stats);  
+       /* Obtengo la cantidad de gaps */
+       if ( (fscfile = fopen(name_ffsc,"rb")) == NULL){
+                       PERR("No se pudo abrir el archivo");
+                       fclose(datfile);
+                       return;
+       }
+       fseek(fscfile,0,SEEK_END);
+       cant_gaps = ftell(fscfile)/sizeof(EMUFS_FSC);
+       
+       if (cant_gaps == 0) {
+               fclose(datfile);
+               fclose(fscfile);
+               return;
+       }
+       if (cant_gaps == 1) {
+               /* Un solo gap, muevo toda la data luego del gap y trunco */
+               fseek(fscfile,0,SEEK_SET);
+               fread(&reg1,sizeof(EMUFS_FSC),1,fscfile);       
+               source = reg1.marker + reg1.freespace;
+               destination = reg1.marker;
+               mustmove_bytes = datsize - source;
+               /*printf("Para recompactar, must move: %lu bytes\n",mustmove_bytes);
+               printf("Will move from: %lu  to  %lu\n",source,destination);*/
+               emufs_tipo2_movedata(datfile,&source,&destination,mustmove_bytes);
+       }
+       if (cant_gaps > 1)
+       {
+               /* Comienzo leyendo un gap */
+               fseek(fscfile,0,SEEK_SET);
+               fread(&reg1,sizeof(EMUFS_FSC),1,fscfile);
+               destination = reg1.marker;
+               --cant_gaps;
+               
+               while (cant_gaps > 0)
+               {
+                       /* El source siempre sera el fin del anteultimo gap leido */
+                       source = reg1.marker + reg1.freespace;
+                       /* Leemos otro gap para calcular cuanto debemos mover */
+                       fread(&reg2,sizeof(EMUFS_FSC),1,fscfile);
+                       mustmove_bytes = reg2.marker - source;
+                       /*printf("Para recompactar, must move: %lu bytes\n",mustmove_bytes);
+                       printf("Will move from: %lu  to  %lu\n",source,destination);*/
+                       emufs_tipo2_movedata(datfile,&source,&destination,mustmove_bytes);
+                       /* Guardo el nuevo destino que es donde termino de mover */
+                       destination = ftell(datfile);
+                       /* El ultimo gap leido, pasa a ser el de referencia ahora */
+                       reg1.marker = reg2.marker;
+                       reg1.freespace = reg2.freespace;
+                       --cant_gaps;
+               }
+               
+               /* Realizo el movimiento del ultimo chunk de datos */
+               source = reg1.marker + reg1.freespace;
+               mustmove_bytes = datsize - source;
+               emufs_tipo2_movedata(datfile,&source,&destination,mustmove_bytes);
+       }
+               
+       fclose(datfile);
+       fclose(fscfile);
+       
+       /* Trunco el dat para que no quede el espacio vacio al final */
+       totalfsc = emufs_fsc_get_total_fs(efs);
+       truncate(name_fdat,datsize - totalfsc);
+       truncate(name_ffsc,0);
+       
+       /* Recreo el Indice con los nuevos offsets */
+       emufs_tipo2_updateidx(efs);
+}
+
+/* Mueve data desde un source a un destination, de a chunks */
+void emufs_tipo2_movedata(FILE *datfile,EMUFS_OFFSET *source, EMUFS_OFFSET *destination, EMUFS_BLOCK_SIZE mustmove_bytes)
+{
+    int chunksize = 25;
+       char *chunk = malloc(chunksize*sizeof(char));
+       unsigned long cant_chunks = 0,left_chunk = 0;
+       
+       /* Obtengo cuantos bloques de a CHUNKSIZE bytes debo mover. Si la cantidad es no entera */
+       cant_chunks = floor(mustmove_bytes/chunksize);
+       left_chunk = fmod(mustmove_bytes,chunksize);
+       
+       /*printf ("Cantidad de chunk de %i bytes movidos: %lu\n",chunksize,cant_chunks);
+       printf ("Left chunk movido fue de: %lu bytes\n",left_chunk);*/
+       
+       while(cant_chunks > 0)
+       {
+               fseek(datfile,*source,SEEK_SET);
+               fread(chunk,chunksize,1,datfile);
+               fseek(datfile,*destination,SEEK_SET);
+               fwrite(chunk,chunksize,1,datfile);
+               *source += chunksize;
+               *destination += chunksize;              
+               --cant_chunks;
+       }
+       
+       if (left_chunk > 0)
+       {
+               fseek(datfile,*source,SEEK_SET);
+               fread(chunk,left_chunk,1,datfile);
+               fseek(datfile,*destination,SEEK_SET);
+               fwrite(chunk,left_chunk,1,datfile);
+       }
+       
+       free(chunk);
+}
+
+/* Sincroniza el Index con las posiciones de los datos, luego de un recompactar */
+int emufs_tipo2_updateidx(EMUFS *efs)
+{
+       char name_fdat[255];
+       FILE *datfile;
+       EMUFS_REG_ID reg_id = -1;
+       EMUFS_OFFSET reg_offset = -1;
+       EMUFS_REG_SIZE reg_size = -1;
+               
+       strcpy(name_fdat,efs->nombre);
+       strcat(name_fdat,".dat");
+               
+       /* Obtengo el tamanio del .dat */
+       if ( (datfile = fopen(name_fdat,"rb+")) == NULL){
+                       PERR("No se pudo abrir el archivo");
+                       return -1;      
+       }
+       
+       /* Recorremos el archivo y actualizamos el .idx */
+       fseek(datfile,sizeof(EMUFS_Tipo),SEEK_SET);
+       while (!feof(datfile))
+       {
+               /* Leo un ID y actualizo el offset en el .idx */
+               reg_offset = ftell(datfile);
+               if (fread(&reg_id,sizeof(EMUFS_REG_ID),1,datfile) != 1) continue;
+               emufs_idx_actualizar(efs,reg_id,reg_offset);
+               /* Salteo la data del registro, para leer el proximo header */
+               fread(&reg_size,sizeof(EMUFS_REG_SIZE),1,datfile);
+               fseek(datfile,reg_size,SEEK_CUR);
+       }               
+       
+       return 0;       
+}
+
+void* emufs_tipo2_leer_registro_raw(EMUFS *efs, EMUFS_REG_ID id, EMUFS_REG_SIZE *size, int *pos)
+{
+       FILE* f_data;
+       char *registro; /* registro a leer */
+       char  name_f[255];      
+       EMUFS_OFFSET reg_offset; /* offset donde se encuentra el registro */
+       
+       strcpy(name_f,efs->nombre);
+       strcat(name_f,".dat");
+
+       /* Obtenemos la posicion del registro en el .dat */
+       reg_offset = emufs_idx_buscar_registro(efs, id);
+       if (reg_offset == EMUFS_NOT_FOUND) {
+               PERR("Registro no encontrado");
+               return NULL;
+       }
+       
+       /* Levantamos el registro */
+       if ((f_data = fopen(name_f, "rb")) == NULL) {
+               PERR("No se puede abrir archivo");
+               return NULL;
+       }
+       fseek(f_data,reg_offset+sizeof(EMUFS_REG_ID), SEEK_SET);
+       fread(size,sizeof(EMUFS_REG_SIZE),1,f_data);
+       registro = (char*)malloc(*size+sizeof(EMUFS_REG_ID)+sizeof(EMUFS_REG_SIZE)+100);
+       if (reg_offset >= 50) {
+               fseek(f_data, reg_offset - 50, SEEK_SET);
+               (*pos) = 50;
+       } else {
+               /* Si no hay 50 antes mio, estoy cerca del 0! */
+               (*pos) = reg_offset;
+               fseek(f_data, 0, SEEK_SET);
+       }
+       (*size) += sizeof(EMUFS_REG_ID)+sizeof(EMUFS_REG_SIZE)+100;
+       fread(registro,*size, 1,f_data);
+       fclose(f_data);
+       
+       return registro;
 }