Cached/commit files implemented as meta-files.
authorAdam Dickmeiss <adam@indexdata.dk>
Fri, 1 Dec 1995 11:37:21 +0000 (11:37 +0000)
committerAdam Dickmeiss <adam@indexdata.dk>
Fri, 1 Dec 1995 11:37:21 +0000 (11:37 +0000)
bfile/bfile.c
bfile/cfile.c
bfile/cfile.h
bfile/commit.c
include/bfile.h

index 210946e..256fe62 100644 (file)
@@ -4,7 +4,10 @@
  * Sebastian Hammer, Adam Dickmeiss
  *
  * $Log: bfile.c,v $
- * Revision 1.13  1995-11-30 17:00:49  adam
+ * Revision 1.14  1995-12-01 11:37:21  adam
+ * Cached/commit files implemented as meta-files.
+ *
+ * Revision 1.13  1995/11/30  17:00:49  adam
  * Several bug fixes. Commit system runs now.
  *
  * Revision 1.12  1995/11/30  08:33:10  adam
 #include <bfile.h>
 #include "cfile.h"
 
-static const char *cache_name = NULL;
+static MFile_area commit_area = NULL;
 
-void bf_cache (const char *name)
+void bf_cache (void)
 {
-    cache_name = name;
+    if (!commit_area)
+        commit_area = mf_init ("commit");
 }
 
 int bf_close (BFile bf)
@@ -72,19 +76,18 @@ BFile bf_open (const char *name, int block_size, int wflag)
 {
     BFile tmp = xmalloc(sizeof(BFile_struct));
 
-    if (cache_name)
+    if (commit_area)
     {
         FILE *outf;
         int first_time;
 
-        logf (LOG_LOG, "cf,mf_open %s, cache_name=%s", name, cache_name);
-        tmp->mf = mf_open(0, name, block_size, 0);
-        tmp->cf = cf_open(tmp->mf, cache_name, name, block_size, wflag,
-                          &first_time);
+        logf (LOG_LOG, "cf,mf_open %s", name);
+        tmp->mf = mf_open (commit_area, name, block_size, 0);
+        tmp->cf = cf_open (tmp->mf, name, block_size, wflag, &first_time);
 
         if (first_time)
         {
-            outf = fopen (cache_name, "a");
+            outf = fopen ("cache", "a");
             fprintf (outf, "%s %d\n", name, block_size);
             fclose (outf);
         }
@@ -119,7 +122,7 @@ int bf_write (BFile bf, int no, int offset, int num, const void *buf)
     return mf_write (bf->mf, no, offset, num, buf);
 }
 
-void bf_commit (const char *name)
+void bf_commit (void)
 {
     FILE *inf;
     int block_size;
@@ -128,15 +131,17 @@ void bf_commit (const char *name)
     CFile cf;
     int first_time;
 
-    if (!(inf = fopen (name, "r")))
+    if (!commit_area)
+        commit_area = mf_init ("commit");
+    if (!(inf = fopen ("cache", "r")))
     {
-        logf (LOG_FATAL|LOG_ERRNO, "cannot open commit %s", name);
+        logf (LOG_FATAL|LOG_ERRNO, "cannot open commit %s", "cache");
         exit (1);
     }
     while (fscanf (inf, "%s %d", path, &block_size) == 2)
     {
-        mf = mf_open(0, path, block_size, 1);
-        cf = cf_open(mf, name, path, block_size, 0, &first_time);
+        mf = mf_open (commit_area, path, block_size, 1);
+        cf = cf_open (mf, path, block_size, 0, &first_time);
 
         cf_commit (cf);
 
index f11abbd..3a69a58 100644 (file)
@@ -4,7 +4,10 @@
  * Sebastian Hammer, Adam Dickmeiss
  *
  * $Log: cfile.c,v $
- * Revision 1.2  1995-11-30 17:00:49  adam
+ * Revision 1.3  1995-12-01 11:37:22  adam
+ * Cached/commit files implemented as meta-files.
+ *
+ * Revision 1.2  1995/11/30  17:00:49  adam
  * Several bug fixes. Commit system runs now.
  *
  * Revision 1.1  1995/11/30  08:33:11  adam
@@ -13,8 +16,6 @@
  */
 
 #include <assert.h>
-#include <fcntl.h>
-#include <unistd.h>
 #include <stdlib.h>
 #include <string.h>
 
 #include <mfile.h>
 #include "cfile.h"
 
-static int hash_write (CFile cf, const void *buf, size_t bytes)
+static int write_head (CFile cf)
 {
-    int r;
+    int left = cf->head.hash_size * sizeof(int);
+    int bno = 1;
+    const char *tab = (char*) cf->array;
 
-    r = write (cf->hash_fd, buf, bytes);
-    if (r == bytes)
-        return bytes;
-    if (r == -1)
-        logf (LOG_FATAL|LOG_ERRNO, "write in commit hash file");
-    else
-        logf (LOG_FATAL, "write in commit hash file. "
-                     "%d bytes instead of %d bytes", r, bytes);
-    exit (1);
+    while (left >= HASH_BSIZE)
+    {
+        mf_write (cf->hash_mf, bno++, 0, 0, tab);
+        tab += HASH_BSIZE;
+        left -= HASH_BSIZE;
+    }
+    if (left > 0)
+        mf_write (cf->hash_mf, bno, 0, left, tab);
     return 0;
 }
 
-static int hash_read (CFile cf, void *buf, size_t bytes)
+static int read_head (CFile cf)
 {
-    int r;
+    int left = cf->head.hash_size * sizeof(int);
+    int bno = 1;
+    char *tab = (char*) cf->array;
 
-    r = read (cf->hash_fd, buf, bytes);
-    if (r == bytes)
-        return bytes;
-    if (r == -1)
-        logf (LOG_FATAL|LOG_ERRNO, "read in commit hash file");
-    else
-        logf (LOG_FATAL, "read in commit hash file. "
-                     "%d bytes instead of %d bytes", r, bytes);
-    abort ();
+    while (left >= HASH_BSIZE)
+    {
+        mf_read (cf->hash_mf, bno++, 0, 0, tab);
+        tab += HASH_BSIZE;
+        left -= HASH_BSIZE;
+    }
+    if (left > 0)
+        mf_read (cf->hash_mf, bno, 0, left, tab);
     return 0;
 }
 
-CFile cf_open (MFile mf, const char *cname, const char *fname,
-               int block_size, int wflag, int *firstp)
+
+CFile cf_open (MFile mf, const char *fname, int block_size, int wflag,
+               int *firstp)
 {
     char path[256];
-    int r, i;
+    int i;
     CFile cf = xmalloc (sizeof(*cf));
     int hash_bytes;
    
-    cf->mf = mf; 
-    sprintf (path, "%s.%s.b", cname, fname);
-    if ((cf->block_fd = 
-        open (path, wflag ? O_RDWR|O_CREAT : O_RDONLY, 0666)) < 0)
+    cf->rmf = mf; 
+    sprintf (path, "%s.b", fname);
+    if (!(cf->block_mf = mf_open (0, path, block_size, wflag)))
     {
         logf (LOG_FATAL|LOG_ERRNO, "Failed to open %s", path);
         exit (1);
     }
-    sprintf (path, "%s.%s.h", cname, fname);
-    if ((cf->hash_fd = 
-        open (path, wflag ? O_RDWR|O_CREAT : O_RDONLY, 0666)) < 0)
+    sprintf (path, "%s.h", fname);
+    if (!(cf->hash_mf = mf_open (0, path, HASH_BSIZE, wflag)))
     {
         logf (LOG_FATAL|LOG_ERRNO, "Failed to open %s", path);
         exit (1);
     }
-    r = read (cf->hash_fd, &cf->head, sizeof(cf->head));
-    if (r != sizeof(cf->head))
+    if (!mf_read (cf->hash_mf, 0, 0, sizeof(cf->head), &cf->head))
     {
         *firstp = 1;
-        if (r == -1)
-        {
-            logf (LOG_FATAL|LOG_ERRNO, "read head of %s", path);
-            exit (1);
-        }
-        if (r != 0)
-        {
-            logf (LOG_FATAL, "illegal head of %s", path);
-            exit (1);
-        }
         cf->head.block_size = block_size;
         cf->head.hash_size = 401;
         hash_bytes = cf->head.hash_size * sizeof(int);
@@ -98,12 +89,12 @@ CFile cf_open (MFile mf, const char *cname, const char *fname,
             (hash_bytes+sizeof(cf->head))/HASH_BSIZE + 2;
         cf->head.next_block = 1;
         if (wflag)
-            hash_write (cf, &cf->head, sizeof(cf->head));
+            mf_write (cf->hash_mf, 0, 0, sizeof(cf->head), &cf->head);
         cf->array = xmalloc (hash_bytes);
         for (i = 0; i<cf->head.hash_size; i++)
             cf->array[i] = 0;
         if (wflag)
-            hash_write (cf, cf->array, hash_bytes);
+            write_head (cf);
     }
     else
     {
@@ -113,7 +104,7 @@ CFile cf_open (MFile mf, const char *cname, const char *fname,
         hash_bytes = cf->head.hash_size * sizeof(int);
         assert (cf->head.next_bucket > 0);
         cf->array = xmalloc (hash_bytes);
-        hash_read (cf, cf->array, hash_bytes);
+        read_head (cf);
     }
     cf->parray = xmalloc (cf->head.hash_size * sizeof(*cf->parray));
     for (i = 0; i<cf->head.hash_size; i++)
@@ -163,12 +154,7 @@ static void flush_bucket (CFile cf, int no_to_flush)
             break;
         if (p->dirty)
         {
-            if (lseek (cf->hash_fd, p->ph.this_bucket*HASH_BSIZE, SEEK_SET) < 0)
-            {
-                logf (LOG_FATAL|LOG_ERRNO, "lseek in flush_bucket");
-                exit (1);
-            }
-            hash_write (cf, &p->ph, HASH_BSIZE);
+            mf_write (cf->hash_mf, p->ph.this_bucket, 0, 0, &p->ph);
             cf->dirty = 1;
         }
         release_bucket (cf, p);
@@ -207,13 +193,11 @@ static struct CFile_hash_bucket *get_bucket (CFile cf, int block_no, int hno)
     struct CFile_hash_bucket *p;
 
     p = alloc_bucket (cf, block_no, hno);
-
-    if (lseek (cf->hash_fd, block_no * HASH_BSIZE, SEEK_SET) < 0)
+    if (!mf_read (cf->hash_mf, block_no, 0, 0, &p->ph))
     {
-        logf (LOG_FATAL|LOG_ERRNO, "lseek in get_bucket");
+        logf (LOG_FATAL|LOG_ERRNO, "read get_bucket");
         exit (1);
     }
-    hash_read (cf, &p->ph, HASH_BSIZE);
     assert (p->ph.this_bucket == block_no);
     p->dirty = 0;
     return p;
@@ -320,24 +304,14 @@ int cf_new (CFile cf, int no)
 
 int cf_read (CFile cf, int no, int offset, int num, void *buf)
 {
-    int tor, block, r;
+    int block;
     
     assert (cf);
     if (!(block = cf_lookup (cf, no)))
         return -1;
-    if (lseek (cf->block_fd, cf->head.block_size * block + offset,
-         SEEK_SET) < 0)
+    if (!mf_read (cf->block_mf, block, offset, num, buf))
     {
-        logf (LOG_FATAL|LOG_ERRNO, "cf_read, lseek no=%d, block=%d",
-              no, block);
-        exit (1);
-    }
-    tor = num ? num : cf->head.block_size;
-    r = read (cf->block_fd, buf, tor);
-    if (r != tor)
-    {
-        logf (LOG_FATAL|LOG_ERRNO, "cf_read, read no=%d, block=%d",
-              no, block);
+        logf (LOG_FATAL|LOG_ERRNO, "cf_read no=%d, block=%d", no, block);
         exit (1);
     }
     return 1;
@@ -345,7 +319,7 @@ int cf_read (CFile cf, int no, int offset, int num, void *buf)
 
 int cf_write (CFile cf, int no, int offset, int num, const void *buf)
 {
-    int block, r, tow;
+    int block;
 
     assert (cf);
     if (!(block = cf_lookup (cf, no)))
@@ -353,27 +327,16 @@ int cf_write (CFile cf, int no, int offset, int num, const void *buf)
         block = cf_new (cf, no);
         if (offset || num)
         {
-            mf_read (cf->mf, no, 0, 0, cf->iobuf);
+            mf_read (cf->rmf, no, 0, 0, cf->iobuf);
             memcpy (cf->iobuf + offset, buf, num);
             buf = cf->iobuf;
             offset = 0;
             num = 0;
         }
     }
-    if (lseek (cf->block_fd, cf->head.block_size * block + offset,
-               SEEK_SET) < 0)
-    {
-        logf (LOG_FATAL|LOG_ERRNO, "cf_write, lseek no=%d, block=%d",
-              no, block);
-        exit (1);
-    }
-
-    tow = num ? num : cf->head.block_size;
-    r = write (cf->block_fd, buf, tow);
-    if (r != tow)
+    if (mf_write (cf->block_mf, block, offset, num, buf))
     {
-        logf (LOG_FATAL|LOG_ERRNO, "cf_write, read no=%d, block=%d",
-              no, block);
+        logf (LOG_FATAL|LOG_ERRNO, "cf_write no=%d, block=%d", no, block);
         exit (1);
     }
     return 0;
@@ -384,25 +347,11 @@ int cf_close (CFile cf)
     flush_bucket (cf, -1);
     if (cf->dirty)
     {
-        int hash_bytes = cf->head.hash_size * sizeof(int);
-        if (lseek (cf->hash_fd, 0L, SEEK_SET) < 0)
-        {
-            logf (LOG_FATAL|LOG_ERRNO, "seek in hash fd");
-            exit (1);
-        }
-        hash_write (cf, &cf->head, sizeof(cf->head));
-        hash_write (cf, cf->array, hash_bytes);
-    }
-    if (close (cf->hash_fd) < 0)
-    {
-        logf (LOG_FATAL|LOG_ERRNO, "close hash fd");
-        exit (1);
-    }
-    if (close (cf->block_fd) < 0)
-    {
-        logf (LOG_FATAL|LOG_ERRNO, "close block fd");
-        exit (1);
+        mf_write (cf->hash_mf, 0, 0, sizeof(cf->head), &cf->head);
+        write_head (cf);
     }
+    mf_close (cf->hash_mf);
+    mf_close (cf->block_mf);
     xfree (cf->array);
     xfree (cf->parray);
     xfree (cf->iobuf);
index 5080151..2f8c3bb 100644 (file)
@@ -4,7 +4,10 @@
  * Sebastian Hammer, Adam Dickmeiss
  *
  * $Log: cfile.h,v $
- * Revision 1.1  1995-11-30 08:33:12  adam
+ * Revision 1.2  1995-12-01 11:37:23  adam
+ * Cached/commit files implemented as meta-files.
+ *
+ * Revision 1.1  1995/11/30  08:33:12  adam
  * Started work on commit facility.
  *
  */
@@ -36,8 +39,8 @@ typedef struct CFile_struct
         int next_block;
         int block_size;
     } head;
-    int block_fd;
-    int hash_fd;
+    MFile block_mf;
+    MFile hash_mf;
     int *array;
     struct CFile_hash_bucket **parray;
     struct CFile_hash_bucket *bucket_lru_front, *bucket_lru_back;
@@ -45,12 +48,12 @@ typedef struct CFile_struct
     int bucket_in_memory;
     int max_bucket_in_memory;
     char *iobuf;
-    MFile mf;
+    MFile rmf;
 } *CFile;
 
 int cf_close (CFile cf);
-CFile cf_open (MFile mf, const char *cname, const char *fname,
-               int block_size, int wflag, int *firstp);
+CFile cf_open (MFile mf, const char *fname, int block_size, int wflag,
+               int *firstp);
 int cf_read (CFile cf, int no, int offset, int num, void *buf);
 int cf_write (CFile cf, int no, int offset, int num, const void *buf);
 void cf_commit (CFile cf);
index 216825c..cbebe0e 100644 (file)
@@ -4,16 +4,18 @@
  * Sebastian Hammer, Adam Dickmeiss
  *
  * $Log: commit.c,v $
- * Revision 1.1  1995-11-30 08:33:13  adam
+ * Revision 1.2  1995-12-01 11:37:24  adam
+ * Cached/commit files implemented as meta-files.
+ *
+ * Revision 1.1  1995/11/30  08:33:13  adam
  * Started work on commit facility.
  *
  */
 
 #include <assert.h>
-#include <fcntl.h>
-#include <unistd.h>
-#include <alexutil.h>
+#include <stdlib.h>
 
+#include <alexutil.h>
 #include <mfile.h>
 #include "cfile.h"
 
@@ -31,34 +33,21 @@ void cf_commit (CFile cf)
     p = xmalloc (sizeof(*p));
     hash_bytes = cf->head.hash_size * sizeof(int);
     bucket_no = (hash_bytes+sizeof(cf->head))/HASH_BSIZE + 2;
-    if (lseek (cf->hash_fd, bucket_no * HASH_BSIZE, SEEK_SET) < 0)
-    {
-        logf (LOG_FATAL|LOG_ERRNO, "seek commit");
-        exit (1);
-    }
     for (; bucket_no < cf->head.next_bucket; bucket_no++)
     {
-        r = read (cf->hash_fd, p, HASH_BSIZE);
-        if (r != HASH_BSIZE)
+        if (!mf_read (cf->hash_mf, bucket_no, 0, 0, p))
         {
             logf (LOG_FATAL, "read commit hash");
             exit (1);
         }
         for (i = 0; i<HASH_BUCKET && p->vno[i]; i++)
         {
-            if (lseek (cf->block_fd, p->vno[i]*cf->head.block_size,
-                SEEK_SET) < 0)
-            {
-                logf (LOG_FATAL, "lseek commit block");
-                exit (1);
-            }
-            r = read (cf->block_fd, cf->iobuf, cf->head.block_size);
-            if (r != cf->head.block_size)
+            if (!mf_read (cf->block_mf, p->vno[i], 0, 0, cf->iobuf))
             {
                 logf (LOG_FATAL, "read commit block");
                 exit (1);
             }
-            mf_write (cf->mf, p->no[i], 0, 0, cf->iobuf);
+            mf_write (cf->rmf, p->no[i], 0, 0, cf->iobuf);
         }
     }
     xfree (p);
index fa06467..ae8d2f4 100644 (file)
@@ -4,7 +4,10 @@
  * Sebastian Hammer, Adam Dickmeiss
  *
  * $Log: bfile.h,v $
- * Revision 1.8  1995-11-30 08:33:29  adam
+ * Revision 1.9  1995-12-01 11:37:46  adam
+ * Cached/commit files implemented as meta-files.
+ *
+ * Revision 1.8  1995/11/30  08:33:29  adam
  * Started work on commit facility.
  *
  * Revision 1.7  1995/09/04  12:33:35  adam
@@ -42,7 +45,7 @@ int bf_close (BFile);
 BFile bf_open (const char *name, int block_size, int wflag);
 int bf_read (BFile bf, int no, int offset, int num, void *buf);
 int bf_write (BFile bf, int no, int offset, int num, const void *buf);
-void bf_cache (const char *name);
-void bf_commit (const char *name);
+void bf_cache ();
+void bf_commit ();
 
 #endif