rset/rstemp.c

   1 /* $Id: rstemp.c,v 1.33 2002-08-02 19:26:57 adam Exp $
   2    Copyright (C) 1995,1996,1997,1998,1999,2000,2001,2002
   3    Index Data Aps
   4
   5 This file is part of the Zebra server.
   6
   7 Zebra is free software; you can redistribute it and/or modify it under
   8 the terms of the GNU General Public License as published by the Free
   9 Software Foundation; either version 2, or (at your option) any later
  10 version.
  11
  12 Zebra is distributed in the hope that it will be useful, but WITHOUT ANY
  13 WARRANTY; without even the implied warranty of MERCHANTABILITY or
  14 FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
  15 for more details.
  16
  17 You should have received a copy of the GNU General Public License
  18 along with Zebra; see the file LICENSE.zebra.  If not, write to the
  19 Free Software Foundation, 59 Temple Place - Suite 330, Boston, MA
  20 02111-1307, USA.
  21 */
  22
  23
  24
  25 #include <fcntl.h>
  26 #include <assert.h>
  27 #ifdef WIN32
  28 #include <io.h>
  29 #else
  30 #include <unistd.h>
  31 #endif
  32 #include <string.h>
  33 #include <sys/types.h>
  34 #include <stdio.h>
  35
  36 #include <zebrautl.h>
  37 #include <rstemp.h>
  38
  39 static void *r_create(RSET ct, const struct rset_control *sel, void *parms);
  40 static RSFD r_open (RSET ct, int flag);
  41 static void r_close (RSFD rfd);
  42 static void r_delete (RSET ct);
  43 static void r_rewind (RSFD rfd);
  44 static int r_count (RSET ct);
  45 static int r_read (RSFD rfd, void *buf, int *term_index);
  46 static int r_write (RSFD rfd, const void *buf);
  47
  48 static const struct rset_control control =
  49 {
  50     "temp",
  51     r_create,
  52     r_open,
  53     r_close,
  54     r_delete,
  55     r_rewind,
  56     r_count,
  57     r_read,
  58     r_write,
  59 };
  60
  61 const struct rset_control *rset_kind_temp = &control;
  62
  63 struct rset_temp_info {
  64     int     fd;
  65     char   *fname;
  66     size_t  key_size;      /* key size */
  67     char   *buf_mem;       /* window buffer */
  68     size_t  buf_size;      /* size of window */
  69     size_t  pos_end;       /* last position in set */
  70     size_t  pos_cur;       /* current position in set */
  71     size_t  pos_buf;       /* position of first byte in window */
  72     size_t  pos_border;    /* position of last byte+1 in window */
  73     int     dirty;         /* window is dirty */
  74     int     hits;          /* no of hits */
  75     char   *temp_path;
  76     int     (*cmp)(const void *p1, const void *p2);
  77 };
  78
  79 struct rset_temp_rfd {
  80     struct rset_temp_info *info;
  81     struct rset_temp_rfd *next;
  82     int *countp;
  83     void *buf;
  84 };
  85
  86 static void *r_create(RSET ct, const struct rset_control *sel, void *parms)
  87 {
  88     rset_temp_parms *temp_parms = (rset_temp_parms *) parms;
  89     struct rset_temp_info *info;
  90
  91     info = (struct rset_temp_info *) xmalloc (sizeof(struct rset_temp_info));
  92     info->fd = -1;
  93     info->fname = NULL;
  94     info->key_size = temp_parms->key_size;
  95     info->buf_size = 4096;
  96     info->buf_mem = (char *) xmalloc (info->buf_size);
  97     info->pos_cur = 0;
  98     info->pos_end = 0;
  99     info->pos_buf = 0;
 100     info->dirty = 0;
 101     info->hits = -1;
 102     info->cmp = temp_parms->cmp;
 103     if (!temp_parms->temp_path)
 104         info->temp_path = NULL;
 105     else
 106     {
 107         info->temp_path = (char *) xmalloc (strlen(temp_parms->temp_path)+1);
 108         strcpy (info->temp_path, temp_parms->temp_path);
 109     }
 110     ct->no_rset_terms = 1;
 111     ct->rset_terms = (RSET_TERM *) xmalloc (sizeof(*ct->rset_terms));
 112     ct->rset_terms[0] = temp_parms->rset_term;
 113
 114     return info;
 115 }
 116
 117 static RSFD r_open (RSET ct, int flag)
 118 {
 119     struct rset_temp_info *info = (struct rset_temp_info *) ct->buf;
 120     struct rset_temp_rfd *rfd;
 121
 122     assert (info->fd == -1);
 123     if (info->fname)
 124     {
 125         if (flag & RSETF_WRITE)
 126             info->fd = open (info->fname, O_BINARY|O_RDWR|O_CREAT, 0666);
 127         else
 128             info->fd = open (info->fname, O_BINARY|O_RDONLY);
 129         if (info->fd == -1)
 130         {
 131             logf (LOG_FATAL|LOG_ERRNO, "open %s", info->fname);
 132             exit (1);
 133         }
 134     }
 135     rfd = (struct rset_temp_rfd *) xmalloc (sizeof(*rfd));
 136     rfd->info = info;
 137     r_rewind (rfd);
 138
 139     rfd->countp = &ct->rset_terms[0]->count;
 140     rfd->buf = xmalloc (info->key_size);
 141
 142     return rfd;
 143 }
 144
 145 /* r_flush:
 146       flush current window to file if file is assocated with set
 147  */
 148 static void r_flush (RSFD rfd, int mk)
 149 {
 150     struct rset_temp_info *info = ((struct rset_temp_rfd*) rfd)->info;
 151
 152     if (!info->fname && mk)
 153     {
 154 #if HAVE_MKSTEMP
 155         char template[1024];
 156
 157         if (info->temp_path)
 158             sprintf (template, "%s/zrsXXXXXX", info->temp_path);
 159         else
 160             sprintf (template, "zrsXXXXXX");
 161
 162         info->fd = mkstemp (template);
 163
 164         if (info->fd == -1)
 165         {
 166             logf (LOG_FATAL|LOG_ERRNO, "mkstemp %s", template);
 167             exit (1);
 168         }
 169         info->fname = (char *) xmalloc (strlen(template)+1);
 170         strcpy (info->fname, template);
 171 #else
 172         char *s = (char*) tempnam (info->temp_path, "zrs");
 173         info->fname = (char *) xmalloc (strlen(s)+1);
 174         strcpy (info->fname, s);
 175
 176         logf (LOG_DEBUG, "creating tempfile %s", info->fname);
 177         info->fd = open (info->fname, O_BINARY|O_RDWR|O_CREAT, 0666);
 178         if (info->fd == -1)
 179         {
 180             logf (LOG_FATAL|LOG_ERRNO, "open %s", info->fname);
 181             exit (1);
 182         }
 183 #endif
 184     }
 185     if (info->fname && info->fd != -1 && info->dirty)
 186     {
 187         size_t count;
 188         int r;
 189
 190         if (lseek (info->fd, info->pos_buf, SEEK_SET) == -1)
 191         {
 192             logf (LOG_FATAL|LOG_ERRNO, "lseek %s", info->fname);
 193             exit (1);
 194         }
 195         count = info->buf_size;
 196         if (count > info->pos_end - info->pos_buf)
 197             count = info->pos_end - info->pos_buf;
 198         if ((r = write (info->fd, info->buf_mem, count)) < (int) count)
 199         {
 200             if (r == -1)
 201                 logf (LOG_FATAL|LOG_ERRNO, "read %s", info->fname);
 202             else
 203                 logf (LOG_FATAL, "write of %ld but got %ld",
 204                       (long) count, (long) r);
 205             exit (1);
 206         }
 207         info->dirty = 0;
 208     }
 209 }
 210
 211 static void r_close (RSFD rfd)
 212 {
 213     struct rset_temp_info *info = ((struct rset_temp_rfd*)rfd)->info;
 214
 215     r_flush (rfd, 0);
 216     if (info->fname && info->fd != -1)
 217     {
 218         close (info->fd);
 219         info->fd = -1;
 220     }
 221     xfree (((struct rset_temp_rfd *)rfd)->buf);
 222     xfree (rfd);
 223 }
 224
 225 static void r_delete (RSET ct)
 226 {
 227     struct rset_temp_info *info = (struct rset_temp_info*) ct->buf;
 228
 229     if (info->fname)
 230         unlink (info->fname);
 231     xfree (info->buf_mem);
 232     logf (LOG_DEBUG, "r_delete: set size %ld", (long) info->pos_end);
 233     if (info->fname)
 234     {
 235         logf (LOG_DEBUG, "r_delete: unlink %s", info->fname);
 236         unlink (info->fname);
 237         xfree (info->fname);
 238     }
 239     if (info->temp_path)
 240         xfree (info->temp_path);
 241     rset_term_destroy (ct->rset_terms[0]);
 242     xfree (ct->rset_terms);
 243     xfree (info);
 244 }
 245
 246 /* r_reread:
 247       read from file to window if file is assocated with set -
 248       indicated by fname
 249  */
 250 static void r_reread (RSFD rfd)
 251 {
 252     struct rset_temp_info *info = ((struct rset_temp_rfd*)rfd)->info;
 253
 254     if (info->fname)
 255     {
 256         size_t count;
 257         int r;
 258
 259         info->pos_border = info->pos_cur + info->buf_size;
 260         if (info->pos_border > info->pos_end)
 261             info->pos_border = info->pos_end;
 262         count = info->pos_border - info->pos_buf;
 263         if (count > 0)
 264         {
 265             if (lseek (info->fd, info->pos_buf, SEEK_SET) == -1)
 266             {
 267                 logf (LOG_FATAL|LOG_ERRNO, "lseek %s", info->fname);
 268                 exit (1);
 269             }
 270             if ((r = read (info->fd, info->buf_mem, count)) < (int) count)
 271             {
 272                 if (r == -1)
 273                     logf (LOG_FATAL|LOG_ERRNO, "read %s", info->fname);
 274                 else
 275                     logf (LOG_FATAL, "read of %ld but got %ld",
 276                           (long) count, (long) r);
 277                 exit (1);
 278             }
 279         }
 280     }
 281     else
 282         info->pos_border = info->pos_end;
 283 }
 284
 285 static void r_rewind (RSFD rfd)
 286 {
 287     struct rset_temp_info *info = ((struct rset_temp_rfd*)rfd)->info;
 288
 289     r_flush (rfd, 0);
 290     info->pos_cur = 0;
 291     info->pos_buf = 0;
 292     r_reread (rfd);
 293 }
 294
 295 static int r_count (RSET ct)
 296 {
 297     struct rset_temp_info *info = (struct rset_temp_info *) ct->buf;
 298
 299     return info->pos_end / info->key_size;
 300 }
 301
 302 static int r_read (RSFD rfd, void *buf, int *term_index)
 303 {
 304     struct rset_temp_rfd *mrfd = (struct rset_temp_rfd*) rfd;
 305     struct rset_temp_info *info = mrfd->info;
 306
 307     size_t nc = info->pos_cur + info->key_size;
 308
 309     if (nc > info->pos_border)
 310     {
 311         if (nc > info->pos_end)
 312             return 0;
 313         r_flush (rfd, 0);
 314         info->pos_buf = info->pos_cur;
 315         r_reread (rfd);
 316     }
 317     memcpy (buf, info->buf_mem + (info->pos_cur - info->pos_buf),
 318             info->key_size);
 319     info->pos_cur = nc;
 320     *term_index = 0;
 321
 322     if (*mrfd->countp == 0 || (*info->cmp)(buf, mrfd->buf) > 1)
 323     {
 324         memcpy (mrfd->buf, buf, mrfd->info->key_size);
 325         (*mrfd->countp)++;
 326     }
 327     return 1;
 328 }
 329
 330 static int r_write (RSFD rfd, const void *buf)
 331 {
 332     struct rset_temp_info *info = ((struct rset_temp_rfd*)rfd)->info;
 333
 334     size_t nc = info->pos_cur + info->key_size;
 335
 336     if (nc > info->pos_buf + info->buf_size)
 337     {
 338         r_flush (rfd, 1);
 339         info->pos_buf = info->pos_cur;
 340         if (info->pos_buf < info->pos_end)
 341             r_reread (rfd);
 342     }
 343     info->dirty = 1;
 344     memcpy (info->buf_mem + (info->pos_cur - info->pos_buf), buf,
 345             info->key_size);
 346     info->pos_cur = nc;
 347     if (nc > info->pos_end)
 348         info->pos_border = info->pos_end = nc;
 349     return 1;
 350 }