Improvements in the log system, especially on the server side. Now logging on
[yaz-moved-to-github.git] / src / log.c
index 7339829..d8a3652 100644 (file)
--- a/src/log.c
+++ b/src/log.c
@@ -2,7 +2,7 @@
  * Copyright (c) 1995-2004, Index Data
  * See the file LICENSE for details.
  *
- * $Id: log.c,v 1.6 2004-11-02 13:52:54 heikki Exp $
+ * $Id: log.c,v 1.14 2004-11-16 17:08:11 heikki Exp $
  */
 
 /**
 #include <windows.h>
 #endif
 
+#if YAZ_POSIX_THREADS
+#include <pthread.h>
+#endif
+
+#if YAZ_GNU_THREADS
+#include <pth.h>
+#endif
+
 #include <stdio.h>
 #include <stdlib.h>
 #include <ctype.h>
@@ -28,6 +36,9 @@
 #include <yaz/nmem.h>
 #include <yaz/log.h>
 
+static NMEM_MUTEX log_mutex = 0;
+static int mutex_init_flag = 0; /* not yet initialized */
+
 #define HAS_STRERROR 1
 
 #if HAS_STRERROR
 #else
 char *strerror(int n)
 {
-        extern char *sys_errlist[];
-        return sys_errlist[n];
+    extern char *sys_errlist[];
+    return sys_errlist[n];
 }
 
 #endif
 
 
+
 static int l_level = LOG_DEFAULT_LEVEL;
 static FILE *l_file = NULL;
 static char l_prefix[512] = "";
 static char l_prefix2[512] = "";
 static char l_fname[512] = "";
 
-static char l_old_default_format[]="%H:%M:%S-%d/%m";
-static char l_new_default_format[]="%Y%m%d-%H%M%S";
+static char l_old_default_format[] = "%H:%M:%S-%d/%m";
+static char l_new_default_format[] = "%Y%m%d-%H%M%S";
 #define TIMEFORMAT_LEN 50
-static char l_custom_format[TIMEFORMAT_LEN]="";
-static char *l_actual_format=l_old_default_format;
+static char l_custom_format[TIMEFORMAT_LEN] = "";
+static char *l_actual_format = l_old_default_format;
 
 /** l_max_size tells when to rotate the log. Default to 1 GB */
-/* static int l_max_size=1024*1024*1024;  */
+static const int l_def_max_size = 1024*1024*1024;
+static int l_max_size = 1024*1024*1024;
 
+#define MAX_MASK_NAMES 35   /* 32 bits plus a few combo names */
 static struct {
     int mask;
     char *name;
-} mask_names[] =
+}  mask_names[MAX_MASK_NAMES] =
 {
-    { LOG_FATAL, "fatal"},
-    { LOG_DEBUG, "debug"},
-    { LOG_WARN,  "warn" },
-    { LOG_LOG,   "log"  },
-    { LOG_ERRNO, ""},
+    { LOG_FATAL,  "fatal"},
+    { LOG_DEBUG,  "debug"},
+    { LOG_WARN,   "warn" },
+    { LOG_LOG,    "log"  },
+    { LOG_ERRNO,  ""},
     { LOG_MALLOC, "malloc"},
-    { LOG_APP,   "app"  },
+    { LOG_APP,    "app"  },
     { LOG_NOTIME, "" },
-    { LOG_APP2  , "app2" },
-    { LOG_APP3  , "app3" },
-    { LOG_ALL,   "all"  },
-    { LOG_FLUSH, "flush" },
-    { 0,         "none" },
+    { LOG_APP2,   "app2" },
+    { LOG_APP3,   "app3" },
+    { LOG_ALL,    "all"  },
+    { LOG_FLUSH,  "flush" },
+    { LOG_LOGLVL, "loglevel" }, 
+    { 0,          "none" },
     { 0, NULL }
+    /* the rest will be filled in if the user defines dynamic modules*/
 };  
+static unsigned int next_log_bit = LOG_LAST_BIT<<1; /* first dynamic bit */
+
+static void init_mutex()
+{
+    if (mutex_init_flag)
+        return;
+    nmem_mutex_create (&log_mutex);
+    mutex_init_flag = 1;
+}
+
 
 FILE *yaz_log_file(void)
 {
@@ -87,6 +113,8 @@ FILE *yaz_log_file(void)
 
 void yaz_log_init_file (const char *fname)
 {
+    if (!mutex_init_flag)
+        init_mutex();
     if (fname)
     {
        strncpy(l_fname, fname, sizeof(l_fname)-1);
@@ -100,11 +128,12 @@ void yaz_log_init_file (const char *fname)
 void yaz_log_reopen(void)
 {
     FILE *new_file;
+    if (!mutex_init_flag)
+        init_mutex();
     if (!l_file)
         l_file = stderr;
-
     if (!*l_fname)
-       new_file=stderr;
+       new_file = stderr;
     else if (!(new_file = fopen(l_fname, "a")))
         return;
     if (l_file != stderr)
@@ -116,6 +145,26 @@ void yaz_log_reopen(void)
     l_file = new_file;
 }
 
+static void rotate_log()
+{
+    char newname[512];
+    if (l_file==stderr)
+        return; /* can't rotate that */
+    if (!*l_fname)
+        return; /* hmm, no name, can't rotate */
+    strncpy(newname, l_fname, 509);
+    newname[509] = '\0'; /* make sure it is terminated */
+    strcat(newname,".1");
+#ifdef WIN32
+    /* windows can't rename a file if it is open */
+    fclose(l_file);
+    l_file = stderr;
+#endif
+    rename(l_fname, newname);
+    yaz_log_reopen();
+}
+
+
 void yaz_log_init_level (int level)
 {
     if ( (l_level & LOG_FLUSH) != (level & LOG_FLUSH) )
@@ -124,6 +173,22 @@ void yaz_log_init_level (int level)
         yaz_log_reopen(); /* make sure we set buffering right */
     } else
         l_level = level;
+    if (l_level  & LOG_LOGLVL)
+    {  /* dump the log level bits */
+        char *bittype="Static ";
+        int i;
+        yaz_log(LOG_LOGLVL,"Setting log level to %d = 0x%08x",l_level,l_level);
+        for (i = 0; mask_names[i].name; i++)
+            if (mask_names[i].mask && *mask_names[i].name)
+                if (strcmp(mask_names[i].name,"all")!=0)
+                {
+                    yaz_log(LOG_LOGLVL,"%s log bit %08x '%s' is %s",
+                        bittype, mask_names[i].mask, mask_names[i].name,
+                        (level & mask_names[i].mask)?  "ON": "off");
+                if (mask_names[i].mask>LOG_LAST_BIT)
+                    bittype="Dynamic";
+                }
+    }
 }
 
 void yaz_log_init_prefix (const char *prefix)
@@ -144,12 +209,22 @@ void yaz_log_init_prefix2 (const char *prefix)
 
 void yaz_log_init(int level, const char *prefix, const char *fname)
 {
+    if (!mutex_init_flag)
+        init_mutex();
     yaz_log_init_level (level);
     yaz_log_init_prefix (prefix);
     if (fname && *fname)
         yaz_log_init_file (fname);
 }
 
+void yaz_log_init_max_size(int mx)
+{
+    if (mx <0)
+        l_max_size = l_def_max_size;
+    else
+        l_max_size = mx;
+}
+
 static void (*start_hook_func)(int, const char *, void *) = NULL;
 static void *start_hook_info;
 static void (*end_hook_func)(int, const char *, void *) = NULL;
@@ -174,27 +249,36 @@ void yaz_log(int level, const char *fmt, ...)
     int i;
     time_t ti;
     struct tm *tim;
-    char tbuf[TIMEFORMAT_LEN]="";
+    char tbuf[TIMEFORMAT_LEN] = "";
     int o_level = level;
-    /* int flen; */
+    int flen; 
 
     if (!(level & l_level))
        return;
+    if (!mutex_init_flag)
+        init_mutex();
     if (!l_file)
         l_file = stderr;
     
-/*    
-    flen=ftell(l_file);
-    if (flen>l_max_size) 
-        rotate_log();
-*/
+    if ((l_file != stderr) && (l_max_size>0))
+    {
+        nmem_mutex_enter (log_mutex);
+        flen = ftell(l_file);
+        if (flen>l_max_size) 
+            rotate_log();
+        nmem_mutex_leave (log_mutex);
+    }
+
     *flags = '\0';
     for (i = 0; level && mask_names[i].name; i++)
-       if (mask_names[i].mask & level)
+       if ( mask_names[i].mask & level)
        {
-           if (*mask_names[i].name)
+           if (*mask_names[i].name && mask_names[i].mask && 
+                 mask_names[i].mask != LOG_ALL)
+            {
                sprintf(flags + strlen(flags), "[%s]", mask_names[i].name);
-           level -= mask_names[i].mask;
+               level &= ~mask_names[i].mask;
+            }
        }
     va_start(ap, fmt);
 #ifdef WIN32
@@ -220,10 +304,10 @@ void yaz_log(int level, const char *fmt, ...)
     ti = time(0);
     tim = localtime(&ti);
     if (l_level & LOG_NOTIME)
-      tbuf[0]='\0';
+       tbuf[0] = '\0';
     else
-      strftime(tbuf, TIMEFORMAT_LEN-1, l_actual_format, tim);
-    tbuf[TIMEFORMAT_LEN-1]='\0';
+       strftime(tbuf, TIMEFORMAT_LEN-1, l_actual_format, tim);
+    tbuf[TIMEFORMAT_LEN-1] = '\0';
     fprintf(l_file, "%s %s%s %s%s\n", tbuf, l_prefix, flags,
             l_prefix2, buf);
     if (l_level & (LOG_FLUSH|LOG_DEBUG) )
@@ -246,10 +330,63 @@ void yaz_log_time_format(const char *fmt)
     }
     /* else use custom format */
     strncpy(l_custom_format, fmt, TIMEFORMAT_LEN-1);
-    l_custom_format[TIMEFORMAT_LEN-1]='\0';
+    l_custom_format[TIMEFORMAT_LEN-1] = '\0';
     l_actual_format = l_custom_format;
 }
 
+/** cleans a loglevel name from leading paths and suffixes */
+static char *clean_name(const char *name, int len, char *namebuf, int buflen)
+{
+    char *p = namebuf;
+    char *start = namebuf;
+    if (buflen <len)
+        len = buflen; 
+    strncpy(namebuf, name, len);
+    namebuf[len] = '\0';
+    while ((p = strchr(start,'/')))
+        start = p+1;
+    if ((p = strrchr(start,'.')))
+        *p = '\0';
+    return start;
+
+}
+
+static int define_module_bit(const char *name)
+{
+    int i;
+    for (i = 0; mask_names[i].name; i++)
+        ;
+    if ( (i>=MAX_MASK_NAMES) || (next_log_bit >= 1<<31 ))
+    {
+        yaz_log(LOG_WARN,"No more log bits left, not logging '%s'", name);
+        return 0;
+    }
+    mask_names[i].mask = next_log_bit;
+    next_log_bit = next_log_bit<<1;
+    mask_names[i].name = xstrdup(name);
+    mask_names[i+1].name = NULL;
+    mask_names[i+1].mask = 0;
+    return mask_names[i].mask;
+}
+
+int yaz_log_module_level(const char *name)
+{
+    int i;
+    char clean[255];
+    char *n = clean_name(name, strlen(name), clean, sizeof(clean));
+    for (i = 0; mask_names[i].name; i++)
+        if (0==strcmp(n,mask_names[i].name))
+        {
+            yaz_log(LOG_LOGLVL,"returning log bit 0x%x for '%s' %s",
+                    mask_names[i].mask, n, 
+                    strcmp(n,name)?name:"" );
+            return mask_names[i].mask;
+        }
+    yaz_log(LOG_LOGLVL,"returning NO log bit for '%s' %s", n, 
+                    strcmp(n,name)?name:"" );
+    return 0;
+}
+
 int yaz_log_mask_str (const char *str)
 {
     return yaz_log_mask_str_x (str, LOG_DEFAULT_LEVEL);
@@ -259,23 +396,35 @@ int yaz_log_mask_str_x (const char *str, int level)
 {
     const char *p;
     int i;
+    int found;
+    char clean[255] = "";
+    char *n = clean;
 
     while (*str)
     {
+        found = 0;
         for (p = str; *p && *p != ','; p++)
             ;
         if (*str == '-' || isdigit(*str))
+        {
             level = atoi (str);
-        else
+            found = 1;
+        }
+        else 
+        {
+            n = clean_name(str, p-str, clean, sizeof(clean));
             for (i = 0; mask_names[i].name; i++)
-                if (strlen (mask_names[i].name) == (size_t) (p-str) &&
-                    memcmp (mask_names[i].name, str, p-str) == 0)
+                if (0==strcmp (mask_names[i].name,n))
                 {
                     if (mask_names[i].mask)
                         level |= mask_names[i].mask;
                     else
-                        level = 0;
+                        level = 0; /* 'none' clears them all */
+                    found = 1;
                 }
+        }
+        if (!found)
+            level |= define_module_bit(n);
         if (*p == ',')
             p++;
         str = p;