Refactor stuff from logic.c: connection stuff in connection.[ch],
[pazpar2-moved-to-github.git] / src / database.c
1 /* $Id: database.c,v 1.25 2007-04-23 21:05:23 adam Exp $
2    Copyright (c) 2006-2007, Index Data.
3
4 This file is part of Pazpar2.
5
6 Pazpar2 is free software; you can redistribute it and/or modify it under
7 the terms of the GNU General Public License as published by the Free
8 Software Foundation; either version 2, or (at your option) any later
9 version.
10
11 Pazpar2 is distributed in the hope that it will be useful, but WITHOUT ANY
12 WARRANTY; without even the implied warranty of MERCHANTABILITY or
13 FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
14 for more details.
15
16 You should have received a copy of the GNU General Public License
17 along with Pazpar2; see the file LICENSE.  If not, write to the
18 Free Software Foundation, 59 Temple Place - Suite 330, Boston, MA
19 02111-1307, USA.
20  */
21
22 #include <libxml/parser.h>
23 #include <libxml/tree.h>
24 #include <libxslt/xslt.h>
25 #include <libxslt/transform.h>
26 #include <libxslt/xsltutils.h>
27 #include <assert.h>
28 #include <sys/types.h>
29 #include <sys/stat.h>
30
31 #include "pazpar2.h"
32 #include "host.h"
33 #include "config.h"
34 #include "settings.h"
35 #include "http.h"
36 #include "zeerex.h"
37
38 #include <sys/types.h>
39 #include <sys/socket.h>
40 #include <netdb.h>
41 #include <netinet/in.h>
42
43 static struct host *hosts = 0;  // The hosts we know about 
44 static struct database *databases = 0; // The databases we know about
45 static NMEM nmem = 0;
46
47 static xmlDoc *get_explain_xml(const char *id)
48 {
49     struct stat st;
50     char *dir;
51     char path[256];
52     char ide[256];
53     if (!config || !config->targetprofiles)
54     {
55         yaz_log(YLOG_WARN, "Config must be loaded and specify targetprofiles");
56         return 0;
57     }
58     if (config->targetprofiles->type != Targetprofiles_local)
59     {
60         yaz_log(YLOG_FATAL, "Only supports local type");
61         return 0;
62     }
63     dir = config->targetprofiles->src;
64     urlencode(id, ide);
65     sprintf(path, "%s/%s", dir, ide);
66     if (!stat(path, &st))
67         return xmlParseFile(path);
68     else
69         return 0;
70 }
71
72 // Create a new host structure for hostport
73 static struct host *create_host(const char *hostport)
74 {
75     struct host *host;
76
77     host = xmalloc(sizeof(struct host));
78     host->hostport = xstrdup(hostport);
79     host->connections = 0;
80     host->ipport = 0;
81
82     if (host_getaddrinfo(host))
83     {
84         xfree(host->hostport);
85         xfree(host);
86         return 0;
87     }
88     host->next = hosts;
89     hosts = host;
90     return host;
91 }
92
93 static struct host *find_host(const char *hostport)
94 {
95     struct host *p;
96     for (p = hosts; p; p = p->next)
97         if (!strcmp(p->hostport, hostport))
98             return p;
99     return create_host(hostport);
100 }
101
102 static struct database *load_database(const char *id)
103 {
104     xmlDoc *doc = 0;
105     struct zr_explain *explain = 0;
106     struct database *db;
107     struct host *host;
108     char hostport[256];
109     char *dbname;
110
111     yaz_log(YLOG_LOG, "New database: %s", id);
112     if (!nmem)
113         nmem = nmem_create();
114
115     if (config && config->targetprofiles 
116         && (doc = get_explain_xml(id)))
117     {
118         explain = zr_read_xml(nmem, xmlDocGetRootElement(doc));
119         if (!explain)
120             return 0;
121     }
122
123     if (strlen(id) > 255)
124         return 0;
125     strcpy(hostport, id);
126     if ((dbname = strchr(hostport, '/')))
127         *(dbname++) = '\0';
128     else
129         dbname = "Default";
130     if (!(host = find_host(hostport)))
131         return 0;
132     db = nmem_malloc(nmem, sizeof(*db));
133     memset(db, 0, sizeof(*db));
134     db->host = host;
135     db->url = nmem_strdup(nmem, id);
136     db->databases = xmalloc(2 * sizeof(char *));
137     db->databases[0] = nmem_strdup(nmem, dbname);
138     db->databases[1] = 0;
139     db->errors = 0;
140     db->explain = explain;
141     db->settings = 0;
142     db->next = databases;
143     databases = db;
144
145     return db;
146 }
147
148 // Return a database structure by ID. Load and add to list if necessary
149 // new==1 just means we know it's not in the list
150 struct database *find_database(const char *id, int new)
151 {
152     struct database *p;
153     if (!new)
154     {
155         for (p = databases; p; p = p->next)
156             if (!strcmp(p->url, id))
157                 return p;
158     }
159     return load_database(id);
160 }
161
162 // This whole session_grep database thing should be moved elsewhere
163
164 int match_zurl(const char *zurl, const char *pattern)
165 {
166     if (!strcmp(pattern, "*"))
167         return 1;
168     else if (!strncmp(pattern, "*/", 2))
169     {
170         char *db = strchr(zurl, '/');
171         if (!db)
172             return 0;
173         if (!strcmp(pattern + 2, db))
174             return 1;
175         else
176             return 0;
177     }
178     else if (!strcmp(pattern, zurl))
179         return 1;
180     else
181         return 0;
182 }
183
184 // This will be generalized at some point
185 static int match_criterion(struct setting **settings, struct database_criterion *c)
186 {
187     int offset = settings_offset(c->name);
188     struct database_criterion_value *v;
189
190     if (offset < 0)
191     {
192         yaz_log(YLOG_WARN, "Criterion not found: %s", c->name);
193         return 0;
194     }
195     if (!settings[offset])
196         return 0;
197     for (v = c->values; v; v = v->next)
198     {
199         if (offset == PZ_ID)
200         {
201             if (match_zurl(settings[offset]->value, v->value))
202                 break;
203         }
204         else 
205         {
206             if (!strcmp(settings[offset]->value, v->value))
207                 break;
208         }
209     }
210     if (v)
211         return 1;
212     else
213         return 0;
214 }
215
216 int database_match_criteria(struct setting **settings, struct database_criterion *cl)
217 {
218     for (; cl; cl = cl->next)
219         if (!match_criterion(settings, cl))
220             break;
221     if (cl) // one of the criteria failed to match -- skip this db
222         return 0;
223     else
224         return 1;
225 }
226
227 // Cycles through databases, calling a handler function on the ones for
228 // which all criteria matched.
229 int session_grep_databases(struct session *se, struct database_criterion *cl,
230         void (*fun)(void *context, struct session_database *db))
231 {
232     struct session_database *p;
233     int i = 0;
234
235     for (p = se->databases; p; p = p->next)
236     {
237         if (p->settings && p->settings[PZ_ALLOW] && *p->settings[PZ_ALLOW]->value == '0')
238             continue;
239         if (database_match_criteria(p->settings, cl))
240         {
241             (*fun)(se, p);
242             i++;
243         }
244     }
245     return i;
246 }
247
248 int grep_databases(void *context, struct database_criterion *cl,
249         void (*fun)(void *context, struct database *db))
250 {
251     struct database *p;
252     int i = 0;
253
254     for (p = databases; p; p = p->next)
255         if (database_match_criteria(p->settings, cl))
256         {
257             (*fun)(context, p);
258             i++;
259         }
260     return i;
261 }
262
263 /*
264  * Local variables:
265  * c-basic-offset: 4
266  * indent-tabs-mode: nil
267  * End:
268  * vim: shiftwidth=4 tabstop=8 expandtab
269  */