Using yaz_xml_include
[pazpar2-moved-to-github.git] / src / pazpar2_config.c
1 /* This file is part of Pazpar2.
2    Copyright (C) 2006-2010 Index Data
3
4 Pazpar2 is free software; you can redistribute it and/or modify it under
5 the terms of the GNU General Public License as published by the Free
6 Software Foundation; either version 2, or (at your option) any later
7 version.
8
9 Pazpar2 is distributed in the hope that it will be useful, but WITHOUT ANY
10 WARRANTY; without even the implied warranty of MERCHANTABILITY or
11 FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
12 for more details.
13
14 You should have received a copy of the GNU General Public License
15 along with this program; if not, write to the Free Software
16 Foundation, Inc., 51 Franklin St, Fifth Floor, Boston, MA  02110-1301  USA
17
18 */
19
20 #if HAVE_CONFIG_H
21 #include <config.h>
22 #endif
23
24 #include <string.h>
25 #include <assert.h>
26
27 #include <libxml/parser.h>
28 #include <libxml/tree.h>
29
30 #include <yaz/yaz-util.h>
31 #include <yaz/nmem.h>
32 #include <yaz/snprintf.h>
33 #include <yaz/tpath.h>
34 #include <yaz/xml_include.h>
35
36 #include <sys/types.h>
37 #include <sys/stat.h>
38 #if HAVE_UNISTD_H
39 #include <unistd.h>
40 #endif
41 #include "pazpar2_config.h"
42 #include "settings.h"
43 #include "eventl.h"
44 #include "http.h"
45
46 struct conf_config
47 {
48     NMEM nmem; /* for conf_config and servers memory */
49     struct conf_server *servers;
50     WRBUF confdir;
51 };
52
53
54 static char *parse_settings(struct conf_config *config,
55                             NMEM nmem, xmlNode *node);
56
57 static struct conf_targetprofiles *parse_targetprofiles(NMEM nmem,
58                                                         xmlNode *node);
59
60 static void conf_metadata_assign(NMEM nmem, 
61                                  struct conf_metadata * metadata,
62                                  const char *name,
63                                  enum conf_metadata_type type,
64                                  enum conf_metadata_merge merge,
65                                  enum conf_setting_type setting,
66                                  int brief,
67                                  int termlist,
68                                  int rank,
69                                  int sortkey_offset,
70                                  enum conf_metadata_mergekey mt)
71 {
72     assert(nmem && metadata && name);
73     
74     metadata->name = nmem_strdup(nmem, name);
75
76     metadata->type = type;
77
78     // enforcing that type_year is always range_merge
79     if (metadata->type == Metadata_type_year)
80         metadata->merge = Metadata_merge_range;
81     else
82         metadata->merge = merge;    
83
84     metadata->setting = setting;
85     metadata->brief = brief;   
86     metadata->termlist = termlist;
87     metadata->rank = rank;    
88     metadata->sortkey_offset = sortkey_offset;
89     metadata->mergekey = mt;
90 }
91
92
93 static void conf_sortkey_assign(NMEM nmem, 
94                                 struct conf_sortkey * sortkey,
95                                 const char *name,
96                                 enum conf_sortkey_type type)
97 {
98     assert(nmem && sortkey && name);
99     
100     sortkey->name = nmem_strdup(nmem, name);
101     sortkey->type = type;
102 }
103
104
105 static struct conf_service *service_init(struct conf_server *server,
106                                          int num_metadata, int num_sortkeys,
107                                          const char *service_id)
108 {
109     struct conf_service * service = 0;
110     NMEM nmem = nmem_create();
111
112     service = nmem_malloc(nmem, sizeof(struct conf_service));
113     service->ref_count = 1;
114     service->nmem = nmem;
115     service->next = 0;
116     service->settings = 0;
117     service->databases = 0;
118     service->targetprofiles = 0;
119     service->server = server;
120     service->session_timeout = 60; /* default session timeout */
121     service->z3950_session_timeout = 180;
122     service->z3950_operation_timeout = 30;
123
124     service->relevance_pct = 0;
125     service->sort_pct = 0;
126     service->mergekey_pct = 0;
127
128     service->id = service_id ? nmem_strdup(nmem, service_id) : 0;
129     service->num_metadata = num_metadata;
130     service->metadata = 0;
131     if (service->num_metadata)
132       service->metadata 
133           = nmem_malloc(nmem, 
134                         sizeof(struct conf_metadata) * service->num_metadata);
135     service->num_sortkeys = num_sortkeys;
136     service->sortkeys = 0;
137     if (service->num_sortkeys)
138         service->sortkeys 
139             = nmem_malloc(nmem, 
140                           sizeof(struct conf_sortkey) * service->num_sortkeys);
141     service->dictionary = 0;
142     return service; 
143 }
144
145 static struct conf_metadata* conf_service_add_metadata(
146     struct conf_service *service,
147     int field_id,
148     const char *name,
149     enum conf_metadata_type type,
150     enum conf_metadata_merge merge,
151     enum conf_setting_type setting,
152     int brief,
153     int termlist,
154     int rank,
155     int sortkey_offset,
156     enum conf_metadata_mergekey mt)
157 {
158     struct conf_metadata * md = 0;
159
160     if (!service || !service->metadata || !service->num_metadata
161         || field_id < 0  || !(field_id < service->num_metadata))
162         return 0;
163
164     md = service->metadata + field_id;
165     conf_metadata_assign(service->nmem, md, name, type, merge, setting,
166                          brief, termlist, rank, sortkey_offset,
167                          mt);
168     return md;
169 }
170
171
172 static struct conf_sortkey * conf_service_add_sortkey(
173     struct conf_service *service,
174     int field_id,
175     const char *name,
176     enum conf_sortkey_type type)
177 {
178     struct conf_sortkey * sk = 0;
179
180     if (!service || !service->sortkeys || !service->num_sortkeys
181         || field_id < 0  || !(field_id < service->num_sortkeys))
182         return 0;
183
184     //sk = &((service->sortkeys)[field_id]);
185     sk = service->sortkeys + field_id;
186     conf_sortkey_assign(service->nmem, sk, name, type);
187
188     return sk;
189 }
190
191
192 int conf_service_metadata_field_id(struct conf_service *service,
193                                    const char * name)
194 {
195     int i = 0;
196
197     if (!service || !service->metadata || !service->num_metadata)
198         return -1;
199
200     for(i = 0; i < service->num_metadata; i++) {
201         if (!strcmp(name, (service->metadata[i]).name))
202             return i;
203     }
204    
205     return -1;
206 }
207
208
209 int conf_service_sortkey_field_id(struct conf_service *service,
210                                   const char * name)
211 {
212     int i = 0;
213
214     if (!service || !service->sortkeys || !service->num_sortkeys)
215         return -1;
216
217     for(i = 0; i < service->num_sortkeys; i++) {
218         if (!strcmp(name, (service->sortkeys[i]).name))
219             return i;
220     }
221    
222     return -1;
223 }
224
225 static void conf_dir_path(struct conf_config *config, WRBUF w, const char *src)
226 {
227     if (config->confdir && wrbuf_len(config->confdir) > 0 &&
228         !yaz_is_abspath(src))
229     {
230         wrbuf_printf(w, "%s/%s", wrbuf_cstr(config->confdir), src);
231     }
232     else
233         wrbuf_puts(w, src);
234 }
235
236 void service_destroy(struct conf_service *service)
237 {
238     if (service)
239     {
240         assert(service->ref_count > 0);
241         service->ref_count--;
242         if (service->ref_count == 0)
243         {
244             pp2_charset_destroy(service->relevance_pct);
245             pp2_charset_destroy(service->sort_pct);
246             pp2_charset_destroy(service->mergekey_pct);
247             nmem_destroy(service->nmem);
248         }
249     }
250 }
251
252 void service_incref(struct conf_service *service)
253 {
254     service->ref_count++;
255 }
256
257 static int parse_metadata(struct conf_service *service, xmlNode *n,
258                           int *md_node, int *sk_node)
259 {
260     xmlChar *xml_name = xmlGetProp(n, (xmlChar *) "name");
261     xmlChar *xml_brief = xmlGetProp(n, (xmlChar *) "brief");
262     xmlChar *xml_sortkey = xmlGetProp(n, (xmlChar *) "sortkey");
263     xmlChar *xml_merge = xmlGetProp(n, (xmlChar *) "merge");
264     xmlChar *xml_type = xmlGetProp(n, (xmlChar *) "type");
265     xmlChar *xml_termlist = xmlGetProp(n, (xmlChar *) "termlist");
266     xmlChar *xml_rank = xmlGetProp(n, (xmlChar *) "rank");
267     xmlChar *xml_setting = xmlGetProp(n, (xmlChar *) "setting");
268     xmlChar *xml_mergekey = xmlGetProp(n, (xmlChar *) "mergekey");
269     
270     enum conf_metadata_type type = Metadata_type_generic;
271     enum conf_metadata_merge merge = Metadata_merge_no;
272     enum conf_setting_type setting = Metadata_setting_no;
273     enum conf_sortkey_type sk_type = Metadata_sortkey_relevance;
274     enum conf_metadata_mergekey mergekey_type = Metadata_mergekey_no;
275     int brief = 0;
276     int termlist = 0;
277     int rank = 0;
278     int sortkey_offset = 0;
279     
280     // now do the parsing logic
281     if (!xml_name)
282     {
283         yaz_log(YLOG_FATAL, "Must specify name in metadata element");
284         return -1;
285     }
286     if (xml_brief)
287     {
288         if (!strcmp((const char *) xml_brief, "yes"))
289             brief = 1;
290         else if (strcmp((const char *) xml_brief, "no"))
291         {
292             yaz_log(YLOG_FATAL, "metadata/brief must be yes or no");
293             return -1;
294         }
295     }
296     else
297         brief = 0;
298     
299     if (xml_termlist)
300     {
301         if (!strcmp((const char *) xml_termlist, "yes"))
302             termlist = 1;
303         else if (strcmp((const char *) xml_termlist, "no"))
304         {
305             yaz_log(YLOG_FATAL, "metadata/termlist must be yes or no");
306             return -1;
307         }
308     }
309     else
310         termlist = 0;
311     
312     if (xml_rank)
313         rank = atoi((const char *) xml_rank);
314     else
315         rank = 0;
316     
317     if (xml_type)
318     {
319         if (!strcmp((const char *) xml_type, "generic"))
320             type = Metadata_type_generic;
321         else if (!strcmp((const char *) xml_type, "year"))
322             type = Metadata_type_year;
323         else if (!strcmp((const char *) xml_type, "date"))
324             type = Metadata_type_date;
325         else
326         {
327             yaz_log(YLOG_FATAL, 
328                     "Unknown value for metadata/type: %s", xml_type);
329             return -1;
330         }
331     }
332     else
333         type = Metadata_type_generic;
334     
335     if (xml_merge)
336     {
337         if (!strcmp((const char *) xml_merge, "no"))
338             merge = Metadata_merge_no;
339         else if (!strcmp((const char *) xml_merge, "unique"))
340             merge = Metadata_merge_unique;
341         else if (!strcmp((const char *) xml_merge, "longest"))
342             merge = Metadata_merge_longest;
343         else if (!strcmp((const char *) xml_merge, "range"))
344             merge = Metadata_merge_range;
345         else if (!strcmp((const char *) xml_merge, "all"))
346             merge = Metadata_merge_all;
347         else
348         {
349             yaz_log(YLOG_FATAL, 
350                     "Unknown value for metadata/merge: %s", xml_merge);
351             return -1;
352         }
353     }
354     else
355         merge = Metadata_merge_no;
356     
357     if (xml_setting)
358     {
359         if (!strcmp((const char *) xml_setting, "no"))
360             setting = Metadata_setting_no;
361         else if (!strcmp((const char *) xml_setting, "postproc"))
362             setting = Metadata_setting_postproc;
363         else if (!strcmp((const char *) xml_setting, "parameter"))
364             setting = Metadata_setting_parameter;
365         else
366         {
367             yaz_log(YLOG_FATAL,
368                     "Unknown value for medadata/setting: %s", xml_setting);
369             return -1;
370         }
371     }
372     
373     // add a sortkey if so specified
374     if (xml_sortkey && strcmp((const char *) xml_sortkey, "no"))
375     {
376         if (merge == Metadata_merge_no)
377         {
378             yaz_log(YLOG_FATAL, 
379                     "Can't specify sortkey on a non-merged field");
380             return -1;
381         }
382         if (!strcmp((const char *) xml_sortkey, "numeric"))
383             sk_type = Metadata_sortkey_numeric;
384         else if (!strcmp((const char *) xml_sortkey, "skiparticle"))
385             sk_type = Metadata_sortkey_skiparticle;
386         else
387         {
388             yaz_log(YLOG_FATAL,
389                     "Unknown sortkey in metadata element: %s", 
390                     xml_sortkey);
391             return -1;
392         }
393         sortkey_offset = *sk_node;
394         
395         conf_service_add_sortkey(service, *sk_node,
396                                  (const char *) xml_name, sk_type);
397         
398         (*sk_node)++;
399     }
400     else
401         sortkey_offset = -1;
402     
403     if (xml_mergekey)
404     {
405         if (!strcmp((const char *) xml_mergekey, "required"))
406             mergekey_type = Metadata_mergekey_required;
407         else if (!strcmp((const char *) xml_mergekey, "optional"))
408             mergekey_type = Metadata_mergekey_optional;
409         else if (!strcmp((const char *) xml_mergekey, "no"))
410             mergekey_type = Metadata_mergekey_no;
411         else
412         {
413             yaz_log(YLOG_FATAL, "Unknown value for mergekey: %s", xml_mergekey);
414             return -1;
415         }
416     }
417     
418     
419     // metadata known, assign values
420     conf_service_add_metadata(service, *md_node,
421                               (const char *) xml_name,
422                               type, merge, setting,
423                               brief, termlist, rank, sortkey_offset,
424                               mergekey_type);
425     
426     xmlFree(xml_name);
427     xmlFree(xml_brief);
428     xmlFree(xml_sortkey);
429     xmlFree(xml_merge);
430     xmlFree(xml_type);
431     xmlFree(xml_termlist);
432     xmlFree(xml_rank);
433     xmlFree(xml_setting);
434     xmlFree(xml_mergekey);
435     (*md_node)++;
436     return 0;
437 }
438
439 static struct conf_service *service_create_static(struct conf_server *server,
440                                                   xmlNode *node,
441                                                   const char *service_id)
442 {
443     xmlNode *n;
444     int md_node = 0;
445     int sk_node = 0;
446
447     struct conf_service *service = 0;
448     int num_metadata = 0;
449     int num_sortkeys = 0;
450     int got_settings = 0;
451     
452     // count num_metadata and num_sortkeys
453     for (n = node->children; n; n = n->next)
454         if (n->type == XML_ELEMENT_NODE && !strcmp((const char *)
455                                                    n->name, "metadata"))
456         {
457             xmlChar *sortkey = xmlGetProp(n, (xmlChar *) "sortkey");
458             num_metadata++;
459             if (sortkey && strcmp((const char *) sortkey, "no"))
460                 num_sortkeys++;
461             xmlFree(sortkey);
462         }
463
464     service = service_init(server, num_metadata, num_sortkeys, service_id);
465
466     for (n = node->children; n; n = n->next)
467     {
468         if (n->type != XML_ELEMENT_NODE)
469             continue;
470         if (!strcmp((const char *) n->name, "timeout"))
471         {
472             xmlChar *src = xmlGetProp(n, (xmlChar *) "session");
473             if (src)
474             {
475                 service->session_timeout = atoi((const char *) src);
476                 xmlFree(src);
477                 if (service->session_timeout < 9)
478                 {
479                     yaz_log(YLOG_FATAL, "session timeout out of range");
480                     return 0;
481                 }
482             }
483             src = xmlGetProp(n, (xmlChar *) "z3950_operation");
484             if (src)
485             {
486                 service->z3950_operation_timeout = atoi((const char *) src);
487                 xmlFree(src);
488                 if (service->z3950_session_timeout < 9)
489                 {
490                     yaz_log(YLOG_FATAL, "Z39.50 operation timeout out of range");
491                     return 0;
492                 }
493             }
494             src = xmlGetProp(n, (xmlChar *) "z3950_session");
495             if (src)
496             {
497                 service->z3950_session_timeout = atoi((const char *) src);
498                 xmlFree(src);
499                 if (service->z3950_session_timeout < 9)
500                 {
501                     yaz_log(YLOG_FATAL, "Z39.50 session timeout out of range");
502                     return 0;
503                 }
504             }
505         }
506         else if (!strcmp((const char *) n->name, "settings"))
507             got_settings++;
508         else if (!strcmp((const char *) n->name, (const char *) "targetprofiles"))
509         {
510             if (service->targetprofiles)
511             {
512                 yaz_log(YLOG_FATAL, "Can't repeat targetprofiles");
513                 return 0;
514             }
515             if (!(service->targetprofiles = 
516                   parse_targetprofiles(service->nmem, n)))
517                 return 0;
518         }
519         else if (!strcmp((const char *) n->name, "relevance"))
520         {
521             if (service->relevance_pct)
522             {
523                 yaz_log(YLOG_LOG, "relevance may not repeat in service");
524                 return 0;
525             }
526             else
527             {
528                 service->relevance_pct = pp2_charset_create_xml(n);
529                 if (!service->relevance_pct)
530                     return 0;
531             }
532         }
533         else if (!strcmp((const char *) n->name, "sort"))
534         {
535             if (service->sort_pct)
536             {
537                 yaz_log(YLOG_LOG, "sort may not repeat in service");
538                 return 0;
539             }
540             else
541             {
542                 service->sort_pct = pp2_charset_create_xml(n);
543                 if (!service->sort_pct)
544                     return 0;
545             }
546         }
547         else if (!strcmp((const char *) n->name, "mergekey"))
548         {
549             if (service->mergekey_pct)
550             {
551                 yaz_log(YLOG_LOG, "mergekey may not repeat in service");
552                 return 0;
553             }
554             else
555             {
556                 service->mergekey_pct = pp2_charset_create_xml(n);
557                 if (!service->mergekey_pct)
558                     return 0;
559             }
560         }
561         else if (!strcmp((const char *) n->name, (const char *) "metadata"))
562         {
563             if (parse_metadata(service, n, &md_node, &sk_node))
564                 return 0;
565         }
566         else
567         {
568             yaz_log(YLOG_FATAL, "Bad element: %s", n->name);
569             return 0;
570         }
571     }
572     if (got_settings)
573     {
574         int pass;
575         /* metadata has been read.. Consider now settings */
576         init_settings(service);
577         for (pass = 1; pass <= 2; pass++)
578         {
579             for (n = node->children; n; n = n->next)
580             {
581                 if (n->type != XML_ELEMENT_NODE)
582                     continue;
583                 if (!strcmp((const char *) n->name, "settings"))
584                 {
585                     xmlChar *src = xmlGetProp(n, (xmlChar *) "src");
586                     if (src)
587                     {
588                         WRBUF w = wrbuf_alloc();
589                         conf_dir_path(server->config, w, (const char *) src);
590                         settings_read_file(service, wrbuf_cstr(w), pass);
591                         wrbuf_destroy(w);
592                         xmlFree(src);
593                     }
594                     else
595                     {
596                         settings_read_node(service, n, pass);
597                     }
598                 }
599             }
600         }
601     }
602     return service;
603 }
604
605 static char *parse_settings(struct conf_config *config,
606                             NMEM nmem, xmlNode *node)
607 {
608     xmlChar *src = xmlGetProp(node, (xmlChar *) "src");
609     char *r;
610
611     if (src)
612     {
613         WRBUF w = wrbuf_alloc();
614         conf_dir_path(config, w, (const char *) src);
615         r = nmem_strdup(nmem, wrbuf_cstr(w));
616         wrbuf_destroy(w);
617     }
618     else
619     {
620         yaz_log(YLOG_FATAL, "Must specify src in targetprofile");
621         return 0;
622     }
623     xmlFree(src);
624     return r;
625 }
626
627 static void inherit_server_settings(struct conf_service *s)
628 {
629     struct conf_server *server = s->server;
630     if (!s->dictionary) /* service has no config settings ? */
631     {
632         if (server->server_settings)
633         {
634             /* inherit settings from server */
635             init_settings(s);
636             settings_read_file(s, server->server_settings, 1);
637             settings_read_file(s, server->server_settings, 2);
638         }
639         else
640         {
641             yaz_log(YLOG_WARN, "service '%s' has no settings",
642                     s->id ? s->id : "unnamed");
643             init_settings(s);
644         }
645     }
646     
647     /* use relevance/sort/mergekey from server if not defined
648        for this service.. */
649     if (!s->relevance_pct)
650     {
651         if (server->relevance_pct)
652         {
653             s->relevance_pct = server->relevance_pct;
654             pp2_charset_incref(s->relevance_pct);
655         }
656         else
657             s->relevance_pct = pp2_charset_create(0);
658     }
659     
660     if (!s->sort_pct)
661     {
662         if (server->sort_pct)
663         {
664             s->sort_pct = server->sort_pct;
665             pp2_charset_incref(s->sort_pct);
666         }
667         else
668             s->sort_pct = pp2_charset_create(0);
669     }
670     
671     if (!s->mergekey_pct)
672     {
673         if (server->mergekey_pct)
674         {
675             s->mergekey_pct = server->mergekey_pct;
676             pp2_charset_incref(s->mergekey_pct);
677         }
678         else
679             s->mergekey_pct = pp2_charset_create(0);
680     }
681 }
682
683 struct conf_service *service_create(struct conf_server *server,
684                                     xmlNode *node)
685 {
686     struct conf_service *service = service_create_static(server,
687                                                          node, 0);
688     if (service)
689     {
690         inherit_server_settings(service);
691         resolve_databases(service);
692     }
693     return service;
694 }
695
696 static struct conf_server *server_create(struct conf_config *config,
697                                          NMEM nmem, xmlNode *node)
698 {
699     xmlNode *n;
700     struct conf_server *server = nmem_malloc(nmem, sizeof(struct conf_server));
701     xmlChar *server_id = xmlGetProp(node, (xmlChar *) "id");
702
703     server->host = 0;
704     server->port = 0;
705     server->proxy_host = 0;
706     server->proxy_port = 0;
707     server->myurl = 0;
708     server->proxy_addr = 0;
709     server->service = 0;
710     server->config = config;
711     server->next = 0;
712     server->relevance_pct = 0;
713     server->sort_pct = 0;
714     server->mergekey_pct = 0;
715     server->server_settings = 0;
716
717     if (server_id)
718     {
719         server->server_id = nmem_strdup(nmem, (const char *)server_id);
720         xmlFree(server_id);
721     }
722     else
723         server->server_id = 0;
724     for (n = node->children; n; n = n->next)
725     {
726         if (n->type != XML_ELEMENT_NODE)
727             continue;
728         if (!strcmp((const char *) n->name, "listen"))
729         {
730             xmlChar *port = xmlGetProp(n, (xmlChar *) "port");
731             xmlChar *host = xmlGetProp(n, (xmlChar *) "host");
732             if (port)
733                 server->port = atoi((const char *) port);
734             if (host)
735                 server->host = nmem_strdup(nmem, (const char *) host);
736             xmlFree(port);
737             xmlFree(host);
738         }
739         else if (!strcmp((const char *) n->name, "proxy"))
740         {
741             xmlChar *port = xmlGetProp(n, (xmlChar *) "port");
742             xmlChar *host = xmlGetProp(n, (xmlChar *) "host");
743             xmlChar *myurl = xmlGetProp(n, (xmlChar *) "myurl");
744             if (port)
745                 server->proxy_port = atoi((const char *) port);
746             if (host)
747                 server->proxy_host = nmem_strdup(nmem, (const char *) host);
748             if (myurl)
749                 server->myurl = nmem_strdup(nmem, (const char *) myurl);
750             xmlFree(port);
751             xmlFree(host);
752             xmlFree(myurl);
753         }
754         else if (!strcmp((const char *) n->name, "settings"))
755         {
756             if (server->server_settings)
757             {
758                 yaz_log(YLOG_FATAL, "Can't repeat 'settings'");
759                 return 0;
760             }
761             if (!(server->server_settings = parse_settings(config, nmem, n)))
762                 return 0;
763         }
764         else if (!strcmp((const char *) n->name, "relevance"))
765         {
766             server->relevance_pct = pp2_charset_create_xml(n);
767             if (!server->relevance_pct)
768                 return 0;
769         }
770         else if (!strcmp((const char *) n->name, "sort"))
771         {
772             server->sort_pct = pp2_charset_create_xml(n);
773             if (!server->sort_pct)
774                 return 0;
775         }
776         else if (!strcmp((const char *) n->name, "mergekey"))
777         {
778             server->mergekey_pct = pp2_charset_create_xml(n);
779             if (!server->mergekey_pct)
780                 return 0;
781         }
782         else if (!strcmp((const char *) n->name, "service"))
783         {
784             char *service_id = (char *)
785                 xmlGetProp(n, (xmlChar *) "id");
786
787             struct conf_service **sp = &server->service;
788             for (; *sp; sp = &(*sp)->next)
789                 if ((*sp)->id && service_id &&
790                     0 == strcmp((*sp)->id, service_id))
791                 {
792                     yaz_log(YLOG_FATAL, "Duplicate service: %s", service_id);
793                     break;
794                 }
795                 else if (!(*sp)->id && !service_id)
796                 {
797                     yaz_log(YLOG_FATAL, "Duplicate unnamed service");
798                     break;
799                 }
800
801             if (*sp)  /* service already exist */
802             {
803                 xmlFree(service_id);
804                 return 0;
805             }
806             else
807             {
808                 struct conf_service *s = service_create_static(server, n,
809                                                                service_id);
810                 xmlFree(service_id);
811                 if (!s)
812                     return 0;
813                 *sp = s;
814             }
815         }
816         else
817         {
818             yaz_log(YLOG_FATAL, "Bad element: %s", n->name);
819             return 0;
820         }
821     }
822     if (server->service)
823     {
824         struct conf_service *s;
825         for (s = server->service; s; s = s->next)
826             inherit_server_settings(s);
827     }
828     return server;
829 }
830
831 WRBUF conf_get_fname(struct conf_service *service, const char *fname)
832 {
833     struct conf_config *config = service->server->config;
834     WRBUF w = wrbuf_alloc();
835
836     conf_dir_path(config, w, fname);
837     return w;
838 }
839
840 static struct conf_targetprofiles *parse_targetprofiles(NMEM nmem,
841                                                         xmlNode *node)
842 {
843     struct conf_targetprofiles *r = nmem_malloc(nmem, sizeof(*r));
844     xmlChar *type = xmlGetProp(node, (xmlChar *) "type");
845     xmlChar *src = xmlGetProp(node, (xmlChar *) "src");
846
847     memset(r, 0, sizeof(*r));
848
849     if (type)
850     {
851         if (!strcmp((const char *) type, "local"))
852             r->type = Targetprofiles_local;
853         else
854         {
855             yaz_log(YLOG_FATAL, "Unknown targetprofile type");
856             return 0;
857         }
858     }
859     else
860     {
861         yaz_log(YLOG_FATAL, "Must specify type for targetprofile");
862         return 0;
863     }
864
865     if (src)
866         r->src = nmem_strdup(nmem, (const char *) src);
867     else
868     {
869         yaz_log(YLOG_FATAL, "Must specify src in targetprofile");
870         return 0;
871     }
872     xmlFree(type);
873     xmlFree(src);
874     return r;
875 }
876
877 struct conf_service *locate_service(struct conf_server *server,
878                                     const char *service_id)
879 {
880     struct conf_service *s = server->service;
881     for (; s; s = s->next)
882         if (s->id && service_id && 0 == strcmp(s->id, service_id))
883             return s;
884         else if (!s->id && !service_id)
885             return s;
886     return 0;
887 }
888
889
890 static int parse_config(struct conf_config *config, xmlNode *root)
891 {
892     xmlNode *n;
893
894     for (n = root->children; n; n = n->next)
895     {
896         if (n->type != XML_ELEMENT_NODE)
897             continue;
898         if (!strcmp((const char *) n->name, "server"))
899         {
900             struct conf_server *tmp = server_create(config, config->nmem, n);
901             if (!tmp)
902                 return -1;
903             tmp->next = config->servers;
904             config->servers = tmp;
905         }
906         else if (!strcmp((const char *) n->name, "targetprofiles"))
907         {
908             yaz_log(YLOG_FATAL, "targetprofiles unsupported here. Must be part of service");
909             return -1;
910
911         }
912         else
913         {
914             yaz_log(YLOG_FATAL, "Bad element: %s", n->name);
915             return -1;
916         }
917     }
918     return 0;
919 }
920
921 struct conf_config *config_create(const char *fname, int verbose)
922 {
923     xmlDoc *doc = xmlParseFile(fname);
924     xmlNode *n;
925     const char *p;
926     int r;
927     NMEM nmem = nmem_create();
928     struct conf_config *config = nmem_malloc(nmem, sizeof(struct conf_config));
929
930     xmlSubstituteEntitiesDefault(1);
931     xmlLoadExtDtdDefaultValue = 1;
932     if (!doc)
933     {
934         yaz_log(YLOG_FATAL, "Failed to read %s", fname);
935         nmem_destroy(nmem);
936         return 0;
937     }
938
939     config->nmem = nmem;
940     config->servers = 0;
941
942     config->confdir = wrbuf_alloc();
943     if ((p = strrchr(fname, 
944 #ifdef WIN32
945                      '\\'
946 #else
947                      '/'
948 #endif
949              )))
950     {
951         int len = p - fname;
952         wrbuf_write(config->confdir, fname, len);
953     }
954     wrbuf_puts(config->confdir, "");
955     
956     n = xmlDocGetRootElement(doc);
957     r = yaz_xml_include_simple(n, wrbuf_cstr(config->confdir));
958     if (r == 0) /* OK */
959     {
960         if (verbose)
961         {
962             yaz_log(YLOG_LOG, "Configuration %s after include processing",
963                     fname);
964 #if LIBXML_VERSION >= 20600
965             xmlDocFormatDump(yaz_log_file(), doc, 0);
966 #else
967             xmlDocDump(yaz_log_file(), doc);
968 #endif
969         }
970         r = parse_config(config, n);
971     }
972     xmlFreeDoc(doc);
973
974     if (r)
975     {
976         config_destroy(config);
977         return 0;
978     }
979     return config;
980 }
981
982 void server_destroy(struct conf_server *server)
983 {
984     struct conf_service *s = server->service;
985     while (s)
986     {
987         struct conf_service *s_next = s->next;
988         service_destroy(s);
989         s = s_next;
990     }
991     pp2_charset_destroy(server->relevance_pct);
992     pp2_charset_destroy(server->sort_pct);
993     pp2_charset_destroy(server->mergekey_pct);
994 }
995
996 void config_destroy(struct conf_config *config)
997 {
998     if (config)
999     {
1000         struct conf_server *server = config->servers;
1001         while (server)
1002         {
1003             struct conf_server *s_next = server->next;
1004             server_destroy(server);
1005             server = s_next;
1006         }
1007         wrbuf_destroy(config->confdir);
1008         nmem_destroy(config->nmem);
1009     }
1010 }
1011
1012 void config_stop_listeners(struct conf_config *conf)
1013 {
1014     struct conf_server *ser;
1015     for (ser = conf->servers; ser; ser = ser->next)
1016         http_close_server(ser);
1017 }
1018
1019 void config_start_databases(struct conf_config *conf)
1020 {
1021     struct conf_server *ser;
1022     for (ser = conf->servers; ser; ser = ser->next)
1023     {
1024         struct conf_service *s = ser->service;
1025         for (;s ; s = s->next)
1026             resolve_databases(s);
1027     }
1028 }
1029
1030 int config_start_listeners(struct conf_config *conf,
1031                            const char *listener_override)
1032 {
1033     struct conf_server *ser;
1034     for (ser = conf->servers; ser; ser = ser->next)
1035     {
1036         WRBUF w = wrbuf_alloc();
1037         int r;
1038         if (listener_override)
1039         {
1040             wrbuf_puts(w, listener_override);
1041             listener_override = 0; /* only first server is overriden */
1042         }
1043         else
1044         {
1045             if (ser->host)
1046                 wrbuf_puts(w, ser->host);
1047             if (ser->port)
1048             {
1049                 if (wrbuf_len(w))
1050                     wrbuf_puts(w, ":");
1051                 wrbuf_printf(w, "%d", ser->port);
1052             }
1053         }
1054         r = http_init(wrbuf_cstr(w), ser);
1055         wrbuf_destroy(w);
1056         if (r)
1057             return -1;
1058
1059         w = wrbuf_alloc();
1060         if (ser->proxy_host || ser->proxy_port)
1061         {
1062             if (ser->proxy_host)
1063                 wrbuf_puts(w, ser->proxy_host);
1064             if (ser->proxy_port)
1065             {
1066                 if (wrbuf_len(w))
1067                     wrbuf_puts(w, ":");
1068                 wrbuf_printf(w, "%d", ser->proxy_port);
1069             }
1070         }
1071         if (wrbuf_len(w))
1072             http_set_proxyaddr(wrbuf_cstr(w), ser);
1073         wrbuf_destroy(w);
1074     }
1075     return 0;
1076 }
1077
1078 /*
1079  * Local variables:
1080  * c-basic-offset: 4
1081  * c-file-style: "Stroustrup"
1082  * indent-tabs-mode: nil
1083  * End:
1084  * vim: shiftwidth=4 tabstop=8 expandtab
1085  */
1086