data1/d1_absyn.c

   1 /* $Id: d1_absyn.c,v 1.11 2004-08-24 14:29:09 adam Exp $
   2    Copyright (C) 1995,1996,1997,1998,1999,2000,2001,2002,2003,2004
   3    Index Data Aps
   4
   5 This file is part of the Zebra server.
   6
   7 Zebra is free software; you can redistribute it and/or modify it under
   8 the terms of the GNU General Public License as published by the Free
   9 Software Foundation; either version 2, or (at your option) any later
  10 version.
  11
  12 Zebra is distributed in the hope that it will be useful, but WITHOUT ANY
  13 WARRANTY; without even the implied warranty of MERCHANTABILITY or
  14 FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
  15 for more details.
  16
  17 You should have received a copy of the GNU General Public License
  18 along with Zebra; see the file LICENSE.zebra.  If not, write to the
  19 Free Software Foundation, 59 Temple Place - Suite 330, Boston, MA
  20 02111-1307, USA.
  21 */
  22
  23 #include <stdio.h>
  24 #include <assert.h>
  25 #include <stdlib.h>
  26 #include <string.h>
  27
  28 #include <yaz/oid.h>
  29 #include <yaz/log.h>
  30 #include <data1.h>
  31 #include <zebra_xpath.h>
  32
  33 #define D1_MAX_NESTING  128
  34
  35 struct data1_systag {
  36     char *name;
  37     char *value;
  38     struct data1_systag *next;
  39 };
  40
  41 struct data1_absyn_cache_info
  42 {
  43     char *name;
  44     data1_absyn *absyn;
  45     data1_absyn_cache next;
  46 };
  47
  48 struct data1_attset_cache_info
  49 {
  50     char *name;
  51     data1_attset *attset;
  52     data1_attset_cache next;
  53 };
  54
  55 data1_absyn *data1_absyn_search (data1_handle dh, const char *name)
  56 {
  57     data1_absyn_cache p = *data1_absyn_cache_get (dh);
  58
  59     while (p)
  60     {
  61         if (!yaz_matchstr (name, p->name))
  62             return p->absyn;
  63         p = p->next;
  64     }
  65     return NULL;
  66 }
  67 /* *ostrich*
  68    We need to destroy DFAs, in xp_element (xelm) definitions
  69    pop, 2002-12-13
  70 */
  71
  72 void data1_absyn_destroy (data1_handle dh)
  73 {
  74     data1_absyn_cache p = *data1_absyn_cache_get (dh);
  75
  76     while (p)
  77     {
  78         data1_absyn *abs = p->absyn;
  79         if (abs)
  80         {
  81             data1_xpelement *xpe = abs->xp_elements;
  82             while (xpe) {
  83                 logf (LOG_DEBUG,"Destroy xp element %s",xpe->xpath_expr);
  84                 if (xpe->dfa) {  dfa_delete (&xpe->dfa); }
  85                 xpe = xpe->next;
  86             }
  87         }
  88         p = p->next;
  89     }
  90 }
  91
  92
  93 void data1_absyn_trav (data1_handle dh, void *handle,
  94                        void (*fh)(data1_handle dh, void *h, data1_absyn *a))
  95 {
  96     data1_absyn_cache p = *data1_absyn_cache_get (dh);
  97
  98     while (p)
  99     {
 100         (*fh)(dh, handle, p->absyn);
 101         p = p->next;
 102     }
 103 }
 104
 105 data1_absyn *data1_absyn_add (data1_handle dh, const char *name)
 106 {
 107     char fname[512];
 108     NMEM mem = data1_nmem_get (dh);
 109
 110     data1_absyn_cache p = (data1_absyn_cache)nmem_malloc (mem, sizeof(*p));
 111     data1_absyn_cache *pp = data1_absyn_cache_get (dh);
 112
 113     sprintf(fname, "%s.abs", name);
 114     p->absyn = data1_read_absyn (dh, fname, 0);
 115     p->name = nmem_strdup (mem, name);
 116     p->next = *pp;
 117     *pp = p;
 118     return p->absyn;
 119 }
 120
 121 data1_absyn *data1_get_absyn (data1_handle dh, const char *name)
 122 {
 123     data1_absyn *absyn;
 124
 125     if (!(absyn = data1_absyn_search (dh, name)))
 126         absyn = data1_absyn_add (dh, name);
 127     return absyn;
 128 }
 129
 130 data1_attset *data1_attset_search_name (data1_handle dh, const char *name)
 131 {
 132     data1_attset_cache p = *data1_attset_cache_get (dh);
 133
 134     while (p)
 135     {
 136         if (!yaz_matchstr (name, p->name))
 137             return p->attset;
 138         p = p->next;
 139     }
 140     return NULL;
 141 }
 142
 143 data1_attset *data1_attset_search_id (data1_handle dh, int id)
 144 {
 145     data1_attset_cache p = *data1_attset_cache_get (dh);
 146
 147     while (p)
 148     {
 149         if (id == p->attset->reference)
 150             return p->attset;
 151         p = p->next;
 152     }
 153     return NULL;
 154 }
 155
 156 data1_attset *data1_attset_add (data1_handle dh, const char *name)
 157 {
 158     char fname[512], aname[512];
 159     NMEM mem = data1_nmem_get (dh);
 160     data1_attset *attset;
 161
 162     strcpy (aname, name);
 163     sprintf(fname, "%s.att", name);
 164     attset = data1_read_attset (dh, fname);
 165     if (!attset)
 166     {
 167         char *cp;
 168         attset = data1_read_attset (dh, name);
 169         if (attset && (cp = strrchr (aname, '.')))
 170             *cp = '\0';
 171     }
 172     if (!attset)
 173         yaz_log (LOG_WARN|LOG_ERRNO, "Couldn't load attribute set %s", name);
 174     else
 175     {
 176         data1_attset_cache p = (data1_attset_cache)
 177             nmem_malloc (mem, sizeof(*p));
 178         data1_attset_cache *pp = data1_attset_cache_get (dh);
 179
 180         attset->name = p->name = nmem_strdup (mem, aname);
 181         p->attset = attset;
 182         p->next = *pp;
 183         *pp = p;
 184     }
 185     return attset;
 186 }
 187
 188 data1_attset *data1_get_attset (data1_handle dh, const char *name)
 189 {
 190     data1_attset *attset;
 191
 192     if (!(attset = data1_attset_search_name (dh, name)))
 193         attset = data1_attset_add (dh, name);
 194     return attset;
 195 }
 196
 197 data1_esetname *data1_getesetbyname(data1_handle dh, data1_absyn *a,
 198                                     const char *name)
 199 {
 200     data1_esetname *r;
 201
 202     for (r = a->esetnames; r; r = r->next)
 203         if (!data1_matchstr(r->name, name))
 204             return r;
 205     return 0;
 206 }
 207
 208 data1_element *data1_getelementbytagname (data1_handle dh, data1_absyn *abs,
 209                                           data1_element *parent,
 210                                           const char *tagname)
 211 {
 212     data1_element *r;
 213
 214     /* It's now possible to have a data1 tree with no abstract syntax */
 215     if ( !abs )
 216         return 0;
 217
 218     if (!parent)
 219         r = abs->main_elements;
 220     else
 221         r = parent->children;
 222
 223     for (; r; r = r->next)
 224     {
 225         data1_name *n;
 226
 227         for (n = r->tag->names; n; n = n->next)
 228             if (!data1_matchstr(tagname, n->name))
 229                 return r;
 230     }
 231     return 0;
 232 }
 233
 234 data1_element *data1_getelementbyname (data1_handle dh, data1_absyn *absyn,
 235                                        const char *name)
 236 {
 237     data1_element *r;
 238
 239     /* It's now possible to have a data1 tree with no abstract syntax */
 240     if ( !absyn )
 241         return 0;
 242     for (r = absyn->main_elements; r; r = r->next)
 243         if (!data1_matchstr(r->name, name))
 244             return r;
 245     return 0;
 246 }
 247
 248
 249 void fix_element_ref (data1_handle dh, data1_absyn *absyn, data1_element *e)
 250 {
 251     /* It's now possible to have a data1 tree with no abstract syntax */
 252     if ( !absyn )
 253         return;
 254
 255     for (; e; e = e->next)
 256     {
 257         if (!e->sub_name)
 258         {
 259             if (e->children)
 260                 fix_element_ref (dh, absyn, e->children);
 261         }
 262         else
 263         {
 264             data1_sub_elements *sub_e = absyn->sub_elements;
 265             while (sub_e && strcmp (e->sub_name, sub_e->name))
 266                 sub_e = sub_e->next;
 267             if (sub_e)
 268                 e->children = sub_e->elements;
 269             else
 270                 yaz_log (LOG_WARN, "Unresolved reference to sub-elements %s",
 271                       e->sub_name);
 272         }
 273     }
 274 }
 275 /* *ostrich*
 276
 277    New function, a bit dummy now... I've seen it in zrpn.c... We should build
 278    more clever regexps...
 279
 280
 281       //a    ->    ^a/.*$
 282       //a/b  ->    ^b/a/.*$
 283       /a     ->    ^a/$
 284       /a/b   ->    ^b/a/$
 285
 286       /      ->    none
 287
 288    pop, 2002-12-13
 289
 290    Now [] predicates are supported
 291
 292    pop, 2003-01-17
 293
 294  */
 295
 296 const char * mk_xpath_regexp (data1_handle dh, char *expr)
 297 {
 298     char *p = expr;
 299     char *pp;
 300     char *s;
 301     int abs = 1;
 302     int i;
 303     int j;
 304     int e=0;
 305     int is_predicate = 0;
 306
 307     static char *stack[32];
 308     static char res[1024];
 309     char *r = "";
 310
 311     if (*p != '/') { return (""); }
 312     p++;
 313     if (*p == '/') { abs=0; p++; }
 314
 315     while (*p) {
 316         i=0;
 317         while (*p && !strchr("/",*p)) {
 318           i++; p++;
 319         }
 320         stack[e] = (char *) nmem_malloc (data1_nmem_get (dh), i+1);
 321         s = stack[e];
 322         for (j=0; j< i; j++) {
 323           pp = p-i+j;
 324           if (*pp == '[') {
 325             is_predicate=1;
 326           }
 327           else if (*pp == ']') {
 328             is_predicate=0;
 329           }
 330           else {
 331             if (!is_predicate) {
 332               if (*pp == '*')
 333                  *s++ = '.';
 334               *s++ = *pp;
 335             }
 336           }
 337         }
 338         *s = 0;
 339         e++;
 340         if (*p) {p++;}
 341     }
 342     e--;  p = &res[0]; i=0;
 343     sprintf (p, "^"); p++;
 344     while (e >= 0) {
 345         /* !!! res size is not checked !!! */
 346         sprintf (p, "%s/",stack[e]);
 347         p += strlen(stack[e]) + 1;
 348         e--;
 349     }
 350     if (!abs) { sprintf (p, ".*"); p+=2; }
 351     sprintf (p, "$"); p++;
 352     r = nmem_strdup (data1_nmem_get (dh), res);
 353     yaz_log(LOG_DEBUG,"Got regexp: %s",r);
 354     return (r);
 355 }
 356
 357 /* *ostrich*
 358
 359    added arg xpelement... when called from xelm context, it's 1, saying
 360    that ! means xpath, not element name as attribute name...
 361
 362    pop, 2002-12-13
 363  */
 364 static int parse_termlists (data1_handle dh, data1_termlist ***tpp,
 365                             char *cp, const char *file, int lineno,
 366                             const char *element_name, data1_absyn *res,
 367                             int xpelement)
 368 {
 369     data1_termlist **tp = *tpp;
 370     while(1)
 371     {
 372         char attname[512], structure[512];
 373         char *source;
 374         int r, i;
 375         int level = 0;
 376         structure[0] = '\0';
 377         for (i = 0; cp[i] && i<sizeof(attname)-1; i++)
 378             if (strchr(":,", cp[i]))
 379                 break;
 380             else
 381                 attname[i] = cp[i];
 382         if (i == 0)
 383         {
 384             if (*cp)
 385                 yaz_log(LOG_WARN,
 386                         "%s:%d: Syntax error in termlistspec '%s'",
 387                         file, lineno, cp);
 388             break;
 389         }
 390         attname[i] = '\0';
 391         r = 1;
 392         cp += i;
 393         if (*cp == ':')
 394             cp++;
 395
 396         for (i = 0; cp[i] && i<sizeof(structure)-1; i++)
 397             if (level == 0 && strchr(",", cp[i]))
 398                 break;
 399             else
 400             {
 401                 structure[i] = cp[i];
 402                 if (cp[i] == '(')
 403                     level++;
 404                 else if (cp[i] == ')')
 405                     level--;
 406             }
 407         structure[i] = '\0';
 408         if (i)
 409             r = 2;
 410         cp += i;
 411         if (*cp)
 412             cp++;  /* skip , */
 413
 414         *tp = (data1_termlist *)
 415             nmem_malloc(data1_nmem_get(dh), sizeof(**tp));
 416         (*tp)->next = 0;
 417
 418         if (!xpelement) {
 419             if (*attname == '!')
 420                 strcpy(attname, element_name);
 421         }
 422         if (!((*tp)->att = data1_getattbyname(dh, res->attset,
 423                                               attname))) {
 424             if ((!xpelement) || (*attname != '!')) {
 425                 yaz_log(LOG_WARN,
 426                         "%s:%d: Couldn't find att '%s' in attset",
 427                         file, lineno, attname);
 428                 return -1;
 429             } else {
 430                 (*tp)->att = 0;
 431             }
 432         }
 433
 434         if (r == 2 && (source = strchr(structure, ':')))
 435             *source++ = '\0';   /* cut off structure .. */
 436         else
 437             source = "data";    /* ok: default is leaf data */
 438         (*tp)->source = (char *)
 439             nmem_strdup (data1_nmem_get (dh), source);
 440
 441         if (r < 2) /* is the structure qualified? */
 442             (*tp)->structure = "w";
 443         else
 444             (*tp)->structure = (char *)
 445                 nmem_strdup (data1_nmem_get (dh), structure);
 446         tp = &(*tp)->next;
 447     }
 448
 449     *tpp = tp;
 450     return 0;
 451 }
 452
 453 const char *data1_systag_lookup(data1_absyn *absyn, const char *tag,
 454                                 const char *default_value)
 455 {
 456     struct data1_systag *p = absyn->systags;
 457     for (; p; p = p->next)
 458         if (!strcmp(p->name, tag))
 459             return p->value;
 460     return default_value;
 461 }
 462
 463 #define l_isspace(c) ((c) == '\t' || (c) == ' ' || (c) == '\n' || (c) == '\r')
 464
 465 int read_absyn_line(FILE *f, int *lineno, char *line, int len,
 466                     char *argv[], int num)
 467 {
 468     char *p;
 469     int argc;
 470     int quoted = 0;
 471
 472     while ((p = fgets(line, len, f)))
 473     {
 474         (*lineno)++;
 475         while (*p && l_isspace(*p))
 476             p++;
 477         if (*p && *p != '#')
 478             break;
 479     }
 480     if (!p)
 481         return 0;
 482
 483     for (argc = 0; *p ; argc++)
 484     {
 485         if (*p == '#')  /* trailing comment */
 486             break;
 487         argv[argc] = p;
 488         while (*p && !(l_isspace(*p) && !quoted)) {
 489           if (*p =='"') quoted = 1 - quoted;
 490           if (*p =='[') quoted = 1;
 491           if (*p ==']') quoted = 0;
 492           p++;
 493         }
 494         if (*p)
 495         {
 496             *(p++) = '\0';
 497             while (*p && l_isspace(*p))
 498                 p++;
 499         }
 500     }
 501     return argc;
 502 }
 503
 504
 505 data1_absyn *data1_read_absyn (data1_handle dh, const char *file,
 506                                int file_must_exist)
 507 {
 508     data1_sub_elements *cur_elements = NULL;
 509     data1_xpelement *cur_xpelement = NULL;
 510
 511     data1_absyn *res = 0;
 512     FILE *f;
 513     data1_element **ppl[D1_MAX_NESTING];
 514     data1_esetname **esetpp;
 515     data1_maptab **maptabp;
 516     data1_marctab **marcp;
 517     data1_termlist *all = 0;
 518     data1_attset_child **attset_childp;
 519     data1_tagset **tagset_childp;
 520     struct data1_systag **systagsp;
 521     int level = 0;
 522     int lineno = 0;
 523     int argc;
 524     char *argv[50], line[512];
 525
 526     if (!(f = data1_path_fopen(dh, file, "r")))
 527     {
 528         yaz_log(LOG_WARN|LOG_ERRNO, "Couldn't open %s", file);
 529         if (file_must_exist)
 530             return 0;
 531     }
 532
 533     res = (data1_absyn *) nmem_malloc(data1_nmem_get(dh), sizeof(*res));
 534     res->name = 0;
 535     res->reference = VAL_NONE;
 536     res->tagset = 0;
 537     res->encoding = 0;
 538     res->enable_xpath_indexing = (f ? 0 : 1);
 539     res->systags = 0;
 540     systagsp = &res->systags;
 541     tagset_childp = &res->tagset;
 542
 543     res->attset = data1_empty_attset (dh);
 544     attset_childp =  &res->attset->children;
 545
 546     res->varset = 0;
 547     res->esetnames = 0;
 548     esetpp = &res->esetnames;
 549     res->maptabs = 0;
 550     maptabp = &res->maptabs;
 551     res->marc = 0;
 552     marcp = &res->marc;
 553     res->sub_elements = NULL;
 554     res->main_elements = NULL;
 555     res->xp_elements = NULL;
 556
 557     while (f && (argc = read_absyn_line(f, &lineno, line, 512, argv, 50)))
 558     {
 559         char *cmd = *argv;
 560         if (!strcmp(cmd, "elm") || !strcmp(cmd, "element"))
 561         {
 562             data1_element *new_element;
 563             int i;
 564             char *p, *sub_p, *path, *name, *termlists;
 565             int type, value;
 566             data1_termlist **tp;
 567
 568             if (argc < 4)
 569             {
 570                 yaz_log(LOG_WARN, "%s:%d: Bad # of args to elm", file, lineno);
 571                 continue;
 572             }
 573             path = argv[1];
 574             name = argv[2];
 575             termlists = argv[3];
 576
 577             if (!cur_elements)
 578             {
 579                 cur_elements = (data1_sub_elements *)
 580                     nmem_malloc(data1_nmem_get(dh), sizeof(*cur_elements));
 581                 cur_elements->next = res->sub_elements;
 582                 cur_elements->elements = NULL;
 583                 cur_elements->name = "main";
 584                 res->sub_elements = cur_elements;
 585
 586                 level = 0;
 587                 ppl[level] = &cur_elements->elements;
 588             }
 589             p = path;
 590             for (i = 1;; i++)
 591             {
 592                 char *e;
 593
 594                 if ((e = strchr(p, '/')))
 595                     p = e+1;
 596                 else
 597                     break;
 598             }
 599             if (i > level+1)
 600             {
 601                 yaz_log(LOG_WARN, "%s:%d: Bad level increase", file, lineno);
 602                 fclose(f);
 603                 return 0;
 604             }
 605             level = i;
 606             new_element = *ppl[level-1] = (data1_element *)
 607                 nmem_malloc(data1_nmem_get(dh), sizeof(*new_element));
 608             new_element->next = new_element->children = 0;
 609             new_element->tag = 0;
 610             new_element->termlists = 0;
 611             new_element->sub_name = 0;
 612
 613             tp = &new_element->termlists;
 614             ppl[level-1] = &new_element->next;
 615             ppl[level] = &new_element->children;
 616
 617             /* consider subtree (if any) ... */
 618             if ((sub_p = strchr (p, ':')) && sub_p[1])
 619             {
 620                 *sub_p++ = '\0';
 621                 new_element->sub_name =
 622                     nmem_strdup (data1_nmem_get(dh), sub_p);
 623             }
 624             /* well-defined tag */
 625             if (sscanf(p, "(%d,%d)", &type, &value) == 2)
 626             {
 627                 if (!res->tagset)
 628                 {
 629                     yaz_log(LOG_WARN, "%s:%d: No tagset loaded", file, lineno);
 630                     fclose(f);
 631                     return 0;
 632                 }
 633                 if (!(new_element->tag = data1_gettagbynum (dh, res->tagset,
 634                                                             type, value)))
 635                 {
 636                     yaz_log(LOG_WARN, "%s:%d: Couldn't find tag %s in tagset",
 637                          file, lineno, p);
 638                     fclose(f);
 639                     return 0;
 640                 }
 641             }
 642             /* private tag */
 643             else if (*p)
 644             {
 645                 data1_tag *nt =
 646                     new_element->tag = (data1_tag *)
 647                     nmem_malloc(data1_nmem_get (dh),
 648                                 sizeof(*new_element->tag));
 649                 nt->which = DATA1T_string;
 650                 nt->value.string = nmem_strdup(data1_nmem_get (dh), p);
 651                 nt->names = (data1_name *)
 652                     nmem_malloc(data1_nmem_get(dh),
 653                                 sizeof(*new_element->tag->names));
 654                 nt->names->name = nt->value.string;
 655                 nt->names->next = 0;
 656                 nt->kind = DATA1K_string;
 657                 nt->next = 0;
 658                 nt->tagset = 0;
 659             }
 660             else
 661             {
 662                 yaz_log(LOG_WARN, "%s:%d: Bad element", file, lineno);
 663                 fclose(f);
 664                 return 0;
 665             }
 666             /* parse termList definitions */
 667             p = termlists;
 668             if (*p != '-')
 669             {
 670                 assert (res->attset);
 671
 672                 if (parse_termlists (dh, &tp, p, file, lineno, name, res, 0))
 673                 {
 674                     fclose (f);
 675                     return 0;
 676                 }
 677                 *tp = all; /* append any ALL entries to the list */
 678             }
 679             new_element->name = nmem_strdup(data1_nmem_get (dh), name);
 680         }
 681         /* *ostrich*
 682            New code to support xelm directive
 683            for each xelm a dfa is built. xelms are stored in res->xp_elements
 684
 685            maybe we should use a simple sscanf instead of dfa?
 686
 687            pop, 2002-12-13
 688
 689            Now [] predicates are supported. regexps and xpath structure is
 690            a bit redundant, however it's comfortable later...
 691
 692            pop, 2003-01-17
 693         */
 694
 695         else if (!strcmp(cmd, "xelm")) {
 696
 697             int i;
 698             char *p, *xpath_expr, *termlists;
 699             const char *regexp;
 700             struct DFA *dfa = dfa = dfa_init();
 701             data1_termlist **tp;
 702
 703             if (argc < 3)
 704             {
 705                 yaz_log(LOG_WARN, "%s:%d: Bad # of args to xelm", file, lineno);
 706                 continue;
 707             }
 708             xpath_expr = argv[1];
 709             termlists = argv[2];
 710             regexp = mk_xpath_regexp(dh, xpath_expr);
 711             i = dfa_parse (dfa, &regexp);
 712             if (i || *regexp) {
 713                 yaz_log(LOG_WARN, "%s:%d: Bad xpath to xelm", file, lineno);
 714                 dfa_delete (&dfa);
 715                 continue;
 716             }
 717
 718             if (!cur_xpelement)
 719             {
 720                 cur_xpelement = (data1_xpelement *)
 721                     nmem_malloc(data1_nmem_get(dh), sizeof(*cur_xpelement));
 722                 res->xp_elements = cur_xpelement;
 723             } else {
 724                 cur_xpelement->next = (data1_xpelement *)
 725                     nmem_malloc(data1_nmem_get(dh), sizeof(*cur_xpelement));
 726                 cur_xpelement = cur_xpelement->next;
 727             }
 728             cur_xpelement->next = NULL;
 729             cur_xpelement->xpath_expr = nmem_strdup(data1_nmem_get (dh),
 730                                                     xpath_expr);
 731
 732             dfa_mkstate (dfa);
 733             cur_xpelement->dfa = dfa;
 734
 735 #ifdef ENHANCED_XELM
 736             cur_xpelement->xpath_len =
 737                 zebra_parse_xpath_str(xpath_expr,
 738                                       cur_xpelement->xpath, XPATH_STEP_COUNT,
 739                                       data1_nmem_get(dh));
 740
 741             /*
 742             dump_xp_steps(cur_xpelement->xpath,cur_xpelement->xpath_len);
 743             */
 744 #endif
 745             cur_xpelement->termlists = 0;
 746             tp = &cur_xpelement->termlists;
 747
 748             /* parse termList definitions */
 749             p = termlists;
 750             if (*p != '-')
 751             {
 752                 assert (res->attset);
 753
 754                 if (parse_termlists (dh, &tp, p, file, lineno,
 755                                      xpath_expr, res, 1))
 756                 {
 757                     fclose (f);
 758                     return 0;
 759                 }
 760                 *tp = all; /* append any ALL entries to the list */
 761             }
 762         }
 763         else if (!strcmp(cmd, "section"))
 764         {
 765             char *name;
 766
 767             if (argc < 2)
 768             {
 769                 yaz_log(LOG_WARN, "%s:%d: Bad # of args to section",
 770                         file, lineno);
 771                 continue;
 772             }
 773             name = argv[1];
 774
 775             cur_elements = (data1_sub_elements *)
 776                 nmem_malloc(data1_nmem_get(dh), sizeof(*cur_elements));
 777             cur_elements->next = res->sub_elements;
 778             cur_elements->elements = NULL;
 779             cur_elements->name = nmem_strdup (data1_nmem_get(dh), name);
 780             res->sub_elements = cur_elements;
 781
 782             level = 0;
 783             ppl[level] = &cur_elements->elements;
 784         }
 785         else if (!strcmp(cmd, "xpath"))
 786         {
 787             if (argc != 2)
 788             {
 789                 yaz_log(LOG_WARN, "%s:%d: Bad # of args to 'xpath' directive",
 790                      file, lineno);
 791                 continue;
 792             }
 793             if (!strcmp(argv[1], "enable"))
 794                 res->enable_xpath_indexing = 1;
 795             else if (!strcmp (argv[1], "disable"))
 796                 res->enable_xpath_indexing = 0;
 797             else
 798             {
 799                 yaz_log(LOG_WARN, "%s:%d: Expecting disable/enable "
 800                         "after 'xpath' directive", file, lineno);
 801             }
 802         }
 803         else if (!strcmp(cmd, "all"))
 804         {
 805             data1_termlist **tp = &all;
 806             if (all)
 807             {
 808                 yaz_log(LOG_WARN, "%s:%d: Too many 'all' directives - ignored",
 809                      file, lineno);
 810                 continue;
 811             }
 812             if (argc != 2)
 813             {
 814                 yaz_log(LOG_WARN, "%s:%d: Bad # of args to 'all' directive",
 815                      file, lineno);
 816                 continue;
 817             }
 818             if (parse_termlists (dh, &tp, argv[1], file, lineno, 0, res, 0))
 819             {
 820                 fclose (f);
 821                 return 0;
 822             }
 823         }
 824         else if (!strcmp(cmd, "name"))
 825         {
 826             if (argc != 2)
 827             {
 828                 yaz_log(LOG_WARN, "%s:%d: Bad # of args to name directive",
 829                      file, lineno);
 830                 continue;
 831             }
 832             res->name = nmem_strdup(data1_nmem_get(dh), argv[1]);
 833         }
 834         else if (!strcmp(cmd, "reference"))
 835         {
 836             char *name;
 837
 838             if (argc != 2)
 839             {
 840                 yaz_log(LOG_WARN, "%s:%d: Bad # of args to reference",
 841                      file, lineno);
 842                 continue;
 843             }
 844             name = argv[1];
 845             if ((res->reference = oid_getvalbyname(name)) == VAL_NONE)
 846             {
 847                 yaz_log(LOG_WARN, "%s:%d: Unknown tagset ref '%s'",
 848                      file, lineno, name);
 849                 continue;
 850             }
 851         }
 852         else if (!strcmp(cmd, "attset"))
 853         {
 854             char *name;
 855             data1_attset *attset;
 856
 857             if (argc != 2)
 858             {
 859                 yaz_log(LOG_WARN, "%s:%d: Bad # of args to attset",
 860                      file, lineno);
 861                 continue;
 862             }
 863             name = argv[1];
 864             if (!(attset = data1_get_attset (dh, name)))
 865             {
 866                 yaz_log(LOG_WARN, "%s:%d: Couldn't find attset  %s",
 867                      file, lineno, name);
 868                 continue;
 869             }
 870             *attset_childp = (data1_attset_child *)
 871                 nmem_malloc (data1_nmem_get(dh), sizeof(**attset_childp));
 872             (*attset_childp)->child = attset;
 873             (*attset_childp)->next = 0;
 874             attset_childp = &(*attset_childp)->next;
 875         }
 876         else if (!strcmp(cmd, "tagset"))
 877         {
 878             char *name;
 879             int type = 0;
 880             if (argc < 2)
 881             {
 882                 yaz_log(LOG_WARN, "%s:%d: Bad # of args to tagset",
 883                      file, lineno);
 884                 continue;
 885             }
 886             name = argv[1];
 887             if (argc == 3)
 888                 type = atoi(argv[2]);
 889             *tagset_childp = data1_read_tagset (dh, name, type);
 890             if (!(*tagset_childp))
 891             {
 892                 yaz_log(LOG_WARN, "%s:%d: Couldn't load tagset %s",
 893                      file, lineno, name);
 894                 continue;
 895             }
 896             tagset_childp = &(*tagset_childp)->next;
 897         }
 898         else if (!strcmp(cmd, "varset"))
 899         {
 900             char *name;
 901
 902             if (argc != 2)
 903             {
 904                 yaz_log(LOG_WARN, "%s:%d: Bad # of args in varset",
 905                      file, lineno);
 906                 continue;
 907             }
 908             name = argv[1];
 909             if (!(res->varset = data1_read_varset (dh, name)))
 910             {
 911                 yaz_log(LOG_WARN, "%s:%d: Couldn't load Varset %s",
 912                      file, lineno, name);
 913                 continue;
 914             }
 915         }
 916         else if (!strcmp(cmd, "esetname"))
 917         {
 918             char *name, *fname;
 919
 920             if (argc != 3)
 921             {
 922                 yaz_log(LOG_WARN, "%s:%d: Bad # of args in esetname",
 923                      file, lineno);
 924                 continue;
 925             }
 926             name = argv[1];
 927             fname = argv[2];
 928
 929             *esetpp = (data1_esetname *)
 930                 nmem_malloc(data1_nmem_get(dh), sizeof(**esetpp));
 931             (*esetpp)->name = nmem_strdup(data1_nmem_get(dh), name);
 932             (*esetpp)->next = 0;
 933             if (*fname == '@')
 934                 (*esetpp)->spec = 0;
 935             else if (!((*esetpp)->spec = data1_read_espec1 (dh, fname)))
 936             {
 937                 yaz_log(LOG_WARN, "%s:%d: Espec-1 read failed for %s",
 938                      file, lineno, fname);
 939                 continue;
 940             }
 941             esetpp = &(*esetpp)->next;
 942         }
 943         else if (!strcmp(cmd, "maptab"))
 944         {
 945             char *name;
 946
 947             if (argc != 2)
 948             {
 949                 yaz_log(LOG_WARN, "%s:%d: Bad # of args for maptab",
 950                      file, lineno);
 951                 continue;
 952             }
 953             name = argv[1];
 954             if (!(*maptabp = data1_read_maptab (dh, name)))
 955             {
 956                 yaz_log(LOG_WARN, "%s:%d: Couldn't load maptab %s",
 957                      file, lineno, name);
 958                 continue;
 959             }
 960             maptabp = &(*maptabp)->next;
 961         }
 962         else if (!strcmp(cmd, "marc"))
 963         {
 964             char *name;
 965
 966             if (argc != 2)
 967             {
 968                 yaz_log(LOG_WARN, "%s:%d: Bad # or args for marc",
 969                      file, lineno);
 970                 continue;
 971             }
 972             name = argv[1];
 973             if (!(*marcp = data1_read_marctab (dh, name)))
 974             {
 975                 yaz_log(LOG_WARN, "%s:%d: Couldn't read marctab %s",
 976                      file, lineno, name);
 977                 continue;
 978             }
 979             marcp = &(*marcp)->next;
 980         }
 981         else if (!strcmp(cmd, "encoding"))
 982         {
 983             if (argc != 2)
 984             {
 985                 yaz_log(LOG_WARN, "%s:%d: Bad # or args for encoding",
 986                      file, lineno);
 987                 continue;
 988             }
 989             res->encoding = nmem_strdup (data1_nmem_get(dh), argv[1]);
 990         }
 991         else if (!strcmp(cmd, "systag"))
 992         {
 993             if (argc != 3)
 994             {
 995                 yaz_log(LOG_WARN, "%s:%d: Bad # or args for systag",
 996                      file, lineno);
 997                 continue;
 998             }
 999             *systagsp = nmem_malloc (data1_nmem_get(dh), sizeof(**systagsp));
1000
1001             (*systagsp)->name = nmem_strdup(data1_nmem_get(dh), argv[1]);
1002             (*systagsp)->value = nmem_strdup(data1_nmem_get(dh), argv[2]);
1003             systagsp = &(*systagsp)->next;
1004         }
1005         else
1006         {
1007             yaz_log(LOG_WARN, "%s:%d: Unknown directive '%s'", file,
1008                     lineno, cmd);
1009             continue;
1010         }
1011     }
1012     if (f)
1013         fclose(f);
1014
1015     for (cur_elements = res->sub_elements; cur_elements;
1016          cur_elements = cur_elements->next)
1017     {
1018         if (!strcmp (cur_elements->name, "main"))
1019             res->main_elements = cur_elements->elements;
1020         fix_element_ref (dh, res, cur_elements->elements);
1021     }
1022     *systagsp = 0;
1023     yaz_log (LOG_DEBUG, "%s: data1_read_absyn end", file);
1024     return res;
1025 }